ChatGPT 컴퓨터 제어 기능: 인앱 브라우저로 웹·앱 작업 자동화하기

핵심 메시지

• 새 ChatGPT 앱은 이미 쓰고 있는 웹사이트와 앱을 직접 조작해 실제 업무를 대신 처리한다.
• 내장된 인앱 브라우저로 웹페이지를 훑어 요약·리포트를 만들고, 주석 도구로 특정 지점을 짚어 질문할 수 있다.
• 크롬 확장으로 기존 브라우저의 열린 탭을 연결하면, 백그라운드에서 방해 없이 반복 작업을 진행한다.
• 웹이 아닌 데스크톱 앱은 '컴퓨터 제어(computer use)'로 Windows·macOS의 어떤 앱이든 조작할 수 있다.

쉽게 이해하기

OpenAI가 공개한 새로운 ChatGPT 앱은 단순히 답변을 내놓는 것을 넘어, 사용자가 평소 쓰는 웹사이트와 애플리케이션을 직접 다뤄 실제 업무를 처리하는 방향으로 나아간다. 대화창 안에서 지시만 하면 ChatGPT가 화면을 대신 조작하는 방식이다.

영상은 커뮤니티 포럼 분석을 예로 든다. 최근 한 달간 사용자 불만을 일으킨 주요 이슈를 찾아 달라고 하면, ChatGPT가 인앱 브라우저로 포럼을 훑어 '마찰(friction) 리포트'를 정리해 준다. 또 인앱 브라우저에는 주석 도구가 있어, 장황한 지시를 쓰는 대신 특정 페이지의 한 지점을 직접 가리키며 피드백을 주거나 질문할 수 있다.

기존 브라우저의 맥락을 그대로 쓰고 싶다면 크롬 확장 프로그램으로 ChatGPT를 연결한다. 이때 이미 열려 있는 탭을 활용하거나, 사용자를 방해하지 않고 백그라운드에서 새 탭을 열어 경비 정산서 작성이나 긴 데이터 입력 같은 반복 작업을 처리한다.

필요한 도구가 웹사이트가 아니라 데스크톱 앱이라면 '컴퓨터 제어' 기능이 등장한다. Windows나 macOS에서 어떤 앱이든 조작할 수 있고, macOS에서는 ChatGPT가 자체 커서를 가지고 백그라운드에서 움직이기 때문에 사용자는 그동안 다른 일을 계속할 수 있다.

주요 인사이트

• 챗봇이 '대답'에서 '실행'으로 이동하는 흐름을 보여준다. 브라우저와 데스크톱 앱을 직접 제어한다는 것은 결과물뿐 아니라 작업 과정 자체를 위임하는 단계다.
• 인앱 브라우저의 주석 도구는 프롬프트를 길게 쓰지 않고도 맥락을 전달하게 해, '어디를 보라'는 지시 비용을 크게 줄인다.
• macOS에서 별도 커서로 백그라운드 작업이 가능하다는 점은, 자동화가 사용자의 화면 사용을 가로막지 않는 방향으로 설계됐음을 시사한다.

자주 묻는 질문

관련 AI 소식