컴퓨터 사용 (Computer Use)

AI 용어

AI가 사람처럼 화면을 보고 마우스·키보드를 조작하는 기능

#agent#트렌드

정의

컴퓨터 사용은 AI가 스크린샷을 보고 화면을 이해한 뒤, 실제 사람처럼 커서를 움직이고 클릭하고 타이핑해서 컴퓨터를 조작하는 기능이다. 별도 API가 없는 프로그램이나 웹사이트도 사람이 쓰던 방식 그대로 다룰 수 있다는 게 핵심 장점이다.

별도 API를 제공하지 않는 웹사이트나 데스크톱 앱에서 클릭, 폼 입력, 스크롤 같은 조작을 AI가 대신 수행해야 할 때 쓴다.

이미 API가 있는 서비스라면 화면을 보고 클릭을 흉내내는 컴퓨터 사용보다 API를 직접 호출하는 편이 훨씬 빠르고 안정적이다.

이번 세션에서 쓰는 브라우저 자동화 도구, 즉 스크린샷을 찍고 화면 요소를 클릭하는 방식이 컴퓨터 사용 기술의 실제 구현이다.

ChatGPT Atlas나 Perplexity Comet 같은 AI 브라우저는 컴퓨터 사용 기술을 기반으로 사용자 대신 웹페이지를 조작한다.

{{웹사이트}}에서 화면을 보고 직접 클릭·입력해서 {{하고 싶은 작업}}을 수행해줘. API가 없는 사이트니까 사람이 쓰는 방식 그대로 조작해줘.

jt · via term-research · 복사 0 · KO