01-개념

01 — 컴퓨터 사용(Computer Use)이란

정의

컴퓨터 사용(Computer Use)은 Claude 모델이 사람이 쓰는 그대로의 데스크톱 환경을 직접 조작하는 도구 모드입니다. 그동안 LLM은 “API가 있는 시스템”만 다룰 수 있었지만, Computer Use는 그 제약을 깹니다.

“Claude Code and Cowork can now use your computer.” — Claude Code와 Cowork가 이제 당신의 컴퓨터를 직접 다룰 수 있다. (Engadget, 2026)

왜 등장했나

대부분의 사내 시스템은 API가 없거나 빈약합니다. 회계 SaaS, 레거시 ERP, 사내 위키, 디자인 툴 — 모두 GUI 기반입니다. Cowork가 진짜 “지식 작업 동료”가 되려면 사람이 손으로 클릭하던 그 화면을 똑같이 다뤄야 합니다.

일반 도구 호출(Tool Use)과의 차이

항목	일반 Tool Use	Computer Use
인터페이스	함수 시그니처(JSON)	픽셀·좌표·키 입력
입력	구조화된 인자	스크린샷(Screenshot)
출력	구조화된 결과	화면 변화
범위	등록된 함수만	화면에 보이는 모든 것
결정성	높음	낮음 — 픽셀·해상도에 민감

한국어 의역 노트

• Computer Use → “컴퓨터 사용 모드”. “데스크톱 직접 조작”으로 풀어 부르기도 합니다.
• Screenshot loop → “스크린샷 루프”. Claude가 화면을 보고 → 행동을 결정하고 → 다시 본다는 사이클.
• Coordinate-based action → “좌표 기반 액션”.

한 문장으로

“Computer Use는 Claude에게 마우스와 눈을 달아 주는 일이다.”

이 비유가 사용 한계도 함께 설명합니다. 사람도 모니터가 꺼져 있으면 일을 못 하고, 작은 글씨·낯선 UI·팝업에 휘둘립니다. Computer Use도 똑같습니다.