앤트로픽이 9월 17일 공개한 「최전선 연구소 안 AI 개발 속도 측정」 글에서, 8월 기준으로 모델 연구개발 작업의 26%를 클로드가 「주도」하고, 「협업」 이상 단계의 작업이 90%를 넘으며, 사람이 전혀 개입하지 않는 완전 자율 단계는 측정된 어떤 작업에도 없다고 적었어요. 여기서 「주도」는 「상위 수준 프롬프트만 주면 작업 대부분을 처음부터 끝까지 해내고 사람은 감독한다」는 뜻이고, 수치는 7월 매주 부서별 직원 20%를 표본으로 뽑아 약 1만 5,000개 작업을 6단계로 매긴 것인데, 그 등급을 매긴 것은 클로드 에이전트가 모은 증거를 별도의 클로드 심판 모델이 읽고 판정한 결과이며 직원 평가로 검증했다고 해요. 앤트로픽 스스로 작업 목록이 7월 기준으로 고정돼 사람이 옮겨 간 새 종류의 일은 잡지 못하고, 자기 모델이 심판이라 같은 맹점을 공유할 수 있다는 한계를 적었어요.
운영자 인사이트
「AI가 몇 %를 한다」는 말은 정의 없이는 비교가 안 되는데, 이 글의 6단계 사다리(관여 없음·최소·보조·협업·주도·완전 자율)와 작업 분류 트리, 고정 바구니 방식은 우리 팀의 에이전트 도입 정도를 재는 틀로 그대로 옮겨 쓸 만해요. 다만 26%라는 숫자 자체는 자기 모델이 심판인 자기 측정이니 벤치마크로 삼지 말고, 측정 방법만 가져오세요.
여러 관점으로 보기