Anthropic, 자사 AI 연구개발 자동화 속도를 수치로 처음 공개

왜 지금 이 주제인가

Anthropic이 9월 17일 자체 연구소인 Anthropic Institute를 통해 프런티어 AI 연구소 내부에서 AI가 AI 개발을 얼마나 대신하고 있는지 보여주는 세 가지 지표를 처음으로 공개했습니다. 그동안 각 연구소의 내부 자동화 진행 상황은 외부에서 짐작만 할 수 있었던 영역인데, Anthropic은 R&D 자동화 지수와 에이전트 감시 통계, 안전 연구 컴퓨트 배분 비율을 구체적 수치와 함께 내놓았습니다. AI 개발 속도 자체를 측정하고 공개하려는 시도라는 점에서 눈여겨볼 만합니다.

핵심 내용

첫 번째 지표는 R&D Automation Index입니다. Epoch AI가 개발한 자동화 등급 척도(AL0부터 AL5까지)를 기준으로 삼는데, AL0은 AI가 전혀 관여하지 않는 작업이고, AL3은 AI가 인간의 밀접한 지시 아래 상당 부분을 처리하는 “협력” 단계, AL4는 상위 수준의 프롬프트만으로 대부분의 작업을 끝까지 처리하는 “주도” 단계, AL5는 인간 개입 없이 AI가 완전히 자율적으로 작업하는 단계입니다.

이 척도로 측정한 결과, 2026년 8월 기준 Claude는 Anthropic의 AI 연구개발 작업 중 26%를 AL4 수준으로 주도하고 있습니다. 2월에는 이 비율이 1% 미만이었습니다. AL3 이상, 즉 AI가 최소한 협력 수준으로 관여하는 작업의 비중은 90%를 넘습니다. 다만 Anthropic은 어떤 세부 영역에서도 Claude가 AL5, 즉 완전 자율 수준에 도달하지는 않았다고 밝혔습니다.

이 지수는 매달 회사 내 R&D 관련 부서 직원의 20%를 표본으로 뽑아 산출합니다. 2026년 7월에는 이런 방식으로 약 1만 5천 개의 세부 작업을 수집했고, 이를 378개의 최하위 항목을 포함한 542개 범주로 정리했습니다. 각 작업의 자동화 등급 평가는 대부분 Claude 스스로 매겼는데, 모델과 직원의 평가가 정확히 일치한 비율은 59%였고, 직원과 직원 사이의 일치율은 오히려 35%로 더 낮았습니다. 다만 한 단계 이내 오차까지 포함하면 일치율은 97%로 올라갑니다.

두 번째 지표는 에이전트 감시 현황입니다. 2026년 8월 기준 Anthropic 내부에서는 약 3만 개의 에이전트가 가동 중이며, 이들의 모든 행동은 온라인 모니터를 거칩니다. 이 가운데 약 4만 7천 건 중 1건, 비율로는 0.002%가 위험 행동으로 판단돼 차단됐습니다. 별도의 오프라인 모니터는 추가 검토가 필요하다고 판단한 대화 기록을 1천 건 중 한두 건꼴로 표시합니다.

세 번째 지표는 컴퓨트 배분입니다. 전체 R&D용 컴퓨트 중 안전 연구에 투입되는 비중은 약 6%입니다. 2026년 7월 13일부터 20일까지 측정한 구간에서는, AI가 주도하는 R&D 작업에 쓰인 컴퓨트 중 안전 연구 몫이 약 12%로 나타났습니다.

Anthropic은 이 지표들을 공개하는 이유로 “일반 대중과 제3자, 정부가 프런티어 연구소 내부의 AI 개발 속도를 더 잘 들여다볼 수 있도록 하기 위해서”라고 설명했습니다. 또한 공개한 방법론을 따르면 다른 프런티어 개발사도 동일한 측정치를 정기적으로 발표할 수 있다고 덧붙였습니다.

의미와 한계

이번 공개는 그동안 소문과 추정으로만 떠돌던 “AI가 AI를 개발하는 속도”를 프런티어 연구소 스스로 수치로 내놓았다는 점에서 의미가 있습니다. 특히 8개월 만에 26%까지 오른 자동화 비율과, 어떤 영역도 완전 자율(AL5)에는 이르지 않았다는 사실을 함께 밝힌 점은 균형 잡힌 태도로 읽힙니다.

다만 한계도 뚜렷합니다. 평가 대부분을 Claude 자신이 매겼다는 점에서 자기 보고의 성격이 강하고, 직원 간 일치율(35%)이 모델과 직원 간 일치율(59%)보다 낮다는 사실은 애초에 작업의 자동화 수준을 사람이 판단하기도 쉽지 않다는 뜻이기도 합니다. 작업 분류 체계도 한 시점에 고정된 것이어서, 이후 등장하는 새로운 유형의 작업은 반영되지 않습니다. 무엇보다 이는 Anthropic 한 곳의 내부 관행일 뿐이며, 다른 연구소가 같은 방식으로 수치를 공개하지 않는 한 업계 전체의 속도를 가늠하는 지표로 쓰기는 어렵습니다.

한 줄 정리

Anthropic이 Claude가 자사 AI 연구의 26%를 주도한다는 자체 측정치를 처음 공개했지만, 평가 방식 자체는 아직 자기 보고에 머물러 있습니다.