Anthropic Economic Index의 두 번째 업데이트
지난달, 저희는 Anthropic Economic Index를 출시했습니다. 이는 AI가 노동 시장과 경제 전반에 미치는 영향을 지속적으로 파악하기 위해 데이터와 연구 결과를 정기적으로 공개하는 새로운 이니셔티브입니다.
오늘은 Index의 두 번째 연구 보고서를 발표합니다. 에이전틱(agentic) 코딩과 새로운 "확장된 사고(extended thinking)" 모드에서 뛰어난 역량을 보여주는 저희의 최신·최고 성능 모델, Claude 3.7 Sonnet 출시 이후 Claude.ai 사용 데이터를 담았습니다.
최신 분석 결과를 간략히 요약하면 다음과 같습니다.
아울러, Claude.ai 사용 패턴을 상향식(bottom-up)으로 분류한 최초의 택소노미(taxonomy)도 공개합니다. 이 새로운 데이터셋은 "가정 내 배관·수도·유지보수 문제 해결 지원"부터 "배터리 기술 및 충전 시스템 안내"까지 630개의 세분화된 카테고리를 포함합니다. 이 상향식 택소노미가 연구자들에게 유용하게 쓰이길 바라며, 미리 정의된 작업 목록에 사용 패턴을 대입하는 하향식 접근법으로는 놓칠 수 있는 활용 사례들을 발굴하는 데 도움이 되길 기대합니다.
분석에 사용된 데이터셋은 무료로 다운로드할 수 있습니다.
아래에서 주요 분석 결과를 자세히 살펴보세요.
지난달 저희는 "확장된 사고 모드"를 탑재한 최고 성능 모델 Claude 3.7 Sonnet을 출시했습니다. 이번에는 출시 이후 11일간의 데이터를 대상으로 이전 분석을 동일한 방식으로 재수행했으며, Claude.ai 무료 및 Pro 플랜의 익명화된 대화 100만 건을 분석했습니다. Claude 3.7 Sonnet이 Claude.ai와 모바일 앱의 기본 모델로 설정되어 있어, 분석 데이터의 대부분은 Claude 3.7 Sonnet에서 나온 것입니다.
참고로, 저희의 프라이버시 보호 분석 도구인 Clio는 각 대화를 미국 노동부 O*NET 데이터베이스의 17,000개 작업 중 하나에 매핑합니다. 이를 바탕으로 해당 작업과 연관된 직종 및 상위 직종 카테고리의 전반적인 패턴을 분석합니다.
100만 건의 대화를 직종별로 분류해보면, 코딩·교육·과학 등 여러 직종 카테고리에서 사용 비중이 소폭 증가한 것을 확인할 수 있습니다. 코딩 사용 비중 증가는 Claude 3.7 Sonnet의 향상된 코딩 벤치마크 성능을 고려하면 예상된 결과지만, 다른 카테고리의 증가는 경제 전반에 걸친 AI 확산, 해당 분야에 대한 코딩의 새로운 응용, 또는 예상치 못한 모델의 역량 향상 중 하나 혹은 복합적인 요인에서 비롯된 것으로 볼 수 있습니다.

Claude 3.7 Sonnet에는 새로운 "확장된 사고" 모드가 탑재되어 있습니다. 사용자가 이 모드를 활성화하면 모델이 더 복잡한 질문에 답할 때 더 오래 사고할 수 있습니다.
분석 결과, Claude 3.7 Sonnet의 확장된 사고 모드는 주로 기술적·창의적 문제 해결 맥락에서 활용되는 것으로 나타났습니다. 컴퓨터 및 정보 연구 과학자 관련 작업에서의 사용 비중이 약 10%로 가장 높았고, 소프트웨어 개발자가 약 8%로 그 뒤를 이었습니다. 멀티미디어 아티스트(약 7%), 비디오 게임 디자이너(약 6%) 등 디지털 크리에이티브 직종과 관련된 작업에서도 상당한 사용 비중을 보였습니다.
이번 초기 사용 패턴 분석을 통해 사람들이 언제 확장된 사고 모드를 선택하는지에 대한 인사이트를 얻을 수 있었지만, 이 새로운 모델 기능에 대해서는 아직 밝혀야 할 중요한 질문들이 많습니다. 관련 연구를 지원하기 위해, O*NET 각 작업별 확장된 사고 모드 사용 비중을 담은 새로운 데이터셋을 공개합니다. 이 데이터셋은 저희 Hugging Face 페이지에서 확인하실 수 있습니다.

지난 보고서에서는 학습이나 결과물 반복 수정 같은 증강적 활용과, 작업을 직접 완료하거나 오류를 수정하도록 요청하는 자동화적 활용 간의 차이를 분석했습니다. 이번 데이터에서도 증강과 자동화의 균형은 사실상 변화가 없으며, 증강이 여전히 57%를 차지합니다. 다만 증강과 자동화의 세부 유형에서는 일부 변화가 있었습니다. 예를 들어, 사용자가 다양한 주제에 대해 정보나 설명을 요청하는 학습형 대화 비중이 약 23%에서 약 28%로 늘었습니다.

저희 연구자 의견 수렴 양식을 통해 작업 및 직종 단위의 자동화·증강 데이터를 공개해 달라는 요청을 다수 받았습니다. 이번 보고서에서 그 요청에 응하며, 해당 데이터를 Hugging Face 페이지에서 제공합니다.
상위 직종 카테고리별로 데이터를 나눠보면, 일부 카테고리는 증강적 활용 비중이 매우 높습니다. 예를 들어, 교육 및 진로 상담을 포함하는 지역사회·사회 서비스 관련 작업은 증강 비중이 75%에 가깝습니다. 반면 생산직이나 컴퓨터·수학 관련 직종의 작업은 증강과 자동화 비중이 50대 50에 가까운 균형을 이룹니다. 자동화가 압도적으로 우세한 직종 카테고리는 없었습니다.

더 세부적으로는 각 직종 카테고리 내의 특정 직종과 해당 직종에 연관된 작업별 패턴도 살펴볼 수 있습니다. 예를 들어, 카피라이터와 편집자 관련 작업은 작업 반복—사용자가 모델과 함께 다양한 글쓰기·편집 작업을 반복적으로 다듬는 방식—의 비중이 가장 높습니다. 반면 번역가와 통역사 관련 작업은 지시형 방식—사람의 개입 없이 문서 번역에 모델을 활용하는 형태—의 비중이 가장 높은 편에 속합니다. O*NET의 직종 설명이 Claude의 실제 활용 방식을 완벽하게 반영하지 못할 수 있다는 점도 참고하세요. 예를 들어, "화가·조각가·일러스트레이터를 포함한 순수 미술가" 직종에서 사용이 관측되더라도, Claude는 실제로 회화나 조각보다 디지털 아트 제작에 훨씬 더 많이 활용될 가능성이 높습니다.


지금까지의 연구는 미국 노동부가 구축·관리하는 O*NET 작업·직종 데이터셋을 기반으로 했습니다. O*NET이 방대한 수의 작업을 다루고 있지만, O*NET에 포함되지 않은 작업에도 활용될 수 있는 범용 모델의 역량을 설명하는 분류 체계로는 최적이 아닐 수 있으며, 이로 인해 분석에서 누락되는 활용 사례가 생길 수 있습니다.
이러한 한계를 보완하기 위해, Claude.ai에서의 사용자 활동 패턴을 상향식으로 정리한 새로운 데이터셋을 공개합니다. 이 데이터셋도 Clio로 생성했으며, 위의 분석에 사용된 것과 동일한 익명화 대화 데이터셋을 활용합니다. 따라서 하향식과 상향식 접근법 간의 비교가 가능합니다. 이 데이터셋은 630개의 세분화된 클러스터로 구성되며, 각 클러스터에는 설명, 빈도 지표, 자동화/증강 세부 내용이 포함되고 3단계 계층 구조로 정리되어 있습니다.
이 데이터셋의 상세 분석은 향후 연구로 남겨두고, 여기서는 특히 흥미로운 클러스터 몇 가지를 소개합니다.
모델의 발전에 맞춰, 그 경제적 영향을 측정하는 방법도 함께 발전해야 합니다. Claude 3.7 Sonnet 출시 이후의 데이터를 다룬 두 번째 보고서에서, 저희는 코딩·교육·과학 분야의 활용이 비교적 소폭 증가했으며 증강과 자동화의 균형에는 변화가 없음을 확인했습니다. 또한 Claude의 새로운 확장된 사고 모드가 기술 분야 작업에서 가장 빈번하게 활용되는 것을 파악했고, 작업 및 직종별 자동화/증강 패턴도 확인했습니다. 두 분석에 사용된 데이터셋을 모두 공개합니다.
앞으로 몇 달에 걸쳐 이러한 지표를 지속적으로 추적하고, 모델 역량이 향상되고 경제 전반에 걸쳐 모델 활용이 확대됨에 따라 새로운 지표도 개발해 나갈 계획입니다.
AI가 노동 시장에 미치는 영향을 연구하는 Anthropic의 팀원으로 함께하고 싶으시다면, 사회적 영향 연구 과학자(Societal Impacts Research Scientist), 연구 엔지니어(Research Engineer), 경제학자(Economist) 직무에 지원해 보세요.
이 부록에서는 몇 가지 추가 결과와 기술적 세부 사항을 공유합니다.
원본 논문의 "작업 사용 깊이(depth of task usage)" 그래프도 재계산했습니다. 첫 번째 분석과 전반적으로 매우 유사한 곡선이 나타났습니다. 굳이 따지자면 신규 모델에서 곡선 아래 면적이 소폭 감소했는데, 이는 대화 샘플이 코딩에 더 집중된 데 따른 결과일 수 있습니다. 다만 최근 두 달간 이 곡선에서 극적인 변화는 관측되지 않았으며, 모델 역량과 제품 서비스가 계속 발전함에 따라 지속적으로 모니터링할 예정입니다.





기본적으로 원본 보고서의 방법론을 따르되, 투명한 공개를 위해 몇 가지 변경 사항을 여기에 기록합니다.