Anthropic、Claude 3.7 Sonnetの利用状況に関する第2回経済指数レポートを公開

Anthropicは、AIが労働市場と経済に及ぼす影響についてのデータや研究を定期的に公開する取り組み「Anthropic Economic Index」の第2回レポートを発表した。今回は、Anthropicがエージェント型コーディングに強みを持ち、新たな「拡張思考」モードを備えた同社最新かつ最も高性能なモデルと位置付けるClaude 3.7 Sonnetの公開後に収集された、Claude.aiの利用データを扱っている。

Anthropicが分析した内容

Anthropicによると、Claude 3.7 Sonnetの公開後11日間に行われた、匿名化済みのClaude.ai FreeおよびProの会話100万件を調査した。同社はプライバシーを保護する分析ツール「Clio」を使用し、各会話を米労働省のO*NETデータベースに収録された約1万7,000のタスクのいずれかに対応付けたうえで、職業および職業カテゴリー別の傾向を分析した。

公開後の利用動向の変化

Anthropicによると、コーディング、教育、科学のほか、医療関連の用途を含む複数の職業カテゴリーで、利用割合が緩やかに上昇した。利用割合の絶対的な伸びが最も大きかったのはコンピューター・数学系職種で、3ポイント増加したという。Anthropicは、Claude 3.7 Sonnetのコーディング評価指標が向上したことから、コーディング分野での増加は予想どおりだったとする一方、ほかのカテゴリーでの伸びについては、AIの普及拡大、各分野におけるコーディングの新たな応用、または予想外のモデル能力を反映している可能性があるとしている。

拡張思考モードの利用状況

Anthropicの報告によると、ユーザーが有効にした際に複雑な問いについてモデルがより長く推論できる拡張思考モードは、主に技術的・創造的な場面で利用された。コンピューター・情報研究科学者に関連するタスクが約10%で最多となり、ソフトウェア開発者が約8%、マルチメディア・アーティストが約7%、ビデオゲームデザイナーが約6%で続いたという。Anthropicは、O*NETの各タスクと、それに対応する思考モードの利用状況を関連付けたデータセットをHugging Faceで公開している。

能力拡張と自動化

Anthropicによると、モデルを使って学習したり、モデルと反復的に作業したりする能力拡張型の利用と、モデルにタスクの完了やデバッグを直接行わせる自動化型の利用との全体的な比率は、第1回レポートからほぼ変わらず、能力拡張型が57%を占めた。ユーザーがClaudeに情報や説明を求める学習型のやり取りは、約23%から約28%へ増加したという。Anthropicによると、教育や進路指導を含む地域・社会福祉関連のタスクでは能力拡張型が75%近くに達した一方、生産職とコンピューター・数学系職種ではほぼ半々だった。自動化型が優勢となった職業カテゴリーはなかったとしている。また、人間とモデルが共同で成果物を作成するタスク反復型の利用はコピーライターと編集者のタスクで最も多く、人間の関与を最小限に抑えてモデルが作業を完了する指示型の利用は、翻訳者と通訳者のタスクで特に多かったという。同社によると、学習型のやり取りの割合は司書が約56%で最も高く、タスク反復型ではコピーライターが約58%で首位だった。

新たなボトムアップ型利用分類体系

Anthropicは同じ会話データセットを基にClioで構築した、Claude.aiの利用状況に関する初の試みだというボトムアップ型分類体系も公開している。これは3段階の階層に整理された630の詳細なクラスターで構成され、各クラスターには説明、普及度の指標、自動化型と能力拡張型の内訳が付されている。Anthropicは例として、水管理システムの支援、物理法則に基づくシミュレーション、フォント選定、応募書類、バッテリー技術に関する助言、コード内でのタイムゾーン処理などのクラスターを挙げた。同社によると、両分析の基礎となるデータセットはすべて無料でダウンロードでき、モデルの能力向上に合わせて今後もこれらの指標を追跡する予定だという。Anthropicはまた、社会的影響担当リサーチサイエンティスト、リサーチエンジニア、エコノミストを募集していることも明らかにした。

出典：Anthropic「Anthropic Economic Index: Insights from Claude 3.7 Sonnet」、2025年3月27日公開。