Anthropic Economic Index: Claude 3.7 Sonnet からの洞察
Anthropic は、Claude 3.7 Sonnet のリリース後、100万件の匿名化された Claude.ai の会話を分析した Anthropic Economic Index による第2回調査レポートを発表しました。調査結果は、コーディング、教育、および科学分野における利用シェアの緩やかな増加を示していますが、AI による拡張(augmentation)と自動化(automation)の全体的なバランスは安定したままです。
職業別利用パターンの変化
Claude 3.7 Sonnet の導入以来、特定の職業カテゴリー内での利用割合に測定可能な増加が見られます。最も顕著な絶対的な増加は、コンピュータおよび数学関連の職業(+3%)で見られ、教育および科学分野でも顕著なパーセンテージの増加が確認されました。
Anthropic は、これらの変化を以下の3つの潜在的な要因に帰属させています:
- Claude 3.7 Sonnet の向上したコーディング・ベンチマーク。
- 経済全体における AI の継続的な普及。
- コーディング能力の非コーディング領域への適用、または汎用モデル能力の予期せぬ向上。
拡張思考(Extended Thinking)モードの利用
Claude 3.7 Sonnet の「extended thinking」モードは、主に技術的および創造的な問題解決に利用されています。データの分析によると、特定の高度なスキルを要する役割に関連するタスクが、この機能の採用をリードしています:
- Computer and Information Research Scientists: ~10% の利用
- Software Developers: ~8% の利用
- Multimedia Artists: ~7% の利用
- Video Game Designers: ~6% の利用
拡張(Augmentation)対 自動化(Automation)の傾向
AI の利用は引き続き主に拡張的であり、全利用の 57% を占めています。全体的な比率は一定に保たれていますが、インタラクションの内訳は変化しており、特に「学習(learning)」インタラクション(ユーザーが情報や説明を求めるもの)が約 23% から 28% に増加しました。
職業による変動
拡張と自動化のバランスは、職業カテゴリーによって大きく異なります:
- 高度に拡張的: コミュニティおよび社会サービス業務(教育やガイダンス・カウンセリングを含む)は、拡張が 75% に達します。
- バランス型: 製造およびコンピュータ/数学関連の職業は、拡張と自動化がほぼ 50-50 の割合に傾いています。
インタラクション・モードの例
特定の職業は、タスクの性質に基づいて明確なインタラクション・パターンを示しています:
- タスクの反復(Task Iteration): コピーライターやエディターは、人間とモデルがコンテンツを共同執筆する、タスクの反復レベルが最も高いことを示しています。
- 指示的行動(Directive Behavior): 翻訳者や通訳者は、人間による関与を最小限に抑えてモデルがタスクを完了する、指示的行動のレベルが最も高い部類に入ります。
- 学習(Learning): 図書館員は、学習インタラクションの割合が約 56% と最も高くなっています。
ボトムアップ型利用分類法(Bottom-Up Usage Taxonomy)
米国労働省の O*NET データベースの範囲外となるユースケースを捉えるため、Anthropic は 630 個の粒度の細かいクラスターで構成されるボトムアップ型の分類法を導入しました。このデータセットは、Claude.ai の特定のニッチな用途を特定しています。例えば:
- インタラクティブな可視化を伴う物理ベースのシミュレーションの作成。
- バッテリー技術や充電システムに関するガイダンスの提供。
- フォントの選択と実装に関するトラブルシューティング。
- コードやデータベースにおけるタイムゾーン・ロジックの処理。
- 水管理システムやインフラプロジェクトの支援。
メソドロジーとデータの可用性
Anthropic は、プライバシー保護分析ツールである Clio を使用して、会話を O*NET タスクにマッピングしました。本レポートでは、Clio は Claude 3.7 Sonnet によって駆動されており、Anthropic はこれが以前のバージョンよりも分類精度を向上させたと述べています。分析では、安全性分類器によってフラグが立てられた会話は除外されましたが、ボトムアップ型分類法のためのデータを保持するため、職業的な関連性に基づくフィルタリングは行われませんでした。
これらの分析に使用されたすべてのデータセット(O*NET タスクと思考モードのマッピング、およびボトムアップ型分類法を含む)は、Hugging Face で自由にダウンロード可能です。
Sources
関連
- Dispatch
- Dispatch
- Dispatch
- Dispatch
- Dispatch