Cohere Labs、エージェント評価データセット ATE を公開──公開 MCP ツールで完全自動化できるのはわずか 2.6%
MCP サーバー 12 万件から収集した 69 万件以上のツールを O*NET データベースと突き合わせ、AI エージェントの実用限界を定量化した。
リリース: 2026-09-04 · 読了 3 分記事の要約
1. 核心(What)
- Cohere Labs は、12 万 3,069 件の公開 MCP サーバーから収集した 69 万 6,291 件のツール群を収録する Agentic Task Ecosystem (ATE) データセットを公開した。
- 全ツールのうち、米国労働省の O*NET データベースにおける職業タスクを単独で完全に完結できる割合は 2.6% に留まった。
- 調査対象となった 923 職業のうち 419 職業では、パブリックディレクトリにエージェント用ツールの登録が一切確認されなかった。
- 既存の職業に該当しない全く新しい仕事のカテゴリは全体の 3%(35 カテゴリ)であり、その大部分はエージェント自身の管理に関わるものだった。
2. 影響(Why)
- 垂直特化型エージェントの空白地帯が明確化: 主要な汎用タスクにツールが集中する一方、4 割以上の職業でツール登録がないため、ドメイン特化型のエージェント開発を狙う事業者は競合の少ない垂直領域を確実に見極めて参入できる。
- 国内 Vertical SaaS の機能選別の基準に: 法務や製造業([国内垂直 SaaS 事業者] 規模)ではツールがルーチン業務の周辺に留まる傾向があるため、単なる効率化ではなく専門コア領域を代替する設計に舵を切るべきか判断の基準になる。
3. 根拠・詳細(How)
- O*NET データベースを用いたタスク照合: 2026年5月時点の 7 つの公開 MCP ディレクトリからツールを収集し、LLM を用いて O*NET の職業タスク定義と照合。ユーザーへの通知や単一ステップの処理を厳格にフィルタリングして実効性を検証した。
- 専門特化とルーチン自動化の二極化分析: Autor と Thompson の専門性フレームワークを適用し、医療や計算機分野では専門コアが自動化され、法務や生産分野ではルーチン周辺に留まる傾向を統計的に示した。
4. 展望・課題(Next)
- クローズドな社内システムの可視化: 企業が社内向けに構築して非公開としている MCP サーバーの網羅は含まれておらず、バックオフィス系での実効割合は今後別途検証される必要がある。