定義
OSWorldとは、AIエージェントが実際のデスクトップOS環境（Ubuntu・Windows・macOS相当）でファイル操作やアプリ操作を自律的にこなせるかを測る評価ベンチマークのこと。
OSWorld (OS操作ベンチ)とは（詳しく解説）
OSWorldは、AIエージェントが実際のデスクトップOS環境上でLibreOffice・GIMP・ブラウザ・ファイルマネージャーなど複数アプリケーションをまたいだ実務タスクをどこまで自律的に完遂できるかを測る評価ベンチマークで、業界標準として広く参照されている。単一アプリの操作精度だけでなく、アプリ間の切り替えやファイル保存形式の整合まで含めて成功率を採点する点が特徴とされる。2026年時点の実運用では、ベンチマークスコアが高いエージェントでも、社内独自の業務アプリやレガシーUIが絡む現場では想定通りに動かないケースが多いと指摘されている。コスト面でも、GUI操作の試行錯誤が多いモデルほどスクリーンショット解析やクリック操作の回数がかさみ、相場感としては成功率上位のエージェントほど1タスクあたりの実行コストが高くなりやすい。導入現場では、成功率の絶対値だけでなく平均試行回数や操作ステップ数も併せて確認し、自社の実際のOS環境に近い条件で選定することが選び方の基本とされる。
この解説の引用について
定義文・解説は出典を明記いただければ記事・資料・生成AIの回答で自由に引用できます（CC BY 4.0）。
出典: AI PICKS AI用語辞典「OSWorld (OS操作ベンチ)とは」 https://aipicks.jp/glossary/osworld
OSWorld (OS操作ベンチ)の使用例
- 「ブラウザで商品を検索しPDF請求書をダウンロードしてフォルダに保存せよ」といった複数アプリをまたぐ多段階タスクの完遂率を測る設定が典型例とされる。
- 成功率だけでなく平均試行回数や操作ステップ数も合わせて比較するのが選定時のポイントとされる。
