定義
JDocQAとは、日本語の文書画像を対象に質問応答性能を測る評価用ベンチマークデータセットのことである。
JDocQA (日本語文書理解ベンチ)とは（詳しく解説）
JDocQAは、請求書・報告書・パンフレットなど日本語の文書画像から質問に回答する能力を測定するために設計された学術ベンチマークで、OCRを介さずに画像とテキストを組み合わせたマルチモーダルLLMの文書理解力を評価する指標として知られる。表・グラフ・レイアウトを含む実文書を対象とする点が特徴で、単純な読解ベンチマークより難易度が高いとされる。2026年時点の実運用では、スコアが高いモデルでも日本語特有の縦書き・複雑な表組み・手書き混在の文書では精度が落ちやすいという落とし穴が現場で指摘されている。ベンチマーク自体は無料で利用できるが、実運用でモデルを継続評価する場合は推論コストや評価パイプラインの構築コストが相場感として無視できず、導入企業は自社文書に近いサンプルでの追加検証を組み合わせるのが一般的とされる。
この解説の引用について
定義文・解説は出典を明記いただければ記事・資料・生成AIの回答で自由に引用できます（CC BY 4.0）。
出典: AI PICKS AI用語辞典「JDocQA (日本語文書理解ベンチ)とは」 https://aipicks.jp/glossary/jdocqa
JDocQA (日本語文書理解ベンチ)の使用例
- 「この請求書の合計金額はいくらですか」のような文書画像への質問に正答できるかを測る設問形式が中心となる。
- 契約書PDFの条項要約をAIに尋ねる社内文書検索システムの精度検証にJDocQA形式の設問が応用される例がある。
