AI・機械学習
中級

ドキュメントインテリジェンス(ドキュメントインテリジェンス)

PDF・画像・スキャン文書から表・グラフ・テキストを自動認識し、構造化データとして抽出するAI技術。Azure Document Intelligence・AWS Textract・Google Document AIなどのクラウドサービスに加え、LLMのマルチモーダル能力を活用した新世代のアプローチが台頭している。

0 回閲覧
0 いいね

ドキュメントインテリジェンスとは

ドキュメントインテリジェンスとは、PDF・画像・スキャン文書などの非構造化ドキュメントからテキスト・表・フォームフィールド・署名・チェックマークなどを自動認識し、プログラムで処理可能な構造化データに変換する技術である。従来のOCR(光学文字認識)がテキスト認識に特化していたのに対し、ドキュメントインテリジェンスはレイアウト解析・表構造認識・キーバリューペア抽出・文書分類を統合的に行う。2025年以降、GPT-4oやGemini 1.5 Proなどマルチモーダル LLM が文書画像を直接理解できるようになり、従来のOCRパイプラインを経由しない「LLMネイティブ」なドキュメント処理が主流になりつつある。

主要サービス比較

サービス提供元特徴価格(1,000ページ)対応言語数
Document IntelligenceMicrosoft Azure事前構築モデル豊富、カスタムモデル対応$1.50-$10.00300+
TextractAWSS3統合、非同期処理、AnalyzeExpense$1.50-$15.00100+
Document AIGoogle CloudVertex AI統合、Gemini連携$1.50-$10.00200+
IDP PlatformABBYY30年の実績、高精度OCR個別見積200+
SensibleSensible開発者向けAPI、テンプレート不要$0.10/ページ〜50+
LlamaParseLlamaIndexLLM特化パーサー、Markdownへ変換$0.003/ページ〜多言語

Azure Document Intelligence 詳細

Microsoft Azure Document Intelligence(旧Form Recognizer)は最も成熟した文書AI サービスの一つ:

  • 事前構築モデル: 請求書・領収書・W-2税務書類・身分証明書・名刺・健康保険証に対応
  • カスタムモデル: 独自文書に対して50枚の学習データでカスタム抽出モデルを構築
  • レイアウトAPI: ページ構造・段落・表・セクション見出し・図表を自動認識
  • 読み取り順序: 多段組み・ヘッダー/フッターを考慮した論理的な読み取り順序の推定
  • バーコード/QRコード: 文書内の1D/2Dバーコード自動検出
  • 手書き文字: 英語・日本語・中国語の手書き文字認識に対応
  • 価格: Readモデルは$1.50/1,000ページ、カスタムモデルは$10.00/1,000ページ

AWS Textract 詳細

Amazon Textractは AWS エコシステムに統合された文書処理サービス:

  • AnalyzeDocument: テキスト・フォーム・表の検出と抽出
  • AnalyzeExpense: 請求書・領収書の専用解析(品目・金額・日付の自動認識)
  • AnalyzeLending: 住宅ローン申請書類の専用解析
  • 非同期処理: S3バケット経由で大量ドキュメントのバッチ処理
  • Confidence Score: 各抽出フィールドに0-100の信頼度スコア付与
  • Human Review: Amazon A2I(Augmented AI)連携で低信頼度結果の人間レビュー
  • 価格: DetectDocumentText $1.50/1,000ページ、AnalyzeDocument Tables $15.00/1,000ページ

LLMネイティブ文書処理

2025-2026年に台頭した新世代アプローチ:

  • GPT-4o Vision: PDF各ページを画像として送信し、プロンプトで抽出指示。表構造の認識精度が高い
  • Gemini 1.5 Pro: 最大200万トークンのコンテキストで数百ページのPDFを一括処理
  • Claude 3.5 Sonnet: PDF直接入力対応(2024年10月〜)。100ページ以上の文書を一括解析
  • LlamaParse: LlamaIndex提供のLLM特化パーサー。複雑なレイアウトをMarkdownに高精度変換
  • Docling: IBM Research開発のOSS文書パーサー。表・図・数式を構造化出力
  • Marker: PDF→Markdown変換ツール。学術論文の数式・図表対応

LLMネイティブ方式のメリットは、事前構築モデルやテンプレートが不要で、プロンプトだけで任意の抽出ルールを定義できる点にある。一方、APIコストが従来サービスの5-10倍になるケースがあり、大量処理では従来サービスとの使い分けが重要。

パイプライン設計パターン

実用的な文書処理パイプラインは以下の段階で構成される:

  • Stage 1 - 文書分類: 文書種別(請求書/契約書/領収書等)を自動判定
  • Stage 2 - 前処理: 傾き補正・ノイズ除去・解像度正規化
  • Stage 3 - OCR/解析: Azure Document Intelligence等で基本テキスト・表を抽出
  • Stage 4 - LLM強化: 抽出結果をLLMに渡し、文脈理解に基づく高精度な構造化
  • Stage 5 - バリデーション: ビジネスルールに基づく整合性チェック
  • Stage 6 - Human-in-the-Loop: 信頼度閾値以下の結果を人間レビューに回す

よくある質問(FAQ)

Q1: OCRとドキュメントインテリジェンスの違いは何ですか? A: OCRは画像からテキスト文字を認識する技術に特化するが、ドキュメントインテリジェンスはレイアウト解析・表構造認識・キーバリューペア抽出・文書分類を含む包括的な技術である。OCRはドキュメントインテリジェンスの一部機能に位置づけられる。

Q2: 日本語文書の処理精度はどうですか? A: Azure Document Intelligenceは日本語の印刷文字で99%以上の認識精度を達成。手書きは90-95%。縦書き・ルビ付きテキストへの対応はGPT-4o Visionが最も安定している。

Q3: 機密文書のセキュリティはどう担保されますか? A: Azure/AWS/GCPいずれもSOC 2 Type II・ISO 27001認証取得済み。処理データはモデル学習に使用されない。さらに厳格なセキュリティが必要な場合はAzure Private Endpointやオンプレミスコンテナ版が利用可能。

まとめ

  • ドキュメントインテリジェンスはOCRを超えた包括的文書AI技術
  • Azure・AWS・GCPの3大クラウドが成熟したサービスを提供
  • LLMネイティブ方式(GPT-4o/Gemini/Claude)がテンプレート不要の柔軟な抽出を実現
  • 大量処理は従来サービス、複雑な非定型文書はLLMの使い分けが最適解
  • Human-in-the-Loopを含むパイプライン設計が実運用の鍵