AISubHub/AI ニュース
開発者

詳しい解説 · 読了目安 4 分

Foundry文書信頼度ガイド:確認の優先度と自動化の許可は別

10月14日の説明は証拠と校正を分ける。重点確認の値が41%減っても、人の時間が41%減る意味ではない。

原典の公開日
当サイトの公開日
出典確認日

Microsoftは保険業務を使い、抽出値を証拠へつなぎ確認を優先する方法を示す。10月14日の報告は有用でも、人は全フィールドを確認し続けた。信頼度が変えたのは注意の順番であり、機微情報を無人処理する許可ではない。

ニュースを聴く

この記事を読み上げるか、ニュースを続けて聴けます。

Foundry文書信頼度ガイド:確認の優先度と自動化の許可は別

読み上げを準備中…

端末の音声

読み上げはブラウザーまたは端末が処理します。AISubHub は文章を音声 API に送りません。利用できる音声やロック画面での再生は端末によって異なります。

再開時に短い部分を繰り返す場合があります。

要点

  • 顧客の評価全体は1,000超の本番文書と22,000超の値を対象とした。別の留保テスト集合では、重点確認に選ぶ値が41%少なくても既知の抽出誤りの80%超を含んだ。
  • 信頼度はLLMの自信ではなく別の共有モデルが生成する。顧客校正はその再訓練ではない。
  • 公開ラボはCORD v2の1,000領収書を800校正・200評価に分割。保険顧客の成果ではない。

証拠と信頼度の問いを分ける

Groundingは値を文書中の支持内容につなぎ確認・監査を助けるが、確認可能と正しいは別だ。信頼度は0~1の学習済みフィールド信号で、独立モデルが証拠、文脈、診断から作る。Microsoftは平均推論トークン最大28%減、AUROCで信頼度品質最大14%改善とする。後者は抽出精度14ポイント増ではない。同社報告で当サイトの測定ではない。

校正はモデルでなく判断を変える

同社は共有モデルを顧客データでなくMicrosoft選定データで訓練すると説明する。顧客の確認済み例は、自分の業務で得点が誤りを分けるか調べる。文書群、版、出所、項目ごとの閾値と留保文書検証が要る。空欄は本来の欠如と見落としが似るため別規則が必要。全体得点や直感的閾値では不足する。校正の範囲は検証済み文書、設定、スキーマ、モデルで、新しい全書式への保証ではない。

保険結果が数えたもの

分類・分割、版識別、抽出の順で、分類二層の第一層だけ分割する。Content Understanding v1は分類信頼度を返さず分類は人が確認する。機微な値も全件確認し、ラベルは優先度だけで直通処理を許さない。留保集で重点値41%減でも既知誤り80%超を含み、一部誤りは外に残った。労働時間41%減や無誤りではない。冒頭の負担ほぼ50%減、書式導入75%高速化、分類精度97%+は別の尺度だ。

公開ラボは別実験

顧客資料なしで方法を見るラボはCORD v2領収書1,000件を800で規則作成、200で評価する。一部図は校正集の例であり顧客成果や将来保証ではない。出力は項目別ルーティング表で、追加モデル呼出しや再訓練ではない。良い閾値をコピーするより調整と独立評価を分けるべきだ。平均精度が高くても重要な誤りを得点が見つける証拠にはならない。

継続するフィードバックが必要

代表性ある本番文書を人が確認し、誤りカバー目標を決め、未使用文書で検証する。信号が誤りを分けられない項目は確認を続ける。重点外の値も抽出確認し、得点分布だけを見ない。版、出所、構造、設定、LLM変更時は再検証と必要な再校正を行う。操作許可は良い点でなく証拠と測定リスクに基づく。範囲と保守責任のある業務判断で、永久の安全証明ではない。

注目する理由

Groundingは証拠を見せ、信頼度は注意を配分する。確認負担に対する捕捉・見逃しを時間や費用と別に測ると、全件確認でも役立ち得る。AISubHubは顧客文書処理や再現をしていない。

制約と提供状況

公式ガイド全文を読み、リンクのノートブックや解説は開いていない。普遍的精度、無料API、個人購読権利は約束されない。訓練データの説明はこの信頼度モデルだけで、全サービスの取扱方針ではない。

出典と根拠

Microsoft Foundry Blog

原典の公開日: 2026/10/14 · 出典確認日: 2026/10/20

AI を活用した編集記事を、記載した一次情報で確認しています。企業の主張は出典を明示し、掲載は推奨を意味しません。