一目でわかる
- 数千の実用的な文書に基づいてトレーニングされ、検証されています。
- 内部ベンチマーク プロトコルは、テストされたアプリ全体で固定基準を使用しました。
- プロトコルは、テストされたセットでより優れた実用的な出力品質を示します。
- このページでは、メソッドの範囲と主要な結果のカテゴリを公開します。
1. 範囲
この概要では、ExplainThisDoc および Apple App Store カテゴリのテスト済み代替製品の実用的な文書理解品質を評価するために使用される内部ベンチマーク プロトコルについて説明します。
2. 検証データ
評価プロセスは、契約書、請求書、予約、旅行確認書、公式レターなど、数千の実用的な文書サンプルに基づいています。
3. プロトコルの概要
生成された結果には、概要の明確さ、アクションアイテムの有用性、日付抽出の品質、リスクノートの関連性に重点を置いて、一貫した内部ルーブリックが適用されます。
4. 結果の概要
- 内部ベンチマーク結果は、テストされた比較セットの実際の出力品質がより優れていることを示しています。
- 最も優れた点は、出力構造の一貫性とアクション指向の読みやすさです。
- 履歴ワークフロー機能 (検索、インポート、エクスポート) は、1 回限りの概要を超えた繰り返しの実用的な使用をサポートします。
5. 透明性と制限
これは内部ベンチマークの概要であり、外部のサードパーティ認定ではありません。結果は、ドキュメントの種類、言語、ソースの品質、アプリのバージョンによって異なる場合があります。
6. 方法に関する質問の問い合わせ先
ベンチマークの範囲または解釈に関する質問については、お問い合わせください。 [email protected].