データ正規化とバリデーション
どのドキュメントからも、同じ形の整ったデータを
メールボックスのスキーマから後処理まで、抽出されたすべての値がクリーンに検証され、連携先システムでそのまま使える状態で届きます。
含まれる内容
メールボックス単位のスキーマ
一貫したスキーマこそが、連携先システムや自動化を真に信頼できるものにします。一度フィールドを定義すれば、メールボックスで処理されるすべてのドキュメントが同じ構造にマッピングされます。
- 単一値は通常フィールド、繰り返しデータはテーブルフィールドで対応
- 各フィールドの抽出内容は自然言語の指示でAIに伝達
- 画面UIまたはAPIを通じていつでもプログラムで調整可能
フィールド単位の整形
組み込みのフォーマットで、日付・数値・住所などを自動的に正規化します。正しいフォーマットはドキュメントの文脈から推測され、フォールバックとしてメールボックスの既定値が使用されます。
- 日付は順序・区切り・月名表記の違いを言語をまたいで自動解釈
- 数値は各国の小数点や桁区切りなどの地域フォーマットに対応
- 住所フィールドはジオロケーションを行い、構造化された要素に分解
データバリデーション
自動データバリデーションは、抽出されたすべての結果をメールボックスのスキーマに対してチェックします。エラーはUIに表示され、メール通知をトリガーし、Webhookを起動するため、運用チームとツールの両方が把握できます。
- スキーマ検証でAIの出力がフィールドの形式と一致するかを確認
- 必須フィールドのチェックで欠落した値を発生源で検知
- 選択肢フィールドのチェックで許可されたリスト以外の値を警告
後処理ルール
標準の整形と検証では不十分な場合は、短いPythonスクリプトを組み込みます。抽出後にルールが実行され、値の再形成やビジネスロジックに対する独自の検証を行います。
- 抽出された値からのフィールドの結合・分割、または新規計算
- 独自ロジック、外部データとの照合、条件付き変換への対応
- Proプラン以上でご利用可能
データ正規化はこう動きます
直前のステップ
AIドキュメント抽出と解析
Vision AI、Text AI、テンプレート、またはOCRが、各ドキュメントから構造化フィールドを抽出しました。
スキーマにマッピング
抽出された値は、メールボックスで定義された固定のフィールドセットにマッピングされます。元のレイアウトに関係なく、すべてのドキュメントが出力時に同じカラム構造になります。
整形
各フィールドは設定された書式に沿って処理されます。日付や数値はドキュメントの文脈を使用して地域による表記のばらつきを正規化し、氏名は名/ミドルネーム/姓に分割され、住所は構造化された要素に解析されます。
検証
各結果は、次のステップに進む前にバリデーションチェックを通過します。通過したドキュメントは後処理へと進み、残りはフラグが立てられるため、Parseurから気づかれずにデータが流出することはありません。
後処理
オプションのPythonルールが最後に実行され、フィールドレベルのフォーマットでは表現できないビジネスロジックを適用します。フィールドの結合、参照データの検索、または連携先システムの仕様に合わせた出力の整形を行います。
次のステップ
リアルタイムのエクスポートと連携
正規化されたデータは、CRM、会計システム、またはデータベースにリアルタイムで配信されます。