ドキュメントをチャンクに分割することで、より適切な回答を得る
カスタマイズ可能なドキュメントの分割やチャンキングを使用することで、ユーザーの意図に関連した回答を保証します。
抽出
主な特徴
- レイアウト、テキスト、表、画像など、ドキュメントの特性を理解。
- 特定の文書レイアウトに基づいて抽出戦略を調整します。
- インテリジェント・チャンキングを使用してテキスト内の明確なパターンを識別することにより、文脈に一貫性のあるチャンクを提供する。
- 抽出パイプラインの出力を可視化します。
- チャンクが完全で、正確で、ビジネス要件に合致していることを確認し、検証する。
- ブラウザ内でチャンクを直接編集したり、追加情報を追加してチャンクを補足・強化することができます。
- チャンクの境界を動的にリサイズし、希望するコンテンツの制限に沿うようにします。
- チャンクの境界を修正したり再調整することで、重複をなくし、正確な調整を行うことができます。
- タイトル、テキスト、表、画像など、ドキュメント要素内の関係を作成することで、より多くのコンテキストを提供します。
- 構造化された方法でデータを探索、クリーニング、変換することにより、合理化されたデータ準備を可能にします。
- 各パラメーターの設定をカスタマイズし、微調整することができます。
- 特定の要件に応じて、ステージを並べ替えたり、順序を変えたりすることができます。
- MPNet、LaBSE、e5など、一般的なエンベッディング・モデルをすぐにサポートします。
- エンベッディングを生成する特定のチャンクのフィールドを選択し、最も重要な側面に焦点を当てる。
- エンベッディング・モデルを利用した多言語機能で、より多くの顧客を獲得しましょう。
