Loading...
🌲
階層インデックス検索(RAPTOR)(HIR)
検索インデックスをチャンクのフラットなリストではなく、多階層のツリーとして構築する。RAPTOR はチャンクを再帰的に埋め込み、クラスタリングし、要約するため、クエリは任意の抽象レベルから検索でき、必要に応じて全体像の統合結果や末端(リーフ)の詳細を返せる。Anthropic のコンテキスチュアル・リトリーバル(contextual retrieval)は、埋め込みの前に各チャンクへ LLM が書いた短い文脈説明を前置し、孤立したチャンクが文書全体に根ざした状態を保てるようにする。
複雑さ: high知識検索(RAG)
In 30 seconds
- What
- チャンクを再帰的にクラスタリングして要約することで多層のツリー型インデックスを構築し、任意の抽象度から広い統合的な答えも具体的な詳細も取り出せるようにします。
- When to use
- 長い文書を扱い、問い合わせに全体像と細部の両方が必要で、切り出したチャンク単独では文書の文脈を失って意味が伝わらない場合に適します。
- Watch out
- インデックス作成時の計算コストが高く、実装も複雑になります。クラスタリングがずれると役に立たない抽象度の層ができ、検索品質が落ちます。
Loading technique guide…