AI用語集

📖

用語

Dense Passage Retrieval (DPR)

関連するパッセージを抽出するために特別に設計された高密度検索アーキテクチャで、質問とパッセージに分離されたBERTエンコーダーと対照学習を使用する。

📖

用語

Bi-Encoder Architecture

クエリとドキュメントに独立した2つのエンコーダーを使用する検索アーキテクチャで、大規模検索のためのドキュメント事前計算インデックス化を可能にする。

📖

用語

Cross-Encoder Architecture

クエリとドキュメントを連結して同じエンコーダーで一緒に処理するアーキテクチャで、検索速度を犠牲にして優れた精度を提供する。

📖

用語

Hierarchical Navigable Small World (HNSW)

速度と精度の優れたトレードオフを持つ近似最近傍探索のためのマルチレベルグラフを使用するベクトルインデックスアルゴリズム。

📖

用語

Maximal Marginal Relevance (MMR)

関連性と新規性のバランスを取る検索結果多様化アルゴリズムで、関連性を最大化しながら意味的重複を最小化するドキュメントを選択する。

📖

用語

Hybrid Search

意味的検索とキーワード検索のそれぞれの強みを活用するために高密度検索とスパース検索を組み合わせたアプローチで、全体的な精度を向上させる。

📖

用語

Sentence Transformers

高品質な文埋め込みを生成するために特別に訓練されたBERTモデルで、意味的類似性タスクとクラスタリングに最適化されている。

📖

用語

Vector Indexing

類似性クエリを高速化するために専門的なデータ構造に高密度ベクトルを整理するプロセスで、大規模検索に不可欠。

📖

用語

高密度検索拡張生成

生成モデルに関連する文脈を提供するために特に高密度検索を使用するRAGの拡張であり、生成された応答の一貫性と事実の正確性を向上させる。

📖

用語

後期インタラクション

クエリとドキュメント間のインタラクションが、個別のエンコーディング後のプロセスの後期に発生する検索パラダイムであり、精度と計算効率の間のトレードオフを可能にする。