RAGは検索後処理(重複除去・圧縮・rerank)が品質を左右する
正解
重複を除去したうえで、関連度の低い文書から落とすか要約圧縮し、必要ならrerankしてから生成する。
正解になる理由
コンテキスト予算が限られるとき、重複投入はノイズになる。重複除去と圧縮・rerankは、根拠の質を保ちつつトークンを節約する実務的手順である。件数の足し算そのものより、どの文書を残すかの設計判断が本質。
各誤答がなぜ誤りか
- 選択肢3: 上限超過やノイズ混入で回答が劣化しやすい。
- 選択肢1: RAGの目的(外部根拠)を放棄する。
- 選択肢4: 埋め込み次元ゼロは検索不能にする誤った処置。