検索システムの本

検索システム KS出版から出ていた検索システムを読んだ(読んでいる)

3章 索引語検索

いわゆるオールドスクールな検索インデックスの話。

• TFIDF, BM25, 転置インデックスetc

4章 ベクトル検索

ベクトル検索の話

• OpenAIを利用した文書のベクトライズの例
• 埋め込みモデルの説明などなど

5章 生成検索

RAGとエージェント検索の話

• RAGの実例、エージェントの実例が載っている

6章 評価手法

検索結果の評価の方法の例や計算の実例が載っている

• Recall Precision
• DCG, nDCG
• オンライン、オフライン評価について

ChatGPTやらClaudeが出てくるにつれて、どんどん自分の求めていた回答への距離が縮まってしまっていて、 その際に起きる寄り道に知識を拾ったりすることが少なくなってきてると感じてる今日この頃。

この辺の知識をざっくりと説明してくれる本はありがたいなー また途中なのでもうちょっと読んでいこう。