Posted in人工知能
BGE-RerankerとFlagEmbeddingによるRAGの検索精度最適化
2段階検索（Two-stage Retrieval）アーキテクチャにより、RAGシステムのHit Rateを68%から91%以上へと劇的に改善。BGE-Reranker v2-m3とFlagEmbeddingの統合手順および詳細なベンチマークを解説します。
Posted in人工知能
Haystack 2.0: Document Indexing・Hybrid Retrieval・スマートQ&Aで構築するドキュメント処理パイプライン
Haystack 2.0は有向グラフ形式のAIドキュメント処理パイプラインを構築できる。各コンポーネントが明示的に接続され、デバッグも拡張も容易だ。本記事では、ドキュメントのインデックス化、BM25とEmbeddingを組み合わせたHybrid Retrieval、Pythonを使った本番対応Q&Aパイプラインまでを実践的に解説する。