Docifyによる知識管理のための生産RAGシステムの構築

Docifyは、11の専門サービスを統合したRAGパイプラインを提供しています。入力層では、さまざまな形式の文書を解析・分割し、埋め込み層では非同期的にベクトル化を行います。検索層では、ベクトル検索とキーワード検索を組み合わせた hybrid 検索を実現しています。ランキング層では複数の要因を考慮したスコアリングを行い、コンテキスト層では LLM の文脈制限に対応しています。プロンプト層では出典の明示など、LLM の出力の信頼性を高める工夫がなされています。また、データベース設計では、ベクトル検索に最適化されています。