LLMの回答がどの程度根拠資料に基づいているかを評価する仕組みの構築

[matsusho070]

問い合わせ文、LLMの生成した回答と、回答の生成に使用した根拠資料内の該当チャンクの３つを入力とし、
回答内容がどの程度資料に対して忠実であるかを定量的に自動評価する仕組みを構築する。
参考：https://docs.ragas.io/en/latest/concepts/metrics/available_metrics/faithfulness/