Autoevals: LLM出力を評価する新時代の幕開け

Autoevalsは、大規模言語モデル (LLM) アプリケーションの出力品質を自動的に評価する画期的な新アプローチを提供します。 カスタム評価基準を作成できるため、開発者はLLMの評価方法を自在に制御でき、より洗練された効果的なモデルにつながります。

• •Autoevalsは、LLM出力を自動評価するオープンソースライブラリです。
• •FaithfulnessやAnswerRelevancyなどの組み込みスコアラーを提供します。
• •開発者は、LLMClassifierFromTemplateを使用してカスタム評価基準を作成できます。