Compare は、同じコレクション上の Chat A と Chat B です。二つのカタログの比較ではありません。

回答を比較する

一つのコレクション上で並んだ Chat A と Chat B
Compare mode は、同じコレクションに二つのチャットを置きます。それぞれの側にモデル、質問、Run があります。二つのカタログの比較ではありません。

Compare は、同じコレクション上の Chat A と Chat B です。二つのカタログの比較ではありません。

両側を設定する

Compare mode を選びます。Chat A と Chat B は、それぞれ質問とポリシーを持ちます。同じ出発点にしたいときは、Copy Chat A settings to Chat B を使います。その後、設定を一つ変えるか、質問を意図して変えます。Chat B の質問を空にすると、Chat A の質問を再利用します。

実行する

各側を、単独で実行、停止、再試行します。一方が終わっても、他方は失敗することがあります。以前の結果の印は、その側が新しい実行ではなく、前の実行を示していることです。

差の読み方

強調された語は、文章の差です。証拠の差ではなく、Eval Studio のスコアでもありません。証拠の差は、各側が引用した一節です。引用が無い側は、回答を根拠づけていません。見た目が整った段落を、より良い回答と扱わないでください。