ポリシーを調整して比較する

コレクション、文書の範囲、質問は固定します。ポリシーの設定を一つ変えます。結果をより良い回答と呼ばないでください。

設定する

1. コレクションの Search タブを開きます。
2. コンテキストポリシーのラボを開きます。フォームは、未保存のデフォルトポリシーから始まります。
3. 埋め込みはそのままにします。ラボは、固定されたままだと述べます。
4. 検索のみの確認では、Search results topK を 10 にします。Answer results topK は変わりません。
5. 回答の確認では、Answer results topK を 10 にし、質問は固定します。
6. 名前を残す必要があるとき、Save policy を押します。保存は、既にある回答を書き換えません。このガイドは、保存した ID だけがサーバーからスナップショットを読み込む、とは述べません。

比較する

1. Compare mode をオンにします。
2. Chat A の設定を Chat B にコピーします。
3. Chat B だけ、Temperature を 0.8 にします。
4. 各側を実行します。不要な側は停止します。
5. 文章の差と引用を、別々に読みます。

二つの例

これらはプリセットではありません。一つ目は、ミニクエリをオフにします。ミニクエリの件数は無視され、実行は質問だけを使います。二つ目は、証拠抽出をオフにします。主要と補足の上限は無視されます。

このパッケージの証拠

制御されたプロバイダの回答はキャプチャしていません。cat-policy-lab-en、cat-policy-lab-ja、cat-compare-en、cat-compare-ja は未了です。