Chain-of-Verification (CoVe)

CoVeは検証技術であり、モデルが自身の答えをファクトチェックさせることで応答精度を向上させます。最初の応答をそのまま受け入れるのではなく、CoVeはモデルに検証質問を生成させ、それらに独立して答えさせ、その発見に基づいて元の答えを修正するよう指示します。

このスキルを使用する場面

CoVeは以下のシナリオで最大の価値を提供します:

精度が重要な質問:

• 精度言語を含む質問(「正確に」「厳密に」「具体的に」)
• 複雑なファクト質問(日付、統計情報、仕様)

複雑な推論:

• 多段階の推論チェーン(3つ以上の論理的依存関係)
• API、ライブラリ、またはバージョン固有の動作に関する技術的主張

ファクトチェックシナリオ:

• 歴史的事実、統計情報、または定量的データ
• 技術仕様およびAPI動作

重要度の高い精度:

• セキュリティクリティカルなコードパスまたは分析
• 精度検証が必要なコード生成
• 正確性が重要な応答全般

自己修正トリガー:

• 最初の応答に曖昧な言語が含まれている場合(「〜と思います」「おそらく」「かもしれません」)

注記: これらのヒューリスティックスは、CoVeを対応するシナリオで自動実行させたい場合、プロジェクトのCL

...