Dialogue CoT: LLM との詳細な対話の質問に答えるためのヒント

Dialogue CoT: LLM との詳細な対話の質問に答えるためのヒント

 

これは、個別化された共感的で同情的な反応を生み出すための評価ベンチマークと方法論を構築および共有するための、CUHK ハルビン工業大学ダイアログ CoT プロジェクトのリポジトリです。このリポジトリには次のものが含まれます。

• 3.0K データ(データセットあたり 500) がモデルの公開評価に使用され、データの残りの半分は非公開評価用に保存されます。
• モデルとのチャットのデモンストレーションでは、私たちの機能を組み合わせています。
• さまざまなデータセットのケーススタディ。
• データを生成するコードは近日公開される予定です。
• モデルを評価するコードは近日公開される予定です。

ノート：

• コットチューニングモデルも近日発売予定です。乞うご期待。
• 使用法とライセンスに関する通知: 弊社では、一部の評価データの生成に Open AI API を使用しています。データセットは研究目的以外には使用しないでください。
• 構築されたデータセットは、一部既存の研究成果に基づいています。該当する評価データをご利用になる場合は、その評価データを引用し、その利用ポリシーに従ってください。
• 元の論文のプライバシー ポリシーに従い、PsyQA ベースの評価データは公開しません。ただし、PsyQA にアクセスできる場合は、ここで提供されるスクリプトを通じて評価データの構築を自動化できます。

概要

デモ

<span style="color:#1f2328"><span style="background-color:#ffffff"><span style="color:var(--fgColor-default, var(--color-fg-default))"><span style="background-color:var(--bgColor-muted, var(--color-canvas-subtle))"><code>Step1: put your OpenAI Key in web_demo/config.json
Step2: directly run the command: python web_demo/web.py
</code></span></span></span></span>

ケース

<span style="color:#1f2328"><span style="background-color:#ffffff"><span style="color:var(--fgColor-default, var(--color-fg-default))"><span style="background-color:var(--bgColor-muted, var(--color-canvas-subtle))"><code>Pls use browser to open web_demo/index.html</code></span></span></span></span>