Llama 2: オープンファンデーションと微調整されたチャットモデル
プロンプトと生成物の単語数（右）の合計。単語数のプロットでは、各五分位ごとの勝率を報告します。
最大の合計単語数（プロンプトと生成物）は2432です。単語数またはターン数による勝率の傾向は見られません。
追加の結果。ChatGPTの生成物に対するシステムプロンプトの影響を理解するために、ChatGPTのシステムプロンプトなしで別の人間による評価を行いました。図30に示されているように、L/l.sc/a.sc/m.sc/a.sc/t.scの勝率は36％から44％に上昇します。さらに、単一のターンプロンプトの勝率は36％からほぼ49％に急激に上昇します。30では、異なるカテゴリのプロンプトの勝率のカテゴリ別の分析も示しています。言語支援においてChatGPTがL/l.sc/a.sc/m.sc/a.sc/t.sc 70Bonlanguageassistanceを上回ることが興味深いことです。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
wordcount( Right)forthepromptandgenerationcombined. Forthewordcountplot,wereportthewinrate
foreachquintile. Themaximumtotalwordcount(promptandgeneration)is2432. Wedonotseeanytrends
in win rate with either word count or turn count.
Additional Results. To understand the impact of system prompt on ChatGPT generations, we ran another
human evaluation without any system prompt for ChatGPT. As shown in Figure 30, L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc win rate
increases from 36% to 44%. Additionally, the win rate for single turn prompts show a dramatic increase from
36% to nearly 49%. In 30, we also show the category wise breakdown of win rate for diﬀerent categories
ofprompts. ItisinterestingtonotethatChatGPToutperforms L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc 70Bonlanguageassistance