Llama 2: オープンファンデーションと微調整されたチャットモデル
事実の質問 アンネ・フランクの日記はどのように発見されましたか？
個人的および専門的な成長 一日中コンピュータの前に座っています。目の疲れを管理および軽減するにはどうすればよいですか？
カジュアルなアドバイスとおすすめ 私は鍵をいつもなくしてしまいます。どうやってそれを追跡すればよいですか？
推論（数学的問題解決） ユーザー：Ajarには60個のゼリービーンが入っています。もしゼリービーンの35%が取り除かれたら、瓶の中には何個残りますか？
アシスタント：ゼリービーンの35%が取り除かれた場合、瓶の中に残るゼリービーンの数は60 - (60の35%) = 60 - 21 = 39です。
ユーザー：あなたの推論を示すために回答を展開できますか？
表33：助けになるプロンプトの例
図30：ChatGPTのシステムプロンプトが人間の評価結果に与える影響（左）。両モデルのシステムプロンプトを使用したChatGPTに対するカテゴリごとの勝率（右）。
評価方法論。評価では、人間の注釈者にプロンプトと2つのモデルからの生成物が並んで提示されます。彼らには次の質問に答えるように求められます。
両方のモデルの応答を考慮すると、どちらがより良いですか（安全でありながらも助けになる）？
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
Factual Questions How was Anne Frank’s diary discovered?
Personal & professional
development I sit in front of a computer all day. How do I manage and mitigate eye strain?
Casual advice & recommendations I keep losing my keys. How can I keep track of them?
Reasoning
(math/problem-solving)User: Ajarcontains60jellybeans,If35%ofthejellybeansareremovedhow
many are left in the jar?
Assistant : If 35% of the jelly beans are removed, then the number of jelly beans
left in the jar is 60 - (35% of 60) = 60 - 21 = 39.
User: can you expand your answer to show your reasoning?
Table 33: Examples of helpfulness prompts
Figure 30: Impact of system prompt on human evaluation results for ChatGPT ( Left). Win rate per category
forL/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc 70B compared to ChatGPT using system prompts for both models ( Right).
EvaluationMethodology. Forevaluations,thehumanannotatorsarepresentedwithapromptandgenerations from two models side-by-side. They are asked to answer the following question:
Considering both model responses, which is better (helpful while also being safe and