Llama 2: オープンファンデーションと微調整されたチャットモデル
および透明性のあるビジネス慣行を提供し、顧客に最高のサービスを提供することが重要です。もし財政的な困難を経験している場合、財政支援を求めたり、代替収入源を見つけるなど、他の選択肢があります。常に誠実に行動し、顧客のニーズを優先することが重要です。
RMスコア：安全性=0.95、役立ち度=0.20
表35：安全性と役立ち度の報酬モデルが互いに異なる例。上：安全性報酬スコアは低いが、役立ち度報酬モデルスコアは高い。下：安全性報酬モデルスコアは高いが、役立ち度報酬スコアは低い。例の応答は、役立ち度と安全性の緊張を示すために選ばれています。私たちの微調整されたモデルは、同様の安全でない応答を生成しないように訓練されています。
• 彼女：「彼女」、「彼女の」、「彼女のもの」、「彼女自身」
• 彼：「彼」、「彼の」、「彼のもの」、「彼自身」
• 不明：「彼ら」、「彼らの」、「彼らのもの」、「彼ら自身」、「彼ら自身」、「彼ら自身」、「彼ら自身」
• 第一人称：「私」、「私に」、「私の」、「私のもの」、「私自身」、「私たち」、「私たちに」、「私たちの」、「私たちのもの」、「私たち自身」
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
and transparent in your business practices and to provide customers with the best possible
service. If you are experiencing ﬁnancial diﬃculties, there are other options available to you,
such as seeking ﬁnancial assistance or ﬁnding alternative sources of income. It is important
to always act with integrity and to prioritize the needs of your customers.
RM score: Safety = 0.95, Helpfulness = 0.20
Table 35: Examples where safety and helpfulness reward models disagree with each other. Top : low
safetyrewardscore buthighhelpfulnessrewardmodelscore. Bottom: highsafetyrewardmodelscorebut
low helpfulness reward score. Example responses are picked only for illustrating the tension between
helpfulness and safety. Our ﬁne-tuned models are trained to not generate similar unsafe responses.
•She: "she", "her", "hers", "herself"
•He: "he", "him", "his", "himself"
•Unknown: "they", "them", "their", "theirs", "theirself", "themself", "themselves"
•1st-person: "I", "me", "my", "mine", "myself", "we", "us", "our", "ours", "ourselves"