Llama 2: オープンファンデーションと微調整されたチャットモデル
AppendixA.4.8では、バイアスベンチマークにおけるモデル生成センチメントの異なるサブグループにわたる詳細なスコアの分解、および真実性とバイアスのより詳細な分析と結果を示します。
TruthfulQA"ToxiGen#
ChatGPT - 78.46 0.20
Falcon-instruct 7B 28.03 7.89
MPT-instruct 7B 29.99 16.33
L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc7B 57.04 0.00
13B 62.18 0.00
34B 67.20 0.02
70B 64.14 0.01
Table 14: 異なる安全データセット上での微調整されたLLMの評価。TruthfulQAでは、真実で情報量のある生成の割合を示します（割合が高いほど良い）。ToxiGenでは、有害な生成の割合を示します（割合が小さいほど良い）。
31
5 Discussion
ここでは、RLHFで観察された興味深い特性について議論します（セクション5.1）。その後、私たちは
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
InAppendixA.4.8,wepresentadetailedscorebreakdownofmodelgenerationsentimentacrossdiﬀerent
subgroups for the bias benchmark, along with more in-depth analyses and results of truthfulness and bias.
TruthfulQA"ToxiGen#
ChatGPT - 78.46 0.20
Falcon-instruct 7B 28.03 7.89
MPT-instruct 7B 29.99 16.33
L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc7B 57.04 0.00
13B 62.18 0.00
34B 67.20 0.02
70B 64.14 0.01
Table 14: Evaluation of ﬁne-tuned LLMs on diﬀerent safety datasets. For TruthfulQA, we present the
percentageofgenerationsthatarebothtruthfulandinformative(thehigherthebetter). ForToxiGen,we
present the percentage of toxic generations (the smaller the better).
31
5 Discussion
Here, we discuss the interesting properties we have observed with RLHF (Section 5.1). We then discuss the