Llama 2: オープンファウンデーションとファインチューンされたチャットモデル
13B 28.7 3.9
34B 42.2 6.24
70B 56.8 13.5
Table25: 数学的推論タスクにおける他のオープンソースモデルとの比較、GSM8kおよびMATH
（maj1@1が報告されています）。
数学的推論。表25では、L/l.sc/a.sc/m.sc/a.sc/two.taboldstyleおよびその他のオープンソースデータセットにおけるGSM8kおよびMATHタスクの結果を報告しています。
A.3 ファインチューニングの追加詳細
A.3.1 メタヒューマンの嗜好データの詳細統計
表26には、メタヒューマンの嗜好データの詳細統計が示されています。合計で、我々は週次で14バッチの人間の嗜好データ（つまり、MetaSafety+Helpfulness）を収集し、100万以上のバイナリモデル生成比較が含まれています。一般的に、後のバッチには、時間の経過とともにより多くの注釈者をオンボードし、注釈者もタスクにより慣れ親しんでおり、したがって作業効率が向上しているため、より多くのサンプルが含まれています。また、RLHFデータの複雑さを増加させるために、意図的により多くのマルチターンサンプルを収集し、それによりサンプルごとのトークンの平均数もバッチごとに相応に増加しています。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
13B 28.7 3.9
34B 42.2 6.24
70B 56.8 13.5
Table25: Comparisontootheropen-sourcemodelsonmathematicalreasoningtasks ,GSM8kandMATH
(maj1@1 is reported).
Mathematical Reasoning. In Table 25, we report results for L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle and other open-source datasets on
the GSM8k and MATH tasks.
A.3 Additional Details for Fine-tuning
A.3.1 Detailed Statistics of Meta Human Preference Data
Table 26 shows detailed statistics on Meta human preference data. In total, we collected 14 batches of human
preferencedata(i.e.,MetaSafety+Helpfulness)onaweeklybasis,consistingofover1millionbinarymodel
generation comparisons. In general, later batches contain more samples as we onboard more annotators over
time and the annotators also become more familiar with the tasks and thus have better work eﬃciency. We
also intentionally collect more multi-turn samples to increase the complexity of RLHF data and thus the
average number of tokens per sample also increase accordingly over batches.