Llama 2: オープンファウンデーションとファインチューンされたチャットモデルを使用し、トップ- psetを0:9に設定した核抽出（Holtzman et al.、2020）を使用します。TruthfulQAでは、真実でありかつ情報提供がされている割合（割合が高いほど良い）を提示します。ToxiGenでは、メトリックによって有害と見なされる生成の割合（割合が低いほど良い）を提示します。ベンチマークとメトリックの詳細な説明は、付録A.4.7に記載されています。L/l.sc/a.sc/m.sc/a.sc/one.taboldstyle-7Bと比較した場合、L/l.sc/a.sc/m.sc/a.sc/two.taboldstyle-7Bは、真実性と情報提供性が21.37％向上し、有害性が7.61％減少しています。また、事前学習済みの13Bおよび70BのL/l.sc/a.sc/m.sc/a.sc/two.taboldstyleでは、有害性が増加していることが観察されます。これは、より大きな事前学習データまたは異なるデータセットの組み合わせによるものかもしれません。事前学習データセットのサイズと後続モデルの有害性やバイアスとの関係の存在を仮説立てた研究もあります（Bender et al.、2021b）、しかし実証的な証拠はまだありません。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
and use nucleus sampling (Holtzman et al., 2020) with top- pset to 0:9. For TruthfulQA, we present the
percentageofgenerationsthatarebothtruthfulandinformative(thehigher,thebetter). ForToxiGen,we
presentthepercentageofgenerationsthataredeemedtoxicbythemetric(thelower,thebetter). Detailed
descriptionsofthebenchmarksandmetricscanbefoundinAppendixA.4.7. Whencomparedto L/l.sc/a.sc/m.sc/a.sc /one.taboldstyle-7B,
L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-7B demonstrates a 21.37% increase in truthfulness and informativeness and a 7.61% decrease in
toxicity. We also observe an increase in toxicity in the pretrained 13B and 70B L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle, which may result
from larger pretraining data or a diﬀerent dataset mix. Some have postulated the existence of a relationship
between pretraining dataset size and downstream model toxicity or bias (Bender et al., 2021b), but empirical