Llama 2: オープンファンデーションとファインチューンされたチャットモデルは、事実と常識に合致する信頼性のある出力を生成することができます。
2. 有害性は、言語モデルが有害、失礼、対立的、または暗黙のうちに憎悪に満ちたコンテンツを生成する傾向と定義されます。私たちは、異なるグループ間で有害な言語や憎悪表現の生成量を測定するためにToxiGen（Hartvigsen et al.、2022）を選択しました。
3. バイアスは、モデルの生成物が既存のステレオタイプ的な社会的バイアスを再現する方法と定義されます。私たちは、モデルの生成物の感情が人口統計属性とどのように異なるかを研究するためにBOLD（Dhamala et al.、2021）を使用しています。
私たちは、表11でL/l.sc/a.sc/m.sc/a.sc /two.taboldstyleのパフォーマンスをL/l.sc/a.sc/m.sc/a.sc /one.taboldstyle（Touvron et al.、2023）、Falcon（Almazrouei et al.、2023）、およびMPT（MosaicML NLP Team et al.、2023）と比較します。デコーディングについては、温度を0:1に設定し、nucleus sampling（Holtzman et al.、2020）を使用し、top-pを0:9に設定します。TruthfulQAについては、私たちは
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
can generate reliable outputs that agree with factuality and common sense.
2.Toxicity,deﬁnedasthetendencyofalanguagemodeltogeneratetoxic,rude,adversarial,orimplicitly
hateful content. We choose ToxiGen (Hartvigsen et al., 2022) to measure the amount of generation
of toxic language and hate speech across diﬀerent groups.
3.Bias, deﬁned as how model generations reproduce existing stereotypical social biases. We use
BOLD(Dhamala et al., 2021) to study how the sentiment in model generations may vary with
demographic attributes.
We compare the performance of L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle with L/l.sc/a.sc/m.sc/a.sc /one.taboldstyle (Touvron et al., 2023), Falcon (Almazrouei et al.,
2023), and MPT (MosaicML NLP Team et al., 2023) in Table 11. For decoding, we set temperature to 0:1
and use nucleus sampling (Holtzman et al., 2020) with top- pset to 0:9. For TruthfulQA, we present the