Llama 2: オープンファンデーションと微調整されたチャットモデル
真実でありながら情報提供がされる世代の割合（割合が高いほど良い）。ToxiGenについては、有害な世代の割合を提示します（割合が小さいほど良い）。
ベンチマークは、モデルの能力と振る舞いの概要を提供し、モデルが人々や現実世界の結果に与える影響を完全に包括的に理解するためのものではありません。それにはエンドツーエンドの製品展開の研究が必要です。特定のコンテキストでの偏見や他の社会問題を理解するためには、さらなるテストと緩和が必要です。そのためには、BOLDデータセット（人種、宗教、性別）に加えて、より多くのグループを対象としたテストが必要になるかもしれません。LLMが統合され展開されるにつれて、これらの重要な社会問題にポジティブな影響を与える可能性を高める研究を継続することを期待しています。
4.2 安全な微調整
このセクションでは、安全な微調整へのアプローチ、安全カテゴリ、注釈ガイドライン、および安全リスクを緩和するために使用する技術について説明します。セクション3で説明されている一般的な微調整方法に類似したプロセスを採用していますが、安全上の懸念に関連するいくつかの注目すべき違いがあります。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
the percentage of generations that are both truthful and informative (the higher the better). For ToxiGen, we
present the percentage of toxic generations (the smaller, the better).
Benchmarks give a summary view ofmodel capabilities and behaviors that allow us to understand general
patternsinthemodel,buttheydonotprovideafullycomprehensiveviewoftheimpactthemodelmayhave
onpeopleorreal-worldoutcomes;thatwouldrequirestudyofend-to-endproductdeployments. Further
testing and mitigation should be done to understand bias and other social issues for the speciﬁc context
in which a system may be deployed. For this, it may be necessary to test beyond the groups available in
theBOLDdataset(race,religion,andgender). AsLLMsareintegratedanddeployed,welookforwardto
continuing research that will amplify their potential for positive impact on these important social issues.
4.2 Safety Fine-Tuning
In this section, we describe our approach to safety ﬁne-tuning, including safety categories, annotation
guidelines,andthetechniquesweusetomitigatesafetyrisks. Weemployaprocesssimilartothegeneral
ﬁne-tuning methods as described in Section 3, with some notable diﬀerences related to safety concerns.