Llama 2: オープンファンデーションとファインチューンされたチャットモデル
L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.scの改善を行い、コミュニティが当社の作業に基づいて構築し、LLMの責任ある開発に貢献できるようにします。
同等の貢献、対応する著者：{tscialom, htouvron}@meta.com
y第二著者
すべての著者の貢献は、セクションA.1.arXiv:2307.09288v2 [cs.CL] 2023年7月19日に記載されています
目次
1. はじめに 3
2. プリトレーニング 5
2.1 プリトレーニングデータ 5
2.2 トレーニングの詳細 5
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
improvements of L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc in order to enable the community to build on our work and
contribute to the responsible development of LLMs.
Equal contribution, corresponding authors: {tscialom, htouvron}@meta.com
ySecond author
Contributions for all the authors can be found in Section A.1.arXiv:2307.09288v2  [cs.CL]  19 Jul 2023
Contents
1 Introduction 3
2 Pretraining 5
2.1 Pretraining Data . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5
2.2 Training Details . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5