ラマ2：オープンファウンデーションとファインチューンされたチャットモデル
以下のモデルを一般向けに研究および商業利用のために公開します‡：
1. L/l.sc/a.sc/m.sc/a.sc /two.taboldstyleの更新版で、新たな公開データのミックスでトレーニングされました。また、事前トレーニングコーパスのサイズを40％増やし、モデルのコンテキスト長を2倍にし、グループ化されたクエリアテンションを採用しました（Ainslieetal.、2023）。 L/l.sc/a.sc/m.sc/a.sc /two.taboldstyleの7B、13B、70Bパラメータのバリアントを公開します。また、34Bのバリアントもトレーニングしましたが、本論文で報告していますが、公開はしません§。
2. L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc は、対話の使用事例に最適化されたL/l.sc/a.sc/m.sc/a.sc /two.taboldstyleのファインチューニングバージョンです。私たちはそれを公開します
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
We are releasing the following models to the general public for research and commercial use‡:
1.L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle,anupdatedversionof L/l.sc/a.sc/m.sc/a.sc /one.taboldstyle,trainedonanewmixofpubliclyavailabledata. Wealso
increasedthesizeofthepretrainingcorpusby40%,doubledthecontextlengthofthemodel,and
adoptedgrouped-queryattention(Ainslieetal.,2023). Wearereleasingvariantsof L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle with
7B,13B,and70Bparameters. Wehavealsotrained34Bvariants,whichwereportoninthispaper
but are not releasing.§
2.L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc , a ﬁne-tuned version of L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle that is optimized for dialogue use cases. We release