Llama 2: オープンファンデーションとファインチューンされたチャットモデル
広範囲の分野にわたる専門知識を必要とする複雑な推論タスクを実行し、プログラミングや創造的な執筆などの専門領域を含む幅広い分野での使用が可能です。これらのモデルは直感的なチャットインターフェースを通じて人間との対話を可能にし、一般の利用者による急速かつ広範な採用をもたらしました。
LLMの能力は、訓練方法の見かけ上の単純な性質を考えると驚くほどです。自己教師付きデータの広範なコーパスで事前学習された自己回帰トランスフォーマーは、人間の好みとの整合性を強化学習と人間のフィードバックによる手法などを用いて調整します。訓練方法は単純ですが、高い計算要件のため、LLMの開発はわずかなプレイヤーに限定されています。BLOOM（Scao et al.、2022）、LLaMa-1（Touvron et al.、2023）、Falcon（Penedo et al.、2023）などの事前学習済みLLMの公開が行われていますが、これらのモデルはGPT-3（Brown et al.、2020）やChinchilla（Hoﬀmann et al.、2022）などの閉じた事前学習済み競合モデルと同等の性能を持っていますが、ChatGPT、BARD、Claudeなどの閉じた「製品」LLMの代替としては適していません。これらの閉じた製品LLMは、人間のニーズに合わせて細かく調整されています。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
complex reasoning tasks requiring expert knowledge across a wide range of ﬁelds, including in specialized
domains such as programming and creative writing. They enable interaction with humans through intuitive
chat interfaces, which has led to rapid and widespread adoption among the general public.
ThecapabilitiesofLLMsareremarkableconsideringtheseeminglystraightforwardnatureofthetraining
methodology. Auto-regressivetransformersarepretrainedonanextensivecorpusofself-superviseddata,
followed by alignment with human preferences via techniques such as Reinforcement Learning with Human
Feedback(RLHF).Althoughthetrainingmethodologyissimple,highcomputationalrequirementshave
limited the development of LLMs to a few players. There have been public releases of pretrained LLMs
(such as BLOOM (Scao et al., 2022), LLaMa-1 (Touvron et al., 2023), and Falcon (Penedo et al., 2023)) that
match the performance of closed pretrained competitors like GPT-3 (Brown et al., 2020) and Chinchilla
(Hoﬀmann et al., 2022), but none of these models are suitable substitutes for closed “product” LLMs, such
asChatGPT,BARD,andClaude. TheseclosedproductLLMsareheavilyﬁne-tunedtoalignwithhuman