ラマ2：オープンファンデーションとファインチューンされたチャットモデル
AureliaGuy、ChrisJones、JamesBradbury、MatthewJohnson、BlakeHechtman、LauraWeidinger、Iason
Gabriel、WilliamIsaac、EdLockhart、SimonOsindero、LauraRimell、ChrisDyer、OriolVinyals、Kareem
Ayoub、Jeﬀ Stanway、Lorrayne Bennett、Demis Hassabis、Koray Kavukcuoglu、およびGeoﬀrey Irving。言語モデルのスケーリング：トレーニングゴファーからの手法、分析、および洞察、2022年。
Pranav Rajpurkar、Robin Jia、およびPercy Liang。知っていることと知らないこと：SQuADの回答不能な質問、arXivプレプリントarXiv：1806.03822、2018年。
Vinay Venkatesh Ramasesh、Aitor Lewkowycz、およびEthan Dyer。ニューラルネットワークにおけるスケールの影響：国際学習表現会議、2021年における壊滅的な忘却への影響。
StephenRoller、Y-LanBoureau、JasonWeston、AntoineBordes、EmilyDinan、AngelaFan、DavidGunning、Da Ju、Margaret Li、Spencer Poﬀ、その他。オープンドメインの対話エージェント：現在の進捗、オープン
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
AureliaGuy,ChrisJones,JamesBradbury,MatthewJohnson,BlakeHechtman,LauraWeidinger,Iason
Gabriel,WilliamIsaac,EdLockhart,SimonOsindero,LauraRimell,ChrisDyer,OriolVinyals,Kareem
Ayoub, Jeﬀ Stanway, Lorrayne Bennett, Demis Hassabis, Koray Kavukcuoglu, and Geoﬀrey Irving. Scaling
language models: Methods, analysis & insights from training gopher, 2022.
Pranav Rajpurkar, Robin Jia, and Percy Liang. Know what you don’t know: Unanswerable questions for
squad.arXiv preprint arXiv:1806.03822 , 2018.
Vinay Venkatesh Ramasesh, Aitor Lewkowycz, and Ethan Dyer. Eﬀect of scale on catastrophic forgetting in
neural networks. In International Conference on Learning Representations , 2021.
StephenRoller,Y-LanBoureau,JasonWeston,AntoineBordes,EmilyDinan,AngelaFan,DavidGunning,
Da Ju, Margaret Li, Spencer Poﬀ, et al. Open-domain conversational agents: Current progress, open