Llama 2: オープンファウンデーションとファインチューンされたチャットモデル
大規模言語モデルのアライメントの民主化。arXivプリントarXiv:2304.07327、2023年。
Tomasz Korbak、Kejian Shi、Angelica Chen、Rasika Bhalerao、Christopher L Buckley、Jason Phang、Samuel R
Bowman、およびEthan Perez。人間の選好で言語モデルを事前学習する。arXivプリント
arXiv:2302.08582、2023年。
TakuKudoandJohnRichardson。Sentencepiece：シンプルで言語に依存しないサブワードトークナイザー
およびニューラルテキスト処理のデトークナイザー、2018年。
SachinKumar、VidhishaBalachandran、LucilleNjoo、AntoniosAnastasopoulos、およびYuliaTsvetkov。言語
生成モデルは害を引き起こす可能性がある：では、何ができるのか？実践的な調査。arXivプリント
arXiv:2210.07700、2022年。
Tom Kwiatkowski、Jennimaria Palomaki、Olivia Redﬁeld、Michael Collins、Ankur Parikh、Chris Alberti、
Danielle Epstein、Illia Polosukhin、Jacob Devlin、Kenton Lee、その他。自然な質問：質問応答研究のためのベンチマーク。Association for Computational Linguistics Transactions、7：453–466、2019年。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
democratizing large language model alignment. arXiv preprint arXiv:2304.07327 , 2023.
Tomasz Korbak, Kejian Shi, Angelica Chen, Rasika Bhalerao, Christopher L Buckley, Jason Phang, Samuel R
Bowman, and Ethan Perez. Pretraining language models with human preferences. arXiv preprint
arXiv:2302.08582 , 2023.
TakuKudoandJohnRichardson. Sentencepiece: Asimpleandlanguageindependentsubwordtokenizer
and detokenizer for neural text processing, 2018.
SachinKumar,VidhishaBalachandran,LucilleNjoo,AntoniosAnastasopoulos,andYuliaTsvetkov. Language
generation models can cause harm: So what can we do about it? an actionable survey. arXiv preprint
arXiv:2210.07700 , 2022.
Tom Kwiatkowski, Jennimaria Palomaki, Olivia Redﬁeld, Michael Collins, Ankur Parikh, Chris Alberti,
Danielle Epstein, Illia Polosukhin, Jacob Devlin, Kenton Lee, et al. Natural questions: a benchmark for
question answering research. Transactions of the Association for Computational Linguistics , 7:453–466, 2019.