Llama 2: オープンファンデーションと微調整されたチャットモデル
Guilherme Penedo、Quentin Malartic、Daniel Hesslow、Ruxandra Cojocaru、Alessandro Cappelli、Hamza
Alobeidli、BaptistePannier、EbtesamAlmazrouei、およびJulienLaunay。ファルコンのための洗練されたウェブデータセット：ウェブデータのみでキュレーションされたコーパスを上回る、2023年。
Reiner Pope、Sholto Douglas、Aakanksha Chowdhery、Jacob Devlin、James Bradbury、Anselm Levskaya、Jonathan Heek、Kefan Xiao、Shivani Agrawal、およびJeﬀ Dean。効率的なスケーリングトランスフォーマー推論、2022年。
Jack W. Rae、Sebastian Borgeaud、Trevor Cai、Katie Millican、Jordan Hoﬀmann、Francis Song、John Aslanides、Sarah Henderson、Roman Ring、Susannah Young、Eliza Rutherford、Tom Hennigan、Jacob Menick、Albin Cassirer、Richard Powell、George van den Driessche、Lisa Anne Hendricks、Maribeth Rauh、Po-Sen
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
Guilherme Penedo, Quentin Malartic, Daniel Hesslow, Ruxandra Cojocaru, Alessandro Cappelli, Hamza
Alobeidli,BaptistePannier,EbtesamAlmazrouei,andJulienLaunay. Thereﬁnedwebdatasetforfalcon
llm: Outperforming curated corpora with web data, and web data only, 2023.
Reiner Pope, Sholto Douglas, Aakanksha Chowdhery, Jacob Devlin, James Bradbury, Anselm Levskaya,
Jonathan Heek, Kefan Xiao, Shivani Agrawal, and Jeﬀ Dean. Eﬃciently scaling transformer inference, 2022.
Jack W. Rae, Sebastian Borgeaud, Trevor Cai, Katie Millican, Jordan Hoﬀmann, Francis Song, John Aslanides,
Sarah Henderson, Roman Ring, Susannah Young, Eliza Rutherford, Tom Hennigan, Jacob Menick, Albin Cassirer, Richard Powell, George van den Driessche, Lisa Anne Hendricks, Maribeth Rauh, Po-Sen