Llama 2: オープンファウンデーションとファインチューンされたチャットモデル
モデルは、対応するサイズのMPTモデルを除くすべてのカテゴリーでコードベンチマークを上回ります。ファルコンモデルについては、L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 7B および 34B は、すべてのベンチマークのカテゴリーでファルコン 7B および 40B モデルを上回ります。
さらに、L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B モデルは、すべてのオープンソースモデルを上回します。
オープンソースモデルに加えて、L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B の結果をクローズドソースモデルと比較します。表4に示されているように、L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B は、MMLU と GSM8K において GPT-3.5（OpenAI、2023）に匹敵しますが、コーディングベンチマークでは大きな差があります。L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B の結果は、PaLM（540B）（Chowdhery et al.）よりも同等またはそれ以上です。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
modelsoutperformMPTmodelsofthecorrespondingsizeonallcategoriesbesidescodebenchmarks. Forthe
Falcon models, L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 7B and 34B outperform Falcon 7B and 40B models on all categories of benchmarks.
Additionally, L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B model outperforms all open-source models.
In addition to open-source models, we also compare L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B results to closed-source models. As shown
in Table 4, L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70B is close to GPT-3.5 (OpenAI, 2023) on MMLU and GSM8K, but there is a signiﬁcant
gaponcodingbenchmarks. L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle 70BresultsareonparorbetterthanPaLM(540B)(Chowdheryetal.,