Llama 2: オープンファウンデーションとファインチューンされたチャットモデル
およびAlpaca（Taorietal。、2023）は、合成指示を用いたトレーニングに独自のアプローチを採用しています（Honovich
et al.、2022; Wang et al.、2022）。しかし、これらのモデルは有望な面を示しているものの、まだクローズドソースの対応モデルには及ばないという課題が残っています。
指示チューニング。Weietal。（2021）は、様々なデータセットでLLMをファインチューニングすることで未知のタスクでのゼロショットパフォーマンスを得ました。Chungetal。（2022）およびLongpreetal。（2023）は、タスクの数、モデルサイズ、プロンプト設定などの要素としての指示チューニングの影響を調査しました。指示チューニングに使用されるプロンプトは、人間によって作成されることも、LLM自体によって作成されることもあります（Zhouetal。、2022）、そして、フォローアップの指示は初期の生成物をより有用で魅力的で偏りのないものにするために使用されることがあります（Gangulietal。、2023; Madaan
et al.、2023）。指示チューニングに関連するアプローチとしては、思考の連鎖プロンプティング（Wei et al.、2022b）があります。これは、複雑な問題が与えられた際にモデルにその推論を説明するよう促すことで、最終的な回答が正しい可能性を高めることを目的としています。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
andAlpaca(Taorietal.,2023)adoptingauniqueapproachtotrainingwithsyntheticinstructions(Honovich
et al., 2022; Wang et al., 2022). However, while these models show promise, they still fall short of the bar set
by their closed-source counterparts.
InstructionTuning. Weietal.(2021)obtainedzero-shotperformanceonunseentasksbyﬁne-tuningLLMs
onnumerousdatasets. Chungetal.(2022)andLongpreetal.(2023)investigatetheimpactofinstruction
tuningasafunctionofnumberoftasks,modelsize,promptsettings,etc. Promptsusedforinstructiontuning
canbecreatedbyhumansorbyLLMsthemselves(Zhouetal.,2022),andfollow-upinstructionscanbeused
toreﬁneinitialgenerationstomakethemmoreuseful,engaging,andunbiased(Gangulietal.,2023;Madaan
et al., 2023). An approach related to instruction tuning is chain-of-thought prompting (Wei et al., 2022b), in
whichmodels areprompted toexplain theirreasoningwhen givena complexproblem, inorder toincrease
the likelihood that their ﬁnal answer is correct.