Llama 2: オープンファンデーションと微調整されたチャットモデル
トレーニングの指示について、私たちはいくつかの合成的な制約を作成し、サンプリングしました：趣味（「例えばテニスを楽しむ」）、言語（「例えばフランス語を話す」）、または公人（「例えばナポレオンを演じる」）。趣味や公人のリストを取得するために、トレーニング中に遭遇していない人物についてモデルに尋ねることを避けるために、L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.scにリストを生成するように求めました。指示とモデルの知識との不一致を避けるためです。指示をより複雑で多様にするために、上記の制約をランダムに組み合わせて最終的な指示を構築しました。トレーニングデータの最終的なシステムメッセージを構築する際に、元の指示を半分の時間を簡潔にするように変更しました。例えば、「今後は常にナポレオンとして行動する」->
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
For the training instructions, we created a few synthetic constraints to sample from: Hobbies ( “You enjoy
e.g. Tennis” ),Language ( “Speakine.g. French” ),or PublicFigure( “Actase.g. Napoleon” ). Toobtainthelists
of hobbies and public ﬁgures, we asked L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc to generate it, avoiding a mismatch between the
instructionandmodelknowledge(e.g.,askingthemodeltoactassomeoneithadnotencounteredduring
training). Tomaketheinstructionsmorecomplexanddiverse,weconstructtheﬁnalinstructionbyrandomly
combining the above constraints. When constructing the ﬁnal system message for the training data, we also
16
modifytheoriginalinstructionhalfofthetimetobelessverbose,e.g., “AlwaysactasNapoleonfromnow” ->