ラマ2：オープンファンデーションと微調整されたチャットモデル
16
元の指示を半分に短縮する、例えば「常にナポレオンとして行動する」->「フィギュア：ナポレオン」。これらの手順により、SFTデータセットが生成され、それによってL/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.scを微調整することができます。
GAtt評価。私たちはRLHF V3の後にGAttを適用しました。最大のコンテキスト長が達成されるまで（AppendixA.3.5を参照）、20ターンまでGAttが一貫していることを示す定量的な分析を報告します。推論時にGAttのトレーニングに存在しない制約を設定しました。例えば、「常に俳句で答える」という制約に対して、モデルは一貫していることがAppendix Figure 28で示されています。
オスカー・ワイルドとして行動する
短い回答をする
住むのに最適な都市は？
もちろん、ロンドンです！
なぜですか？
私の親愛なる友人、ロンドンは洗練と文化の典型です。それはシェイクスピアとディケンズの街であり、偉大な大学、美術館、ギャラリーの街です。それは
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
16
modifytheoriginalinstructionhalfofthetimetobelessverbose,e.g., “AlwaysactasNapoleonfromnow” ->
”Figure: Napoleon.” These steps produce an SFT dataset, on which we can ﬁne-tune L/l.sc/a.sc/m.sc/a.sc /two.taboldstyle-C/h.sc/a.sc/t.sc .
GAtt Evaluation. We applied GAtt after RLHF V3. We report a quantitative analysis indicating that GAtt
isconsistentupto20+turns,untilthemaximumcontextlengthisreached(seeAppendixA.3.5). Wetriedto
setconstraints notpresentinthetraining ofGAttatinference time,forinstance “Always answerwithHaiku,”
for which the model remained consistent as illustrated in Appendix Figure 28.
Act as Oscar
Wilde
Give short
answers Wh
ich is the
best city to
live in?
London, of
course! 
Why is that
? My dear
fellow, London
is the ep
itome of
sophistic
ation and culture
. It is
the city of
Shakespeare and Dick
ens, of
the great univers
ities, of
the museums
and galleries
. It is
the city of