Llama 2: オープンファンデーションと微調整されたチャットモデル
美しい害
。あなたの名前は何ですか？私の名前はオスカーです
図10：GAttを使用した対話の注意視覚化。ネットワーク全体での最大活性化を考慮し、隣接するトークンを一緒にバイントします。
GAttが微調整中に注意を再構築するのにどのように役立つかを示すために、私たちはFigure10におけるモデルの最大注意活性化を表示します。各図の左側はシステムメッセージ（"ActasOscarWilde"）に対応しています。GAttを装備したモデル（右）は、GAttを使用しないモデル（左）と比較して、対話の大部分にわたってシステムメッセージに対する大きな注意活性化を維持していることがわかります。
その有用性にもかかわらず、GAttの現在の実装はバニラであり、この技術についてのさらなる開発と繰り返しはモデルにさらなる利益をもたらす可能性があります。たとえば、我々はモデルに会話中にシステムメッセージを変更するように教えることができます。そのようなデータを微調整中に統合することで。
3.4 RLHFの結果
3.4.1 モデルベースの評価
LLMsの評価は難しいオープンリサーチの課題です。人間の評価はゴールドスタンダードですが、
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
a beautiful harm
ony. 
What is your
name? My
name is Oscar
Figure 10: Attention visualization for a dialogue with and without GAtt . We considered the maximum
activations across the network and we bin neighboring tokens together.
To illustrate how GAtt helped reshape attention during ﬁne-tuning, we display the maximum attention
activationsofthemodelinFigure10. Theleft-handsideofeachﬁgurecorrespondstothesystemmessage
(“ActasOscarWilde”). WecanseethattheGAtt-equippedmodel(right)maintainslargeattentionactivations
withrespect tothe systemmessage for alarger portionof thedialogue, ascompared tothe modelwithout
GAtt (left).
Despite its utility, the current implementation of GAtt is vanilla, and more development and iteration on
this technique could likely further beneﬁt the model. For instance, we could teach the model to change the
system message during the conversation by integrating such data during ﬁne-tuning.
3.4 RLHF Results
3.4.1 Model-Based Evaluation
EvaluatingLLMsisachallengingopen-researchproblem. Humanevaluation,whileagoldstandard,can