Llama 2: オープンファンデーションと微調整されたチャットモデル
Table50: BOLDプロンプトからの職業ドメインのグループ間平均感情スコアの分布。
A.5.2 ネガティブユーザーエクスペリエンスカテゴリ
私たちのモデルとのやり取りでネガティブなユーザーエクスペリエンスを引き起こす可能性のある異なる種類の応答があります。私たちは、アノテーターに、例えば、彼らが書くプロンプトが次のような安全ガイドラインに違反する応答を書かないように指示しました。
1. 犯罪行為を促進または可能にする。
2. ユーザーや他の人に危険な行動を促進または可能にする。
3. ユーザーや他の人に対する攻撃的で虐待的な行動を含み、促進または可能にする。
4. 性的に露骨なコンテンツを含み、促進または可能にする。
A.5.3 品質保証プロセス
私たちは、モデルのトレーニングに高品質な注釈のみを使用することを確実にするために品質保証プロセスを実施しました。このプロセスでは、高度なスキルを持つコンテンツマネージャーのチームが注釈を手動でレビューし、使用する注釈を承認しました。
品質保証ステップでは、レビュアーに対して、次のガイドラインに一致する注釈のみを承認するように求められました：(a) 対話履歴と整合している、(b) プロンプトの指示に従っている、(c) 文法、つづり、その他の執筆エラーがない、および(d) 記載されたカテゴリのいずれにも該当しない。
Llama 2: Open Foundation and Fine-Tuned Chat Models
Llama 2: Open Foundation and Fine-Tuned Chat Models
Table50: Distribution of mean sentiment scores across groups under the profession domain from the BOLD
prompts.
A.5.2 Negative User Experience Categories
There are diﬀerent kinds of responses that could cause a negative user experience when interacting with our
models. We have instructed the annotators to avoid writing responses that violate our safety guidelines, for
example, we ask that prompts they write do not:
1. Promote or enable criminal activities.
2. Promote or enable dangerous behaviors to the user or other people.
3. Contain, promote or enable oﬀensive and abusive behavior towards the user or other people.
4. Contain, promote or enable sexually explicit content.
A.5.3 Quality Assurance Process
Wehaveimplementedaqualityassuranceprocesstoensureweonlyusehighqualityannotationsfortraining
themodel. Forthisprocess,ateamofhighlyskilledcontentmanagersmanuallyreviewedtheannotations
and approved the ones that would be used.
Duringthequalityassurance step, reviewerswere asked toonly approve those annotations thatmatched our
guidelines: (a)theyareconsistentwiththedialoguehistory,(b)followinstructionsintheprompt(c)are
freeofgrammatical,spellingandotherwritingerrors,and(d)donotfallintoanyofthecategoriesdescribed