在2.5亿的中文语料上，进行mobie_bert进行预训练。在单卡-A100下迭代100万 steps,训练15天。
{"license": "apache-2.0"}
transformers pytorch mobilebert fill-mask license:apache-2.0 autotrain_compatible endpoints_compatible region:us
TAGS
#transformers #pytorch #mobilebert #fill-mask #license-apache-2.0 #autotrain_compatible #endpoints_compatible #region-us 

在2.5亿的中文语料上，进行mobie_bert进行预训练。在单卡-A100下迭代100万 steps,训练15天。
TAGS
#transformers #pytorch #mobilebert #fill-mask #license-apache-2.0 #autotrain_compatible #endpoints_compatible #region-us 

passage: TAGS
#transformers #pytorch #mobilebert #fill-mask #license-apache-2.0 #autotrain_compatible #endpoints_compatible #region-us 
