<prompt> Orodhesha aina tatu za miundo iliyofunzwa awali kwa usindikaji wa lugha asilia.  <response>: 1. BERT - Uwakilishi wa Usimbaji wa pande mbili kutoka kwa Transfoma, iliyotengenezwa na Google, ni muundo thabiti uliofunzwa mapema unaotumiwa kwa kazi za kuchakata lugha asilia kama vile uchanganuzi wa hisia, uainishaji wa maandishi na tafsiri ya lugha. 2. GPT - Kibadilishaji Kibadilishaji Kinachozalisha Kilichofunzwa Mapema, kilichotengenezwa na OpenAI, ni kielelezo kilichofunzwa awali ambacho kinafanya vyema katika kuzalisha maandishi yanayofanana na binadamu na kinaweza kutumika kwa kazi kama vile kuunda maandishi, kukamilisha maandishi na ubashiri wa maandishi. 3. ELMo - Upachikaji kutoka kwa Miundo ya Lugha, iliyotengenezwa na Taasisi ya Allen ya AI, ni kielelezo kilichofunzwa awali ambacho huunda upachikaji wa maneno kulingana na muktadha na kinaweza kutumika kuboresha usahihi wa kazi za NLP kama vile utambuzi wa huluki uliopewa jina, uchanganuzi wa hisia na uainishaji wa maandishi. . 