逆天语言模型GPT-2最新开源:345M预训练模型和1.5B参数都来了

逆天语言模型GPT-2最新开源:345M预训练模型和1.5B参数都来了

逆天的语言模型GPT-2又有最新开源进展了!

GPT-2,这个造假新闻编故事以假乱真,能完成阅读理解、常识推理、文字预测、文章总结等多种任务的AI模型,从诞生开始就引起大量关注。

但因一开始只放出了117M的小型预训练模型,OpenAI还被网友调侃为“ClosedAI”。OpenAI表示,不是不开源,而是时候未到。

刚刚,OpenAI宣布将其345M的预训练模型开源,外加其Transformer的1.5B参数。

这一次,你也可以将最强语言模型,用到自己的项目中了。

逆天语言模型GPT-2最新开源:345M预训练模型和1.5B参数都来了

称霸各大语言建模任务语言模型GPT-2在语言建模任务中,简直是逆天般的存在。

作为一个没有经过任何领域数据专门训练的模型,它的表现比那些专为特定领域打造的模型还要好,横扫各大语言建模任务。

推荐阅读