原创<br> 8种优秀预训练模型大盘点，NLP应用so easy！(11)

2019-04-01

难以置信，是吧？

开发人员已经发布了一个更小版本的GPT-2，供研究人员和工程师测试。原始模型有15亿个参数——开放源码示例模型有1.17亿个参数。

学习和阅读更多GPT-2有关信息的资源：

OpenAI的官方博客文章

https://openai.com/blog/better-language-models/

GPT-2的预训练模型

https://github.com/openai/gpt-2

研究论文

https://d4mucfpksywv.cloudfront.net/better-language-models/language-models.pdf

词嵌入（word embedding）模型

我们使用的大多数机器学习和深度学习算法都无法直接处理字符串和纯文本。这些技术要求我们将文本数据转换为数字，然后才能执行任务（例如回归或分类）。

推荐阅读

上一篇：第11批游戏版号下发：67款游戏获批腾讯网易继续缺席

下一篇：OPPO Reno最大亮点均是它拍摄技术真的可以带动手机行业？