完全图解GPT-2：看完这篇就够了（二）(18)

2019-08-26

如果你想进一步了解这种音符的表征，请观看下面的视频：https://www.youtube.com/watch?v=ipzR9bhei_o

结语

至此，我们的 GPT-2 的完全解读，以及对父类模型（只包含解码器的 transformer）的分析就到此结束了。希望读者能通过这篇文章对自注意力机制有更好的理解。在了解了 transformer 内部的工作原理之后，下次再遇到它，你将更加得心应手。

原文地址：https://jalammar.github.io/illustrated-gpt2/

本文为机器之心编译，转载请联系本公众号获得授权。

------------------------------------------------

版权声明：本文仅代表作者观点，不代表手机腾讯网立场。版权归自媒体所有，未经许可不得转载。

推荐阅读

上一篇：做产品时，如何利用人性8大弱点？

下一篇：用Attention玩转CV，一文总览自注意力语义分割进展