原创<br> 8种优秀预训练模型大盘点,NLP应用so easy!(13)
让我们花点时间来了解一下ELMo是如何工作的。回想一下我们之前讨论过的双向语言模型。从这篇文章中我们能够得到提示,“ELMo单词向量是在双层双向语言模型(biLM)的基础上进行计算的。这个biLM模型有两层叠加在一起,每一层都有2个通道——前向通道和后向通道:
ELMo单词表示考虑计算词嵌入(word embedding)的完整输入语句。因此,“read”这单词在不同的上下文中具有不同的ELMo向量。这与旧版的词嵌入(word embedding)大不相同,旧版中无论在什么样的上下文中使用单词“read”,分配给该单词的向量是相同的。
学习和阅读更多ELMo有关信息的资源:
循序渐进的NLP指南,了解ELMo从文本中提取特征
https://www.analyticsvidhya.com/blog/2019/03/learn-to-use-elmo-to-extract-features-from-text/?utm_source=blog&utm_medium=top-pretrained-models-nlp-article
推荐阅读
- 精灵宝可梦|《宝可梦》人称神兽版本“秃鹰娜”,伽勒尔火焰鸟的表现多优秀?
- 单机|游戏《原神》,算是挺优秀的游戏了,就是获取资源有些慢
- 狄仁杰|狄仁杰是现在的T0射手?强度稳定,技能机制优秀
- 阴阳师|外媒评有史以来最优秀的10款恐怖游戏,谁是你的童年阴影
- 机战|机战30:原创女主三叶收获极高评价 夏亚坦言这是自己的新妈妈
- |被埋没的优秀大作,还没有走向热榜,却已经过时了
- 剑网3|几部优秀的游戏类文!虚拟!现实!
- fate grand order|fgo四星骑阶灰姑娘龙娘强度初评公开 骑阶金时的优秀替代打手
- 伐木工|《明日之后》萌新学院:末世优秀伐木工都是怎么炼成的?
- 三国杀|三国杀:不是神将的神将!这些武将堪称强大,每一个都是那么优秀