中秋佳节,用 AI 为家人定制一首诗( 五 )
因此,要用人工智能的方法产生中国古典诗歌是比较复杂的。华为诺亚方舟实验室的科学家,通过研究给定形式和特定主题的诗歌生成问题,提出了基于预训练模型 GPT 的诗歌生成方法。
方法具体细节为:「乐府 AI」以 Transfomer 为基础模型,基于 BERT 源代码,实现了自己的 GPT 模型。其 Transformer 大小的配置与 BERT-Base 相同,还采用了 BERT 中发布的标记化脚本和中文词汇。对于文本生成,他们实现了截断的 top-k 采样来生成不同的文本。
三首「乐府 AI」生成的诗歌,与一首诗歌真迹
总的来说,「乐府 AI」学作诗一共分为以下三个阶段:
第一阶段:数据处理
华为诺亚方舟实验室的 GPT 模型,以中文新闻语料库进行训练,数据训练主要分为预培训和微调两个阶段。为了进行微调,他们收集了公开的中国古典诗歌,然后将样本诗转换为格式化的序列。
推荐阅读
- 暴雪|《暗黑2重制版》BUG原因! 官方怪玩家人数太多
- 游戏王|游戏王决斗链接:比英雄还魂?宝玉兽来了,见见我的家人们吧
- fifa22|《FIFA22》提前试玩放出,各大主播中秋抽卡抽了个寂寞
- 梦幻西游|梦幻西游:中秋节喜提至尊豪礼,一夜之间获百万身家,他用60元逆袭人生
- |当嫦娥遇上超跑《极限竞速:地平线4》英伦过中秋狂飙不停歇
- 梦幻西游|梦幻西游:中秋深夜炸琴音无级别,开300万以下被拉黑,天降大运
- 沈梦溪|沈梦溪中秋皮肤口碑只有5分,玩家点评全皮肤,飓风号只排第三
- 李白|赛年终章来袭,李白免费史诗即将亮相,时之奇旅疑似中秋免费赠送
- 神武4|神武4电脑版:玲珑玉兔适合猛男?2021中秋活动补属性有必要!
- 拳头|中秋节也要被韩国说成本土文化?LOL新表情激起全球玩家怒火!