首页 > 其他 > 详细

Task 04 打卡

时间:2020-02-19 21:05:35      阅读:51      评论:0      收藏:0      [点我收藏+]

机器翻译及相关技术

翻译前准备

清洗(大小写转换 标点符号)

分词(每个单词分开,生成一一对应的列表)

建立词典(根据词频进行统计 单词对应唯一id)

Encoder-Decoder

encoder将输入转化为隐藏状态,再由decoder将隐藏状态输出为翻译后语言。

sequence to sequence模型

运用到循环神经网络对下一个单词进行预测

将单词翻译成对应的词向量

依次根据每一个位置的局部最优解选取该位置的单词(贪婪搜索)

束搜索相比贪婪搜索增加了束宽(beam size)的超参数\(k\),每次选取\(k\)个最优词

Task 04 打卡

原文:https://www.cnblogs.com/amber-cui/p/12332895.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!