NLP-D33-毕设答辩-《人类语言处理》04-05-Location-aware-attentionCTC大数据比赛报名答辩被从源头上暴

—0452虽然今天答辩，还是很早就起了，ppt还想改一遍，论文还想读一下。早上听了会《人类语言处理》04，就是补昨天的坑啦。讲到的是Location-aware attention，主要是说我们直接用attention做语音辨识的话，弹性太大，我们在attention的时候，不让他乱跳了，用上一个时间步z0的在hx附近（一个窗口大小）查询结果一同输入到这次match（z1和hx）中，完成查询。由于考虑到了之前（上一个时间步）的查询，所以加入了过去的、hx附近一些信息，模型就会把注意力一步步跟随hx附近变动的脚步，进行调整。达到attention从左到右移动的效果。
***为什么考虑的是上一个时间步的hx附近的值呢？***我感觉是因为这个时间步的还没算出来hhh！重点在于，考虑的是hx附近某个窗口的查询结果，这个窗口会不断移动，也就把它在移动这件事传递给查询信息，最后就实现“注意力平移”（鹅鹅鹅我起的名字。。。）这件事啦

—0501鹅鹅鹅我要去改下ppt

—0507改完啦~也给负责人发了消息呜呜呜，去写一下今天的计划叭！

—0524答完辩还有好多事情要做哦~但也都很幸福的啦！！！先干个饭，把《人类语言处理》04看完，然后读读自己的论文嘿嘿嘿！

—0552看完了《人类语言处理》04，开05了，讲CTC。LAS有一个好的是可以理解语义，也就是说可以做的aaa与triple a的相互通融；此外，LAS还可以通过硬train一发，直接实现从台语音频到中文汉字的转换。但是LAS也有缺点：必须要听完整句话才能做attention，不能做online的翻译。

看论文突然想起来，自己precision和recall总是傻傻分不清，顺便查一下。
precision是所有预测为正确的里面，真正正确的。
recall是所有真正正确的里面，被预测正确的。

—0642很快就看完了hhh还可以去躺一会，静待花开。

----1251答完辩啦！！！拍完照啦！！！还勇了之前超级fancy的师兄！！！开心！！！不过师兄给了ddl，现在要赶快把答辩记录写一下，然后去看论文了！！！呜呜呜！！加油！！

另外，《人类语言》05里讲了CTC，是一个online model，会有“结巴”的问题。一对一输出，加入了一个“不知道”的“neural”。

哦对，还给舍友买了瓜hhhh！！！现在只能靠瓜和快乐水续命了！去干活咯！

----1340整好了嘿嘿嘿呜呜呜呜，评委老师真的好棒啊，虽然一针见血，但是我好爱啊啊啊啊。开始整比赛了！

太忙了。。。。下午去和小朋友们合照，实验室合照，毕业材料还没写呜呜呜。
读论文的方法论有待提高。

NLP-D33-毕设答辩-《人类语言处理》04-05-Location-aware-attentionCTC大数据比赛报名答辩被从源头上暴相关推荐

NLP：自然语言处理技术之NLP技术实践—自然语言/人类语言“计算机化”的简介、常用方法分类(基于规则/基于统计，离散式/分布式)之详细攻略
NLP:自然语言处理技术之NLP技术实践-自然语言/人类语言"计算机化"的简介.常用方法分类(基于规则/基于统计,离散式/分布式)之详细攻略导读:在NLP的技术实践中,处理自然语 ...
Ubuntu16.04安装Hadoop+Spark+pyspark大数据python开发环境
一,安装jdk1.8.0.144 下载地址:www.oracle.com/technetwork/java/javase/downloads/java-archive-javase8-2177648. ...
NLP-D32-毕设答辩准备-《人类语言处理》03-04
-0446呜呜呜,怎么会有人给我的csdn打赏呢???惊!感谢!!! 今天的主要任务应该准备毕设的答辩&&下阶段学习任务确定&&日常学习 ------0453可以开始该 ...
大数据掀人类文明革命探索更多未知
PS:大数据探索未知领域节选自: http://cloud.51cto.com 里克•斯莫兰(Rick Smolan),全球著名摄影家,在他的镜头中,当下的"大数据",是人们的面 ...
大数据场景中语言虚拟机的应用和挑战
点击上方蓝字关注我们大数据场景中语言虚拟机的应用和挑战吴明瑜1,2, 陈海波1,2, 臧斌宇1,2 1 领域操作系统教育部工程研究中心,上海 200240 2 上海交通大学软件学院并行与分布式系统 ...
学习大数据需要什么语言基础
Python易学,人人都可以掌握,如果零基础入门数据开发行业的小伙伴,可以从Python语言入手. Python语言简单易懂,适合零基础入门,在编程语言排名上升最快,能完成数据挖掘.机器学习.实时计算 ...
【2023年更新】1000个大数据/人工智能毕设选题推荐
前言正值毕业季我看到很多同学都在为自己的毕业设计发愁 Maynor在网上搜集了1000个大数据的毕设选题,希望对大家有帮助- 适合大数据毕业设计的项目,完全可以作为本科生当前较新的毕业设计题目选择方 ...
NLP≠NLU，机器学习无法理解人类语言
来源:图灵人工智能编译:吴彤校对:暮编辑:琰琰长期以来,我们一直在与机器沟通:编写代码--创建程序--执行任务. 然而,这些程序并非是用人类"自然语言"编写的,像Java ...
【NLP】为元宇宙拼了？FaceBook推出强大的多语言模型，试图理解所有人类语言...
作者:MetaAI 译者:张雨嘉原文标题:XLS-R: Self-supervised speech processing for 128 languages 语言交流是人们日常生活中最常用 ...

NLP-D33-毕设答辩-《人类语言处理》04-05-Location-aware-attentionCTC大数据比赛报名答辩被从源头上暴

NLP-D33-毕设答辩-《人类语言处理》04-05-Location-aware-attentionCTC大数据比赛报名答辩被从源头上暴相关推荐

最新文章

热门文章