NLP 的EDA数据增强技术

1. 同义词替换（SR: Synonyms Replace）：不考虑stopwords，在句子中随机抽取n个词，然后从同义词词典中随机抽取同义词，并进行替换。

2. 随机插入(RI: Randomly Insert)：不考虑stopwords，随机抽取一个词，然后在该词的同义词集合中随机选择一个，插入原句子中的随机位置。该过程可以重复n次。

3. 随机交换(RS: Randomly Swap)：句子中，随机选择两个词，位置交换。该过程可以重复n次。

4. 随机删除(RD: Randomly Delete)：句子中的每个词，以概率p随机删除。

博客：
1、https://zhuanlan.zhihu.com/p/63182132
2、中文语料的EDA数据增强工具 https://www.ctolib.com/zhanlaoban-eda_nlp_for_Chinese.html
3、让机器自动生成文本数据--NLP文本数据增强方法简述 https://zhuanlan.zhihu.com/p/75207641
4、https://blog.nowcoder.net/n/96200041c45340bea50356dff7e655d6

NLP 的EDA数据增强技术相关推荐

NLP中的数据增强技术综述
NLP数据增强技术 1. 词汇替换 Lexical Substitution 基于词典的替换 Thesaurus-based substitution 基于词向量的替换 Word-Embeddings ...
集合啦，NLP数据增强技术！超全资源汇总
点击上方"AI遇见机器学习",选择"星标"公众号重磅干货,第一时间送达白交发自凹非寺量子位报道 | 公众号 QbitAI 数据增强技术已经是CV领 ...
gan 总结数据增强_[NLP]聊一聊，预处理和数据增强技术
在基于margin-loss的句子相似度这个项目中,为了验证想法,找不到开放数据集,因此自己从新浪爱问爬取了数据.自己爬的数据和学界开放的数据对比,数据显得非常脏.这里有三个含义:第一:数据不规范,比 ...
NLP中的数据增强：UDA、EDA
文章目录 NLP数据增强 1. UDA (Unsupervised Data Augmentation)[推荐使用] 2. EDA (Easy Data Augmentation) NLP数据增强 1 ...
NLP的数据增强技术总结
文章目录一.简单的数据增强技术 EDA (Easy Data Augmentation) 即Normal Augmentation Method 1.`同义词替换`(Synonym Replacem ...
数据增强系列（1）top10数据增强技术:综合指南
数据增强技术就是人为地生成真实数据集的不同版本以增加其数据大小.计算机视觉(CV)和自然语言处理 (NLP) 模型使用数据增强策略来处理数据稀缺和数据多样性不足的问题. 数据增强算法可以提高机器学习模 ...
NLP中的数据增强方法综述
论文链接:A Survey of Data Augmentation Approaches for NLP 摘要由于越来越多的研究在低资源领域.新任务和需要大量训练数据的大规模神经网络中,NLP中的 ...
图机器学习中的数据增强技术
文稿整理者:张琳审稿&修改:赵通本人总结来自圣母大学的博士生赵通在深蓝学院分享的"图机器学习中的数据增强技术"公开课.通过介绍图机器学习的概念,发展历程等,以及分享两篇 ...
NLP 中的数据增强
前言数据增强(Data augmentation,DA)是指利用现有的数据生成额外的合成的数据的技术.在训练样本匮乏,标注成本较高时,尝试数据增强方法是很有必要的. Figure 1. 数据 ...

NLP 的EDA数据增强技术

NLP 的EDA数据增强技术相关推荐

最新文章

热门文章