回译

自然语言处理过程经常面临缺乏数据，因此需要进行数据增强。其中，回译，即将中文翻译成外文，再翻译回中文的操作可以扩展数据集，是一种好办法。
这里直接提供工具包NLP工具包-回译数据增强，可以直接调用实现回译增强，而且返回的数据非常丰富。

⭐源码 => NLP工具包-回译数据增强

⭐戳这里 => NLP数据增强在线版

样例

这里有丰富的工具接口说明：回译数据增强

>>> import jionlp as jio
>>> xunfei_api = jio.XunfeiApi([{"appid": "5f5846b1","api_key": "52465bb3de9a258379e6909c4b1f2b4b","secret": "b21fdc62a7ed0e287f31cdc4bf4ab9a3"}])
>>> google_api = jio.GoogleApi()
>>> baidu_api = jio.BaiduApi([{'appid': '20200618000498778','secretKey': 'raHalLakgYitNuzGOoB2'},  # 错误的密钥{'appid': '20200618000498778','secretKey': 'raHalLakgYitNuzGOoBZ'}], gap_time=0.5)>>> apis = [baidu_api, google_api, xunfei_api]  # 可根据需要进行扩展>>> back_trans = jio.BackTranslation(mt_apis=apis)
>>> text = '饿了么凌晨发文将推出新功能，用户可选择是否愿意多等外卖员 5 分钟，你愿意多等这 5 分钟吗？'
>>> result = back_trans(text)
>>> print(result)# ['饿了么将在凌晨推出一项新功能。用户可以选择是否愿意额外等待外卖人员5分钟。您想多等5分钟吗？',
#  '《饿了么》将在凌晨推出一档新节目。用户可以选择是否愿意等待餐饮人员多花5分钟。您愿意再等五分钟吗？',
#  'Ele.me将在早晨的最初几个小时启动一个新的功能。用户可以选择是否准备好再等5分钟。你不想再等五分钟吗？',
#  'Eleme将在清晨推出新的功能。用户可以选择是否愿意再等5分钟工作人员。你想再等五分钟吗？']

NLP自然语言处理的文本数据增强——回译（内含python工具包）相关推荐

Pytorch 文本数据分析方法(标签数量分布、句子长度分布、词频统计、关键词词云)、文本特征处理(n-gram特征、文本长度规范)、文本数据增强(回译数据增强法)
日萌社人工智能AI:Keras PyTorch MXNet TensorFlow PaddlePaddle 深度学习实战(不定时更新) 文本数据分析学习目标: 了解文本数据分析的作用. 掌握常用的 ...
NLP任务样本数据不均衡问题解决方案的总结和数据增强回译的实战展示
目录一.数据层面 1.欠采样(under-sampling) 2.过采样二.算法层面 1.权重设置 2.新的损失函数--Focal Loss 三.评价方式四.数据增强实战--回译(back tr ...
【NLP】文本数据分析文本特征处理文本数据增强
一.文本数据分析文本数据分析的作用: 文本数据分析能够有效帮助我们理解数据语料, 快速检查出语料可能存在的问题, 并指导之后模型训练过程中一些超参数的选择. 常用的几种文本数据分析方法: 标签数量分 ...
文本数据增强之回译数据增强
文章目录题目回译数据增强法回译数据增强优势回译数据增强存在的问题前言单句翻译代码运行结果1 数组翻译法代码运行结果2 回译回译结果题目 ''' Description: 文本数据增 ...
2.文本预处理（分词，命名实体识别和词性标注，one-hot，word2vec，word embedding，文本数据分析，文本特征处理，文本数据增强）
文章目录 1.1 认识文本预处理文本预处理及其作用文本预处理中包含的主要环节文本处理的基本方法文本张量表示方法文本语料的数据分析文本特征处理数据增强方法重要说明 1.2 文本处理的基本 ...
nlp文本数据增强_如何使用Texthero为您的NLP项目准备基于文本的数据集
nlp文本数据增强 Natural Language Processing (NLP) is one of the most important fields of study and researc ...
文本数据增强一（概述、中文、同义句生成、enhance、augment、text、nlp）
文本数据增强(扩充增加.中文.同义句生成.enhance.augment.text.nlp) AugmentText 概述 - 相较于图像数据增强,文本数据增强,现在还是有很多问题的: - 往更严格的 ...
文本数据增强三（回译，不同语种间的翻译）
一.中文文本数据增强 (中文文本.同义句生成.扩充,增加,enhance.augment.text.nlp.样本不均衡.语料不够.数据不足.扩充增加),相较于图片,中文文本数据强的效果似乎没那么靠谱( ...
人机交互系统（3.1）——NLP文本数据增强方法
一.数据增强的背景和应用场景随着AI技术的逐步发展,更好的神经网络模型对数据规模的要求也逐步提升.而在分类任务中,若不同类别数据量相差很大,模型则会出现过拟合现象,严重影响预测的正确性. 从广义上来 ...

NLP自然语言处理的文本数据增强——回译（内含python工具包）

回译

⭐源码 => NLP工具包-回译数据增强

⭐戳这里 => NLP数据增强在线版

样例

这里有丰富的工具接口说明：回译数据增强

NLP自然语言处理的文本数据增强——回译（内含python工具包）相关推荐

最新文章

热门文章