机器学习 - 语音识别

语音识别

声音的本质是震动，震动的本质是位移关于时间的函数，波形文件(.wav)中记录了不同采样时刻的位移。

通过傅里叶变换，可以将时间域的声音函数分解为一系列不同频率的正弦函数的叠加，通过频率谱线的特殊分布，建立音频内容和文本的对应关系，以此作为模型训练的基础。

案例：

import numpy as np
import numpy.fft as nf
import scipy.io.wavfile as wf
import matplotlib.pyplot as mpsample_rate, sigs = wf.read('../data/freq.wav')
print(sample_rate)
print(sigs.shape, sigs.dtype)
sigs = sigs / 2 ** 15
times = np.arange(len(sigs)) / sample_rate
freqs = nf.fftfreq(sigs.size, 1 / sample_rate)
ffts = nf.fft(sigs)
pows = np.abs(ffts)
mp.figure('Audio', facecolor='lightgray')
mp.subplot(121)
mp.title('Time Domain', fontsize=16)
mp.xlabel('Time', fontsize=12)
mp.ylabel('Signal', fontsize=12)
mp.tick_params(labelsize=10)
mp.grid(linestyle=':')
mp.plot(times, sigs, c='dodgerblue', label='Signal')
mp.legend()
mp.subplot(122)
mp.title('Frequency Domain', fontsize=16)
mp.xlabel('Frequency', fontsize=12)
mp.ylabel('Power', fontsize=12)
mp.tick_params(labelsize=10)
mp.grid(linestyle=':')
mp.plot(freqs[freqs >= 0], pows[freqs >= 0], c='orangered', label='Power')
mp.legend()
mp.tight_layout()
mp.show()

语音识别

梅尔频率倒谱系数(MFCC)通过与声音内容密切相关的13个特殊频率所对应的能量分布，可以使用梅尔频率倒谱系数矩阵作为语音识别的特征。基于隐形马尔科夫模型进行模式识别，找到测试样本最匹配的声音模型，从而识别语音内容。

梅尔频率倒谱系数相关API：

import scipy.io.wavfile as wf
import python_speech_features as sfsample_rate, sigs = wf.read('../data/freq.wav')
mfcc = sf.mfcc(sigs, sample_rate)

案例：

python -m pip install python_speech_features

隐马尔科夫模型相关API：

import hmmlearn.hmm as hl
# n_components: 用几个高斯分布函数拟合样本数据
# covariance_type: 相关矩阵的辅对角线进行相关性比较
# n_iter: 最大迭代上限
model = hl.GaussianHMM(n_components=4, covariance_type='diag', n_iter=1000)
model.fit(mfccs)
# 使用模型匹配测试mfcc矩阵的分值
score = model.score(test_mfccs)

案例：

声音合成

根据需求获取某个声音的模型频域数据，根据业务需要可以修改模型数据，逆向生成时域数据，完成声音的合成。

案例：

import json
import numpy as np
import scipy.io.wavfile as wf
with open('../data/12.json', 'r') as f:freqs = json.loads(f.read())
tones = [('G5', 1.5),('A5', 0.5),('G5', 1.5),('E5', 0.5),('D5', 0.5),('E5', 0.25),('D5', 0.25),('C5', 0.5),('A4', 0.5),('C5', 0.75)]
sample_rate = 44100
music = np.empty(shape=1)
for tone, duration in tones:times = np.linspace(0, duration, duration * sample_rate)sound = np.sin(2 * np.pi * freqs[tone] * times)music = np.append(music, sound)
music *= 2 ** 15
music = music.astype(np.int16)
wf.write('../data/music.wav', sample_rate, music)

机器学习 - 语音识别相关推荐

一篇文章让你窥探机器学习
申明:本文转载自博客园-飞鸟各投林,觉得对于机器学习入门的概念归纳的很不错,转过来后根据自己的理解对部分内容做了删减补充调整,并作为自己对机器学习理解的回顾,特此记. 让我们从机器学习谈起导读:在本 ...
AI又被彩虹吹！网易被预言为“下一个百度”？
人工智能到底有多火? 近日国内首份<BAT人工智能领域人才发展报告>新鲜出炉,此次报告是针对国内人工智能领域的人才争夺情况进行了梳理.并把研究对象锁定在BAT三大巨头的身上. 来源:< ...
BAT数据披露：缺人！110万AI人才缺口，两者矛盾，凉凉了！
人工智能到底有多火? 近日国内首份<BAT人工智能领域人才发展报告>新鲜出炉,此次报告是针对国内人工智能领域的人才争夺情况进行了梳理.并把研究对象锁定在BAT三大巨头的身上. 来源:< ...
BAT 数据披露：缺人！110万AI人才缺口，两者矛盾，凉凉了！
人工智能到底有多火? 近日国内首份<BAT人工智能领域人才发展报告>新鲜出炉,此次报告是针对国内人工智能领域的人才争夺情况进行了梳理.并把研究对象锁定在BAT三大巨头的身上. 来源:< ...
揭秘2018图灵奖评选：Jeff Dean李开复和Lecun写信推荐Hinton
李根发自凹非寺量子位报道 | 公众号 QbitAI 今天(3月27日),2018年图灵奖嘉奖正式揭晓:深度学习三巨头Yoshua Bengio.Geoffrey Hinton,Yann Le ...
2015伦敦深度学习峰会笔记：来自DeepMind、Clarifai等大神的分享
2015伦敦深度学习峰会笔记:来自DeepMind.Clarifai等大神的分享发表于 2015-10-20 06:35| 940次阅读| 来源 Medium| 3 条评论| 作者 Alessand ...
BAT 数据披露：110万AI人才缺口，两者矛盾，凉凉了
人工智能到底有多火? 近日国内首份<BAT人工智能领域人才发展报告>新鲜出炉,此次报告是针对国内人工智能领域的人才争夺情况进行了梳理.并把研究对象锁定在BAT三大巨头的身上. 来源:< ...
华为新品手机发布会全程回顾：AI加持下的十大创新
北京时间10月16日晚上20:00,华为在德国慕尼黑举行Mate10系列手机新品发布会.发布会上,余承东正式宣布了华为Mate 10系列旗舰手机. Mate 10新机共有两款,分别是Mate 10和M ...
2018年60家新创公司排行榜
来源:ittbank 2018年60家新创公司排行榜--Silicon 60 由<EE Times>每年评选全球值得关注的60家新创公司排行榜--'Silicon 60',今年迈向了第19 ...

机器学习 - 语音识别

语音识别

语音识别

声音合成

机器学习 - 语音识别相关推荐

最新文章

热门文章