《android多媒体api》之AudioTrack原始音频pcm播放api
《android多媒体api》系列是整合梳理android开发中经常用到的媒体相关api;多媒体开发主要内容有音频、视频录制播放、摄像头操作、录制操作、流媒体、直播、推流、拉流等方面;最近几年移动直播和视频应用发展犹如雨后春笋一般直插云霄,呃。。好吧这段比喻可以不用看了!!,反正行业兴起肯定催生了很多多媒体相关应用开发程序员。那么怎样才能成为多媒体开发程序员,首先必须要熟练使用和了解android自带的多媒体api,并且还要掌握pcm、yuv、rgb、h264、aac、flv、mpegts、mp4、udp、rtp、rtmp等等众多文件格式和流媒体协议等等。所以这里整理android相关多媒体api,提供给想从事流媒体同学作为参照,同样还是要鸣谢网络上那些具有分享精神大神们!!
####基本概念:
- 视频播放:demuxer(解复用)->分离出音频流和视频流->decoder(解码)->播放原始数据(例如:pcm yuv)
- 视频录制:采集原始数据(例如:pcm yuv)->encoder(编码)->muxer(封装格式 例如:mp4 3gp)
- 流媒体协议:udp、rtp、rtmp、rtcp、rtsp等
- 音视频封装格式:mp4 、3gp、flv等
- 音视频编码格式:aac、amr、h264、h265等
- 原始音视频数据格式:pcm 、yuv、rgb等
流程图:
####文章目录:
- VideoView 视频播放控件
- camera配合surface预览相机画面和拍照
- MediaPlayer自定义视频播放器
- MediaRecorder音视频录制api
- AudioTrack原始音频pcm播放api
- AudioRecord原始音频pcm采集api
AudioTrack是什么?
AudioRecord是可以播放原始音频数据pcm的api,pcm一般的播放器都是无法播放的,AudioRecord可以播放pcm,不过需要制定播放时候的采样率、声道数位宽,现在在android下面做了一个demo,主要是播放pcm录音文件。pcm录音时候需要制定几个重要参数,播放的时候还需要设置录制缓冲区大小,缓存区越大,内存溢出风险越小。
####pcm参数:
1、采样率
2、声道数
3、位宽
####基于AudioTrack播放功能:
xml布局文件:
<?xml version="1.0" encoding="utf-8"?>
<FrameLayout xmlns:android="http://schemas.android.com/apk/res/android"android:layout_width="fill_parent"android:layout_height="fill_parent"><SurfaceViewandroid:id="@+id/surfaceView1"android:layout_width="fill_parent"android:layout_height="fill_parent"/><LinearLayoutandroid:layout_width="wrap_content"android:layout_gravity="bottom|center_horizontal"android:layout_height="wrap_content"android:orientation="horizontal"><Buttonandroid:onClick="onClick"android:id="@+id/start_btn"android:layout_width="wrap_content"android:layout_height="wrap_content"android:text="开始"/><Buttonandroid:onClick="onClick"android:layout_marginLeft="80dp"android:id="@+id/btnStop"android:layout_width="80dip"android:layout_height="wrap_content"android:text="停止"/></LinearLayout>
</FrameLayout>
java代码:
package com.jared.helloffmpeg;import android.app.Activity;
import android.content.pm.ActivityInfo;
import android.media.AudioAttributes;
import android.media.AudioFormat;
import android.media.AudioManager;
import android.media.AudioRecord;
import android.media.AudioTrack;
import android.os.Bundle;
import android.os.Environment;
import android.support.annotation.Nullable;
import android.view.SurfaceHolder;
import android.view.SurfaceView;
import android.view.View;import java.io.File;
import java.io.FileInputStream;public class RecordMP4Push extends Activity implements View.OnClickListener, SurfaceHolder.Callback {private SurfaceView surfaceView;private boolean isStart=false;private AudioTrack audioTrack;private int minBufferSize;@Overrideprotected void onCreate(@Nullable Bundle savedInstanceState) {super.onCreate(savedInstanceState);setRequestedOrientation(ActivityInfo.SCREEN_ORIENTATION_LANDSCAPE);setContentView(R.layout.record_aac_and_pcm);surfaceView=findViewById(R.id.surfaceView1);surfaceView.getHolder().addCallback(this);}public void createAudioPlayer(){int sampleRateInHz=48000;//44100 48000int encodingPcm16bit = AudioFormat.ENCODING_PCM_16BIT;int channelConfig=AudioFormat.CHANNEL_IN_STEREO;minBufferSize = AudioTrack.getMinBufferSize(sampleRateInHz, channelConfig, encodingPcm16bit);audioTrack=new AudioTrack(AudioManager.STREAM_MUSIC,sampleRateInHz,channelConfig,encodingPcm16bit,minBufferSize,AudioTrack.MODE_STREAM);}@Overridepublic void onClick(View view) {if (view.getId()==R.id.start_btn){isStart=true;createAudioPlayer();new Thread(new Runnable() {@Overridepublic void run() {startAudioPlay();}}).start();}if (view.getId()==R.id.btnStop){isStart=false;}}private void startAudioPlay() {try {FileInputStream fileInputStream=new FileInputStream(new File(Environment.getExternalStorageDirectory().getAbsolutePath()+"/outputs.pcm"));audioTrack.play();//开始播放int len=-1;byte[] arr=new byte[minBufferSize];while ( (len=fileInputStream.read(arr))!=-1 ){audioTrack.write(arr, 0, len);}audioTrack.stop();//停止播放audioTrack.release();//释放资源audioTrack=null;fileInputStream.close();isStart=false;}catch (Exception e){e.printStackTrace();}}@Overridepublic void surfaceCreated(SurfaceHolder surfaceHolder) {}@Overridepublic void surfaceChanged(SurfaceHolder surfaceHolder, int i, int i1, int i2) {}@Overridepublic void surfaceDestroyed(SurfaceHolder surfaceHolder) {}
}
《android多媒体api》之AudioTrack原始音频pcm播放api相关推荐
- 《android多媒体api》之AudioRecord原始音频pcm录制api
<android多媒体api>系列是整合梳理android开发中经常用到的媒体相关api:多媒体开发主要内容有音频.视频录制播放.摄像头操作.录制操作.流媒体.直播.推流.拉流等方面:最近 ...
- android多媒体部分学习笔记八------音频录制 mediaRecorder
/** * 原始音频的播放和录制 * * audio * * audioTrack * * * @time 下午12:58:03 * @author retacn yue ...
- Android如何将采集到的音频PCM文件转为WAV并保存
1.Android音频采集 添加权限 <uses-permission android:name="android.permission.RECORD_AUDIO" /> ...
- Android多媒体功能开发(6)——使用MediaPlayer类播放音频
Android播放音频资源主要有两个类:MediaPlayer和SoundPool. MediaPlayer用于实现对一个音频的播放控制,侧重于启动.停止.暂停.位置控制等操作.不支持同时播放多个音频 ...
- android 使用 audiorecord 和 audiotrack 实现实时录音播放
基本思路就是用 audiorecord不断得到音频数据,然后使用audiotrack 播放 //得到音频 package com.ysg.audiotest;import java.io.IOExce ...
- android 实时录音播放,android 使用 audiorecord 和 audiotrack 实现实时录音播放
基本思路就是用 audiorecord不断得到音频数据,然后使用audiotrack 播放 //得到音频 package com.ysg.audiotest; import java.io.IOExc ...
- android audiotrack权限,android 使用 audiorecord 和 audiotrack 实现实时录音播放
基本思路就是用 audiorecord不断得到音频数据,然后使用audiotrack 播放 //得到音频 package com.ysg.audiotest; import java.io.IOExc ...
- 《android多媒体api》之MediaRecorder音视频录制api
<android多媒体api>系列是整合梳理android开发中经常用到的媒体相关api:多媒体开发主要内容有音频.视频录制播放.摄像头操作.录制操作.流媒体.直播.推流.拉流等方面:最近 ...
- 《android多媒体api》之MediaPlayer自定义视频播放器
<android多媒体api>系列是整合梳理android开发中经常用到的媒体相关api:多媒体开发主要内容有音频.视频录制播放.摄像头操作.录制操作.流媒体.直播.推流.拉流等方面:最近 ...
最新文章
- 理解SharePoint中的Managed Path
- 【IT笔试面试题整理】链表
- JDK的可视化工具系列 (四) JConsole、VisualVM
- Docker : Docker使用DockerFile入门案例
- 【软考】2020年全国计算机技术与软件专业技术资格考试,软件设计师,考纲
- Qt---MaintenanceTool
- 1002 写出这个数 (20 分)—PAT (Basic Level) Practice (中文)
- mysql test 映射到实体_第80天:Python 操作 MySQL
- 以后给孩子起名字不用发愁了,先存着
- Devexpress使用记录
- PHP下ereg实现匹配ip的正则
- 计算机本地配置文件丢失,电脑C盘文件丢失的常见原因及恢复方法
- 处理自己计算机某的端口被占问题
- 【数学建模】实验设计方法
- python 自动换ip_python实现自动更换ip的方法
- 【转自JULY大佬】程序员面试、算法研究、编程艺术、红黑树、机器学习5大系列集锦
- Dojo的联合创建者Dylan Schiemann访谈
- MoviePy - 中文文档4-MoviePy实战案例-炫动的字母特效
- OpenCV + CPP 系列(卅三)图像特征提取(Harris角点检测、Shi-Tomasi角点检测、自定义角点检测)
- java廖雪峰_廖雪峰Java教程学习笔记(一)——Java程序基础