Android音視頻(一) Camera2 API采集數(shù)據(jù)
AudioRecord和AudioTrack是Android系統(tǒng)提供的用于實現(xiàn)錄音、播放音頻的功能類,使用這兩個類做音頻的采集與播放還是非常簡單的。
AudioRecord
private void startRecorder() {
try {
// 1、輸出pcm文件
mAudioFile = new File(Environment.getExternalStorageDirectory().getAbsolutePath() + "/RecorderTest/" +
System.currentTimeMillis() + ".pcm");
mAudioFile.getParentFile().mkdirs();
mAudioFile.createNewFile();
mFileOutputStream = new FileOutputStream(mAudioFile);
// 2、配置AudioRecord
// 聲音來源
int audioSource = MediaRecorder.AudioSource.MIC;
// 采樣率 Hz
int sampleRate = 44100;
// 音頻通道的配置 MONO 單聲道
int channelConfig = AudioFormat.CHANNEL_IN_MONO;
// 返回音頻數(shù)據(jù)的格式
int audioFormat = AudioFormat.ENCODING_PCM_16BIT;
//AudioRecord能接受的最小的buffer大小
int minBufferSize = AudioRecord.getMinBufferSize(sampleRate, channelConfig, audioFormat);
mAudioRecorder = new AudioRecord(audioSource, sampleRate, channelConfig,
audioFormat, Math.max(minBufferSize, 2048));
// 3、開始錄音
mAudioRecorder.startRecording();
// 4匾荆、一邊從AudioRecord中讀取聲音數(shù)據(jù)到初始化的buffer,一邊將buffer中數(shù)據(jù)導(dǎo)入數(shù)據(jù)流杆烁,寫入文件中
while (mIsRecording) { // 標(biāo)志位牙丽,是否停止錄音
int read = mAudioRecorder.read(mBuffer, 0, 2048);
if (read > 0) {
mFileOutputStream.write(mBuffer, 0, read);
// 也可以在這里對音頻數(shù)據(jù)進行處理,壓縮兔魂、直播等
}
}
// 5烤芦、停止錄音,釋放資源
mAudioRecorder.stop();
mAudioRecorder.release();
mAudioRecorder = null;
mFileOutputStream.close();
} catch (IOException | RuntimeException e) {
e.printStackTrace();
} finally {
if (mAudioRecorder != null) {
mAudioRecorder.release();
mAudioRecorder = null;
}
}
}
MediaRecorder 和 AudioRecord
Android SDK 中有兩套音頻采集的API析校,分別是:MediaRecorder 和 AudioRecord构罗。
MediaRecorder是一個更加上層一點的API,它可以直接把手機麥克風(fēng)錄入的音頻數(shù)據(jù)進行編碼壓縮(如AMR智玻、MP3等)并存成文件
AudioRecord則更接近底層遂唧,能夠更加自由靈活地控制,可以得到原始的一幀幀PCM音頻數(shù)據(jù)吊奢。
如果只是想簡單地做一個錄音機盖彭,錄制音頻文件,就使用 MediaRecorder事甜,而如果需要對音頻做進一步的算法處理谬泌、或者采用第三方的編碼庫進行壓縮、以及網(wǎng)絡(luò)傳輸逻谦、直播等應(yīng)用,則建議使用 AudioRecord陪蜻。
AudioTrack
private void doPaly(File mAudioFile) {
// 音頻流的類型
// STREAM_ALARM:警告聲
// STREAM_MUSIC:音樂聲
// STREAM_RING:鈴聲
// STREAM_SYSTEM:系統(tǒng)聲音邦马,例如低電提示音,鎖屏音等
// STREAM_VOCIE_CALL:通話聲
int streamType = AudioManager.STREAM_MUSIC;
// 采樣率 Hz
int sampleRate = 44100;
// 單聲道
int channelConfig = AudioFormat.CHANNEL_OUT_MONO;
// 音頻數(shù)據(jù)表示的格式
int audioFormat = AudioFormat.ENCODING_PCM_16BIT;
// MODE_STREAM:在這種模式下宴卖,通過write一次次把音頻數(shù)據(jù)寫到AudioTrack中滋将。這和平時通過
// write系統(tǒng)調(diào)用往文件中寫數(shù)據(jù)類似,但這種工作方式每次都需要把數(shù)據(jù)從用戶提供的Buffer中拷貝到
// AudioTrack內(nèi)部的Buffer中症昏,這在一定程度上會使引入延時随闽。為解決這一問題,AudioTrack就引入
// 了第二種模式肝谭。
// MODE_STATIC:這種模式下掘宪,在play之前只需要把所有數(shù)據(jù)通過一次write調(diào)用傳遞到AudioTrack
// 中的內(nèi)部緩沖區(qū)蛾扇,后續(xù)就不必再傳遞數(shù)據(jù)了。這種模式適用于像鈴聲這種內(nèi)存占用量較小魏滚,延時要求較
// 高的文件镀首。但它也有一個缺點,就是一次write的數(shù)據(jù)不能太多鼠次,否則系統(tǒng)無法分配足夠的內(nèi)存來存儲
// 全部數(shù)據(jù)更哄。
int mode = AudioTrack.MODE_STREAM;
int minBufferSize = AudioTrack.getMinBufferSize(sampleRate, channelConfig, audioFormat);
AudioTrack audioTrack = new AudioTrack(streamType, sampleRate, channelConfig, audioFormat, Math.max(minBufferSize, 2048), mode);
FileInputStream mFileInputStream = null;
try {
mFileInputStream = new FileInputStream(mAudioFile);
int read;
audioTrack.play();
while ((read = mFileInputStream.read(mBuffer)) > 0) {
int ret = audioTrack.write(mBuffer, 0, read);
switch (ret) {
case AudioTrack.ERROR_BAD_VALUE:
case AudioTrack.ERROR_INVALID_OPERATION:
case AudioManager.ERROR_DEAD_OBJECT:
palyFaile();
break;
default:
break;
}
}
} catch (RuntimeException | IOException e) {
e.printStackTrace();
palyFaile();
} finally {
mIsPalying = false;
if (mFileInputStream != null) {
closeQuietly(mFileInputStream);
}
audioTrack.stop();
audioTrack.release();
}
}
AudioTrack 與 MediaPlayer
在Android中播放聲音也是有兩套API:MediaPlayer和AudioTrack,兩者還是有很大的區(qū)別的腥寇。
MediaPlayer可以播放多種格式的聲音文件成翩,例如MP3,AAC赦役,WAV捕传,OGG,MIDI等扩劝。MediaPlayer會在framework層創(chuàng)建對應(yīng)的音頻解碼器庸论。
AudioTrack只能播放已經(jīng)解碼的PCM流,如不需要解碼的wav文件棒呛。
MediaPlayer在framework層還是會創(chuàng)建AudioTrack聂示,把解碼后的PCM數(shù)流傳遞給AudioTrack,AudioTrack再傳遞給AudioFlinger進行混音簇秒,然后才傳遞給硬件播放,所以是MediaPlayer包含了AudioTrack鱼喉。