android 用WebRTC做回音消除

之前使用speex做回音消除模软,不知道是沒有用對(duì)還是其他什么原因,導(dǎo)致回音消除的效果非常差厨钻。

好在在GitHub找到了一個(gè)使用WebRTC做回音消除的例子Android-Audio-Processing-Using-WebRTC
扼雏。

經(jīng)過一頓改吧改吧的,終于在自己的項(xiàng)目中使用成功夯膀。 回音消除的效果比之前好了不止百倍诗充。


/**
 * AudioTrack音頻播放,錄音
 *
 * @author Robbie
 */
public class Tracker extends JobHandler {

    private static AudioTrack audioTrack;

    private Apm _apm;
    private ApmViewModel vm;
    private AudioRecord audioRecord;
    int framSize = 80;
    // 音頻大小
    private int inAudioBufferSize;
    // 音頻大小
    private static int outAudioBufferSize;
    // 播放標(biāo)志
    private boolean isPlaying = true;


    public Tracker(Handler handler) {
        super(handler);
        outAudioBufferSize = Constants.inAudioBufferSize;
        inAudioBufferSize =Constants.inAudioBufferSize;
        this.init();
        initAudioTrace(AudioManager.AUDIO_SESSION_ID_GENERATE);
    }

    public static void initAudioTrace(int sessionId) {
        audioTrack = new AudioTrack((new AudioAttributes.Builder())
                .setLegacyStreamType(Constants.streamType)
                .build(),
                (new AudioFormat.Builder())
                        .setChannelMask(Constants.outputChannelConfig)
                        .setEncoding(Constants.audioFormat)
                        .setSampleRate(Constants.sampleRateInHz)
                        .build(),
                outAudioBufferSize,
                Constants.trackMode, sessionId);



    }

    public boolean isPlaying() {
        return isPlaying;
    }

    public void setPlaying(boolean playing) {
        isPlaying = playing;
    }

    public void init() {
       
        // 初始化音頻錄制
        audioRecord = new AudioRecord(Constants.audioSource,
                Constants.sampleRateInHz, Constants.inputChannelConfig, Constants.audioFormat, inAudioBufferSize);


    }

    private void initApm() throws Exception {
        int ret;
        vm = ApmViewModel.getInstance();
        try {

            _apm = new Apm(vm.getAecExtendFilter(), vm.getSpeechIntelligibilityEnhance(), vm.getDelayAgnostic(), vm.getBeamForming(),
                    vm.getNextGenerationAEC(), vm.getExperimentalNS(), vm.getExperimentalAGC());

            ret = _apm.HighPassFilter(vm.getHighPassFilter());

            if (vm.getAecPC()) {
                ret = _apm.AECClockDriftCompensation(false);
                ret = _apm.AECSetSuppressionLevel(Apm.AEC_SuppressionLevel.values()[2]);
                ret = _apm.AEC(true);
            } else if (vm.getAecMobile()) {
                ret = _apm.AECMSetSuppressionLevel(Apm.AECM_RoutingMode.values()[2]);
                ret = _apm.AECM(true);
            }

            ret = _apm.NSSetLevel(Apm.NS_Level.values()[1]);
            ret = _apm.NS(vm.getNs());

            ret = _apm.VAD(vm.getVad());


            if (vm.getAgc()) {
                ret = _apm.AGCSetAnalogLevelLimits(0, 255);
                ret = _apm.AGCSetMode(Apm.AGC_Mode.values()[2]);
                ret = _apm.AGCSetTargetLevelDbfs(vm.getAgcTargetLevelInt());
                ret = _apm.AGCSetcompressionGainDb(vm.getAgcCompressionGainInt());
                ret = _apm.AGCEnableLimiter(true);
                ret = _apm.AGC(true);
            }
        } catch (Exception ex) {
//            new AlertDialog.Builder(context).setTitle("System hint")
//                    .setMessage(ex.getMessage())
//                    .show();
            return;
        }


    }


    @Override
    public void run() {
        AudioData currentAudioData;

        try {
            initApm();
        } catch (Exception e) {
            e.printStackTrace();
        }

        while ((currentAudioData = MessageQueue.getInstance(MessageQueue.TRACKER_DATA_QUEUE).take()) != null) {

            if(currentAudioData.isClose()){
                MessageQueue.getInstance(MessageQueue.TRACKER_DATA_QUEUE).clear();
                break;
            }
            if (!IntercomService.connecting) {
                break;
            }

            if (audioTrack == null) {
                continue;
            }
            try {
                if (audioTrack.getPlayState() != AudioTrack.PLAYSTATE_PLAYING) {
                    audioTrack.play();
                }
                short[] bytesPkg = currentAudioData.getRawData();
                if (bytesPkg != null) {


                    for(int i = 0 ; i < bytesPkg.length/framSize ; i++) {

                        try {
                            _apm.ProcessRenderStream(bytesPkg, i * framSize);

                        } catch (Exception e) {
                            e.printStackTrace();
                        }
                    }
                    audioTrack.write(bytesPkg, 0, bytesPkg.length);
                }
                this.reacord(bytesPkg);


            } catch (Exception e) {
                e.printStackTrace();
            }

        }
    }

    private void reacord(short[] bytesPkg) throws Exception {
        if(audioRecord == null){
            this.init();
        }
        if (audioRecord.getRecordingState() == AudioRecord.RECORDSTATE_STOPPED) {
            audioRecord.startRecording();
        }

        AudioData audioData = new AudioData();
        // 實(shí)例化音頻數(shù)據(jù)緩沖
        short[] rawData = new short[inAudioBufferSize / 2];

        int size = audioRecord.read(rawData, 0, inAudioBufferSize / 2);

        if (bytesPkg != null) {

            int out_analog_level = 200;
            for(int i = 0 ; i < rawData.length/framSize ; i++) {

                short delay = Short.valueOf(ApmViewModel.getInstance().getAceBufferDelay());

                _apm.SetStreamDelay(delay);
                try {
                    if (vm.getAgc()) {
                        _apm.AGCSetStreamAnalogLevel(out_analog_level);
                    }

                    _apm.ProcessCaptureStream(rawData,i*framSize);
                    if (vm.getAgc()) {
                        out_analog_level = _apm.AGCStreamAnalogLevel();
                        Log.i("AGC", out_analog_level + "");
                    }

                    if (vm.getVad()) {
                        if (!_apm.VADHasVoice()) continue;
                    }
                } catch (Exception e) {
                    e.printStackTrace();
                }
            }

            audioData.setRawData(rawData);
        } else {
            audioData.setRawData(rawData);
        }
        audioData.setClose(!IntercomService.connecting);
        MessageQueue.getInstance(MessageQueue.ENCODER_DATA_QUEUE).put(audioData);
    }

   
}

其中的 Apm和ApmViewModel照抄Demo的。

但是回音消除的部分使用Demo中的方法棍郎,導(dǎo)致聲音出現(xiàn)問題。

播放聲音之前執(zhí)行:

int framSize = 80
  for(int i = 0 ; i < bytesPkg.length/framSize ; i++) {

                        try {
                            _apm.ProcessRenderStream(bytesPkg, i * framSize);

                        } catch (Exception e) {
                            e.printStackTrace();
                        }
                    }

錄音之后執(zhí)行:

int framSize = 80
 int out_analog_level = 200;
            for(int i = 0 ; i < rawData.length/framSize ; i++) {

                short delay = Short.valueOf(ApmViewModel.getInstance().getAceBufferDelay());

                _apm.SetStreamDelay(delay);
                try {
                    if (vm.getAgc()) {
                        _apm.AGCSetStreamAnalogLevel(out_analog_level);
                    }

                    _apm.ProcessCaptureStream(rawData,i*framSize);
                    if (vm.getAgc()) {
                        out_analog_level = _apm.AGCStreamAnalogLevel();
                        Log.i("AGC", out_analog_level + "");
                    }

                    if (vm.getVad()) {
                        if (!_apm.VADHasVoice()) continue;
                    }
                } catch (Exception e) {
                    e.printStackTrace();
                }
            }

至于Android中使用到的庫文件银室,可以按照GitHub上的步驟編譯涂佃。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市蜈敢,隨后出現(xiàn)的幾起案子辜荠,更是在濱河造成了極大的恐慌,老刑警劉巖抓狭,帶你破解...
    沈念sama閱讀 218,284評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件伯病,死亡現(xiàn)場離奇詭異,居然都是意外死亡否过,警方通過查閱死者的電腦和手機(jī)午笛,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,115評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來苗桂,“玉大人药磺,你說我怎么就攤上這事∶何埃” “怎么了癌佩?”我有些...
    開封第一講書人閱讀 164,614評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵木缝,是天一觀的道長。 經(jīng)常有香客問我围辙,道長我碟,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,671評(píng)論 1 293
  • 正文 為了忘掉前任姚建,我火速辦了婚禮矫俺,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘桥胞。我一直安慰自己恳守,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,699評(píng)論 6 392
  • 文/花漫 我一把揭開白布贩虾。 她就那樣靜靜地躺著催烘,像睡著了一般。 火紅的嫁衣襯著肌膚如雪缎罢。 梳的紋絲不亂的頭發(fā)上伊群,一...
    開封第一講書人閱讀 51,562評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音策精,去河邊找鬼舰始。 笑死,一個(gè)胖子當(dāng)著我的面吹牛咽袜,可吹牛的內(nèi)容都是我干的丸卷。 我是一名探鬼主播,決...
    沈念sama閱讀 40,309評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼询刹,長吁一口氣:“原來是場噩夢啊……” “哼谜嫉!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起凹联,我...
    開封第一講書人閱讀 39,223評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤沐兰,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后蔽挠,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體住闯,經(jīng)...
    沈念sama閱讀 45,668評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,859評(píng)論 3 336
  • 正文 我和宋清朗相戀三年澳淑,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了比原。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,981評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡杠巡,死狀恐怖春寿,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情忽孽,我是刑警寧澤绑改,帶...
    沈念sama閱讀 35,705評(píng)論 5 347
  • 正文 年R本政府宣布谢床,位于F島的核電站,受9級(jí)特大地震影響厘线,放射性物質(zhì)發(fā)生泄漏识腿。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,310評(píng)論 3 330
  • 文/蒙蒙 一造壮、第九天 我趴在偏房一處隱蔽的房頂上張望渡讼。 院中可真熱鬧,春花似錦耳璧、人聲如沸成箫。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,904評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽蹬昌。三九已至,卻和暖如春攀隔,著一層夾襖步出監(jiān)牢的瞬間皂贩,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,023評(píng)論 1 270
  • 我被黑心中介騙來泰國打工昆汹, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留明刷,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,146評(píng)論 3 370
  • 正文 我出身青樓满粗,卻偏偏與公主長得像辈末,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子映皆,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,933評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容