Android AEC 不会产生有用的声音

Posted

技术标签:

【中文标题】Android AEC 不会产生有用的声音【英文标题】:Android AEC generates no useful sound 【发布时间】:2011-11-16 07:46:03 【问题描述】:

我正在为一个 VoIP 应用程序进行一些回声消除实验,声音让我发疯。我想做的很简单:我以前录过声音。现在我将播放该声音并在播放时录制另一个声音,这是全双工 VoIP 场景的真实情况。我使用 MedaiPlayer 播放声音,使用 MediaRecorder 录制新声音。下面是类的完整代码,从 android SoundRecorder Sample 修改而来。重点是, mplayer.setAudiostreamType(AudioManager.MODE_IN_COMMUNICATION); 对于 Android 文档,请说“在通信音频模式下。已建立音频/视频聊天或 VoIP 呼叫。”和 mRecorder.setAudioSource(MediaRecorder.AudioSource.VOICE_COMMUNICATION); 对于 Android 文档来说,“针对 VoIP 等语音通信调整的麦克风音频源。例如,如果可用,它将利用回声消除或自动增益控制。如果没有应用语音处理,它的行为就像 DEFAULT 一样。”这是很有希望的。 但是,如果我播放扬声器发出的任何声音,我几乎不会录下任何声音或只录下奇怪的声音。由于我是这里的新用户,因此无法附加录音的声波,但第一个是普通录音,具有正常的声波。第二个录音是播放第一个录音时的录音,几乎什么都没有,没有声波。如果扬声器中有任何活动,Android 似乎会关闭麦克风。我为 MediaRecorder 和 MediaPlayer 尝试了不同的可能性,但没有用。在 Android 中实现回声消除的正确方法是什么?我在 Sony Tablet S 上试用并使用 Android 3.0 SDK 进行开发。 提前致谢。

package com.kadir.sample;
import android.app.Activity;
import android.widget.LinearLayout;
import android.widget.Toast;
import android.os.Bundle;
import android.os.Environment;
import android.view.ViewGroup;
import android.widget.Button;
import android.view.View;
import android.content.Context;
import android.util.Log;
import android.media.AudioManager;
import android.media.MediaRecorder;
import android.media.MediaPlayer;

import java.io.IOException;


public class AudioRecordTest extends Activity

    private static final String LOG_TAG = "AudioRecordTest";
    private static String mFileName = null;
    private static String mFileNameConst = null;

    private RecordButton mRecordButton = null;
    private MediaRecorder mRecorder = null;

    private PlayButton   mPlayButton = null;
    private MediaPlayer   mPlayer = null;
    private PlayConstButton mPlayConstButton = null;

    private void onRecord(boolean start) 
        if (start) 
            startRecording();
         else 
            stopRecording();
        
    

    private void onPlay(boolean start) 
        if (start) 
            startPlaying();
         else 
            stopPlaying();
        
    

    private void onPlayConst(boolean start) 
        if (start) 
            startConstPlaying();
         else 
            stopConstPlaying();
        
    

    private void startPlaying() 
        mPlayer = new MediaPlayer();
        try 
            mPlayer.setDataSource(mFileName);
            mPlayer.prepare();
            mPlayer.start();
         catch (IOException e) 
            Toast.makeText(this, "prepare() failed", Toast.LENGTH_LONG).show();
            Log.e(LOG_TAG, "prepare() failed");
        
    

    private void stopPlaying() 
        mPlayer.release();
        mPlayer = null;
    

    private void startConstPlaying() 
        mPlayer = new MediaPlayer();
        try 
            mPlayer.setDataSource(mFileNameConst);
            mPlayer.setAudioStreamType(AudioManager.MODE_IN_COMMUNICATION);
            mPlayer.prepare();
            mPlayer.start();
         catch (IOException e) 
            Toast.makeText(this, "prepare() failed", Toast.LENGTH_LONG).show();
            Log.e(LOG_TAG, "prepare() failed");
    


private void stopConstPlaying() 
        mPlayer.release();
        mPlayer = null;
    

    private void startRecording() 
        mRecorder = new MediaRecorder();
        mRecorder.setAudioSource(MediaRecorder.AudioSource.VOICE_COMMUNICATION);
        mRecorder.setOutputFormat(MediaRecorder.OutputFormat.THREE_GPP);
        mRecorder.setOutputFile(mFileName);
        mRecorder.setAudioEncoder(MediaRecorder.AudioEncoder.AMR_NB);

        try 
            mRecorder.prepare();
         catch (IOException e) 
            Toast.makeText(this, "startRecording() failed", Toast.LENGTH_LONG).show();
            Log.e(LOG_TAG, "prepare() failed");
        

        mRecorder.start();
    

    private void stopRecording() 
        mRecorder.stop();
        mRecorder.release();
        mRecorder = null;
    

    class RecordButton extends Button 
        boolean mStartRecording = true;

        OnClickListener clicker = new OnClickListener() 
            public void onClick(View v) 
                onRecord(mStartRecording);
                if (mStartRecording) 
                    setText("Stop recording");
                 else 
                    setText("Start recording");
                
                mStartRecording = !mStartRecording;
            
        ;

        public RecordButton(Context ctx) 
            super(ctx);
            setText("Start recording");
            setOnClickListener(clicker);
        
    

    class PlayButton extends Button 
        boolean mStartPlaying = true;

        OnClickListener clicker = new OnClickListener() 
            public void onClick(View v) 
                onPlay(mStartPlaying);
                if (mStartPlaying) 
                    setText("Stop playing");
                 else 
                    setText("Start playing");
                
                mStartPlaying = !mStartPlaying;
            
        ;

        public PlayButton(Context ctx) 
            super(ctx);
            setText("Start playing");
            setOnClickListener(clicker);
        
    

    class PlayConstButton extends Button 
        boolean mStartPlaying = true;

        OnClickListener clicker = new OnClickListener() 
            public void onClick(View v) 
                onPlayConst(mStartPlaying);
                if (mStartPlaying) 
                    setText("Stop Constant playing");
                 else 
                    setText("Start Constant playing");
                
                mStartPlaying = !mStartPlaying;
            
        ;

        public PlayConstButton(Context ctx) 
            super(ctx);
            setText("Start Constant playing");
            setOnClickListener(clicker);
        
    

    public AudioRecordTest() 
        mFileName = Environment.getExternalStorageDirectory().getAbsolutePath();
        mFileName += "/audiorecordtest.3gp";
        mFileNameConst = Environment.getExternalStorageDirectory().getAbsolutePath();
        mFileNameConst += "/constant.3gp";
    

    @Override
    public void onCreate(Bundle icicle) 
        super.onCreate(icicle);

        LinearLayout ll = new LinearLayout(this);
        mRecordButton = new RecordButton(this);
        ll.addView(mRecordButton,
            new LinearLayout.LayoutParams(
                ViewGroup.LayoutParams.WRAP_CONTENT,
                ViewGroup.LayoutParams.WRAP_CONTENT,
                0));
        mPlayButton = new PlayButton(this);
        ll.addView(mPlayButton,
            new LinearLayout.LayoutParams(
                ViewGroup.LayoutParams.WRAP_CONTENT,
                ViewGroup.LayoutParams.WRAP_CONTENT,
                0));
        mPlayConstButton = new PlayConstButton(this);
        ll.addView(mPlayConstButton,
            new LinearLayout.LayoutParams(
                ViewGroup.LayoutParams.WRAP_CONTENT,
                ViewGroup.LayoutParams.WRAP_CONTENT,
                0));
        setContentView(ll);
    

    @Override
    public void onPause() 
        super.onPause();
        if (mRecorder != null) 
            mRecorder.release();
            mRecorder = null;
        

        if (mPlayer != null) 
            mPlayer.release();
            mPlayer = null;
        
    

更新: 我有一点研发如下: 我更改了 MediaRecorder 和 MediaPlayer 参数。对于每个值,我都记录了自己,在记录过程中,我开始了另一场比赛。然后完成了录制,听了我刚刚录制的内容。对于 MediaRecorder,我尝试了以下值: MediaRecorder.AudioSource.DEFAULT,MediaRecorder.AudioSource.MIC,MediaRecorder.AudioSource.VOICE_CALL,MediaRecorder.AudioSource.VOICE_COMMUNICATION,MediaRecorder.AudioSource.VOICE_DOWNLINK,MediaRecorder.AudioSource.VOICE_RECOGNITION,MediaRecorder.AudioSource.VOICE_UPLINK 对于 MediaPlayer,我尝试了这些值: AudioManager.MODE_NORMAL,AudioManager.MODE_CURRENT,AudioManager.MODE_IN_CALL,AudioManager.MODE_IN_COMMUNICATION, AudioManager.STREAM_VOICE_CALL,AudioManager.STREAM_MUSIC。 但无论我尝试什么,我总是要么沉默,要么纯粹的噪音。我认为 MediaRecorder 和 MediaPlayer 类对于 VoIP 来说是不够的。而且Android的声音系统对于我这种初学者来说有点奇怪。

【问题讨论】:

您正在设置 mPlayer.setAudioStreamType(AudioManager.MODE_IN_COMMUNICATION);。这不是该调用的正确参数值。您应该使用 STREAM_ 常量 【参考方案1】:

我部分想通了。我使用的是带有 Android 3.2 的 Sony Tablet S。我在带有 Android 2.3 的 Archos 70 上尝试了相同的程序。当我在演奏另一件事的同时录制某件事时,两种声音都会被记录下来。这意味着我可以应用 AEC。在索尼,录音只不过是噪音。现在有两种可能性:要么是 Sony Tablet S 的麦克风实现有问题(顺便说一下,GTalk 在 Sony 上运行得很好,但它可能是在 Android 中实现的一些特殊的东西)或者 Android 3.2 的麦克风实现有问题。

【讨论】:

我尝试联系索尼支持。他们只关心结案。他们回答说:“由于 GTalk 工作正常,请与出现故障的应用程序的开发人员联系”。我是发生故障的应用程序的开发人员!和索尼打交道已经够了,我猜。【参考方案2】:

Android 中的回声消除在很多情况下都不能很好地工作。我认为这与长回声尾有关。我知道这个问题有第三方算法。谷歌搜索回声消除软件,并验证该软件是否支持长回声尾。

【讨论】:

感谢您的回复。但恐怕你的解释与我的问题无关。我真正的问题是,如原帖所述,如果扬声器出问题,Android 会降低麦克风增益。没有任何东西来自麦克风。我在问如何禁用此功能,如果它是一项功能。除了 MediaRecorder 之外,可能还有其他一些类可以保持麦克风打开。我的代码不包含任何关于 AEC 的内容,因为我没有任何声音来应用 AEC。 感谢您的澄清。我建议使用不同的常量而不是 VOICE_COMMUNICATION 打开录音。 VOICE_COMMUNICATION 会激活所有可能会打扰您的 VoIP 功能。 谢谢。我会尝试其他参数并报告结果。 我尝试了其他参数,并在消息的 UPDATE 中解释了结果。 感谢您的更新。我建议你尝试使用“AudioRecord”类【参考方案3】:

为什么将MediaRecorder 用于流式应用程序?请改用AudioRecorder

我目前正在使用类似的用例,AudioRecorder 工作完美。

【讨论】:

Neeraj> 对这个相关问题有任何想法吗? ***.com/questions/33062660/…

以上是关于Android AEC 不会产生有用的声音的主要内容,如果未能解决你的问题,请参考以下文章

为啥 .NET 中的 AEC 加密产生与 JavaScript 不同的结果?

AudioQueue 不会产生任何声音。可能是啥问题? [复制]

WebRTC回声消除

Xamarin.iOS 上的声学回声消除 (AEC)

使用 Android 的 AudioTrack 来组合声音样本的字节会产生噪音

Android 多种声音通知