在Android中将两个音频流混合成单个音频流?

2022-09-04 04:42:05

我正在尝试混合两个音频流以获得单个输出流,这在Android中是可能的吗?在我的情况下,我有一个来自麦克风的输入流,即,我正在使用AudioRecord录制用户的语音。我想将此录音与一个简短的声音剪辑混合,然后创建一个新的流,该流是两个流的混合,然后通过Datagram套接字发送它。我研究了很多,这就是我所知道的。

首先,SoundPool可能会帮助我实现我的目标,但我认为我无法提供麦克风作为输入源。

目前,我正在将MIC的记录保存在缓冲区中,然后通过数据报套接字对其进行流式传输。我想我可以将声音剪辑保存在另一个缓冲区中,然后添加两个缓冲区(我知道这是一个愚蠢的想法,因为我必须管理各种声音属性)。

也可能是我可以将录音从麦克风保存到文件,并将声音剪辑的录音保存到其他文件并混合它们,但是我认为我无法执行此操作,因为我正在尝试通过Datagram套接字流式传输录音。

我认为我试图实现的目标可能是使用Java的声音API来实现的。但它不受Android支持。

总而言之,我试图实现的最终目标是在基于VoIP(SIP)的呼叫中注入声音效果(声音效果像蟋蟀的声音一起发出声音)。

我希望我对我的问题给出了一个明确的解释。

问题 1:如何实现此目的?问题 2:我可以使用 Java 的 Sound API 创建 JAR 文件并在我的项目中使用它吗?(关于这一点,我认为这是不可能的)

这是我的录音和音频播放的一些代码。

这是我的录音代码:

            public void run() {
                // TODO Auto-generated method stub
                try{
                    int minbuffer = AudioRecord.getMinBufferSize(sample, config, format);
                    DatagramSocket socket = new DatagramSocket();
                    Log.d(TAG, "Socket Created");
                    socket.setBroadcast(true);
                    byte[] ubuff = new byte[minbuffer];

                    DatagramPacket packet;
                    Log.d(TAG, "Packet Created");
                    InetAddress dest = InetAddress.getByName("10.10.1.126");
                    //InetAddress dest = InetAddress.
                            //InetSocketAddress dest= new InetSocketAddress(host, port);
                    Log.d(TAG, "Address"+dest);

                    rec = new AudioRecord(MediaRecorder.AudioSource.MIC,sample,
                                config,format,minbuffer);

                    rec.startRecording();
                    while(status == true){

                        minbuffer = rec.read(ubuff, 0,ubuff.length);
                        Log.d(TAG, "Reading While");
                        packet = new DatagramPacket(ubuff, ubuff.length,dest,port);
                        socket.send(packet);
                    }
                }catch(Exception e){
                    Log.d(TAG, "Bad Datagram");
                }
            }
        });
        stream.start();     

这是我的音频播放代码:

        @Override
        public void run() {
            // TODO Auto-generated method stub
            try{

                android.os.Process.setThreadPriority(Process.THREAD_PRIORITY_URGENT_AUDIO);
                AudioManager mm = (AudioManager)getSystemService(AUDIO_SERVICE);
                DatagramSocket rSocket = new DatagramSocket(8080);
                Log.d(TAG, "Recive Socket");

                int m_buf = AudioRecord.getMinBufferSize(sample, config, format);
                byte[] _buff = new byte[m_buf];
                AudioTrack rSpeaker = new AudioTrack(mm.STREAM_MUSIC,sample,config,
                            format,m_buf,AudioTrack.MODE_STREAM);
                mm.setSpeakerphoneOn(false);
                mm.setStreamVolume(AudioManager.STREAM_MUSIC, 100, AudioManager.MODE_IN_COMMUNICATION);
                Log.d(TAG, "zzRecorder");
                rSpeaker.setPlaybackRate(sample);
                rSpeaker.play();
                while(true){
                    try{
                        DatagramPacket rPacket = new DatagramPacket(_buff, _buff.length);
                        rSocket.receive(rPacket);
                        _buff = rPacket.getData();
                        rSpeaker.write(_buff, 0, m_buf);
                        Log.d(TAG, "Yo Start Write");
                    }catch(Exception e){

                    }
                }
            }catch(Exception e){

            }
        }
    });
    rvStrm.start();

答案 1

编辑 - 31八月 2018

源代码在 https://github.com/aksappy/jsresources-examples 分叉

我认为这一定对你有帮助,

http://www.jsresources.org/examples/AudioConcat.html

该链接是有关如何连接/混合音频文件的开源示例。我认为您最感兴趣的来源将是

混合音频输入流.java

http://www.jsresources.org/examples/MixingAudioInputStream.java.html

我不知道Java Sound API的支持,但AFAIK Java Sound API是用于基本音频捕获和播放的。你仍然需要做自己的混音方式,不是吗?

断续器


答案 2

推荐