从浏览器访问麦克风 - Javascript

IT技术 javascript audio web-audio-api microphone recording
2021-01-14 00:21:55

是否可以使用客户端 JavaScript 从浏览器访问麦克风(内置或辅助)?

理想情况下,它会将录制的音频存储在浏览器中。谢谢!

2个回答

在这里,我们使用 getUserMedia() 将麦克风音频捕获为 Web Audio API 事件循环缓冲区......打印每个音频事件循环缓冲区的时域和频域片段(在浏览器控制台中只需按 F12 或 ctrl+shift+i 键即可查看)

<html><head><meta http-equiv="Content-Type" content="text/html; charset=ISO-8859-1">
<title>capture microphone audio into buffer</title>

<script type="text/javascript">


  var webaudio_tooling_obj = function () {

    var audioContext = new AudioContext();

    console.log("audio is starting up ...");

    var BUFF_SIZE = 16384;

    var audioInput = null,
        microphone_stream = null,
        gain_node = null,
        script_processor_node = null,
        script_processor_fft_node = null,
        analyserNode = null;

    if (!navigator.getUserMedia)
            navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia ||
                          navigator.mozGetUserMedia || navigator.msGetUserMedia;

    if (navigator.getUserMedia){

        navigator.getUserMedia({audio:true}, 
          function(stream) {
              start_microphone(stream);
          },
          function(e) {
            alert('Error capturing audio.');
          }
        );

    } else { alert('getUserMedia not supported in this browser.'); }

    // ---

    function show_some_data(given_typed_array, num_row_to_display, label) {

        var size_buffer = given_typed_array.length;
        var index = 0;
        var max_index = num_row_to_display;

        console.log("__________ " + label);

        for (; index < max_index && index < size_buffer; index += 1) {

            console.log(given_typed_array[index]);
        }
    }

    function process_microphone_buffer(event) { // invoked by event loop

        var i, N, inp, microphone_output_buffer;

        microphone_output_buffer = event.inputBuffer.getChannelData(0); // just mono - 1 channel for now

        // microphone_output_buffer  <-- this buffer contains current gulp of data size BUFF_SIZE

        show_some_data(microphone_output_buffer, 5, "from getChannelData");
    }

    function start_microphone(stream){

      gain_node = audioContext.createGain();
      gain_node.connect( audioContext.destination );

      microphone_stream = audioContext.createMediaStreamSource(stream);
      microphone_stream.connect(gain_node); 

      script_processor_node = audioContext.createScriptProcessor(BUFF_SIZE, 1, 1);
      script_processor_node.onaudioprocess = process_microphone_buffer;

      microphone_stream.connect(script_processor_node);

      // --- enable volume control for output speakers

      document.getElementById('volume').addEventListener('change', function() {

          var curr_volume = this.value;
          gain_node.gain.value = curr_volume;

          console.log("curr_volume ", curr_volume);
      });

      // --- setup FFT

      script_processor_fft_node = audioContext.createScriptProcessor(2048, 1, 1);
      script_processor_fft_node.connect(gain_node);

      analyserNode = audioContext.createAnalyser();
      analyserNode.smoothingTimeConstant = 0;
      analyserNode.fftSize = 2048;

      microphone_stream.connect(analyserNode);

      analyserNode.connect(script_processor_fft_node);

      script_processor_fft_node.onaudioprocess = function() {

        // get the average for the first channel
        var array = new Uint8Array(analyserNode.frequencyBinCount);
        analyserNode.getByteFrequencyData(array);

        // draw the spectrogram
        if (microphone_stream.playbackState == microphone_stream.PLAYING_STATE) {

            show_some_data(array, 5, "from fft");
        }
      };
    }

  }(); //  webaudio_tooling_obj = function()



</script>

</head>
<body>

    <p>Volume</p>
    <input id="volume" type="range" min="0" max="1" step="0.1" value="0.5"/>

</body>
</html>

由于此代码将麦克风数据公开为缓冲区,因此您可以添加使用 websockets 进行流式传输的能力,或者简单地将每个事件循环缓冲区聚合到一个怪物缓冲区中,然后将怪物下载到一个文件中

注意调用

    var audioContext = new AudioContext();

这表明它使用了所有现代浏览器(包括移动浏览器)中Web Audio API来提供一个非常强大的音频平台,其中的麦克风只是一个小片段......注意CPU 使用率因此而上升演示将每个事件循环缓冲区写入浏览器控制台日志,该日志仅用于测试,因此即使您将其修改为将音频流式传输到其他地方,实际使用的资源密集程度也会低得多

一些 Web Audio API 文档的链接

@binarymax 是的,这是我的代码......随意掠夺......我在编写github.com/scottstensland/websockets-streaming-audio 时自学了上述技巧, 它使用 websockets 从服务器流式传输音频,然后在浏览器中呈现使用 Web Audio API 使用中间的 webworker 间隙层来照顾网络流量......我需要反应该代码 ;-) 因为它严格来说是一个学习练习
2021-03-16 00:21:55
嗨@scott-stensland,这很棒。这段代码是你写的吗?是否有原始来源或存储库或许可证?谢谢!
2021-03-17 00:21:55
学习这一切的好方法是什么,我知道 javascritp 和 dom。我不知道音频 api 以及与之相关的所有内容,例如缓冲区大小、通道、流等
2021-03-30 00:21:55
请注意,现在MDN建议使用“较新的navigator.mediaDevices.getUserMedia()代替”
2021-04-04 00:21:55

是的你可以。

使用getUserMedia()API,您可以捕获来自麦克风的原始音频输入。

我知道链接另一个 URL 很糟糕,但看起来这是新地方:ulistentome.wordpress.com/2014/10/24/...
2021-04-12 00:21:55