有没有可能检测到谁在用Twilio Video JS SDK说话？

Question

我目前正在实现视频通话应用程序，类似于使用Twilio Video的Google Hangout。我想在后台显示当时正在说话的人的视频。

有没有可能检测到谁在用Twilio Video JS SDK说话？

Answer 1

最后，我使用Twilio Video JS SDK使用getStats（）方法获得了我想要的结果。我将把示例代码放在这里，以便对希望实现相同功能的人有用。

参考：https://media.twiliocdn.com/sdk/js/video/releases/1.10.0/docs/Room.html

  room.getStats().then(statsReportArray => {
    statsReportArray.forEach(report => {
      let maximumAudioLevel = 0;
      let loudestTrackId = null;

      report.remoteAudioTrackStats.forEach(audioStat => {
        if (audioStat.audioLevel > maximumAudioLevel) {
          maximumAudioLevel = audioStat.audioLevel;
          loudestTrackId = audioStat.trackId;
        }
      });

Answer 2

编辑

Twilio视频SDK现在支持检测和更新主扬声器。有关详细信息，请参阅文档。

原始答案

Twilio开发者布道者。

目前，SDK中没有任何内置功能可以实现这一点。但是，您可以尝试使用Web audio API进行音频分析，以确定最响亮的远程音频轨迹的移动平均值，并使用该平均值显示当前扬声器。这不是我刚刚尝试过的东西，但我认为这将是一个有趣的实验。