音频应用框架¶

使用 ESP-ADF 的 VOIP 功能时，手机和 ESP32 设备进行通话如何消除回音？¶

乐鑫提供基于 ESP32、ESP32-S3 芯片的回声消除 (Acoustic Echo Cancelation, AEC) 算法，可以参考算法例程。

需要注意，AEC 的效果不仅仅依赖于软件参数配置和调试，还依赖于硬件设计，例如播放不能失真、录音不能有杂音以及回升参考信号没有问题等等，建议此部分设计参考乐鑫 ESP32-Lyrat-Mini 开发板以及 ESP32-S3-Korvo-2 开发板的设计。

使用 ESP32-Korvo-DU1906 开发板必须用百度云吗？¶

ESP32-Korvo-DU1906 开发板例程只限于使用百度云进行测试，并且需要 Profile。

请联系百度云，了解相关商务接入条款，见语音服务使用准备。

乐鑫官网提供的网络电话例程是否支持 RTP？¶

ESP-ADF 当前默认提供的网络电话协议是基于 SIP 实现的 VoIP，协议部分有用到 RTP。

可使用 Espressif SDK ESP-ADF 下的 VOIP 例程。

ESP-ADF 中 SIP 协议是否开源？¶

目前协议未开源，以 lib 形式供外部调用。

ESP-ADF 例程能否实现蓝牙耳机的音量调节功能？¶

如：pipeline_a2dp_sink_and_hfp, pipeline_a2dp_sink_stream, pipeline_bt_sink

目前 ESP-ADF 还不支持 AVRCP 的调音操作，ESP-IDF release/v4.0 及以上版本已经支持了，您可以尝试使用 ESP-IDF 中的 a2dp_sink 例程和 a2dp_source 例程对跑。

后续会在 ADF 的例程中直接支持。

我想在 ESP32-LyraT 的 I2C 接一个传感器使用，请问有如何读取 I2C 设备数据的例程吗？¶

请参考 i2c 例程。

如何输出 32 位的 I2S 音频数据？¶

重新写一个 my_i2s_write 函数调用 i2s_write_expand，然后把 my_i2s_write 以 audio_element_set_write_cb 的形式替换 i2s_stream element 的 write 函数。

int my_i2s_write(audio_element_handle_t self, char *buffer, int len, TickType_t ticks_to_wait, void *context)
{
  i2s_stream_t *i2s = (i2s_stream_t *)audio_element_getdata(self);
  size_t bytes_written = 0;
  i2s_write_expand(i2s->config.i2s_port, buffer, len, 16, 32, &bytes_written, ticks_to_wait);
  return bytes_written;
}

  i2s_stream_cfg_t i2s_writer = I2S_STREAM_CFG_DEFAULT();
  i2s_writer.type = AUDIO_STREAM_WRITER;
  i2s_writer.stack_in_ext = true;
  i2s_writer.i2s_config.sample_rate = 48000;
  i2s_writer.i2s_config.mode = I2S_MODE_MASTER | I2S_MODE_TX;
  i2s_writer.i2s_config.bits_per_sample = 32; //for cupid digital loopback
  audio_element_handle_t my_i2s = i2s_stream_init(&i2s_writer);
  audio_element_set_write_cb(my_i2s, my_i2s_write, NULL);

请问为何用 ESP-ADF 和 ESP-IDF v4.1 编译 example/get-started/play-pm3 时总是报错？¶

错误日志：fatal error: audio_type_def.h: No such file or directory

文件 audio_type_def.h 位于 ESP-ADF 的 esp-adf-libs 中。如果在编译过程中找不到该文件，则说明 ESP-ADF v2.4 可能未被正确检测出，特别是子模块可能尚未更新。

要正确检测 ESP-ADF v2.4，请按照更新至一个稳定发布版本中所述的步骤进行操作。

尝试执行以下命令并重复编译。
cd $ADF_PATH
git fetch
git checkout v2.4
git submodule update --init --recursive

请问官方有没有可以支持 ESP-IDF v4.4 的 ESP-ADF 版本？¶

ESP-ADF Release v2.4 支持 ESP-IDF v3.3，v4.1，v4.2，V4.3 和 v4.4。

加入 DuerOS 是否会将 ESP32-LyraT 开发板的录音功能全程占用？¶

目前的设计是全程占用录音数据。但是您可以通过使能 I2S_stream 的 multi_output 功能，让录音的数据通过这个通道输出到想要的地方。

ESP32-LyraT v4.3 不支持 DuerOS 吗？烧进去 DuerOS 固件，机器一直重启，如何解决？¶

可以将 RAM 设置为 64 M 或是自动 Component config -> ESP32 Specific -> SPI RAM config -> Type of SPIRAM in use -> select ESP-PSRAM64。

ESP-ADF 支持语音识别关键词自定义开发吗？¶

暂时还未开放语音训练接口，您可以直接使用免费唤醒词 “嗨，乐鑫”。如果您有定制需求，可以发送邮件至 Sales@espressif.com 咨询。

ESP-ADF 是否支持 ESP32-LyraTD-MSC V2.1 开发板跑 Alexa 例程？¶

ESP-ADF 中还没有直接支持 Alexa 的例程，对于 Alexa 例程，请参考 esp-va-sdk。

ESP32 关于语音识别方面，要能本地化，能否推荐相应的开发板？¶

推荐使用 ESP32-Lyrat-Mini 开发板或者 ESP32-S3-Korvo-2 开发板来实现本地化。

ESP32 是否有同时支持 MIC 和 AUX 拾音的开发板？¶

ESP32-lyraT-4.3 开发板支持 MIC 和 AUX 拾音。

如何利用 ESP32-LyraT 开发板实现通话功能？¶

可参考语音通话例程 voip。

ESP32 系列音频开发板支持多大功率的扬声器？¶

ESP32 开发板默认使用 NS4150 的 PA，一般不超过 3 W 大小。

如果有另外需求，可以更换 PA 设计。

乐鑫的语音唤醒方案对环境噪声是否有一定的要求？¶

当前乐鑫的语音方案可以满足信噪比 5 dB 以内的环境要求，对于一些固定的噪音场景还可以做到 0 dB 以内（需要针对实际产品进行优化）。

ESP32 的 AI 开发板上有 AUX 输入，MIC 就无法拾音了吗？¶

ESP-ADF 开发框架可以选择多种方式拾音，有 MIC 输入和 Line-in。
拾音方式选择如下：

typedef enum {
  AUDIO_HAL_CODEC_MODE_ENCODE = 1, /*! <select adc */      // MIC pickup
  AUDIO_HAL_CODEC_MODE_DECODE, /*! <select dac*/
  AUDIO_HAL_CODEC_MODE_BOTH, /*! <select both adc and dac */   //  MIC + speaker
  AUDIO_HAL_CODEC_MODE_LINE_IN, /*! <set adc channel */,             // microphone pickup
} Audio_hal_codec_mode_t;

拾音方式配置如下：

audio_board_handle_t board_handle = audio_board_init();
audio_hal_ctrl_codec(board_handle->audio_hal, AUDIO_HAL_CODEC_MODE_DECODE, AUDIO_HAL_CTRL_START);     //若要 MIC 拾音，修改这个配置选项。

使用 ESP32-WROVER-B 模组 + ES8311 设计音频开发板，MCLK 时钟可选择哪些管脚？¶

硬件上 MCLK 只能使用 GPIO0、GPIO1、GPIO3 管脚，不可使用其他管脚，可阅读《ESP32 技术规格书》的 IO_MUX 表内的 CLK_OUT*，默认使用 GPIO0。

可参考 ESP32-LyraT-Mini 开发板的硬件原理图设计。

管脚分配可参见 ESP32-LyraT-Mini V1.2 Hardware Reference。

ESP32-WROVER-E 模组使用一路 I2S 是否可实现同时播音和录音？¶

使用一路 I2S 可以实现同时播音和录音。可以参考 ESP32-LyraT 开发板入门指南。

乐鑫模块是否支持 Spotify Connect？¶

:CHIP: ESP32 | ESP32-S2 | ESP32-S3 :

当前不支持，建议考虑使用 dlna，可以达到类似的效果。

ESP32-Korvo-DU1906 开发板运行 korvo_du1906 例程重启，错误提示如下：Guru Meditation Error: Core 0 panic’ed (IllegalInstruction). Exception was unhandled，如何解决？¶

建议检查供电。

为整个系统提供电源。建议使用至少 5 V/2 A 电源适配器供电，保证供电稳定。

ESP-DSP fft 可以运行 4096、8192 以及更多采样吗？¶

可以，最大支持到 32 K 采样。最大值可以在 menuconfig 中配置，以 fft demo 为例，为 idf.py menuconfig -> Component config -> DSP Library -> Maximum FFT length -> (*)32768。

ESP32 如何连接麦克风？¶

如果连接数字麦克风，可以连接 I2S 外设。

如果连接模拟麦克风，可以连接 ADC 外设。

ESP32 是否支持模拟音频或是数字音频输出？¶

ESP32 支持 DAC 模拟音频输出，可以使用它播放提示音等简单音频。

ESP32 支持 PWM 模拟音频输出，相比 DAC 效果稍好，演示代码：esp-iot-solution。

ESP32 同时支持 I2S 数字音频输出，I2S 可配置引脚可以查看《ESP32 技术规格书》外设接口和传感器章节。