实机验证通过后,按 Kapi 无屏底座路线补齐 Pendant RTC 吊坠项目的迁移修复。 1. BLE 配网与资源隔离 - sdkconfig.defaults 开启 BT 优先 PSRAM 分配,并将 LWIP socket 上限提升到 20 - sdkconfig.defaults.esp32s3 允许 BSS/NOINIT 放入 PSRAM,释放内部 SRAM 给 BLE/WiFi/RTC - 配网模式 codec 使用 StartOutputOnly(),跳过麦克风 RX DMA 和 ES7210 输入链路 - ResetWifiConfiguration() 改为独立 wifi_reset task,避免在 iot_button/esp_timer 回调中阻塞延时 - WifiBoard 增加 IsWifiConfigMode(),供启动阶段判断是否走配网资源隔离路径 2. 音频底噪与 DMA 残留修复 - AudioCodec 增加 StartOutputOnly(),支持仅启动扬声器输出 - RTC 音频通道打开后灌入 200ms silence PCM,覆盖 I2S DMA 残留数据 - 软退出进入待命前重启 codec output 并再次灌静音,减少待命音/欢迎语前杂音 - box_audio_codec 在无硬件回采时使用 channel_mask=0,避免 I2S slot mask 被错误污染 3. 软件 loopback AEC - 引入 esp_aec 底层同步 API,使用 DAC 输出复制构建 ref ring - 上行 mic PCM 与延迟 ref 做同步消回声,适配无屏无硬件回采的 Pendant 形态 - AEC 采用 lazy init,减少启动阶段对 WiFi/BLE 内部 SRAM 的压力 - ref 静音时直接 passthrough,避免 AI 静音后误压制用户语音 - 在 player_pipeline_write 和 codec->OutputData 两条下行路径都追加 ref hook 4. RTC 连接稳定性与软退出 - VolcRtcProtocol 增加 LeaveRoom(bool notify_closed),支持 stop 房间但保留 rtc_handle - hibernate 路径使用 LeaveRoom(false),避免关闭回调顺手关掉 codec output 导致待命音无声 - LeaveRoom/ForceRebuildEngine 重置 downlink_is_pcm_ 和首包标志,避免本地 Opus 音效被当 PCM 播成杂音 - OpenAudioChannel 连续失败 3 次后 ForceRebuildEngine,清理 RTC SDK 内部异常状态 - 加入 DIAG-RTC socket/heap/PSRAM/RSSI 日志,便于定位 ICE socket 和内存问题 5. Dialog watchdog 与 BOOT 唤醒 - Dialog watchdog 到期不再写 reboot_dlg_idle 后 esp_restart - 新增 EnterIdleHibernate():软退房、清空残留音频队列、关闭麦克风、播放待命音后静默 - 新增 WakeFromHibernate():BOOT 唤醒后复用 RTC engine 并通过 ToggleChatState() 重连 RTC - BOOT 单击优先判断 IsHibernating(),异步唤醒,避免走普通按键状态机 - hibernate 期间禁止 PowerSaveTimer 进入 Light Sleep,保护 I2C/codec 总线 6. 文档与衍生项目沉淀 - 更新石头光源属性检测方案文档 - 将 Pendant 实测通过的软退出、AEC、BLE 配网隔离经验同步到衍生项目移植规则
86 lines
2.2 KiB
C++
86 lines
2.2 KiB
C++
#include "audio_codec.h"
|
|
#include "board.h"
|
|
#include "settings.h"
|
|
|
|
#include <esp_log.h>
|
|
#include <cstring>
|
|
#include <driver/i2s_common.h>
|
|
|
|
#define TAG "AudioCodec"
|
|
|
|
AudioCodec::AudioCodec() {
|
|
}
|
|
|
|
AudioCodec::~AudioCodec() {
|
|
}
|
|
|
|
void AudioCodec::OutputData(std::vector<int16_t>& data) {
|
|
Write(data.data(), data.size());
|
|
}
|
|
|
|
bool AudioCodec::InputData(std::vector<int16_t>& data) {
|
|
int samples = Read(data.data(), data.size());
|
|
if (samples > 0) {
|
|
return true;
|
|
}
|
|
return false;
|
|
}
|
|
|
|
void AudioCodec::Start() {
|
|
Settings settings("audio", false);
|
|
output_volume_ = settings.GetInt("output_volume", output_volume_);
|
|
if (output_volume_ <= 0) {
|
|
ESP_LOGW(TAG, "Output volume value (%d) is too small, setting to default (10)", output_volume_);
|
|
output_volume_ = 10;
|
|
}
|
|
|
|
ESP_ERROR_CHECK(i2s_channel_enable(tx_handle_));
|
|
ESP_ERROR_CHECK(i2s_channel_enable(rx_handle_));
|
|
|
|
EnableInput(true);
|
|
EnableOutput(true);
|
|
ESP_LOGI(TAG, "Audio codec started");
|
|
}
|
|
|
|
void AudioCodec::StartOutputOnly() {
|
|
Settings settings("audio", false);
|
|
output_volume_ = settings.GetInt("output_volume", output_volume_);
|
|
if (output_volume_ <= 0) {
|
|
ESP_LOGW(TAG, "Output volume value (%d) is too small, setting to default (10)", output_volume_);
|
|
output_volume_ = 10;
|
|
}
|
|
|
|
ESP_ERROR_CHECK(i2s_channel_enable(tx_handle_));
|
|
EnableOutput(true);
|
|
ESP_LOGI(TAG, "Audio codec started in output-only mode");
|
|
}
|
|
|
|
void AudioCodec::SetOutputVolume(int volume) {
|
|
output_volume_ = volume;
|
|
ESP_LOGI(TAG, "Set output volume to %d", output_volume_);
|
|
|
|
Settings settings("audio", true);
|
|
settings.SetInt("output_volume", output_volume_);
|
|
}
|
|
|
|
void AudioCodec::SetOutputVolumeRuntime(int volume) {
|
|
output_volume_ = volume;
|
|
ESP_LOGI(TAG, "将运行时输出音量设置为:%d", output_volume_);
|
|
}
|
|
|
|
void AudioCodec::EnableInput(bool enable) {
|
|
if (enable == input_enabled_) {
|
|
return;
|
|
}
|
|
input_enabled_ = enable;
|
|
ESP_LOGI(TAG, "Set input enable to %s", enable ? "true" : "false");
|
|
}
|
|
|
|
void AudioCodec::EnableOutput(bool enable) {
|
|
if (enable == output_enabled_) {
|
|
return;
|
|
}
|
|
output_enabled_ = enable;
|
|
ESP_LOGI(TAG, "Set output enable to %s", enable ? "true" : "false");
|
|
}
|