收藏官网首页
查看: 220|回复: 0

自定义开发板指南:为AI语音聊天机器人项目定制ESP32初始...

148

主题

429

帖子

1万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
13072
跳转到指定楼层
楼主
 楼主| 发表于 7 天前 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
注册成为机智云开发者,手机加虚拟设备快速开发
自定义开发板指南:为AI语音聊天机器人项目定制ESP32初始化程序




本指南介绍如何为AI语音聊天机器人项目定制一个新的开发板初始化程序。支持50多种ESP32系列开发板,每个开发板的初始化代码都放在对应的目录下。

重要提示
警告: 对于自定义开发板,当IO配置与原有开发板不同时,切勿直接覆盖原有开发板的配置编译固件。必须创建新的开发板类型,或者通过config.json文件中的builds配置不同的name和sdkconfig宏定义来区分。使用 python scripts/release.py [开发板目录名字] 来编译打包固件。
如果直接覆盖原有配置,将来OTA升级时,您的自定义固件可能会被原有开发板的标准固件覆盖,导致您的设备无法正常工作。每个开发板有唯一的标识和对应的固件升级通道,保持开发板标识的唯一性非常重要。
目录结构

每个开发板的目录结构通常包含以下文件:
  • xxx_board.cc - 主要的板级初始化代码,实现了板子相关的初始化和功能
  • config.h - 板级配置文件,定义了硬件管脚映射和其他配置项
  • config.json - 编译配置,指定目标芯片和特殊的编译选项
  • README.md - 开发板相关的说明文档

定制开发板步骤
1. 创建新的开发板目录
首先在boards/目录下创建一个新的目录,例如my-custom-board/:

  1. mkdir main/boards/my-custom-board
复制代码

2. 创建配置文件

config.h
在config.h中定义所有的硬件配置,包括:
  • 音频采样率和I2S引脚配置
  • 音频编解码芯片地址和I2C引脚配置
  • 按钮和LED引脚配置
  • 显示屏参数和引脚配置
参考示例(来自lichuang-c3-dev):

  1. #ifndef _BOARD_CONFIG_H_
  2. #define _BOARD_CONFIG_H_

  3. #include <driver/gpio.h>

  4. // 音频配置
  5. #define AUDIO_INPUT_SAMPLE_RATE  24000
  6. #define AUDIO_OUTPUT_SAMPLE_RATE 24000

  7. #define AUDIO_I2S_GPIO_MCLK GPIO_NUM_10
  8. #define AUDIO_I2S_GPIO_WS   GPIO_NUM_12
  9. #define AUDIO_I2S_GPIO_BCLK GPIO_NUM_8
  10. #define AUDIO_I2S_GPIO_DIN  GPIO_NUM_7
  11. #define AUDIO_I2S_GPIO_DOUT GPIO_NUM_11

  12. #define AUDIO_CODEC_PA_PIN       GPIO_NUM_13
  13. #define AUDIO_CODEC_I2C_SDA_PIN  GPIO_NUM_0
  14. #define AUDIO_CODEC_I2C_SCL_PIN  GPIO_NUM_1
  15. #define AUDIO_CODEC_ES8311_ADDR  ES8311_CODEC_DEFAULT_ADDR

  16. // 按钮配置
  17. #define BOOT_BUTTON_GPIO        GPIO_NUM_9

  18. // 显示屏配置
  19. #define DISPLAY_SPI_SCK_PIN     GPIO_NUM_3
  20. #define DISPLAY_SPI_MOSI_PIN    GPIO_NUM_5
  21. #define DISPLAY_DC_PIN          GPIO_NUM_6
  22. #define DISPLAY_SPI_CS_PIN      GPIO_NUM_4

  23. #define DISPLAY_WIDTH   320
  24. #define DISPLAY_HEIGHT  240
  25. #define DISPLAY_MIRROR_X true
  26. #define DISPLAY_MIRROR_Y false
  27. #define DISPLAY_SWAP_XY true

  28. #define DISPLAY_OFFSET_X  0
  29. #define DISPLAY_OFFSET_Y  0

  30. #define DISPLAY_BACKLIGHT_PIN GPIO_NUM_2
  31. #define DISPLAY_BACKLIGHT_OUTPUT_INVERT true

  32. #endif // _BOARD_CONFIG_H_
  33. config.json
  34. 在config.json中定义编译配置:

  35. {
  36.     "target": "esp32s3",  // 目标芯片型号: esp32, esp32s3, esp32c3等
  37.     "builds": [
  38.         {
  39.             "name": "my-custom-board",  // 开发板名称
  40.             "sdkconfig_append": [
  41.                 // 额外需要的编译配置
  42.                 "CONFIG_ESPTOOLPY_FLASHSIZE_8MB=y",
  43.                 "CONFIG_PARTITION_TABLE_CUSTOM_FILENAME=\"partitions_8M.csv\""
  44.             ]
  45.         }
  46.     ]
  47. }
  48. 3. 编写板级初始化代码
  49. 创建一个my_custom_board.cc文件,实现开发板的所有初始化逻辑。

  50. 一个基本的开发板类定义包含以下几个部分:

  51. 类定义:继承自WifiBoard或ML307Board
  52. 初始化函数:包括I2C、显示屏、按钮、IoT等组件的初始化
  53. 虚函数重写:如GetAudioCodec()、GetDisplay()、GetBacklight()等
  54. 注册开发板:使用DECLARE_BOARD宏注册开发板
  55. #include "wifi_board.h"
  56. #include "audio_codecs/es8311_audio_codec.h"
  57. #include "display/lcd_display.h"
  58. #include "application.h"
  59. #include "button.h"
  60. #include "config.h"
  61. #include "iot/thing_manager.h"

  62. #include <esp_log.h>
  63. #include <driver/i2c_master.h>
  64. #include <driver/spi_common.h>

  65. #define TAG "MyCustomBoard"

  66. // **字体
  67. LV_FONT_DECLARE(font_puhui_16_4);
  68. LV_FONT_DECLARE(font_awesome_16_4);

  69. class MyCustomBoard : public WifiBoard {
  70. private:
  71.     i2c_master_bus_handle_t codec_i2c_bus_;
  72.     Button boot_button_;
  73.     LcdDisplay* display_;

  74.     // I2C初始化
  75.     void InitializeI2c() {
  76.         i2c_master_bus_config_t i2c_bus_cfg = {
  77.             .i2c_port = I2C_NUM_0,
  78.             .sda_io_num = AUDIO_CODEC_I2C_SDA_PIN,
  79.             .scl_io_num = AUDIO_CODEC_I2C_SCL_PIN,
  80.             .clk_source = I2C_CLK_SRC_DEFAULT,
  81.             .glitch_ignore_cnt = 7,
  82.             .intr_priority = 0,
  83.             .trans_queue_depth = 0,
  84.             .flags = {
  85.                 .enable_internal_pullup = 1,
  86.             },
  87.         };
  88.         ESP_ERROR_CHECK(i2c_new_master_bus(&i2c_bus_cfg, &codec_i2c_bus_));
  89.     }

  90.     // SPI初始化(用于显示屏)
  91.     void InitializeSpi() {
  92.         spi_bus_config_t buscfg = {};
  93.         buscfg.mosi_io_num = DISPLAY_SPI_MOSI_PIN;
  94.         buscfg.miso_io_num = GPIO_NUM_NC;
  95.         buscfg.sclk_io_num = DISPLAY_SPI_SCK_PIN;
  96.         buscfg.quadwp_io_num = GPIO_NUM_NC;
  97.         buscfg.quadhd_io_num = GPIO_NUM_NC;
  98.         buscfg.max_transfer_sz = DISPLAY_WIDTH * DISPLAY_HEIGHT * sizeof(uint16_t);
  99.         ESP_ERROR_CHECK(spi_bus_initialize(SPI2_HOST, &buscfg, SPI_DMA_CH_AUTO));
  100.     }

  101.     // 按钮初始化
  102.     void InitializeButtons() {
  103.         boot_button_.OnClick([this]() {
  104.             auto& app = Application::GetInstance();
  105.             if (app.GetDeviceState() == kDeviceStateStarting && !WifiStation::GetInstance().IsConnected()) {
  106.                 ResetWifiConfiguration();
  107.             }
  108.             app.ToggleChatState();
  109.         });
  110.     }

  111.     // 显示屏初始化(以ST7789为例)
  112.     void InitializeDisplay() {
  113.         esp_lcd_panel_io_handle_t panel_io = nullptr;
  114.         esp_lcd_panel_handle_t panel = nullptr;
  115.         
  116.         esp_lcd_panel_io_spi_config_t io_config = {};
  117.         io_config.cs_gpio_num = DISPLAY_SPI_CS_PIN;
  118.         io_config.dc_gpio_num = DISPLAY_DC_PIN;
  119.         io_config.spi_mode = 2;
  120.         io_config.pclk_hz = 80 * 1000 * 1000;
  121.         io_config.trans_queue_depth = 10;
  122.         io_config.lcd_cmd_bits = 8;
  123.         io_config.lcd_param_bits = 8;
  124.         ESP_ERROR_CHECK(esp_lcd_new_panel_io_spi(SPI2_HOST, &io_config, &panel_io));

  125.         esp_lcd_panel_dev_config_t panel_config = {};
  126.         panel_config.reset_gpio_num = GPIO_NUM_NC;
  127.         panel_config.rgb_ele_order = LCD_RGB_ELEMENT_ORDER_RGB;
  128.         panel_config.bits_per_pixel = 16;
  129.         ESP_ERROR_CHECK(esp_lcd_new_panel_st7789(panel_io, &panel_config, &panel));
  130.         
  131.         esp_lcd_panel_reset(panel);
  132.         esp_lcd_panel_init(panel);
  133.         esp_lcd_panel_invert_color(panel, true);
  134.         esp_lcd_panel_swap_xy(panel, DISPLAY_SWAP_XY);
  135.         esp_lcd_panel_mirror(panel, DISPLAY_MIRROR_X, DISPLAY_MIRROR_Y);
  136.         
  137.         // 创建显示屏对象
  138.         display_ = new SpiLcdDisplay(panel_io, panel,
  139.                                     DISPLAY_WIDTH, DISPLAY_HEIGHT,
  140.                                     DISPLAY_OFFSET_X, DISPLAY_OFFSET_Y,
  141.                                     DISPLAY_MIRROR_X, DISPLAY_MIRROR_Y, DISPLAY_SWAP_XY,
  142.                                     {
  143.                                         .text_font = &font_puhui_16_4,
  144.                                         .icon_font = &font_awesome_16_4,
  145.                                         .emoji_font = font_emoji_32_init(),
  146.                                     });
  147.     }

  148.     // IoT设备初始化
  149.     void InitializeIot() {
  150.         auto& thing_manager = iot::ThingManager::GetInstance();
  151.         thing_manager.AddThing(iot::CreateThing("Speaker"));
  152.         thing_manager.AddThing(iot::CreateThing("Screen"));
  153.         // 可以添加更多IoT设备
  154.     }

  155. public:
  156.     // 构造函数
  157.     MyCustomBoard() : boot_button_(BOOT_BUTTON_GPIO) {
  158.         InitializeI2c();
  159.         InitializeSpi();
  160.         InitializeDisplay();
  161.         InitializeButtons();
  162.         InitializeIot();
  163.         GetBacklight()->SetBrightness(100);
  164.     }

  165.     // 获取音频编解码器
  166.     virtual AudioCodec* GetAudioCodec() override {
  167.         static Es8311AudioCodec audio_codec(
  168.             codec_i2c_bus_,
  169.             I2C_NUM_0,
  170.             AUDIO_INPUT_SAMPLE_RATE,
  171.             AUDIO_OUTPUT_SAMPLE_RATE,
  172.             AUDIO_I2S_GPIO_MCLK,
  173.             AUDIO_I2S_GPIO_BCLK,
  174.             AUDIO_I2S_GPIO_WS,
  175.             AUDIO_I2S_GPIO_DOUT,
  176.             AUDIO_I2S_GPIO_DIN,
  177.             AUDIO_CODEC_PA_PIN,
  178.             AUDIO_CODEC_ES8311_ADDR);
  179.         return &audio_codec;
  180.     }

  181.     // 获取显示屏
  182.     virtual Display* GetDisplay() override {
  183.         return display_;
  184.     }
  185.    
  186.     // 获取背光控制
  187.     virtual Backlight* GetBacklight() override {
  188.         static PwmBacklight backlight(DISPLAY_BACKLIGHT_PIN, DISPLAY_BACKLIGHT_OUTPUT_INVERT);
  189.         return &backlight;
  190.     }
  191. };

  192. // 注册开发板
  193. DECLARE_BOARD(MyCustomBoard);
复制代码

4. 创建README.md

在README.md中说明开发板的特性、硬件要求、编译和烧录步骤:
常见开发板组件
1. 显示屏
项目支持多种显示屏驱动,包括:
ST7789 (SPI)
ILI9341 (SPI)
SH8601 (QSPI)
等…

2. 音频编解码器
支持的编解码器包括:
ES8311 (常用)
ES7210 (麦克风阵列)
AW88298 (功放)
等…

3. 电源管理
一些开发板使用电源管理芯片:
AXP2101
其他可用的PMIC

4. IoT设备
可以添加各种IoT设备,让AI能够”看到”和控制:
Speaker (扬声器)
Screen (屏幕)
Battery (电池)
Light (灯光)
等…

开发板类继承关系
Board - 基础板级类WifiBoard - WiFi连接的开发板
ML307Board - 使用4G模块的开发板

开发技巧
1、参考相似的开发板:如果您的新开发板与现有开发板有相似之处,可以参考现有实现
2、分步调试:先实现基础功能(如显示),再添加更复杂的功能(如音频)
3、管脚映射:确保在config.h中正确配置所有管脚映射
4、检查硬件兼容性:确认所有芯片和驱动程序的兼容性

可能遇到的问题
1、显示屏不正常:检查SPI配置、镜像设置和颜色反转设置
2、音频无输出:检查I2S配置、PA使能引脚和编解码器地址
3、无法连接网络:检查WiFi凭据和网络配置
4、无法与服务器通信:检查MQTT或WebSocket配置

参考资料




您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

加入Q群 返回顶部

版权与免责声明 © 2006-2024 Gizwits IoT Technology Co., Ltd. ( 粤ICP备11090211号 )

快速回复 返回顶部 返回列表
在线咨询