注：* 為必填項

請在報名階段填寫 ↓

?

* 1、項目功能介紹

本項目是以ESP32為核心，盡可能榨干其MCU的能力，打造一個多功能集合的綜合性極強的小模塊，功能包含：

?

1、語音識別。將數字麥克風通過I2S連接到ESP32，經過esp-skainet離線語音識別，自定義語音命令詞最大個數為 100

2、物體識別、文字識別（車牌識別）。基于百度智能云，將攝像頭獲取的RGB圖像轉為JPG，經過base64和urlcode編碼上傳到百度云后獲取識別結果來顯示。

3、顏色識別。可由攝像頭獲取的圖像將RGB轉為HSL判斷每一個像素點，進行顏色塊的識別，獲取顏色塊坐標。

4、家電控制。可由語音設置空調類型，也可以在設置界面設置空調種類，當前支持格力、美的、海爾空調，空調碼庫由IREXT提供，碼庫存放在flash的spiffs分區中。

5、LVGL。基于LVGL 7.6.0，10余個界面切換。

6、ADC按鍵。在ESP32引腳極其不夠的情況下，使用一個IO口，經過電阻分壓可讀取三個按鍵的狀態。

7、FFT頻譜，將數字麥克風通過I2S連接到ESP32，經過軟件fft獲得頻譜通過lvgl img顯示。

8、小游戲。移植2048和貪吃蛇游戲。

9、每日雞湯。進入每日雞湯界面后，HTTP隨機獲取一句話顯示。

?

?

*2、項目屬性

首次公開，軟硬件均為原創。

?

注：請說明項目是否首次公開；項目是否為原創；項目是否曾經在其他比賽中獲獎，若有獲獎則敘述獲獎詳情；項目是否在學校參加過答辯。

?

* 3、開源協議

CC-BY-NC-SA 3.0

禁止將此項目放淘寶或者閑魚上售賣！！

注：利他即利己，請認真閱讀下述內容。

1. 擁抱開源，賦予項目無限價值。建議項目核心功能開源80%以上；
2. 若某一部分功能不可替代且刪掉之后項目無法解決對應的問題，則這一部分實現的功能就是項目的核心功能；比如設計了一臺電子負載且設計了一款上位機軟件監控功率變化，則電子負載為核心功能，上位機軟件為輔助功能；比如電子負載中使用了一款隔離485模塊與上位機通信，則此485模塊實現的通訊功能為輔助功能；
3. 項目應選擇適合自己的開源協議，若項目引用其他開源項目，應注明來源并遵循原作者的開源協議規定；原創項目推薦使用GPL3.0開源協議；
4. 直接引用開源項目的原電路或原代碼實現的功能不可作為自己項目的核心功能、使用市場上通用模塊直接實現的功能不可作為自己項目的核心功能。

?

請在競賽階段填寫 ↓

?

*4、硬件部分

硬件部分采用了ESP32-WROVER模組內置 16Mb Flash +4Mb PSRAM

兩個3528紅外管

四個按鍵

一個數字麥克風 MSM261S4030H0高靈敏度數字硅麥芯片

一個顯示屏 可用1.3寸ST7789 240*240或者1.54寸 ST7789 240*240

電源采用AP3410 可提供1.2A電流

24P FPC攝像頭插座 可使用OV7725 OV2640 OV5640

串口轉TTL 使用CP2104

一個陀螺儀 MPU6050

原理圖：

1.3寸PCB:

1.5寸PCB：

?

?

?

注：推薦使用立創EDA。若選擇其他EDA工具，請在附件上傳PDF格式的原理圖，PDF格式的PCB圖紙，Gerber格式的PCB文件。這里可以詳細說明您的項目實現原理和機制、注意事項、調試方法、測試方法等。推薦圖文并茂的形式向別人介紹您的想法。

?

*5、軟件部分

軟件部分采用IDF 4.4開發

主界面顯示時間、天氣、溫度、日期、太空人小動畫、B站粉絲和wifi連接情況，

長按中鍵進入菜單選擇按鈕，菜單分別是

軟件框圖如下：

?

語音識別和人臉識別采用樂鑫開源的庫

ESP32如何顯示LVGL的外部flash字體

?

生成字體文件
使用LvglFontTool 這個工具，生成類型勾選XBF字體，外部BIN文件

會生成兩個文件，一個myFont.c 和一個bin文件

然后把bin文件放到spiffs分區 編譯的時候會自動燒錄到flash里面

改動myFont.c以獲取bin文件數據 第一次進入的時候初始化外部字體 讀取spiffs文件到內存里

?

#include "lvgl.h"
#include "stdio.h"
#include <stdlib.h>
#include <string.h>
#include "esp_system.h"

#include "esp_vfs.h"
#include "esp_spiffs.h"

typedef struct
{
? ? uint16_t min;
? ? uint16_t max;
? ? uint8_t bpp;
? ? uint8_t reserved[3];
} x_header_t;
typedef struct
{
? ? uint32_t pos;
} x_table_t;
typedef struct
{
? ? uint8_t adv_w;
? ? uint8_t box_w;
? ? uint8_t box_h;
? ? int8_t ofs_x;
? ? int8_t ofs_y;
? ? uint8_t r;
} glyph_dsc_t;

static x_header_t __g_xbf_hd = {
? ? .min = 0x0020,
? ? .max = 0xff1a,
? ? .bpp = 4,
};
char *Font_buff = NULL;
// static uint8_t __g_font_buf[240]; //如bin文件存在SPI FLASH可使用此buff
static void init_font(void)
{
? ? FILE *ff = fopen("/spiffs/myFont.bin", "r");
? ? if (ff == NULL)
? ? {
? ? ? ? printf("Failed to open file for reading");
? ? ? ? return;
? ? }
? ? fseek(ff, 0, SEEK_END);
? ? long lSize = ftell(ff);
? ? rewind(ff);
? ? printf("Lsize %ld", lSize);
? ? static uint8_t first_in = 1;
? ? if (first_in == 1)
? ? {
? ? ? ? first_in = 0;
? ? ? ? Font_buff = (char *)malloc(sizeof(char) * lSize);
? ? }
? ? int br = fread(Font_buff, 1, lSize, ff);
? ? printf("Bytes read %d", br);
? ? fclose(ff);
}
static uint8_t *__user_font_getdata(int offset, int size)
{
? ? //如字模保存在SPI FLASH, SPIFLASH_Read(__g_font_buf,offset,size);
? ? //如字模已加載到SDRAM,直接返回偏移地址即可如:return (uint8_t*)(sdram_fontddr+offset);
? ? static uint8_t first_in = 1;
? ? if (first_in == 1)//第一次進入的時候初始化外部字體
? ? {
? ? ? ? first_in = 0;
? ? ? ? init_font();
? ? }
? ? return (uint8_t*)(Font_buff+offset);
? ? // return __g_font_buf;
}

static const uint8_t *__user_font_get_bitmap(const lv_font_t *font, uint32_t unicode_letter)
{
? ? if (unicode_letter > __g_xbf_hd.max || unicode_letter < __g_xbf_hd.min)
? ? {
? ? ? ? return NULL;
? ? }
? ? uint32_t unicode_offset = sizeof(x_header_t) + (unicode_letter - __g_xbf_hd.min) * 4;
? ? uint32_t *p_pos = (uint32_t *)__user_font_getdata(unicode_offset, 4);
? ? if (p_pos[0] != 0)
? ? {
? ? ? ? uint32_t pos = p_pos[0];
? ? ? ? glyph_dsc_t *gdsc = (glyph_dsc_t *)__user_font_getdata(pos, sizeof(glyph_dsc_t));
? ? ? ? return __user_font_getdata(pos + sizeof(glyph_dsc_t), gdsc->box_w * gdsc->box_h * __g_xbf_hd.bpp / 8);
? ? }
? ? return NULL;
}

static bool __user_font_get_glyph_dsc(const lv_font_t *font, lv_font_glyph_dsc_t *dsc_out, uint32_t unicode_letter, uint32_t unicode_letter_next)
{
? ? if (unicode_letter > __g_xbf_hd.max || unicode_letter < __g_xbf_hd.min)
? ? {
? ? ? ? return NULL;
? ? }
? ? uint32_t unicode_offset = sizeof(x_header_t) + (unicode_letter - __g_xbf_hd.min) * 4;
? ? uint32_t *p_pos = (uint32_t *)__user_font_getdata(unicode_offset, 4);
? ? if (p_pos[0] != 0)
? ? {
? ? ? ? glyph_dsc_t *gdsc = (glyph_dsc_t *)__user_font_getdata(p_pos[0], sizeof(glyph_dsc_t));
? ? ? ? dsc_out->adv_w = gdsc->adv_w;
? ? ? ? dsc_out->box_h = gdsc->box_h;
? ? ? ? dsc_out->box_w = gdsc->box_w;
? ? ? ? dsc_out->ofs_x = gdsc->ofs_x;
? ? ? ? dsc_out->ofs_y = gdsc->ofs_y;
? ? ? ? dsc_out->bpp = __g_xbf_hd.bpp;
? ? ? ? return true;
? ? }
? ? return false;
}

//AliHYAiHei-Beta,,-1
//字模高度：24
//XBF字體,外部bin文件
lv_font_t myFont = {
? ? .get_glyph_bitmap = __user_font_get_bitmap,
? ? .get_glyph_dsc = __user_font_get_glyph_dsc,
? ? .line_height = 24,
? ? .base_line = 0,
};

? ? LV_FONT_DECLARE(myFont);
? ? lv_obj_t *label = lv_label_create(obj, NULL);
? ? lv_obj_set_style_local_text_font(label, LV_LABEL_PART_MAIN, LV_STATE_DEFAULT, &myFont);

對于物體和文字識別：

首先要在百度智能云上獲取token，然后把獲取到的圖像轉為JPG格式，再通過base64編碼和urlcode編碼得到的數據以post的形式上傳到百度進行識別，識別到結果后獲取json數據進行解析和顯示。

對于顏色識別：

將獲取到的圖像每一個像素點轉換為HSL后腐蝕，搜索腐蝕中心，再從腐蝕中心向外腐蝕，得到新的腐蝕中心

注：若您的項目涉及軟件開發，請在附件上傳對應的工程源碼。這里可以詳細說明您的軟件流程圖、功能模塊框圖、相關算法的解釋或科普、源碼結構、編譯環境的搭建和配置、源碼編譯方法、程序燒錄方法等。推薦圖文并茂的形式向別人介紹您的想法。

?

*6、BOM清單

?

注：項目涉及的BOM清單。這個位置請上傳BOM的截圖。清單詳情請以PDF的格式上傳到附件中。建議包括型號、品牌、名稱、封裝、采購渠道、用途等內容。具體內容和形式應以表達清楚項目構成為準。

?

*7、大賽LOGO驗證

請上傳包含大賽logo的項目圖片，logo以絲印形式印刷在PCB上面。

點擊zip下載大賽logo標識！ （大賽標識）.zip

?

* 8、演示您的項目并錄制成視頻上傳

?

視頻要求：請橫屏拍攝，分辨率不低于1280×720，格式Mp4/Mov，單個視頻大小限100M內；

視頻標題：立創電賽：{項目名稱}-{視頻模塊名稱}；如立創電賽：《自動駕駛》-團隊介紹。

?

更多詳情：https://diy.szlcsc.com/posts/06c94d90c2c447dfbd9ed7339ff4a5b1

?