Installing SDK

登錄 Ubuntu 20.04，打開終端，一次輸入以下 4 個(gè)命令：-

sudo apt install git

git clone https://github.com/QuickLogic-Corp/qorc-sdk.git

cd qorc-sdk

source envsetup.sh

這些將安裝 git（如果您沒有安裝它），克隆快速邏輯 sdk，創(chuàng)建一個(gè)名為 qorc-sdk 的文件夾并假設(shè)安裝所有內(nèi)容！

從現(xiàn)在開始，所有東西都必須安裝在 qorc-sdk 文件夾/目錄中。

接下來，重新啟動(dòng)您的 Ubuntu 機(jī)器/計(jì)算機(jī)。

如果 ARM 工具鏈和 TinyFPGA Programmer 沒有正確安裝，請(qǐng)按照以下步驟安裝：-

Installing ARM Toolchain

重新啟動(dòng)計(jì)算機(jī)后，再次打開終端并鍵入以下 3 個(gè)命令：-

cd qorc-sdk

mkdir arm_toolchain_install 

wget -O gcc-arm-none-eabi-9-2020-q2-update-x86_64-linux.tar.bz2 -q --show-progress --progress=bar:force 2>&1 "https://developer.arm.com/-/media/Files/downloads/gnu-rm/9-2020q2/gcc-arm-none-eabi-9-2020-q2-update-x86_64-linux.tar.bz2?revision=05382cca-1721-44e1-ae19-1e7c3dc96118"


tar xvjf gcc-arm-none-eabi-9-2020-q2-update-x86_64-linux.tar.bz2 -C ${PWD}/arm_toolchain_install

Installing Python 3 and TinyFPGA programmer

在命令終端上鍵入以下命令：-

cd

cd qorc-sdk

sudo apt install python3-pip

git clone --recursive https://github.com/QuickLogic-Corp/TinyFPGA-Programmer-Application.git

pip3 install tinyfpgab

理想情況下，這一步不應(yīng)該是必要的，但不知何故，這些是我所說的缺失或不起作用的依賴項(xiàng)

修改源代碼

我檢查了分支 ssi-audio-sensor 并構(gòu)建了一個(gè)新的 qf_ssi_ai_app.bin。我也使用 dcl_import.ssf 作為插件。音頻傳感器在那里，但 DCL 仍然捕獲加速度計(jì)數(shù)據(jù)。

為了解決這個(gè)問題，我在編譯代碼qf_apps/qf_ssi_ai_app/inc/Fw_global_config.h之前修改了 Fw_global_config.h文件

/* Settings for selecting either Audio or an I2C sensor, Enable only one of these mode */
#define SSI_SENSOR_SELECT_AUDIO (1) 
// 1 => Select Audio data for live-streaming or recognition modes
#define SSI_SENSOR_SELECT_SSSS (0) 
// 0 => Disable SSSS sensor data for live-streaming of recognition modes

閃爍的音頻采集固件（數(shù)據(jù)采集模式）

Compile/Build an Example code

從 Ubuntu 終端轉(zhuǎn)到 qorc-sdk 目錄，將工具鏈添加到路徑，將目錄更改為 qf_ssi_ai_app 項(xiàng)目并使用以下命令使用源代碼構(gòu)建一個(gè) bin 文件：-

cd qorc-sdk

export PATH=${PWD}/arm_toolchain_install/gcc-arm-none-eabi-9-2020-q2-update/bin:$PATH

cd

cd qorc-sdk/qf_apps/qf_ssi_ai_app/GCC_Project

make

Flash/Upload code to QuickLogic board

使用 USB 數(shù)據(jù)線將 Quick Feather 板連接到計(jì)算機(jī)，按下板上的重啟按鈕。當(dāng) Bule LED 閃爍時(shí)，按下用戶按鈕。一個(gè)閃爍的綠色 LED 應(yīng)該開始閃爍，這意味著該板處于上傳模式

在 Ubuntu 上打開終端并輸入以下命令以刷新固件：-

cd

cd qorc-sdk/qf_apps/qf_ssi_ai_app/GCC_Project

sudo chmod a+rw /dev/ttyACM0

alias qfprog="python3 /home/computer/qorc-sdk/TinyFPGA-Programmer-Application/tinyfpga-programmer-gui.py"

qfprog --port /dev/ttyACM0 --m4app output/bin/qf_ssi_ai_app.bin --mode m4

閃爍應(yīng)該像這樣發(fā)生：-

刷機(jī)固件

?

?

SensiML 數(shù)據(jù)采集實(shí)驗(yàn)室

下一部分使用 SensiML Data Capture Lab 軟件在單獨(dú)的 Windows 10 計(jì)算機(jī)上完成。

這部分由Arduino “have11” Guy在他的 QuickFeather 開發(fā)工具包和 SensiML 入門項(xiàng)目中進(jìn)行了徹底的解釋。因此，我不會(huì)重復(fù)相同的內(nèi)容進(jìn)行詳細(xì)說明。一切幾乎完全相同，除了我將使用麥克風(fēng)而不是加速度計(jì)來捕獲聲音數(shù)據(jù)。

以下是所有步驟的簡要說明：

第 1 步：用于從麥克風(fēng)捕獲音頻的 SSF 文件

ssf文件附在下面，使用此 ssf 文件將啟用從 Quick Logic 開發(fā)套件的麥克風(fēng)獲取數(shù)據(jù)。此配置加載到 SensiML 數(shù)據(jù)捕獲實(shí)驗(yàn)室。（詳見本項(xiàng)目）

{
    "name": "QuickFeather SimpleStream",
    "uuid": "10b1db20-48a5-4442-a40e-fc530b456c89",
    "collection_methods": [
        {
            "name": "live",
            "display_name": "Live Stream Capture",
            "storage_path": null,
            "is_default": true
        }
    ],
    "device_connections": [
        {
            "name": "serial_simple_stream",
            "display_name": "Data Stream Serial Port",
            "value": 1,
            "is_default": true,
            "serial_port_configuration": {
                "com_port": null,
                "baud": 460800,
                "stop_bits": 1,
                "parity": 0,
                "handshake": 0,
                "max_live_sample_rate": 3301
            }
        },
        {
            "name": "wifi_simple",
            "display_name": "Simple Stream over WiFi",
            "value": 2,
            "is_default": true,
            "wifi_configuration": {
                "use_mqttsn": false,
                "use_external_broker": false,
                "external_broker_address":"",
                "broker_port":1885,
                "device_ip_address": null,
                "device_port": 0,
                "max_live_sample_rate": 1000000
            }
        }
    ],
    "capture_sources": [
        {
            "max_throughput": 0,
            "name": "Motion",
            "part": "MC3635",
            "sample_rates": [
                333, 250, 200, 100, 50
            ],
            "is_default": true,
            "sensors": [
                {
                    "column_count": 3,
                    "is_default": true,
                    "column_suffixes": [
                        "X",
                        "Y",
                        "Z"
                    ],
                    "type": "Accelerometer",
                    "parameters": [],
                    "sensor_id": 1229804865,
                    "can_live_stream": true
                }
            ]
        },
        {
            "max_throughput": 0,
            "name": "Audio",
            "part": "IM69D130",
            "sample_rates": [
                16000
            ],
            "is_default": true,
            "sensors": [
                {
                    "column_count": 1,
                    "is_default": true,
                    "column_suffixes": [""],
                    "type": "Microphone",
                    "parameters": [],
                    "sensor_id": 1096107087,
                    "can_live_stream": true
                }
            ]
        },
        {
            "max_throughput": 0,
            "name": "Qwiic Scale",
            "part": "NAU7802",
            "sample_rates": [
                333, 250, 200, 100, 50
            ],
            "is_default": false,
            "sensors": [
                {
                    "column_count": 1,
                    "is_default": true,
                    "column_suffixes": [
                        ""
                    ],
                    "type": "Weight",
                    "parameters": [],
                    "units": null
                }
            ],
            "sensor_id": 1334804865,
            "can_live_stream": true
        },
        {
            "max_throughput": 0,
            "name": "ADC",
            "part": "ADS1015",
            "sample_rates": [
                100,
                250,
                500,
                1000,
                1600,
                2400,
                3300
            ],
            "is_default": false,
            "sensors": [
                {
                    "column_count": 1,
                    "is_default": true,
                    "column_suffixes": [
                        ""
                    ],
                    "type": "Analog Channel"
                }
            ],
            "sensor_id": 1184532964,
            "can_live_stream": true
        },
    ],
    "is_little_endian": true
}

第 2 步：使用 Sensi ML 構(gòu)建 AI 模型

這是我在早上 7 點(diǎn)左右為構(gòu)建 AI 模型錄制的降雨和雷聲示例，因此來自其他來源的環(huán)境噪聲很低：

首先在 Sensi ML DCL 的 Capture Mode 中，記錄暴雨和雷聲

降雨和雷聲建模

?

然后在標(biāo)簽瀏覽器模式下，手動(dòng)識(shí)別聲音并將其標(biāo)記為降雨或雷聲

標(biāo)記氣候變化的聲音

?

第 3 步：訓(xùn)練模型

這一步在https://app.sensiml.cloud/網(wǎng)頁界面上完成，構(gòu)建訓(xùn)練模型

建筑模型

?

之后，可以測(cè)試和探索模型以提高性能。

然后下載模型（文件附在下面）并刷入快速羽毛板

部署

好吧，刷完bin文件后，我通過電腦的藍(lán)牙和另一端的HC-05將設(shè)備連接到Putty，進(jìn)行無線UART連接。

降雨和雷聲的檢測(cè)不是很準(zhǔn)確。我敢肯定，我在 AI 模型構(gòu)建和測(cè)試階段錯(cuò)過了很多優(yōu)化。我必須再試一次，從頭開始重建一切以獲得更好的模型！

降雨或雷聲

?

?