ArduCam B0330 Pico4ML-BLE TinyML Dev Kit Návod k použití

Pico4ML-BLE TinyML Dev Kit
Deska RP2040 s QVGA kamerou, Bluetooth modulem, LCD
Obrazovka, zvuk, tlačítko Reset a další
Kód: B0330
Návod k použití

Obsah skrýt

1 Zavedení

2 Specifikace

3 Rychlý start

4 Předtrénované modely

9 Související příspěvky

Zavedení

Arducam Pico4ML-BLE rozšiřuje modul BLE založený na Pico4ML, který byl integrován s mikrokontrolérem RP2040, IMU a displejem. Tento upgrade z něj dělá sadu pro strojové učení s funkcí Bluetooth komunikace. Zahrnuli jsme 3 předem vyškolené TensorFlow Lite Micro exampsouborů, včetně detekce osob, kouzelné hůlky a detekce bdělého slova. Můžete na něm také stavět, trénovat a nasazovat své modely.

Specifikace

1	Mikrokontrolér	Raspberry Pi RP2040
2	IMU	ICM-20948
3	Modul kamery	HiMax HMO1 B0, až QVGA (320 x 240 © 60 snímků za sekundu)
4	Modul Bluetooth	BT5.0
5	Obrazovka	0.96palcový LCD SPI displej (160 x 80, ST7735)
6	Provozní svtage	3.3V
7	Vstupní objemtage	VBUS: 5V+/-10%. VSYS Max: 5.5V
8	Dimenze	Rozměr 51×21 mm

Rychlý start

Poskytli jsme několik předpřipravených binárních souborů, které můžete jednoduše přetáhnout na svůj Pico4ML-BLE, abyste se ujistili, že vše funguje ještě předtím, než začnete psát svůj kód.

Předtrénované modely

Detekce bdělého slova Demo, kde Pico4ML-BLE poskytuje vždy zapnutou detekci bdělého slova, zda někdo říká ano nebo ne, pomocí integrovaného mikrofonu a předem trénovaného modelu detekce řeči.
Kouzelná hůlka (detekce gest)
Demo, kde Pico4ML-BLE sesílá několik typů kouzel v jednom z následujících tří gest: „Křídlo“, „Prsten“ a „Sklon“ pomocí svého IMU a předem natrénovaného modelu detekce gest.
Detekce osob
Demo, kde Pico4ML-BLE předpovídá pravděpodobnosti přítomnosti osoby s kamerovým modulem Himax HM01B0.

První použití

Přejít na https://github.com/ArduCAM/pico-tflmicro/tree/main/bin stránku, pak najdete soubor .uf2 files pro 3 předem vyškolené modely.

Detekce bdělého slova

Klikněte na odpovídající uf2. file "micro_speech.uf2"
Klikněte na tlačítko „Stáhnout“. Tento file bude stažen do vašeho počítače.
Popadněte Raspberry Pi nebo notebook, stiskněte a podržte tlačítko BOOTSEL na Pico4ML-BLE a zapojte druhý konec micro USB kabelu do desky.

Po zapojení desky tlačítko uvolněte. Na ploše by se měl objevit diskový svazek s názvem RPI-RP2.
Dvojitým kliknutím jej otevřete a poté přetáhněte UF2 file do toho. Hlasitost se automaticky odpojí a obrazovka by se měla rozsvítit.

Přidržte Pico4ML-BLE blíž a řekněte „ano“ nebo „ne“. Na obrazovce se zobrazí odpovídající slovo.

Kouzelná hůlka (detekce gest)

Klikněte na odpovídající uf2. file "pico4ml_ble_magic_wand.uf2"
Opakujte druhý až pátý krok uvedený v části „Použití detekce probuzeného slova“, abyste rozsvítili obrazovku pomocí .uf2 file pro kouzelnou hůlku.

Rychle zamávejte Pico4ML-BLE ve tvaru W (křídlo), O (kroužek) nebo L (sklon). Na obrazovce se zobrazí odpovídající značka.

Detekce osob

Klikněte na odpovídající uf2. file "person_detection_int8.uf2"
Opakujte druhý až pátý krok uvedený v části „Použití detekce probuzeného slova“, abyste rozsvítili obrazovku pomocí .uf2 file pro detekci osob.

Podržte Pico4ML-BLE a pořizujte snímky. Na obrazovce se zobrazí obrázek a pravděpodobnosti přítomnosti osoby.

Co bude dál

Sestavte si kouzelnou hůlku s Edge Impulsem
Rozšířená technologie Bluetooth pomáhá implementovat bezdrátový sběr dat, školení a aktualizaci modelu navržením a web klienta na základě WebBLE. Shromážděná data jsou převedena do formátu, který může Edge Impulse číst prostřednictvím našeho konverzního skriptu, a poté se provede přenosové učení modelu. Chcete-li vytvořit svůj vlastní projekt hůlky, přejděte na stránku Doc: https://www.arducam.com/docs/pico/arducam-pico4mltinymldevkit/how-to-build-a-magic-wand-with-edge-impulse-on-arducam-pico4ml-ble/#26-gesture-recording

Sestavte si modely sami
Pokud vyvíjíte své vlastní modely na Pico4ML-BLE s Raspberry Pi 4B nebo Raspberry Pi 400, můžete se podívat na: https://github.com/ArduCAM/pico-tflmicro
Zdroj file pro 3D tisknutelnou skříň Pokud máte 3D tiskárnu, můžete si vytisknout vlastní krabičku pro Pico4ML-BLE se zdrojem file v odkazu níže: https://www.arducam.com/downloads/UC-798-Pico4ML-BLE-CASE.zip