ArduCam B0330 Pico4ML-BLE TinyML Dev komplekti kasutusjuhend

Pico4ML-BLE TinyML Dev Kit
RP2040 plaat QVGA kaameraga, Bluetoothi moodul, LCD
Ekraan, heli, lähtestamisnupp ja palju muud
Tootekood: B0330
Kasutusjuhend

Sisu peita

1 Sissejuhatus

2 Tehnilised andmed

3 Kiire algus

4 Eelkoolitatud modellid

5 Esimene kasutamine

6 Mis saab edasi

7 Võtke meiega ühendust

8 Dokumendid / Ressursid

8.1 Viited

9 Seotud postitused

Sissejuhatus

Arducam Pico4ML-BLE suurendab Pico4ML-il põhinevat BLE-moodulit, mis on integreeritud RP2040 mikrokontrolleri, IMU ja ekraaniga. See täiendus muudab selle Bluetooth-side funktsiooniga masinõppekomplektiks. Oleme kaasanud 3 eelkoolitatud TensorFlow Lite Micro examples, sealhulgas isikutuvastus, võlukepp ja äratussõnade tuvastamine. Samuti saate sellel oma mudeleid ehitada, koolitada ja juurutada.

Tehnilised andmed

1	microcontrollers	Vaarika Pi RP2040
2	IMU	ICM-20948
3	Kaamera moodul	HiMax HMO1 B0, kuni QVGA (320 x 240©60 kaadrit sekundis)
4	Bluetoothi moodul	BT5.0
5	Ekraan	0.96-tolline LCD SPI-ekraan (160 x 80, ST7735)
6	Operation Voltage	3.3V
7	Sisend Voltage	VBUS: 5V+/-10%. VSYS Max: 5.5 V
8	Mõõtmed	51×21 mm

Kiire algus

Oleme pakkunud mõned eelehitatud binaarfailid, mida saate lihtsalt oma Pico4ML-BLE-le pukseerida, et veenduda, et kõik töötab juba enne koodi kirjutamise alustamist.

Eelkoolitatud modellid

Äratussõnade tuvastamine Demo, kus Pico4ML-BLE pakub sisseehitatud mikrofoni ja eelkoolitatud kõnetuvastusmudeli abil alati sisse lülitatud äratussõna tuvastamist selle kohta, kas keegi ütleb jah või ei.
Võlukepp (žesti tuvastamine)
Demo, kus Pico4ML-BLE loob mitut tüüpi loitsu ühega kolmest järgmisest žestist: "Tiib", "Ring" ja "Slope", kasutades oma IMU-d ja eelkoolitatud žestituvastusmudelit.
Isiku tuvastamine
Demo, kus Pico4ML-BLE ennustab Himax HM01B0 kaameramooduliga inimese kohaloleku tõenäosusi.

Esimene kasutamine

Mine lehele https://github.com/ArduCAM/pico-tflmicro/tree/main/bin lehele, siis leiate faili .uf2 files 3 eelkoolitatud mudeli jaoks.

Äratussõnade tuvastamine

Klõpsake vastavat uf2. file "micro_speech.uf2"
Klõpsake nuppu "Laadi alla". See file laaditakse teie arvutisse alla.
Haarake oma Raspberry Pi või sülearvuti, seejärel vajutage ja hoidke all oma Pico4ML-BLE nuppu BOOTSEL, kuni ühendate mikro-USB-kaabli teise otsa tahvliga.

Pärast plaadi ühendamist vabastage nupp. Teie töölauale peaks ilmuma kettamaht nimega RPI-RP2.
Selle avamiseks topeltklõpsake ja seejärel lohistage UF2 file sellesse. Helitugevus eemaldatakse automaatselt ja ekraan peaks süttima.

Hoidke oma Pico4ML-BLE-d lähemal ja öelge "jah" või "ei". Ekraanil kuvatakse vastav sõna.

Võlukepp (žesti tuvastamine)

Klõpsake vastavat uf2. file "pico4ml_ble_magic_wand.uf2"
Ekraani .uf2 valgustamiseks korrake jaotises „Äratussõna tuvastamise kasutamine” mainitud teist kuni viiendat sammu. file võlukepi jaoks.

Viige oma Pico4ML-BLE kiiresti W (tiib), O (rõngas) või L (kalle) kujuga. Ekraanil kuvatakse vastav märk.

Isiku tuvastamine

Klõpsake vastavat uf2. file "person_detection_int8.uf2"
Ekraani .uf2 valgustamiseks korrake jaotises „Äratussõna tuvastamise kasutamine” mainitud teist kuni viiendat sammu. file isiku tuvastamiseks.

Pildistamiseks hoidke Pico4ML-BLE-d käes. Ekraanil kuvatakse pilt ja inimese kohaloleku tõenäosus.

Mis saab edasi

Ehitage võlukepp koos Edge Impulse'iga
Suurenenud Bluetooth aitab rakendada traadita andmete kogumist, koolitust ja mudeli värskendamist, kavandades a web klient põhineb WebBLE. Kogutud andmed teisendatakse vormingusse, mida Edge Impulse saab meie teisendusskripti kaudu lugeda ja seejärel viiakse läbi mudeli ülekandeõpe. Oma kohandatud võlukepiprojekti koostamiseks vaadake Dokumendi lehte: https://www.arducam.com/docs/pico/arducam-pico4mltinymldevkit/how-to-build-a-magic-wand-with-edge-impulse-on-arducam-pico4ml-ble/#26-gesture-recording

Ehitage mudeleid ise
Kui arendate oma mudeleid Pico4ML-BLE-s koos Raspberry Pi 4B või Raspberry Pi 400-ga, võite vaadata: https://github.com/ArduCAM/pico-tflmicro
Allikas file 3D-prinditava korpuse jaoks Kui teil on 3D-printer, saate printida Pico4ML-BLE jaoks oma ümbrise koos allikaga file alloleval lingil: https://www.arducam.com/downloads/UC-798-Pico4ML-BLE-CASE.zip