Treoir Úsáideora Ilcheamara a Fhorbairt Texas Instruments AM6x

Tá ról ríthábhachtach ag ceamaraí leabaithe i gcórais fís nua-aimseartha.
Trí ilcheamaraí a úsáid i gcóras, feabhsaítear cumais agus cumasaítear tascanna nach féidir a bhaint amach le ceamara amháin.

Feidhmchláir a úsáideann Ilcheamaraí:

Faireachas Slándála: Feabhsaíonn sé clúdach faireachais, rianú réad agus cruinneas aitheantais.
Timpeall View: Cumasaíonn sé fís steiréó le haghaidh tascanna cosúil le braiteadh constaicí agus ionramháil réad.

Taifeadán Cábáin agus Córas Scátháin Ceamara: Soláthraíonn sé clúdach leathnaithe agus cuireann sé deireadh le spotaí dalla.
Íomháú Leighis: Cuireann sé cruinneas feabhsaithe ar fáil i loingseoireacht mháinliachta agus in endoscópacht.

Dróin agus Íomháú ón Aer: Gabh íomhánna ardtaifigh ó uillinneacha éagsúla le haghaidh feidhmeanna éagsúla.

Il-Cheamaraí CSI-2 a Cheangal leis an SoC:
Chun ilcheamaraí CSI-2 a nascadh leis an SoC, lean na treoirlínte atá sa lámhleabhar úsáideora. Cinntigh go bhfuil gach ceamara ailínithe agus ceangailte i gceart leis na calafoirt ainmnithe ar an SoC.

Nóta Iarratais
Feidhmchláir Ilcheamara a Fhorbairt ar AM6x

Jianzhong Xu, Qutaiba Saleh

Teibí
Déanann an tuarascáil seo cur síos ar fhorbairt feidhmchlár ag baint úsáide as ilcheamaraí CSI-2 ar theaghlach gléasanna AM6x. Cuirtear dearadh tagartha i láthair maidir le braiteadh réad le foghlaim dhomhain ar 4 cheamara ar an SoC AM62A mar aon le hanailís feidhmíochta. Baineann prionsabail ghinearálta an dearaidh le SoCanna eile a bhfuil comhéadan CSI-2 acu, amhail AM62x agus AM62P.

Réamhrá

Tá ról tábhachtach ag ceamaraí leabaithe i gcórais fís nua-aimseartha. Leathnaíonn úsáid ilcheamaraí i gcóras cumais na gcóras seo agus cuireann sé cumais ar fáil nach féidir a dhéanamh le ceamara aonair. Seo a leanas roinnt samplaíampLíon na bhfeidhmchlár a úsáideann ilcheamaraí leabaithe:

Faireachas Slándála: Soláthraíonn ilcheamaraí atá suite go straitéiseach clúdach faireachais chuimsitheach. Cumasaíonn siad radharc lánléargais. views, spotaí dalla a laghdú, agus cruinneas rianú agus aitheantais réad a fheabhsú, rud a fheabhsaíonn bearta slándála foriomlána.
Timpeall ViewÚsáidtear ilcheamaraí chun socrú fís steiréó a chruthú, rud a chuireann ar chumas faisnéis thríthoiseach agus meastachán doimhneachta. Tá sé seo ríthábhachtach do thascanna amhail braiteadh constaicí i bhfeithiclí uathrialacha, ionramháil bheacht réad i róbataic, agus réadúlacht fheabhsaithe eispéiris réaltachta méadaithe.

Taifeadán Cábáin agus Córas Scátháin Ceamara: Is féidir le taifeadán cábáin gluaisteáin le ceamaraí iolracha clúdach níos mó a sholáthar trí phróiseálaí aonair a úsáid. Ar an gcaoi chéanna, is féidir le córas scátháin ceamara le dhá cheamara nó níos mó réimse faisnéise an tiománaí a leathnú. view agus deireadh a chur le spotaí dalla ó gach taobh den charr.
Íomháú Leighis: Is féidir úsáid a bhaint as ilcheamaraí in íomháú leighis le haghaidh tascanna cosúil le loingseoireacht mháinliachta, rud a thugann peirspictíochtaí éagsúla do mháinlianna le haghaidh cruinneas feabhsaithe. In endoscópacht, cuireann ilcheamaraí ar chumas scrúdú críochnúil a dhéanamh ar orgáin inmheánacha.

Dróin agus Íomháú ón Aer: Is minic a bhíonn ceamaraí iolracha ag dróin chun íomhánna nó físeáin ardtaifigh a ghabháil ó uillinneacha éagsúla. Tá sé seo úsáideach in iarratais ar nós grianghrafadóireacht ón aer, monatóireacht talmhaíochta, agus suirbhéireacht talún.
Le dul chun cinn na micreaphróiseálaithe, is féidir ilcheamaraí a chomhtháthú i gCóras-ar-Sliseanna amháin.
(SoC) chun réitigh dhlútha agus éifeachtúla a sholáthar. Is gléas idéalach é an AM62Ax SoC, le próiseáil físe/físe ardfheidhmíochta agus luasghéarú foghlama domhain, do na cásanna úsáide thuasluaite. Tá gléas AM6x eile, an AM62P, tógtha le haghaidh feidhmchlár taispeána 3D leabaithe ardfheidhmíochta. Feistithe le luasghéarú grafaicí 3D, is féidir leis an AM62P na híomhánna ó ilcheamaraí a shníomh le chéile go héasca agus pictiúr lánléargais ardtaifigh a tháirgeadh. viewTá gnéithe nuálacha an SoC AM62A/AM62P curtha i láthair i bhfoilseacháin éagsúla, amhail [4], [5], [6], etc. Ní dhéanfar na tuairiscí ar na gnéithe sin a athrá sa nóta iarratais seo ach díreofar ina ionad sin ar ilcheamaraí CSI-2 a chomhtháthú in iarratais fís leabaithe ar AM62A/AM62P.

Léiríonn Tábla 1-1 na príomhdhifríochtaí idir AM62A agus AM62P a mhéid a bhaineann le próiseáil íomhá.

Tábla 1-1. Difríochtaí idir AM62A agus AM62P i bpróiseáil íomhá

SoC	AM62A	AM 62P
Cineál Ceamara Tacaithe	Le nó gan ISP ionsuite	Le ISP ionsuite
Sonraí Aschuir Ceamara	Amh/YUV/RGB	YUV/RGB
HWA an tSuímh Idirlín	Tá	Níl
HWA Foghlama Domhain	Tá	Níl
Grafaicí 3-T HWA	Níl	Tá

Il-Cheamaraí CSI-2 a Cheangal leis an SoC
Tá na comhpháirteanna seo a leanas i bhFochóras na Ceamara ar an SoC AM6x, mar a thaispeántar i bhFíor 2-1:

Glacadóir MIPI D-PHY: faigheann sé sruthanna físe ó cheamaraí seachtracha, ag tacú le suas le 1.5 Gbps in aghaidh an lána sonraí le haghaidh 4 lána.

Glacadóir CSI-2 (RX): faigheann sé sruthanna físe ón nglacadóir D-PHY agus seolann sé na sruthanna go díreach chuig an ISP nó déanann sé na sonraí a dhumpáil chuig cuimhne DDR. Tacaíonn an modúl seo le suas le 16 chainéal fíorúil.
SHIM: fillteán DMA a chuireann ar chumas na sruthanna gafa a sheoladh chuig an gcuimhne thar DMA. Is féidir leis an bhfillteán seo comhthéacsanna DMA iolracha a chruthú, agus gach comhthéacs ag freagairt do chainéal fíorúil an Ghlacadóra CSI-2.

Is féidir tacú le hilcheamaraí ar an AM6x trí úsáid a bhaint as bealaí fíorúla CSI-2 RX, cé nach bhfuil ach comhéadan CSI-2 RX amháin ar an SoC. Tá gá le comhpháirt chomhiomlánaithe seachtrach CSI-2 chun ilshruthanna ceamara a chomhcheangal agus iad a sheoladh chuig SoC aonair. Is féidir dhá chineál réiteach comhiomlánaithe CSI-2 a úsáid, a bhfuil cur síos orthu sna hailt seo a leanas.

Comhiomlánaitheoir CSI-2 ag Úsáid SerDes
Bealach amháin chun sruthanna ilcheamara a chomhcheangal ná réiteach sraitheach agus díshrialaithe (SerDes) a úsáid. Déantar na sonraí CSI-2 ó gach ceamara a thiontú le sraitheoir agus a aistriú trí chábla. Faigheann an díshrialaitheoir na sonraí sraitheacha go léir a aistrítear ó na cáblaí (cábla amháin in aghaidh an cheamara), déanann sé na sruthanna a thiontú ar ais go sonraí CSI-2, agus ansin seolann sé sruth CSI-2 idirnasctha chuig an gcomhéadan RX CSI-2 aonair ar an SoC. Aithnítear gach sruth ceamara le cainéal fíorúil uathúil. Cuireann an réiteach comhiomlánaithe seo an buntáiste breise ar fáil go gceadaítear nasc fad-achair suas le 15m ó na ceamaraí go dtí an SoC.

Is iad na sraitheoirí agus na díshraitheoirí FPD-Link nó V3-Link (SerDes), a dtacaítear leo sa AM6x Linux SDK, na teicneolaíochtaí is mó tóir don chineál seo réitigh chomhiomlánaithe CSI-2. Tá bealaí cúil ag na díshraitheoirí FPD-Link agus V3-Link araon ar féidir iad a úsáid chun comharthaí sioncrónaithe fráma a sheoladh chun na ceamaraí go léir a shioncrónú, mar a mhínítear i [7].
Taispeánann Fíor 2-2 seanampúsáid a bhaint as na SerDes chun ilcheamaraí a nascadh le SoC AM6x aonair.

ExampIs féidir cuid den réiteach comhiomlánaithe seo a fháil i dTacar Réitigh Ceamara Arducam V3Link. Tá mol dí-sraitheach sa trealamh seo a chomhiomlánaíonn 4 shruth ceamara CSI-2, chomh maith le 4 phéire sraithitheoirí V3link agus ceamaraí IMX219, lena n-áirítear cáblaí comhaiseacha FAKRA agus cáblaí FPC 22-bioráin. Tá an dearadh tagartha a phléifear níos déanaí bunaithe ar an trealamh seo.

Comhiomlánaitheoir CSI-2 gan SerDes a úsáid
Is féidir leis an gcineál seo comhiomlánaitheora comhéadan díreach a dhéanamh le ceamaraí MIPI CSI-2 iolracha agus na sonraí ó na ceamaraí go léir a chomhiomlánú chuig sruth aschuir CSI-2 aonair.

Taispeánann Fíor 2-3 seanampcóras den sórt sin. Ní úsáideann an cineál seo réitigh chomhiomlánaithe aon sraitheach/díshraitheach ach tá sé teoranta ag an uasfhad aistrithe sonraí CSI-2, atá suas le 30cm. Ní thacaíonn an AM6x Linux SDK leis an gcineál seo comhiomlánaitheora CSI-2.

Ilcheamaraí a Chumasú i mBogearraí

Ailtireacht Bogearraí Fochórais Ceamara
Taispeánann Fíor 3-1 léaráid bhloc ardleibhéil de bhogearraí an chórais gabhála ceamara i SDK Linux AM62A/AM62P, a fhreagraíonn don chóras crua-earraí i bhFíor 2-2.

Cuireann an ailtireacht bhogearraí seo ar chumas an SoC sruthanna ceamara iolracha a fháil le húsáid SerDes, mar a thaispeántar i bhFíor 2-2. Sannann an FPD-Link/V3-Link SerDes seoladh I2C uathúil agus cainéal fíorúil do gach ceamara. Ba chóir forleagan crann gléasanna uathúil a chruthú leis an seoladh I2C uathúil do gach ceamara. Aithníonn an tiománaí CSI-2 RX gach ceamara ag baint úsáide as an uimhir chainéil fhíorúil uathúil agus cruthaíonn sé comhthéacs DMA in aghaidh an tsrutha ceamara. Cruthaítear nód físe do gach comhthéacs DMA. Glactar sonraí ó gach ceamara ansin agus stóráiltear iad ag baint úsáide as DMA chuig an gcuimhne dá réir. Úsáideann feidhmchláir spáis úsáideora na nóid físe a fhreagraíonn do gach ceamara chun rochtain a fháil ar shonraí an cheamara. M.sh.ampTugtar treoracha maidir le húsáid na hailtireachta bogearraí seo i gCaibidil 4 – Dearadh Tagartha.

Is féidir aon tiománaí braiteora ar leith atá i gcomhréir leis an gcreat V4L2 a phlugáil isteach san ailtireacht seo. Féach [8] maidir le conas tiománaí braiteora nua a chomhtháthú isteach sa Linux SDK.

Ailtireacht Bogearraí Píblíne Íomhá

Soláthraíonn SDK Linux AM6x an creat GStreamer (GST), ar féidir é a úsáid sa spás ser chun na comhpháirteanna próiseála íomhá a chomhtháthú le haghaidh feidhmchlár éagsúil. Is féidir rochtain a fháil ar na Luasairí Crua-earraí (HWA) ar an SoC, amhail an Luasaire Réamhphróiseála Fís (VPAC) nó ISP, ionchódóir/díchódóir físe, agus inneall ríomhaireachta foghlama domhain, trí GST. pluginsTá ilbhloic ag an VPAC (ISP) féin, lena n-áirítear Fo-chóras Íomháithe Fís (VISS), Ceartú Saobhadh Lionsa (LDC), agus Ilscálach (MSC), agus gach ceann acu ag freagairt do bhreiseán GST.
Taispeánann Fíor 3-2 léaráid bhloc de phíblíne íomhá tipiciúil ón gceamara go dtí an ionchódú nó an doimhneacht.
feidhmchláir foghlama ar AM62A. Le haghaidh tuilleadh sonraí faoin sreabhadh sonraí ó cheann ceann go ceann, féach ar dhoiciméadú SDK EdgeAI.

I gcás AM62P, tá an píblíne íomhá níos simplí mar nach bhfuil aon ISP ar AM62P.

Le nód físe cruthaithe do gach ceann de na ceamaraí, ceadaíonn an píblíne íomhá bunaithe ar GStreamer próiseáil ionchuir ceamara iolracha (ceangailte tríd an gcomhéadan CSI-2 RX céanna) ag an am céanna. Tugtar dearadh tagartha ag baint úsáide as GStreamer le haghaidh feidhmchlár ilcheamaraí sa chéad chaibidil eile.

Dearadh Tagartha

Cuirtear dearadh tagartha i láthair sa chaibidil seo maidir le feidhmchláir ilcheamara a rith ar AM62A EVM, ag baint úsáide as an Arducam V3Link Camera Solution Kit chun 4 cheamara CSI-2 a nascadh le AM62A agus braiteadh réad a rith do na 4 cheamara go léir.

Ceamaraí Tacaithe
Oibríonn an trealamh Arducam V3Link le ceamaraí bunaithe ar FPD-Link/V3-Link agus ceamaraí CSI-2 atá comhoiriúnach le Raspberry Pi araon. Tá na ceamaraí seo a leanas tástáilte:

Innealtóireacht D3 D3RCM-IMX390-953
Íomháú Leopard LI-OV2312-FPDLINKIII-110H
Ceamaraí IMX219 sa Tacar Réitigh Ceamara Arducam V3Link

Ceithre Cheamara IMX219 á gCur ar Bun
Lean na treoracha atá curtha ar fáil i dTreoir Tosaigh Thapa AM62A Tosaitheoir EVM chun an SK-AM62A-LP EVM (AM62A SK) agus an Treoir Tosaigh Thapa ArduCam V3Link Camera Solution a chur ar bun chun na ceamaraí a nascadh le AM62A SK tríd an trealamh V3Link. Cinntigh go bhfuil na bioráin ar na cáblaí solúbtha, na ceamaraí, bord V3Link, agus AM62A SK ailínithe i gceart.

Taispeánann Fíor 4-1 an socrú a úsáideadh don dearadh tagartha sa tuarascáil seo. Áirítear ar phríomhchodanna an tsocraithe:

1X bord EVM SK-AM62A-LP
1X bord oiriúntóra d-ch Arducam V3Link
Cábla FPC a nascann Arducam V3Link le SK-AM62A
4 oiriúntóir ceamara V3Link (srialaitheoirí)
4 chábla comhaiseach RF chun sraitheoirí V3Link a nascadh le trealamh d-ch V3Link
Ceamaraí 4X IMX219
4 chábla CSI-2 22-bioráin chun ceamaraí a nascadh le sraitheoirí
Cáblaí: cábla HDMI, USB-C chun cumhacht a thabhairt don SK-AM62A-LP agus cumhacht 12V a fhoinsítear don trealamh V3Link d-ch)
Comhpháirteanna eile nach bhfuil le feiceáil i bhFíor 4-1: cárta micrea-SD, cábla micrea-USB chun rochtain a fháil ar SK-AM62A-LP, agus Ethernet le haghaidh sruthú

Cumrú Ceamaraí agus Comhéadan RX CSI-2
Socraigh an bogearra de réir na dtreoracha atá curtha ar fáil i dTreoir Tosaigh Thapa Arducam V3Link. Tar éis an script socraithe ceamara a rith, déanfar setup-imx219.sh, formáid an cheamara, formáid chomhéadain CSI-2 RX, agus na bealaí ó gach ceamara go dtí an nód físe comhfhreagrach a chumrú i gceart. Cruthaítear ceithre nód físe do na ceithre cheamara IMX219. Taispeánann an t-ordú “v4l2-ctl –list-devices” na gléasanna físe V4L2 go léir, mar a thaispeántar thíos:

Tá 6 nód físe agus 1 nód meán faoi tiscsi2rx. Freagraíonn gach nód físe do chomhthéacs DMA atá leithdháilte ag an tiománaí CSI2 RX. As na 6 nód físe, úsáidtear 4 cinn do na 4 cheamara IMX219, mar a thaispeántar i dtoipeolaíocht an phíobáin meán thíos:

Mar a thaispeántar thuas, tá 30102000 eochaircheap foinse ag eintiteas meán 2.ticsi6rx, ach ní úsáidtear ach na chéad 4, gach ceann acu le haghaidh IMX219 amháin. Is féidir toipeolaíocht an phíobáin meán a léiriú go grafach freisin. Rith an t-ordú seo a leanas chun ponc a ghiniúint file:

Ansin rith an t-ordú thíos ar ríomhaire óstach Linux chun PNG a ghiniúint file:

Is pictiúr é Fíor 4-2 a gineadh ag baint úsáide as na horduithe a tugadh thuas. Is féidir na comhpháirteanna in ailtireacht bogearraí Fíor 3-1 a fháil sa ghraf seo.

Ag sruthú ó cheithre cheamara
Agus an crua-earraí agus an bogearraí araon socraithe i gceart, is féidir feidhmchláir ilcheamara a rith ón spás úsáideora. I gcás AM62A, ní mór an ISP a choigeartú chun dea-chaighdeán íomhá a tháirgeadh. Féach ar Threoir Choigeartú ISP AM6xA le haghaidh conas coigeartú ISP a dhéanamh. Cuireann na hailt seo a leanas samplaí i láthair.ampsonraí ceamara a shruthú chuig taispeántas, sonraí ceamara a shruthú chuig líonra, agus sonraí an cheamara a stóráil chuig files.

Sruthú Sonraí Ceamara chuig an Taispeántas
Feidhmchlár bunúsach den chóras ilcheamara seo is ea físeáin a shruthú ó na ceamaraí go léir chuig taispeántas atá ceangailte leis an SoC céanna. Seo a leanas sampla de phíblíne GStreamerampde cheithre IMX219 a shruthú chuig taispeántas (is dócha go n-athróidh uimhreacha nód físe agus uimhreacha v4l-subdev sa phíblíne ó atosú go hatosú).

Sruthú Sonraí Ceamara trí Ethernet
In ionad sruthú chuig taispeántas atá ceangailte leis an SoC céanna, is féidir sonraí an cheamara a shruthú tríd an Ethernet freisin. Is féidir leis an taobh glactha a bheith ina phróiseálaí AM62A/AM62P eile nó ina ríomhaire óstach. Seo a leanas sampla.ampmodh sruthú sonraí an cheamara tríd an Ethernet (ag baint úsáide as dhá cheamara ar mhaithe le simplíocht) (tabhair faoi deara an breiseán ionchódóra a úsáideadh sa phíblíne):

Seo a leanas seanampconas sonraí an cheamara a fháil agus iad a shruthú chuig taispeántas ar phróiseálaí AM62A/AM62P eile:

Sonraí Ceamara á Stóráil chuig Files
In ionad sruthú chuig taispeántas nó trí líonra, is féidir sonraí an cheamara a stóráil go háitiúil files. Stórálann an píblíne thíos sonraí gach ceamara chuig a file (ag baint úsáide as dhá cheamara mar shean-ampar mhaithe le simplíocht).

Infheireacht Fhoghlaim Dhomhain Ilcheamara

Tá luasaire foghlama domhain (C62x-MMA) feistithe ar AM7A le suas le dhá TOPS, atá in ann cineálacha éagsúla samhlacha foghlama domhain a rith le haghaidh aicmithe, braite réad, deighilt sheimeantach, agus níos mó. Taispeánann an chuid seo conas is féidir le AM62A ceithre mhúnla foghlama domhain a rith ag an am céanna ar cheithre bheatha ceamara éagsúla.

Roghnú Múnla
Cuireann EdgeAI-ModelZoo de chuid TI na céadta samhlacha den scoth ar fáil, a dhéantar a thiontú/a onnmhairiú óna gcreatlach oiliúna bunaidh go formáid atá leabaithe ionas gur féidir iad a dhíluchtú chuig luasaire foghlama domhain C7x-MMA. Soláthraíonn an Edge AI Studio Model Anailíseoir scamallbhunaithe uirlis “Roghnú Múnla” atá éasca le húsáid. Déantar é a nuashonrú go dinimiciúil chun gach samhail a thacaítear leo i TI EdgeAI-ModelZoo a áireamh. Ní gá aon taithí roimhe seo don uirlis agus soláthraíonn sé comhéadan atá éasca le húsáid chun na gnéithe atá riachtanach sa mhúnla atá ag teastáil a iontráil.

Roghnaíodh an TFL-OD-2000-ssd-mobV1-coco-mlperf don turgnamh foghlama domhain ilcheamara seo. Forbraíodh an tsamhail bhrath ilréada seo i gcreat TensorFlow le taifeach ionchuir 300 × 300. Taispeánann Tábla 4-1 gnéithe tábhachtacha an mhúnla seo nuair a dhéantar í a oiliúint ar an tacar sonraí cCOCO le thart ar 80 rang difriúil.

Tábla 4-1. Gnéithe den tSamhail TFL-OD-2000-ssd-mobV1-coco-mlperf a aibhsiú.

Múnla	Tasc	Rún	CCT	mAP 50% Cruinneas ar COCO	Moill/Fráma (ms)	DDR BW Úsáid (MB/Fráma)
TFL-OD-2000-ssd- mobV1-coco-mlperf	Brath Ilréada	300×300	~152	15.9	6.5	18.839

Socrú Píblíne
Taispeánann Fíor 4-3 an phíblíne foghlama domhain 4-cheamara GStreamer. Soláthraíonn TI sraith de GStreamer plugins a ligeann do dhíluchtú cuid den phróiseáil meán agus an t-idirghabháil foghlama domhain chuig na luasairí crua-earraí. Roinnt e.g.amples díobh seo plugins san áireamh tiovxisp, tiovxmultiscaler, tiovxmosaic, agus tidlinferer. Áirítear sa phíblíne i bhFíor 4-3 gach ceann de na rudaí riachtanacha plugins le haghaidh píblíne ilchonair GStreamer le haghaidh ionchuir 4 cheamara, gach ceann acu le réamhphróiseáil meán, ionchur foghlama domhain, agus iarphróiseáil. An dúbláil plugins i gcás gach ceann de na cosáin ceamara, tá siad cruachta sa ghraf chun taispeántas níos éasca a dhéanamh.
Tá na hacmhainní crua-earraí atá ar fáil dáilte go cothrom i measc na gceithre chonair ceamara. Mar shampla, tá dhá ilscálaí íomhá in AM62A: MSC0 agus MSC1. Tiomnaíonn an phíblíne MSC0 go sainráite do chonairí ceamara 1 agus ceamara 2 a phróiseáil, agus tá MSC1 tiomnaithe do cheamara 3 agus ceamara 4.

Déantar aschur na gceithre phíblíne ceamara a laghdú agus a nascadh le chéile ag baint úsáide as an mbreiseán tiovxmosaic. Taispeántar an t-aschur ar scáileán amháin. Taispeánann Fíor 4-4 aschur na gceithre cheamara le samhail foghlama domhain a ritheann braiteadh réad. Tá gach píblíne (ceamara) ag rith ag 30 FPS agus 120 FPS san iomlán.

Seo a leanas an script iomlán píblíne don chás úsáide foghlama domhain ilcheamara a thaispeántar i bhFíor 4-3.

Anailís Feidhmíochta

Rinneadh tástáil ar an socrú le ceithre cheamara ag baint úsáide as an mbord V3Link agus an AM62A SK i gcásanna éagsúla feidhmchláir, lena n-áirítear taispeáint go díreach ar scáileán, sruthú thar Ethernet (ceithre chainéal UDP), taifeadadh chuig 4 cheamara ar leithligh. files, agus le hinferens foghlama domhain. I ngach turgnamh, rinneamar monatóireacht ar an ráta fráma agus ar úsáid chroíthe LAP chun cumais an chórais iomláin a iniúchadh.

Mar a léiríodh roimhe seo i bhFíor 4-4, úsáideann an phíblíne foghlama domhain an breiseán tiperfoverlay GStreamer chun ualaí croí LAP a thaispeáint mar ghraf barra ag bun an scáileáin. De réir réamhshocraithe, déantar an graf a nuashonrú gach dhá shoicind chun na hualaí a thaispeáint mar chéatadán úsáide.tage. Chomh maith leis an mbreiseán tiperfoverlay GStreamer, is rogha eile é an uirlis perf_stats chun feidhmíocht lárnach a thaispeáint go díreach ar an teirminéal le rogha chun é a shábháil chuig fileTá an uirlis seo níos cruinne i gcomparáid leis an tTiperfoverlay mar go gcuireann an dara ceann ualach breise ar chroíleacáin ARMm agus ar an DDR chun an graf a tharraingt agus é a fhorleagan ar an scáileán. Úsáidtear an uirlis perf_stats go príomha chun torthaí úsáide crua-earraí a bhailiú i ngach cás tástála a thaispeántar sa doiciméad seo. I measc cuid de na croíleacáin phróiseála agus luasairí tábhachtacha a ndearnadh staidéar orthu sna tástálacha seo tá na príomhphróiseálaithe (ceithre chroíleacán A53 Arm @ 1.25GHz), an luasaire foghlama domhain (C7x-MMA @ 850MHz), an VPAC (ISP) le VISS agus ilscálaithe (MSC0 agus MSC1), agus oibríochtaí DDR.

Taispeánann Tábla 5-1 an fheidhmíocht agus an úsáid acmhainní agus AM62A á úsáid le ceithre cheamara i dtrí chás úsáide, lena n-áirítear ceithre cheamara a shruthú chuig taispeántas, sruthú thar Ethernet, agus taifeadadh chuig ceithre cheamara ar leithligh. files. Cuirtear dhá thástáil i bhfeidhm i ngach cás úsáide: leis an gceamara amháin agus le hinferens foghlama domhain. Ina theannta sin, taispeánann an chéad ró i dTábla 5-1 úsáidí crua-earraí nuair nach raibh ach an córas oibriúcháin ag rith ar AM62A gan aon fheidhmchláir úsáideora. Úsáidtear é seo mar bhunlíne le comparáid a dhéanamh i gcoinne úsáidí crua-earraí na gcásanna tástála eile agus measúnú á dhéanamh orthu. Mar a thaispeántar sa tábla, d'oibrigh na ceithre cheamara le foghlaim dhomhain agus taispeántas scáileáin ag 30 FPS an ceann, le hiomlán de 120 FPS do na ceithre cheamara. Baintear an ráta fráma ard seo amach le 86% d'acmhainn iomlán an luasaire foghlama domhain (C7x-MMA) amháin. Ina theannta sin, tá sé tábhachtach a thabhairt faoi deara gur clogáladh an luasaire foghlama domhain ag 850MHz seachas 1000MHz sna turgnaimh seo, arb ionann é agus thart ar 85% dá fheidhmíocht uasta amháin.

Tábla 5-1. Feidhmíocht (FPS) agus Úsáid Acmhainní AM62A nuair a úsáidtear é le 4 Cheamara IMX219 le haghaidh Taispeántas Scáileáin, Sruth Eitirnéid, Taifeadadh chuig Files, agus Inferinsiú Foghlama Domhain a Dhéanamh

Iarratas n	Píblíne (oibriú )	Aschur	CCT meánphíblíne	CCT iomlán	MPUanna A53s @ 1.25 GHz [%]	MCU R5 [%]	DLA (C7x-MMA) @ 850 MHz [%]	VISS [%]	MSC0 [%]	MSC1 [%]	DDR Bóthar [MB/s]	DDR Wr [MB/s]	DDR Iomlán [MB/s]
Gan Aip	Bonnlíne Gan aon oibríocht	NA	NA	NA	1.87	1	0	0	0	0	560	19	579
Ceamara amháin	Sruthán go dtí an Scáileán	Scáileán	30	120	12	12	0	70	61	60	1015	757	1782
	Sruth thar Ethernet	PDU: 4 calafoirt 1920×1080	30	120	23	6	0	70	0	0	2071	1390	3461
	Taifead chuig files	4 file1920×1080	30	120	25	3	0	70	0	0	2100	1403	3503
Cam le foghlaim dhomhain	Foghlaim dhomhain: Brath réad MobV1- coco	Scáileán	30	120	38	25	86	71	85	82	2926	1676	4602
	Foghlaim dhomhain: Braiteadh réad MobV1- coco agus Sruth thar Ethernet	PDU: 4 calafoirt 1920×1080	28	112	84	20	99	66	65	72	4157	2563	6720
	Foghlaim dhomhain: Braiteadh réad MobV1- coco agus taifead chuig files	4 file1920×1080	28	112	87	22	98	75	82	61	2024	2458	6482

Achoimre
Déanann an tuarascáil iarratais seo cur síos ar conas feidhmchláir ilcheamara a chur i bhfeidhm ar theaghlach gléasanna AM6x. Cuirtear dearadh tagartha bunaithe ar Threalamh Réitigh Ceamara V3Link Arducam agus AM62A SK EVM ar fáil sa tuarascáil, le roinnt feidhmchlár ceamara ag baint úsáide as ceithre cheamara IMX219, amhail sruthú agus braiteadh réad. Moltar d’úsáideoirí an Trealamh Réitigh Ceamara V3Link a fháil ó Arducam agus na feidhmchláir seo a mhacasamhlú.ampCuireann an tuarascáil anailís mhionsonraithe ar fáil freisin ar fheidhmíocht AM62A agus ceithre cheamara á n-úsáid faoi chumraíochtaí éagsúla, lena n-áirítear taispeáint ar scáileán, sruthú thar Ethernet, agus taifeadadh chuig files. Taispeánann sé freisin cumas AM62A chun inference foghlama domhain a dhéanamh ar cheithre shruth ceamara ar leithligh go comhthreomhar. Má tá aon cheist agat faoi na ex seo a rithamples, cuir fiosrúchán isteach ag fóram TI E2E.

Tagairtí

Treoir Thapa Tosaithe EVM AM62A
Treoir Thosaigh Thapa do Réiteach Ceamara ArduCam V3Link
Doiciméadú Edge AI SDK le haghaidh AM62A
Ceamaraí Cliste Edge AI ag Úsáid Próiseálaí AM62A Éifeachtúil ó thaobh Fuinnimh de
Córais Scátháin Ceamara ar AM62A
Córais Faireacháin Tiománaithe agus Áitíochta ar AM62A
Feidhmchlár Ceamara Ceithre Chainéal le haghaidh Timpeall View agus Córais Ceamara CMS
Acadamh Linux AM62Ax maidir le Braiteoir CIS-2 a Chumasú
Samhail Zú Edge AI
Stiúideo Edge AI
Uirlis Perf_stats

Páirteanna TI dá dtagraítear sa Nóta Iarratais seo:

FÓGRA TÁBHACHTACH AGUS SÉANADH

SOLÁTHAR TI SONRAÍ TEICNIÚLA AGUS Iontaofachta (lena n-áirítear BILEOGA SONRAÍ), ACMHAINNÍ Dearaidh (lena n-áirítear DEARAÍ TAGAIRT), IARRATAS NÓ COMHAIRLE EILE DEARAIDH, WEB UIRLISÍ, FAISNÉIS SHÁBHÁILTEACHTA, AGUS ACMHAINNÍ EILE “MAR A BHFUIL” AGUS LEIS GACH FÁS, AGUS SÉANANN SÍ GACH BARÁNTAÍ, SONRAITHE AGUS INTUIGTHE, LENA nÁIRÍTEAR GAN SRIANTA AON BARÁNTA INTUIGTHE INA THRÁCHTÁLA, OIRIÚNACHT CHUN CUSPÓIR SONRAITHE NÍ TUAIRISCEÁN A BHFUIL SÁBHÁILTE .

Tá na hacmhainní seo dírithe ar fhorbróirí oilte atá ag dearadh táirgí TI. Is tusa amháin atá freagrach as

na táirgí TI cuí a roghnú le haghaidh d’iarratas,
d’iarratas a dhearadh, a bhailíochtú agus a thástáil, agus
a chinntiú go gcomhlíonann d'iarratas na caighdeáin is infheidhme, agus aon cheanglais sábháilteachta, slándála, rialála nó ceanglais eile.

Tá na hacmhainní seo faoi réir athraithe gan fógra. Ceadaíonn TI duit na hacmhainní seo a úsáid chun feidhmchlár a fhorbairt a úsáideann táirgí TI a bhfuil cur síos orthu san acmhainn amháin. Tá cosc ar atáirgeadh agus ar thaispeáint eile na n-acmhainní seo. Ní dheonaítear aon cheadúnas d'aon cheart maoine intleachtúla eile de chuid TI ná d'aon cheart maoine intleachtúla tríú páirtí. Séanann TI freagracht as aon éilimh, damáistí, costais, caillteanais agus dliteanais a eascraíonn as d'úsáid de na hacmhainní seo, agus slánóidh tú TI agus a ionadaithe ina gcoinne go hiomlán.

Soláthraítear táirgí TI faoi réir Théarmaí Díolacháin TI nó téarmaí infheidhme eile atá ar fáil ach an oiread ti.com nó a sholáthraítear i gcomhar le táirgí TI den sórt sin. Ní fhorbraíonn soláthar TI na n-acmhainní seo ná ní athraíonn sé ar shlí eile barántais infheidhme nó séanadh baránta TI do tháirgí TI.

Cuireann TI in aghaidh agus diúltaíonn sé d’aon téarmaí breise nó difriúla a d’fhéadfadh a bheith molta agat.

FÓGRA TÁBHACHTACH

Seoladh Poist: Texas Instruments, Bosca Oifig an Phoist 655303, Dallas, Texas 75265

Ceisteanna Coitianta

C: An féidir liom aon chineál ceamara a úsáid leis an teaghlach gléasanna AM6x?

Tacaíonn an teaghlach AM6x le cineálacha éagsúla ceamaraí, lena n-áirítear iad siúd a bhfuil nó nach bhfuil ISP ionsuite acu. Féach na sonraíochtaí le haghaidh tuilleadh sonraí faoi na cineálacha ceamaraí a dtacaítear leo.

Cad iad na príomhdhifríochtaí idir AM62A agus AM62P i bpróiseáil íomhá?

I measc na bpríomhathruithe tá cineálacha ceamaraí a dtacaítear leo, sonraí aschuir ceamaraí, láithreacht HWA ISP, HWA Foghlama Domhain, agus HWA Grafaicí 3-T. Féach ar an rannán sonraíochtaí le haghaidh comparáid mhionsonraithe.

Doiciméid / Acmhainní

Texas Instruments AM6x ag Forbairt Ilcheamara [pdfTreoir Úsáideora
AM62A, AM62P, AM6x Ag Forbairt Ilcheamara, AM6x, Ag Forbairt Ilcheamara, Ilcheamara, Ceamara

Tagairtí

Lámhleabhar Úsáideora

Texas Instruments AM6x ag Forbairt Ilcheamaraí

Sonraíochtaí