Bidh AI a’ faighinn a-mach a’ ghnìomhachd dhìomhair a chaidh fhoillseachadh le Ballachan Blank

Tha co-obrachadh rannsachaidh, a’ gabhail a-steach luchd-tabhartais bho NVIDIA agus MIT, air leasachadh a ionnsachadh innealan dòigh a dh’ aithnicheas daoine falaichte dìreach le bhith a’ coimhead air soillseachadh neo-dhìreach air balla faisg air làimh, eadhon nuair nach eil daoine faisg air na stòran solais soilleireachaidh. Tha cruinneas aig an dòigh faisg air 94% nuair a thathar a’ feuchainn ris an àireamh de dhaoine falaichte a chomharrachadh, agus faodaidh e cuideachd gnìomhachd sònraichte neach falaichte a chomharrachadh le bhith ag àrdachadh gu mòr air breabadh solais nach fhaicear do shùilean daonna agus gu dòighean àbhaisteach airson leudachadh ìomhaigh.

Buairidhean solais do-fhaicsinneach, air an leudachadh leis an dòigh ùr, a bhios a’ cleachdadh lìonraidhean neural convolutional gus raointean atharrachaidh a chomharrachadh. Stòr: https://www.youtube.com/watch?v=K4PapXyX-bI

ùr pàipear leis an tiotal Na as urrainn dhut ionnsachadh le bhith a’ coimhead air balla bàn, le tabhartasan bho NVIDIA agus MIT, a bharrachd air Institiùd Teicneòlais Israel.

Tha dòighean-obrach a bh’ ann roimhe a thaobh ‘faicinn timcheall bhallachan’ air a bhith an urra ri stòran solais a ghabhas smachdachadh, no eòlas ro-làimh air tobraichean aithneachaidh aithnichte, ach faodaidh an dòigh-obrach ùr atharrachadh gu seòmar ùr sam bith, gun fheum air ath-calibration. Chleachd an dà lìonra neural connspaideach a bhios a’ fa-leth daoine falaichte dàta a fhuaireadh bho dìreach 20 sealladh.

Tha am pròiseact ag amas air suidheachaidhean àrd-chunnart, a tha deatamach airson tèarainteachd, airson obair sgrùdaidh is teasairginn, gnìomhan sgrùdaidh èigneachaidh lagha coitcheann, suidheachaidhean freagairt èiginn, lorg tuiteam am measg seann daoine, agus mar dhòigh air luchd-coiseachd falaichte a lorg airson carbadan fèin-riaghailteach.

Measadh fulangach

Mar a thachras gu tric le lèirsinn coimpiutair pròiseactan, b’ e am prìomh obair atharrachaidhean stàite a bhathas a’ faicinn ann an sruth ìomhaigh a chomharrachadh, a sheòrsachadh agus a chuir an gnìomh. Le bhith a’ co-chruinneachadh nan atharrachaidhean a’ leantainn gu pàtrain ainm-sgrìobhte a dh’fhaodar a chleachdadh an dàrna cuid gus grunn dhaoine fa leth a chomharrachadh no gus gnìomhachd aon neach no barrachd a lorg.

Tha an obair a’ toirt cothrom air measadh sealladh gu tur fulangach, gun fheum air uachdar meòrachail a chleachdadh, Comharraidhean Wi-Fi, radar, fuaim no ‘suidheachadh sònraichte’ sam bith eile a dh’ fheumar ann an oidhirpean rannsachaidh eile o chionn beagan bhliadhnaichean a tha air feuchainn ri làthaireachd falaichte daonna a stèidheachadh ann an àrainneachd cunnartach no èiginneach.

Sampall airson cruinneachadh dàta den t-seòrsa a chaidh a chleachdadh airson an rannsachaidh ùr. Tha na cuspairean air an suidheachadh gu faiceallach gun a bhith a’ tilgeil faileas no gus solais sam bith a chuir a-mach gu dìreach, agus chan eil uachdar meòrachail no vectaran ‘meallta’ eile ceadaichte. Stòr: https://arxiv.org/pdf/2108.13027.pdf

Gu h-èifeachdach, bhiodh an solas àrainneachdail airson an t-suidheachaidh àbhaisteach a thathar an dùil airson an tagraidh a’ faighinn thairis air buairidhean beaga sam bith a dh’ adhbhraicheas solas a tha air a nochdadh bho dhaoine a tha falaichte ann an àiteachan eile san t-sealladh. Tha an luchd-rannsachaidh a’ dèanamh a-mach gum biodh tabhartas dragh-solais nan daoine fa-leth mar as trice nas lugha na 1% den t-solas faicsinneach iomlan.

A' toirt air falbh Solais Statach

Gus gluasad a thoirt a-mach às an ìomhaigh balla a tha coltach gu statach, feumar cuibheasachd ùine a’ bhidio obrachadh a-mach agus a thoirt air falbh bho gach frèam. Tha na pàtrain gluasaid a thig às mar as trice nas ìsle na stairsneach fuaim eadhon uidheamachd bhidio de dheagh chàileachd, agus gu dearbh tha mòran den ghluasad a’ tachairt taobh a-staigh àite piogsail àicheil.

Gus seo a cheartachadh, bidh an luchd-rannsachaidh a’ lughdachadh a’ bhidio le factar 16 agus a’ dèanamh suas an fhilm a thig às le factar 50, agus aig an aon àm a’ cur ìre bhunaiteach liath-mheadhanach ris gus faicinn gu bheil piogsail àicheil ann (nach b’ urrainnear cunntas a thoirt air le bhidio bun-loidhne. fuaim mothachaidh).

An eadar-dhealachadh eadar am balla a tha daoine a 'faicinn, agus an dragh a th' air a thoirt a-mach de dhaoine falaichte. Leis gu bheil càileachd ìomhaigh na phrìomh chuspair san rannsachadh seo, thoir sùil air a’ bhidio oifigeil aig deireadh an artaigil airson ìomhaigh de chàileachd nas àirde.

Tha an uinneag cothrom airson gluasad fhaicinn gu math cugallach, agus faodaidh e buaidh a thoirt air eadhon le bhith a’ priobadh nan solais aig tricead AC 60 Hz. Mar sin feumar an buaireadh nàdarra seo a mheasadh cuideachd agus a thoirt air falbh bhon fhilm mus nochd gluasad air a bhrosnachadh le daoine.

Mu dheireadh, bidh an siostam a ’toirt a-mach plotaichean ùine-fànais a tha a’ comharrachadh àireamh sònraichte de luchd-còmhnaidh seòmar falaichte - ainmean-sgrìobhte lèirsinneach air leth:

Ainm-sgrìobhte plotaichean ùine-fànais a’ riochdachadh àireamhan eadar-dhealaichte de dhaoine falaichte ann an seòmar.

Bidh diofar ghnìomhan daonna cuideachd a’ leantainn gu buaireadh ainm-sgrìobhte a dh’ fhaodar a sheòrsachadh agus aithneachadh nas fhaide air adhart:

Na ainmean-sgrìobhte cuilbheart ùine-fànais airson neo-ghnìomhachd, coiseachd, crùbadh, crathadh làmhan, agus leum.

Gus sruth-obrach fèin-ghluasadach stèidhichte air ionnsachadh inneal a thoirt gu buil airson aithneachadh neach falaichte, chaidh dealbhan eadar-dhealaichte bho 20 suidheachadh mu choinneamh a chleachdadh gus dà lìonra neòil a thrèanadh ag obair air rèiteachaidhean a bha gu ìre mhòr coltach - aon gus an àireamh dhaoine ann an sealladh a chunntadh, agus am fear eile gu comharrachadh gluasad sam bith a tha a’ tachairt.

Deuchainn

Rinn an luchd-rannsachaidh deuchainn air an t-siostam trèanaidh ann an deich àrainneachdan san t-saoghal fhìor nach fhacas a-mach a chaidh a dhealbhadh gus ath-chruthachadh a dhèanamh air na crìochan a thathar an dùil a bhith air an cleachdadh aig a’ cheann thall. Bha e comasach don t-siostam cruinneas suas ri 94.4% a choileanadh (còrr air frèamaichean 256 - mar as trice beagan a bharrachd air 8 diogan de bhidio) ann a bhith a’ seòrsachadh an àireamh de dhaoine falaichte, agus suas ri 93.7% mionaideachd (fo na h-aon chumhachan) ann an seòrsachadh ghnìomhan. Ged a tha cruinneas a’ tuiteam le nas lugha de fhrèamaichean stòr, chan e tuiteam sreathach a th’ ann, agus gheibh eadhon frèamaichean 64 ìre cruinneas 79.4% airson measadh ‘àireamh dhaoine’ (an aghaidh faisg air 95% airson ceithir uiread an àireamh de fhrèamaichean).

Ged a tha an dòigh-obrach làidir an aghaidh atharrachaidhean stèidhichte air an aimsir ann an solais, bidh e a’ strì ann an sealladh air a shoilleireachadh le telebhisean, no ann an suidheachaidhean far a bheil daoine a’ caitheamh aodach monotone den aon dath ris a’ bhalla meòrachaidh.

Chithear barrachd mion-fhiosrachaidh mun rannsachadh, a’ toirt a-steach fiolm de chàileachd nas àirde de na h-earrainnean, anns a’ bhidio oifigeil gu h-ìosal.