Tha Uber's Fiber na fhrèam trèanaidh modail AI air a chuairteachadh ùr

A rèir VentureBeat, Tha luchd-rannsachaidh AI aig Uber air post a chuir a-steach o chionn ghoirid paipear do Arxiv a’ mìneachadh àrd-ùrlar ùr a tha san amharc gus cuideachadh le cruthachadh mhodalan AI sgaoilte. Canar an àrd-ùrlar Fiber, agus faodar a chleachdadh gus gnìomhan ionnsachaidh ath-neartachaidh agus ionnsachadh stèidhichte air àireamh-sluaigh a stiùireadh. Tha fiber air a dhealbhadh gus àireamhachadh co-shìnte air sgèile mhòr a dhèanamh nas ruigsinneach do dhaoine nach eil eòlach, a’ leigeil leotha brath a ghabhail air cumhachd algorithms agus modalan AI sgaoilte.

Chaidh fiber a dhèanamh o chionn ghoirid le còd fosgailte air GitHub, agus tha e co-chòrdail ri Python 3.6 no nas àirde, le Kubernetes a ’ruith air siostam Linux agus a’ ruith ann an àrainneachd sgòthan. A rèir an sgioba de luchd-rannsachaidh, tha an àrd-ùrlar comasach air suas ri ceudan no mìltean de innealan fa leth a sgèileadh gu furasta.

Tha an sgioba de luchd-rannsachaidh bho Uber a’ mìneachadh gu bheil mòran de na h-adhartasan as ùire agus as iomchaidh ann an inntleachd fuadain air an stiùireadh le modalan nas motha agus barrachd algorithms a tha air an trèanadh le bhith a’ cleachdadh dòighean trèanaidh sgaoilte. Ach, tha cruthachadh mhodalan stèidhichte air àireamh-sluaigh agus modalan neartachaidh fhathast na obair dhoirbh airson sgeamaichean trèanaidh sgaoilte, leis gu tric bidh duilgheadasan aca le èifeachdas agus sùbailteachd. Bidh fiber a’ dèanamh an siostam sgaoilte nas earbsaiche agus nas sùbailte le bhith a’ cothlamadh bathar-bog riaghlaidh cnuasachadh le sgèileadh fiùghantach agus a’ leigeil le luchd-cleachdaidh an cuid obrach a ghluasad bho aon inneal gu àireamh mhòr de dh’ innealan gun fhiosta.

Tha fibre air a dhèanamh a-mach à trì pàirtean eadar-dhealaichte: API, backend, agus còmhdach braisle. Tha an ìre API a’ toirt comas do luchd-cleachdaidh rudan leithid ciudha, manaidsearan agus pròiseasan a chruthachadh. Leigidh an ìre backend de Fiber leis an neach-cleachdaidh obraichean a chruthachadh agus a thoirt gu crìch a tha air an riaghladh le diofar chlàran, agus bidh an ìre brabhsair a’ riaghladh na cruinneachaidhean fa leth iad fhèin còmhla ris na goireasan aca, a tha gu mòr an àireamh de stuthan a dh’ fheumas Fiber a chumail.

Tha fibre a’ leigeil le obraichean a bhith air an ciudha agus air an ruith air astar air aon inneal ionadail no air iomadh inneal eadar-dhealaichte, a’ cleachdadh a’ bhun-bheachd de phròiseasan le taic obrach. Bidh Fibre cuideachd a’ cleachdadh shoithichean gus dèanamh cinnteach gu bheil rudan leithid dàta cuir a-steach agus pasganan eisimeileach fèin-chumte. Tha frèam Fiber eadhon a’ toirt a-steach làimhseachadh mhearachdan togte gus an tèid ath-bheothachadh gu sgiobalta ma bhuaileas neach-obrach e. Is urrainn dha FIber seo uile a dhèanamh fhad ‘s a bhios e ag eadar-obrachadh le manaidsearan brabhsair, a’ leigeil le aplacaidean Fiber ruith mar gum biodh iad nan aplacaidean àbhaisteach a ’ruith air cruinneachadh coimpiutair sònraichte.

Sheall toraidhean deuchainneach gu robh an ùine freagairt aig Fiber gu cuibheasach beagan mhilleanan-tomhais agus gun robh e cuideachd a’ fàs nas fheàrr na dòighean bunaiteach AI nuair a chaidh a thogail le coraichean / luchd-obrach pròiseasar 2,048. Chaidh an ùine a dh’fheumar airson obraichean a chrìochnachadh sìos mean air mhean mar a bha an àireamh shuidhichte de luchd-obrach a’ dol am meud. Chrìochnaich IPyParallel 50 tionndadh de thrèanadh ann an timcheall air 1400 diog, fhad ‘s a bha e comasach dha Fiber na h-aon tionndaidhean trèanaidh 50 a chrìochnachadh ann an timcheall air 50 diog le 512 neach-obrach rim faighinn.

Coauthors a 'phàipear Fibre mìnich gu bheil Fibre comasach air grunn amasan a choileanadh leithid algorithms sgèileadh fiùghantach agus a’ cleachdadh meudan mòra de chumhachd coimpiutaireachd:

“[Tha ar n-obair a’ sealltainn] gu bheil Fiber a’ coileanadh mòran amasan, a’ gabhail a-steach a bhith a’ faighinn buannachd mhòr de bhathar-cruaidh coimpiutaireachd ioma-ghnèitheach, algoirmean sgèileadh fiùghantach gus èifeachdas cleachdadh ghoireasan a leasachadh, a’ lughdachadh an eallach innleadaireachd a dh’ fheumar gus toirt air [ionnsachadh neartachaidh] agus algoirmean stèidhichte air àireamh-sluaigh obrachadh air. cruinneachaidhean coimpiutair, agus ag atharrachadh gu sgiobalta gu diofar àrainneachdan coimpiutaireachd gus èifeachdas rannsachaidh a leasachadh. Tha sinn an dùil gun leig e le adhartas ann a bhith a’ fuasgladh dhuilgheadasan cruaidh [ionnsachadh neartachaidh] le algoirmean [ionnsachadh neartachaidh] agus dòighean stèidhichte air àireamh-sluaigh le bhith ga dhèanamh nas fhasa na dòighean sin a leasachadh agus an trèanadh aig na lannan a tha riatanach gus am faicinn a’ deàrrsadh.”