He aha te Meta-Learning?

He aha te Meta-Learning?

Ko tetahi o nga waahi rangahau e tipu ana i roto i te ako miihini ko te waahi o ako-meta. Ko te ako-meta, i roto i te horopaki ako miihini, ko te whakamahi i nga miihini ako miihini hei awhina i te whakangungu me te arotautanga o etahi atu tauira ako miihini. I te mea kei te rongonui haere te ako-meta, kei te whanake haere hoki nga tikanga ako-meta, he pai ki te mohio he aha te ako-meta me te mohio ki nga momo huarahi ka taea te whakamahi. Kia tirohia nga whakaaro kei muri i te ako-meta, momo ako-meta, me etahi o nga huarahi ka taea te whakamahi i te ako-meta.

Ko te kupu meta-ako i hangaia e Donald Maudsley ki te whakaahua i tetahi tikanga e timata ai te tangata ki te hanga i ta ratou e ako ana, ka "kaha ake te whakahaere i nga tikanga o te whakaaro, te patapatai, te ako, me te tipu o roto." I muri mai, ka kii nga kaiputaiao hinengaro me nga kaimätai hinengaro ko te ako-meta he "ako ki te ako".

Mo te putanga ako miihini o te ako-meta, ka whakamahia te whakaaro whanui mo te "ako ki te ako" ki nga punaha AI. I roto i te tikanga AI, ko te ako-meta te kaha o te miihini mohio ki te ako me pehea te kawe i nga momo mahi uaua, te tango i nga maapono i whakamahia e ia ki te ako i tetahi mahi me te whakamahi ki etahi atu mahi. Ko te tikanga me whakangungua nga punaha AI ki te whakatutuki i tetahi mahi ma te whakahaere i nga mahi iti maha. Ka roa pea tenei whakangungu, karekau e ngawari te whakawhiti a nga kaihoko AI i nga matauranga i akohia i tetahi mahi ki tetahi atu mahi. Ma te hanga tauira me nga tikanga ako-meta ka awhina i a AI ki te ako ki te whakawhanui tikanga ako me te tere ake i nga pukenga hou.

Momo Meta-Ako

Ako-Meta Optimizer

He maha nga wa e whakamahia ana te ako-meta ki te arotau i nga mahi o te kupenga neural kua noho. Ko nga tikanga ako-meta a Optimizer te nuinga o te mahi ma te takawiri i nga tawhārua o te whatunga neural rereke kia pai ake ai te mahi o te whatunga neural turanga. Ko te hua ka pai ake te kupenga whainga ki te mahi i nga mahi e whakangungua ana. Ko tetahi tauira o te whakarorohiko ako-meta ko te whakamahi i te whatunga hei whakapai ake heke rōnaki hua.

Ako-Meta-Mata

Ko te huarahi ako-meta-mapu poto ko tetahi i hangaia he whatunga neural hohonu e kaha ana ki te whaanui mai i nga huingararaunga whakangungu ki nga huingararaunga kore kitea. He rite ki te mahi whakarōpūtanga noa tetahi tauira o te whakarōpūtanga matā, engari ko nga tauira raraunga he huingararaunga katoa. Kua whakangunguhia te tauira ki te maha o nga mahi ako / huinga raraunga, katahi ka arotauhia mo te tino mahi i runga i te tini o nga mahi whakangungu me nga raraunga kore kitea. I tenei huarahi, ka wehewehea tetahi tauira whakangungu ki nga karaehe maha. Ko te tikanga ko ia tauira whakangungu/raunga raraunga ka taea pea te hanga kia rua nga karaehe, mo te katoa o te 4-pupuhi. I roto i tenei take, ko te katoa o nga mahi whakangungu ka taea te korero hei mahi whakarōpū 4-pere 2-akomanga.

I roto i nga akoranga torutoru-poto, ko te whakaaro he iti noa nga tauira whakangungu takitahi, ka taea e te whatunga te ako ki te tautuhi i nga taonga i muri i te kitenga i etahi pikitia noa. He rite tonu tenei ki te ako a te tamaiti ki te wehewehe i nga taonga i muri i te kitenga o nga pikitia tokorua. I whakamahia tenei huarahi ki te hanga tikanga penei i nga tauira whakahiato-kotahi me nga whatunga neural kua whakanuia te mahara.

Metric Meta-Ako

Ko te ako-meta i runga i te ine ko te whakamahi i nga whatunga neural ki te whakatau mena kei te whai hua te whakamahi i tetahi inenga, me te mea kei te eke te whatunga, whatunga ranei ki te ine whaainga. He rite te ako meta-metric ki te ako-a-whiu i te mea he iti noa nga tauira ka whakamahia hei whakangungu i te whatunga me te ako i te mokowā ine. Ka whakamahia taua inenga puta noa i te rohe kanorau, a, ki te rereke nga whatunga mai i te inenga ka kiia kei te rahua.

Tauira Whakahoki Meta-Ako

Ko te ako-meta tauira auau ko te whakamahinga o nga tikanga ako-meta ki nga Whatunga Neural Recurrent me nga whatunga Mahara Waa-poto Roa. Ka mahi tenei tikanga ma te whakangungu i te tauira RNN/LSTM ki te ako raupapa rarangi raraunga katahi ka whakamahi i tenei tauira kua whakangungua hei turanga mo tetahi atu akonga. Ka mau te kaiako-meta ki runga i te algorithm arotautanga motuhake i whakamahia hei whakangungu i te tauira tuatahi. Ko te tawhā tuku iho o te meta-ako ka taea e ia te arawhiti tere me te whakakotahi, engari ka taea tonu te whakahou mo nga ahuatanga hou.

He pehea te mahi Meta-Learning?

Ko te huarahi tika e whakahaerehia ai te ako-meta he rereke i runga i te tauira me te ahua o te mahi kei a koe. Heoi, i te nuinga, he mahi ako meta ko te kape i runga i nga tawhā o te whatunga tuatahi ki roto i nga tawhā o te whatunga tuarua/te tino arotau.

E rua nga tukanga whakangungu i roto i te ako-meta. Ko te tauira ako-meta ka whakangunguhia i muri i nga mahi whakangungu maha mo te tauira turanga. Whai muri i nga hikoinga whakamua, whakamuri me te arotautanga e whakangungu ana i te tauira turanga, ka mahia te haere whakangungu whakamua mo te tauira arotautanga. Hei tauira, i muri i nga whakangungu e toru, e wha ranei mo te tauira turanga, ka tatauhia he mate-meta. Whai muri i te tatau-mate-meta, ka tatauhia nga rōnaki mo ia tawhā-meta. Whai muri i tenei ka puta, ka whakahoutia nga tawhā-meta i roto i te arotau.

Ko tetahi pea mo te tatau i te mate-meta ko te whakaoti i te paahi whakangungu whakamua o te tauira tuatahi ka whakakotahi i nga ngaro kua oti te tatau. Ka taea e te meta-optimizer tetahi atu meta-akonga, ahakoa i etahi wa me whakamahi he kaiwhakatikatika motuhake penei i a ADAM, SGD ranei.

He maha nga tauira ako hohonu he rau mano, he miriona tawhā ranei. Ko te hanga i tetahi meta-akonga he huinga tawhā hou ka nui te utu, na konei ka whakamahia te tikanga e kiia nei ko te tiritahi. Ko te tiritiri ruruku ko te hangai i te meta-akonga/kaiwhakapaipai kia akohia e ia tetahi tawhā mai i te tauira turanga, katahi ka kii noa i taua tawhā hei whakakapi i era atu tawhā katoa. Ko te hua ko nga tawhā kei te kaihoroi karekau e whakawhirinaki ki nga tawhā o te tauira.