Refresh

This website www.unite.ai/mi/concept-sliders-precise-control-in-diffusion-models-with-lora-adaptors/ is currently offline. Cloudflare's Always Online™ shows a snapshot of this web page from the Internet Archive's Wayback Machine. To check for the live version, click Refresh.

maroke Nga Kiriata Kaupapa: Mana Tika i roto i nga Tauira Diffusion me nga Kaitautoko LoRA - Unite.AI
Tūhono ki a tatou

Intelligence Artificial

Kiriata Kaupapa: Mana Tika i roto i nga Tauira Whakawhitiwhiti me nga Kaitautoko LoRA

mm
whakahoutia on
Kiriata Kaupapa: Mana Tika i roto i nga Tauira Whakawhitiwhiti me nga Kaitautoko LoRA

He mihi ki o raatau kaha, tuhinga-ki-ahua tauira tohatoha kua tino rongonui i roto i te hapori toi. Heoi ano, ko nga tauira o naianei, tae atu ki nga anga-a-toi-a-toi, he uaua ki te pupuri i te mana whakahaere i runga i nga ariā tirohanga me nga huanga i roto i nga whakaahua kua hangaia, ka puta he hua kore. Ko te nuinga o nga tauira ka whakawhirinaki anake ki nga kupu akiaki, he wero ki te whakarereke tonu i nga huanga penei i te kaha o te rangi, te koi o te atarangi, te ahua kanohi, te pakeke ranei o te tangata. He uaua tenei mo nga kaiwhakamahi mutunga ki te whakatika whakaahua kia tutuki ai o raatau hiahia. I tua atu, ahakoa ko enei anga hangahanga e whakaputa ana i nga whakaahua kounga teitei me te tino pono, ka kaha ki te whakakorikori penei i nga kanohi parori, kua ngaro nga maihao.

Hei hinga i enei here, kua tono nga kaiwhakawhanake ki te whakamahi i nga Kiriata Kaupapa Ka taea te whakamaori. Ka oati enei riipene he mana nui ake mo nga kaiwhakamahi mutunga ki runga i nga huanga tirohanga, te whakanui ake i te hanga whakaahua me te whakatika i roto i nga tauira whakamaarama. Ko nga Kiriata Kaupapa i roto i nga tauira purara e mahi ana ma te tautuhi i te ahunga tawhā e rite ana ki tetahi ariā takitahi me te whakaiti i te pokanoa ki etahi atu huanga. Ka hangaia e te anga enei rēreti ma te whakamahi i nga tauira whakaahua, i te huinga tohutoro ranei, na reira ka whakatau i nga tohutohu mo nga ariā tuhinga me te tirohanga.

I te mutunga, ko te whakamahi i nga Kiriata Kaupapa i roto i te tuhinga ki te ahua tauira tohatoha ka whai hua ki te hanga whakaahua me te iti o te pokanoa, me te whakakaha ake i te mana whakahaere i runga i te putanga whakamutunga me te whakanui ake ano i te ahua pono me te kore e whakarereke i nga ihirangi o nga whakaahua, me te whakaputa whakaahua pono. I roto i tenei tuhinga, ka matapakihia e matou te kaupapa o te whakamahi i nga Kiriata Kaupapa i roto i nga tuhinga ki nga anga whakaahua i roto i te hohonutanga hohonu ake, me te tātari me pehea e taea ai e tana whakamahinga te whakaputa i nga whakaahua pai ake i hangaia e AI. 

He Whakataki ki nga Kiriata Kaupapa

Ka rite ki te korero i mua ake nei, he maha nga wa e uaua ana nga anga whakamaarama tuhinga-ki-ahua ki te whakahaere i nga ariā tirohanga me nga huanga i roto i nga whakaahua kua hangaia, ka puta he hua kore. I tua atu, ko te nuinga o enei tauira he uaua ki te whakarereke i nga huanga tonu, ka whai waahi atu ki nga putanga kaore i te pai. Ka taea e nga Kiriata Kaupapa te awhina ki te whakaiti i enei take, te whakamana i nga kaihanga ihirangi me nga kaiwhakamahi mutunga me te kaha ake o te mana whakahaere mo te hanga whakaahua me te whakatika i nga wero e pa ana ki nga anga o naianei.

Ko te nuinga o nga tauira whakamaoritanga kupu-ki-ahua o naianei e whakawhirinaki ana ki te whakarereketanga tere kuputuhi tika hei whakahaere i nga huanga atahanga. Ahakoa ka taea e tenei huarahi te hanga whakaahua, ehara i te mea tino pai na te whakarereke i te tere ka taea te whakarereke i te hanganga o te ahua. Ko tetahi atu huarahi e whakamahia ana e enei anga ko nga tikanga Post-hoc, e whakahuri ana i te tukanga whakamaarama me te whakarereke i nga aro-whakawhiti ki te whakatika i nga ariā tirohanga. Heoi ano, he herenga nga tikanga Post-hoc, e tautoko ana i te iti noa o nga whakarereketanga tukutahi me te tono urunga pokanoa takitahi mo ia ariā hou. I tua atu, ka taea e raatau te whakauru i nga kaupapa whakaaro ki te kore e ata mahia.

Engari, ka tukuna e nga Kiriata Kaupapa he otinga pai ake mo te hanga whakaahua. Ka taea te whakamahi i enei taapiri ngawari, ngawari ki te whakamahi ki nga tauira kua oti te whakangungu, te whakarei ake i te mana me te tika ki runga i nga ariā e hiahiatia ana i roto i te paahi pokanoa kotahi me te iti noa o te here. Ka taea hoki e nga Kiriata Kaupapa te whakarereke i nga ariā tirohanga kaore i hipokina e nga whakaahuatanga tuhinga, he ahuatanga e wehewehe ana i a raatau mai i nga tikanga whakatika-a-tuhi. Ahakoa ka taea e nga tikanga whakarite-a-whakaahua te taapiri tika i nga tohu mo nga kaupapa-a-ahua, he uaua ki te whakatinana mo te whakatika whakaahua. Ko nga Kiriata Kaupapa, i tetahi atu taha, ka tuku i nga kaiwhakamahi mutunga ki te whakarato i te iti o nga whakaahua takirua e tautuhi ana i te ariā e hiahiatia ana. Ka whakawhänuihia e nga rēreti tenei ariā ka hoatu aunoa ki etahi atu whakaahua, ko te whai ki te whakarei ake i te pono me te whakatika i nga paheketanga penei i nga ringaringa.

Ko nga Kiriata Kaupapa e kaha ana ki te ako me te whakatika i nga take e pa ana ki nga ariā AI me te anga whakamaoritanga e wha: Whakatika Atahanga, Tikanga-Arahi, Whakatika Tauira, me nga Aratohu Semantic.

Whakatika Atahanga

Ko nga angamahi AI o naianei e aro ana ki te whakamahi i te urunga herenga hei arahi i te hanganga whakaahua, ka rawekehia ranei e ratou nga aro-a-whiti o te atahanga puna me tana tohu tere kia taea ai te whakatika atahanga kotahi i roto i nga tuhinga ki nga anga whakamaarama whakaahua. Ko te mutunga, ko enei huarahi ka taea te whakatinana i runga i nga whakaahua kotahi, me te hiahia hoki kia arotauhia te putake mo ia ahua na runga i te tipu o te hanganga ahuahanga i runga i nga waaahi puta noa i nga akiaki. 

Nga Tikanga Arataki

Ko te whakamahi i nga tikanga arataki-kore-kore e tohu ana i to raatau kaha ki te whakarei ake i te kounga o nga whakaahua kua hangaia, me te whakakaha i te tirohanga whakaahua-kuputuhi. Ma te whakauru i nga kupu arataki i te wa e pokanoa ana, ka whakapai ake te tikanga i te iti o te titongatanga i tuku iho i nga anga tohatoha, ka taea hoki te whakamahi hei arataki i nga ariā kore haumaru i roto i nga anga tohatoha. 

Whakatika tauira

Ko te whakamahi i nga Kiriata Kaupapa Ka taea ano te kite hei tauira tauira whakatika e whakamahi ana i te urutau iti-rangatira ki te whakaputa i tetahi huanga kupu kotahi e whai waahi ana mo te whakahaere tonu e hono ana ki te huanga. Ka whakamahia nga tikanga whakarite-whakapaipai hei whakawhaiaro i te anga ki te taapiri i nga ariā hou. I tua atu, ko te tikanga Ritenga Ritenga e whakatakoto ana i tetahi huarahi ki te whakatika i nga papa-whakaaro-whakawhitinga ki te whakauru i nga ariā tirohanga hou ki roto i nga tauira tohatoha kua oti te whakangungu. He rereke, ko te tikanga Whakawhiti Kuputuhi e whakaaro ana ki te arotau i tetahi vector whakauru ki te whakahohe i nga kaha tauira me te whakauru i nga ariā kupu ki roto i te anga. 

Te Aratohu Semantic i roto i nga GAN

Ko te raweke i nga huanga orooro tetahi o nga huanga matua o Generative Adversarial Networks me nga huarahi mokowhiti huna e kitea ana e honoa ana i runga i te whakahaere whaiaro. I roto i nga anga whakamaarama, kei nga papa o waenga o te hoahoanga U-Kupenga enei waahi mokowhiti, a, ko te ahunga matua o nga waahi huna i roto i nga anga whakamaarama e mau ana i nga kupu o te ao. Ko nga Kiriata Kaupapa e whakangungu ana i nga waahi iti-iti e pa ana ki nga huanga motuhake, ka whiwhi tohu whakatika tika me te rohe ma te whakamahi i nga kupu takirua whakaahua ranei hei arotau i nga ahunga o te ao. 

Nga Kiriata Kaupapa : Hangahanga, me te Mahi

Nga Tauira Torangapu me te LoRA, nga Kaiurutau Raraunga iti ranei

Ko nga tauira whakamaoritanga he tino karaehe o nga anga AI whakahiato e mahi ana i runga i te maapono o te whakahiato raraunga ma te huri i te tukanga whakamaarama. Ko te tukanga whakamaarama whakamua i te tuatahi ka taapiri i te haruru ki nga raraunga, na reira ka huri mai i te ahua kua whakaritea ki te ahua haruru Gaussian. Ko te whainga tuatahi o nga tauira whakamaoritanga ko te whakahuri i te tutetute whakamaarama ma te whakakore haere i te ahua, me te whakatauira i te haruru Gaussian matapōkere hei whakaputa whakaahua. I roto i nga tono o te ao, ko te kaupapa tuatahi o nga anga Diffusion ko te matapae i te haruru pono ka whangaia te haruru o Gaussian hei whakaurunga me etahi atu whakauru penei i te whakamaarama me te waaahi. 

Ko te tikanga LoRA, Low Rank Adapters ranei ka tito i nga whakahoutanga taumaha i te wa e pai ana te whakatika kia taea ai te urutau pai o nga anga kua oti te whakangungu i mua i nga mahi o raro. Ko te tikanga LoRA ka tito i nga whakahoutanga taumaha mo tetahi paparanga tauira kua whakangungua i mua i te taha ki te whakaurunga me nga rahinga putanga, me te aukati i te whakahou ki te waahi iti-ahu. 

Kiriata Kaupapa

Ko te whainga tuatahi a Concept Sliders ko te mahi hei huarahi ki te whakatika pai i nga kaiwhakauru LoRA i runga i te anga whakamaarama kia pai ake ai te mana whakahaere ki runga i nga whakaahua kua whaaia e te ariā, ka whakaatuhia ano hoki i te ahua e whai ake nei. 

Ina whakatauhia ki runga i nga ariā i whaaia, ka akohia e nga Kiriata Kaupapa nga tohutohu tawhā-iti ki te whakanui, ki te whakaheke ranei i nga korero o nga huanga motuhake. Mo te tauira me tona ariā whainga, ko te whainga tuatahi o Concept Sliders ko te tiki tauira whakarei ake e whakarereke ana i te tupono ki te whakarei me te peehi i nga huanga mo tetahi ahua ka whakatauhia ki runga i te kaupapa kaupapa hei whakanui ake i te tupono ki te whakarei ake i nga huanga, me te whakaiti i te tupono. o te pehi huanga. Ma te whakamahi i te whakatikatika me te tauira a Tweedie, ka whakaurua e te anga he tukanga haruru rerekee-wa, me te whakaatu i ia kaute hei matapae whakaheke. I tua atu, ko te whaainga wehewehe ka whakatika i nga waahanga i roto i nga Kiriata Kaupapa i te wa e mau tonu ana nga taumaha kua whakangungua, a ka whakarereketia te take tauine i te wa o te hanganga LoRA i te wa e pokanoa ana. Ko te take tauine ka whakaahei te whakatika i nga kaha o te whakatika, me te whakakaha ake i nga whakatikatika me te kore e whakangungu ano i te anga ka whakaatuhia i te ahua e whai ake nei. 

Ko nga tikanga whakatika i whakamahia i mua e nga anga i kaha ake te whakatika ma te whakangungu ano i te anga me te nui ake o te arataki. Heoi ano, ko te whakamaarama i te tauine i te wa wawaotanga ka puta nga hua whakatika me te kore e piki ake te utu whakangungu, me te waa. 

Te Ako Kaupapa Ataata

Ko nga Kiriata Kaupapa i hangaia hei whakahaere i nga ariā tirohanga kaore e taea e nga kupu akiaki te tautuhi pai, a ka whakamahia e enei kiriata nga huingararaunga iti ka takiruahia i mua, i muri ranei ki te whakangungu i enei ariā. Ko te rereke i waenga i nga takirua whakaahua ka taea e nga kaitarai ki te ako i nga ariā tirohanga. I tua atu, ko te kaupapa whakangungu a nga Kiriata Kaupapa e arotau ana i te waahanga LoRA i whakatinanahia ki nga ahunga whakamua me te whakamuri. Ko te mutunga, ko te wahanga LoRA e whakahāngai ana ki te ahunga e puta ai nga paanga ataata ki nga ahunga e rua. 

Nga Kiriata Kaupapa : Nga Hua Whakatinana

Hei tātari i te painga o te mahi, kua arotakehia e nga kaiwhakawhanake te whakamahinga o nga Kiriata Kaupapa i te tuatahi Whakawhanaketanga XL, he anga 1024-pixel taumira teitei me etahi atu whakamatautau i whakahaeretia i runga i te anga Stable Diffusion v1.4 me nga tauira e whakangungua ana mo nga wa 500 ia ia. 

Kiriata Kaupapa Kuputuhi

Hei arotake i te mahi a nga Kiriata Kaupapa Kuputuhi, ka whakamanahia i runga i te huinga o te 30 o nga ariā-a-tuhi, ka whakatauritehia te tikanga ki nga rarangi turanga e rua e whakamahi ana i te tohutoro kuputuhi paerewa mo te maha o nga waahi waahi, katahi ka timata te hanga ma te te taapiri tohu ki te urungi i te ahua. Ka kitea i roto i te ahua e whai ake nei, ko te whakamahinga o nga Kiriata Kaupapa e hua ana i nga tohu CLIP teitei ake, me te whakahekenga tonu o te tohu LPIPS ina whakaritea ki te anga taketake kaore he Kiriata Kaupapa. 

Ka kitea i roto i te pikitia o runga ake nei, ko te whakamahi i nga Kiriata Kaupapa e whakahaere ana i te whakatika tika o nga huanga e hiahiatia ana i te wa o te hanga whakaahua me te pupuri i te hanganga katoa o te ahua. 

Kiriata Kaupapa Ataata

Ko nga tauira whakamaoritanga kupu ki te atahanga e whakamahi ana i nga whakahaunga kuputuhi he uaua ki te pupuri i te mana teitei ake mo nga huanga ataata penei i te makawe kanohi, te ahua kanohi ranei. Hei whakarite kia pai ake te whakahaere i nga huanga maramara, ka whakamahia e nga Kiriata Kiriata te arataki tuhinga e hono ana ki nga huingararaunga atahanga. Ka kitea i roto i te ahua i raro nei, ka hangaia e nga Kiriata Kaupapa he takitahi takitahi mo te "rahi kanohi" me te "ahua tukemata" e hopu ana i nga huringa e hiahiatia ana ma te whakamahi i nga takirua pikitia. 

Ko nga hua ka taea te whakamahine ma te whakarato tuhinga motuhake kia aro te ahunga ki tera rohe kanohi, ka hanga i nga riipene me te mana hikoi ki runga i te huanga kua tohua. 

Tito Kiriata

Ko tetahi o nga painga nui o te whakamahi i nga Kiriata Kaupapa ko tona kaha e taea ai e nga kaiwhakamahi te whakakotahi i nga kiriata maha mo te whakanui ake i te mana whakahaere, kaua ki te arotahi ki te kaupapa kotahi i te wa ka taea te nama ki nga tohu whakaheke-iti e whakamahia ana i roto i nga Kiriata Kaupapa. . I tua atu, i te mea ko nga Kiriata Kaupapa he ngawari nga whakaurunga LoRA, he ngawari ki te tiri, ka ngawari hoki te whakakikorua ki runga. tauira tohatoha. Ka taea hoki e nga kaiwhakamahi te whakatika i nga puku maha i te wa kotahi ki te urungi i nga reanga uaua ma te tango i nga huinga reeti pai. 

Ko te atahanga e whai ake nei e whakaatu ana i te kaha o te tito o nga riipene ariā, a ka titohia nga reeti maha i ia rarangi mai i te maui ki te taha matau, na reira ka taea te hikoi i nga waahi ariā ahu-nui me te kaha ake o te mana whakahaere ki runga i nga kaupapa. 

Te Whakapai ake i te Kounga Atahanga

Ahakoa te ahua o te tuhinga toi ki nga anga whakamaarama whakaahua me nga tauira whakatipu nui penei Whakawhanaketanga XL Ka taea e te tauira te whakaputa whakaahua pono me te kounga teitei, he maha nga wa ka pa ki a ratou nga paheketanga o te ahua penei i nga mea porangi, i nga mea takai ranei ahakoa ko nga tawhā o enei ahuatanga o nga anga toi e mau ana ki te kaha huna ki te whakaputa i te putanga kounga teitei me te iti ake o nga reanga. Ma te whakamahi i nga Kiriata Kaupapa Ka taea te whakaputa whakaahua me te iti ake o nga whakakorikoritanga ma te iriti i nga tino kaha o enei tauira ma te tautuhi i nga ahunga tawhā-iti. 

Ringa Whakatika

Ko te hanga whakaahua me nga ringaringa rite tonu te mea he raru mo nga anga whakamaarama, a ma te whakamahi i nga Kiriata Kaupapa e tika ana te whakahaere i te kaha ki te whakakorikori i nga ringaringa. Ko te ahua e whai ake nei e whakaatu ana i te painga o te whakamahi i nga "ringa whakatika" Ririreti Kaupapa e taea ai e te angamahi te whakaputa whakaahua me nga ringaringa tino titiro. 

Whakatikatika Kiriata

Ko te whakamahi i nga Kiriata Kaupapa kaore e taea te whakaputa i nga ringaringa tino titiro, engari kua whakaatu ano hoki i to raatau kaha ki te whakapai ake i te tino pono o nga whakaahua i hangaia e te anga. Ko nga Kiriata Kaupapa e whakaatu ana i te ahunga tawhā-iti kotahi e taea ai te huri i nga whakaahua mai i nga take kotiti noa, ka whakaatuhia nga hua ki te ahua e whai ake nei. 

Thoughts Final

I roto i tenei tuhinga, kua korerohia e matou mo nga Kiriata Kaupapa, he tauira hou ngawari engari ka taea te whakamaori i te mana whakamaori mo nga whakaputanga i hangaia i roto i nga tauira tohatoha. Ko te whakamahi i nga Kiriata Kaupapa e whai ana ki te whakatau i nga take e pa ana ki nga tuhinga o naianei ki nga anga whakamaarama whakaahua e uaua ana ki te pupuri i te mana e hiahiatia ana ki runga i nga ariā tirohanga me nga huanga kei roto i te ahua kua hangaia e kore e pai te whakaputa. I tua atu, he uaua ki te whakarereke i nga huanga haere tonu i roto i te ahua o te nuinga o nga tauira whakamaoritanga ki te ahua o te ahua ka puta ki te kore e pai. Ma te whakamahi i nga Kiriata Kaupapa ka taea te tuhi ki nga anga whakamaarama whakaahua ki te whakaiti i enei take, me te whakamana i nga kaihanga ihirangi me nga kaiwhakamahi mutunga ki te kaha ake o te mana whakahaere mo te hanga whakaahua, me te whakaoti i nga take e pa ana ki nga anga o naianei. 

"He miihini na te mahi, he kaituhi na te ngakau". He kaituhi hangarau a Kunal me te aroha nui me te mohio ki a AI me ML, i whakatapua ki te whakangawari i nga ariā uaua i roto i enei mara na roto i ana tuhinga whakauru me nga korero.