Koox ka mid ah Cilmi-baarayaasha jaamacadda Tel Aviv ayaa dhawaan soo bandhigay HyperStyle, taas oo ah version rogan ee nidaamka barashada mashiinka NVIDIA StyleGAN2 kaas oo dib loo habeeyay si uu dib ugu sameeyo qaybo maqan marka la tafatiro sawirada dhabta ah ee aduunka.
StyleGAN waxaa lagu gartaa u oggolaanshaha in ay soo saaraan waji cusub oo dadka leh muuqaal macquul ah, dejinta qiyaasaha sida da'da, jinsiga, dhererka timaha, dabeecadda dhoola cadeynta, qaabka sanka, midabka maqaarka, muraayadaha iyo xagasha sawir qaadista.
Dhinaca kale, HyperStyle waxay suurtogal ka dhigaysaa in la beddelo cabbirrada la midka ah kuwa jira, Si kale haddii loo dhigo, waxay kuu ogolaaneysaa inaad abuurto sawiro adigoon wax ka beddelin sifooyinkooda sifo iyo ilaalinta aqoonsiga wajiga asalka ah.
HyperStyle waxay soo bandhigaysaa isku-xidhka-xirfadeedka si ay u barato sida loo nadiifiyo miisaanka koronto-dhaliye StyleGAN oo hore loo tababaray marka loo eego sawirka la soo geliyay. Samaynta sidaas waxay awood u siinaysaa dib-u-dhiska heerka wanaajinta iyadoo leh waqtiyo tilmaame u eg iyo tafatir sare.
Tusaale ahaan, marka la isticmaalayo HyperStyle, waxay ku ekaan kartaa isbeddelka da'da qofka sawirka ku jira, Beddel timaha, ku dar muraayadaha, gadhka ama shaarubaha, ka samee sawir u eg jile kartoon ah ama sawir gacmeed, samee waji murugo ama farxad leh.
Xaaladdan oo kale, Nidaamka waxaa loo tababari karaa ma aha oo kaliya in la beddelo wejiyada dadka, laakiin sidoo kale shay kasta, waayo Tusaale ahaan, si loo saxo sawirada baabuurka.
Inta badan shaqooyinka daraaseeya rogantaa waxay raadiyaan koodka daahsoon oo si sax ah dib ugu dhisa sawirka la bixiyay. Qaar ka mid ah shaqada dhawaanahan ayaa soo jeedisay in la hagaajiyo sawirka miisaannada koronto-dhaliye si loo gaaro dib-u-dhis tayo sare leh oo loogu talagalay sawirka la beegsanayo. Anagoo adeegsanayna HyperStyle, waxaan hiigsaneynaa inaan keenno habab hagaajinta koronto-dhaliye si loo gaaro goobta codsiyada is-dhexgalka anagoo la qabsanayna hab ku saleysan codeeye.
Waxaan tababarnay hal shabakad si aan u barano sida loo sifeeyo culeyska koronto dhaliyaha marka loo eego sawirka la doonayo. Barashada khariidayntan, HyperStyle waxay si hufan u saadaalisaa miisaanka bartilmaameedka dhaliye wax ka yar 2 ilbiriqsi sawirkiiba, taasoo ka dhigaysa mid lagu dabaqi karo codsiyo kala duwan.
Habka la soo jeediyey ujeedadeedu tahay in lagu xalliyo dhibaatada dib u dhiska qaybaha maqan ee sawirka inta lagu jiro tafatirka. Farsamooyinka kor lagu soo jeediyay waxay wax ka qabteen dheelitirka u dhexeeya dib-u-dhiska iyo tafatirka iyadoo si fiican loo hagaajinayo sawir-qaadaha si loo beddelo qaybo ka mid ah sawirka la beegsanayo iyada oo dib loo abuurayo gobollo la tafatiray oo asal ahaan ka maqnaa. Hoos-u-dhaca hababka noocan oo kale ah waa baahida loo qabo tababbarka muddada-dheer ee loogu talagalay shabakada neerfaha ee sawir kasta.
Habka ku saleysan algorithm-ka StyleGAN wuxuu u oggolaanayaa in la isticmaalo qaab caadi ah, horay loogu tababaray ururinta guud ee sawirada, si loo soo saaro walxaha sifada ee sawirka asalka ah oo leh heer kalsooni ah oo u dhiganta algorithms ee u baahan tababbarka shakhsi ahaaneed ee qaabka sawir kasta.
Mid ka mid ah faa'iidooyinka habka cusub waa awoodda lagu beddeli karo sawirada waxqabad ku dhow wakhtiga dhabta ah, marka lagu daro xaqiiqda ah in moodelku wuxuu diyaar u yahay inuu tababaro dadkaas, baabuurta iyo xoolaha loo diyaariyey iyadoo lagu salaynayo ururinta laga bilaabo Flickr-the Faces-HQ (FFHQ, 70,000 tayada sare leh ee sawirada PNG ee wejiyada dadka), Stanford Cars (16 sawirada baabuurta) iyo AFHQ (sawirrada xayawaanka).
Sidoo kale, qalabyo kala duwan ayaa la bixiyaa si loo tababaro moodooyinkaagaiyo sidoo kale moodooyin tababaran oo diyaar u ah in la isticmaalo oo ah koodhiyeyaasha caadiga ah iyo koronto-dhaliyeyaasha ku habboon in lagu isticmaalo iyaga. Tusaale ahaan, waxaa jira koronto-dhaliyeyaal diyaar u ah abuurista sawirada qaabka Toonify, jilayaasha Pixar, abuurista sawir-gacmeedyo, iyo xitaa qaabaynta sida amiiradaha Disney.
Finalmente kuwa danaynaya inay wax badan ogaadaan Ku saabsan qalabkan, waxaad hubin kartaa faahfaahinta Xiriirka soo socda.
Waxa kale oo muhiim ah in la sheego in koodka uu ku qoran yahay Python iyadoo la isticmaalayo qaabka PyTorch oo uu MIT shati u haysto. Waxaad ka hubin kartaa koodka xiriirka soo socda.