Tencent's GameCraft Is Wild AI Tech bakeng sa Bapala Video Generation

Tencent ea Hunyuan sehlopha se lokolotse ho hong ho labalabelang e le kannete: theknoloji e ncha e bitsoang Hunyuan-GameCraft. Sena ha se mabapi le AI ea ho hlahisa litšoantšo kapa likotoana tse khutšoane. E mabapi le ho bopa Liphihlelo tsa video tse ka bapaloang ho tsoa melaetsa e bonolo ea mongolo. Ngola “sekepe se holim’a letšeng,” ’me motsotsong o latelang, u se u tsamaisa seketsoana seo metsing a khutsitseng ka nako ea sebele.

E hlahisa taolo ea nako ea 'nete ho video e hlahisoang ke AI, e tlisa motsamao, pono, le papali-joaloka phallo ho phihlelo. E tšehelitsoe ke mefuta e pharalletseng le papali ea papali e kholo, GameCraft e kopanya tlhahiso ea video ea AI le taolo ea sebapali sa nako ea nnete.

Tencent's Hunyuan-GameCraft ke Eng?

Hunyuan-GameCraft ke mofuta oa tlhahiso ea livideo o thehiloeng ho pharalletseng o ntlafalitsoeng ke sehlopha sa Tencent sa AI. Se e khethollang ke bokhoni ba ho hlahisa setšoantšo sa video se laolehang ho sebelisa mongolo kapa setšoantšo feela. Ha ketsahalo e se e bōpiloe, u ka e hlahloba u sebelisa keyboard le mouse, joalo ka mofuta o bobebe oa papali e ka bapaloang.

Ka mohlala, mohlala o ka nka ka potlako "tsela ea moru oa lehloa" 'me oa hlahisa video e tsoelang pele e shebahalang joaloka papali ea papali. U ka ea pele, u thinyetsa ka ho le letšehali kapa ka ho le letona, 'me mohlala o hlahisa foreimi e' ngoe le e 'ngoe e ncha ho latela seo u se kentseng. Ha ho na enjine ea setso ea 3D ka morao ho sena. Video e fetoha ho latela liketso tsa hau.

Seo E hlileng e ka se Etsang

Tencent's Hunyuan-GameCraft e ts'ehetsa maikutlo a motho oa pele le a motho oa boraro, ka liphetoho tse thellang lipakeng tsa tsona. U ka hlahloba libaka, literata tsa litoropo, libaka tsa ntoa, kapa esita le libaka tsa sci-fi. Motsamao o mong le o mong o kang oa ho sheba kapa oa ho tsamaea, o hokahane le mokhoa oa ho bolela esale pele oa mohlala.

Litaolo li tloaelehile, kaha u ka sebelisa WASD kapa linotlolo tsa metsu ho tsamaea le ho qamaka. AI e sebetsana le tse ling kaofela. Ka morao ho liketsahalo, e bala seo u se kentseng e le lintlha tsa motsamao le ho haha ​​foreimi ka 'ngoe ho latela seo. Lintlha tsa koetliso li kenyelletsa livideo tse fetang milione tse tsoang lipapaling tse fetang 100 tse tsebahalang. Ponahalo ena e pharaletseng ke eona e thusang mohlala ho utloisisa mekhoa e fapaneng ea pono (joalo ka litoropo tsa cyberpunk, liqhobosheane tsa mehleng ea khale, kapa libaka tsa tlhaho) le ho li aha bocha ka mokhoa o kholoang.

Ho li-demos tse lokollotsoeng ho fihlela joale, litšoantšo li fapane ebile li bonahala li ruile. U bona libaka tse kang literata tsa litoropo, libaka tse nang le lehloa, libaka tsa linōka le tse ling. E ikutloa e le haufi le ho tsamaea ka har'a cutscene kapa boemo ba papali e reriloeng esale pele. Empa ho bohlokoa ho sheba tsena e le ponelopele ea lipatlisiso. Seo re se bonang ke tlhahiso e hlophisitsoeng haholo. Ha ho so hlake hore na boleng bo ka tsitsa kapa bo tsitsitse hakae mefuteng e mengata ea litlatsetso kapa litšebelisano tse telele.

Re bone merero e meng e reretsoeng lipheo tse tšoanang. Meetso ea Microsoft ea WHAM le Muse tsepamisa maikutlo ho bolela esale pele liforeimi tsa papali ea nako e tlang tse ipapisitseng le melao e ithutoang. Odyssey ke mohlala o mong oa morao-rao o fetolang video hore e be sebaka se ka lemohuoang ho sebelisoa AI.

Hunyuan GameCraft e sebetsa joang ka morao ho liketsahalo?

Hunyuan-GameCraft e hahiloe holim'a AI ea mofuta oa video e majabajaba (mefuta ea phallo) e nang le maqheka a khethehileng. Taba ea bohlokoa ke ho ts'oara likenyelletso tsa keyboard/toeba joalo ka karolo ea "context" kapa pale ea video. Ha e le hantle, e fetola li-control tseo hore e be mofuta oa lets'oao la ho tsamaisa khamera hore e tsebe hore na u batla hore maikutlo a fetohe joang. Ebe joale e bolela esale pele liforeimi tse latelang tsa video frame-by-frame, e holisa sekotwana ho ea moo u "tsamaisang" teng.

Ho thibela ketsahalo hore e se ke ea qhoma ho pota-pota, mohlala o sebelisa mokhoa o thehiloeng historing. E hopola moo u tlohetseng teng (ho tšoana le ho ts'oara boemo ba papali mohopolong) e le hore lefatše le se ke la ea teleport libakeng tse ling. Ba bitsa sena "lebasetere historing conditioning." Ha e le hantle, ka linako tse ling e fepa liforeimi tsa khale ho eona e le hore lintlha tsa bohlokoa (joalo ka boemo ba lintho le mabone) li lule li tsitsitse ha u ntse u tsamaea. Baetsi le bona ba ile ba etsa bonnete ba hore mohlala o ka sebetsa ka potlako ka ho o silafatsa (ke hore, ho fokotsa mohlala o moholo hore o be o monyenyane, o potlakile). Ka tsela ena e ka tsamaisana le lipompo tsa hau tsa bohlokoa ka (hoo e batlang e le) ka nako ea nnete, ha e fuoa GPU e monate.

Ka bokhuts'oane, u e fa setšoantšo sa ho qala kapa molaetsa oa mongolo le tatellano ea linotlolo tsa konopo. Joale AI e lula e bolela esale pele litšoantšo tse ncha e le hore ho bonahale eka u ntse u tsamaea kapa u sheba sebakeng seo. Ka lebaka la leqheka le khethehileng la nalane, lefatše la lipapali le lula le tsitsitse ha nako e ntse e ea. Ka mohlala, haeba u theoha phasejeng kapa u pota-pota 180 °, marako le fatše li tla lula li le teng ho e-na le ho phatsima. Sehlopha se bonts'a hore se boloka botsitso ba 3D ka nako e telele, e leng se khahlang haholo bakeng sa video e hlahisitsoeng.

Sebelisa Liketsahalo

Joale libapali le li-devs li ka etsa eng ka theknoloji ee? Boemong ba mantlha, ke sesebelisoa sa boqapi. Baqapi ba lipapali ba ka e sebelisa ho hlahisa maemo a macha kapa mehopolo ea boemo hang hang. Bangoli le batsamaisi ba ka hlahisa liboto tsa lipale kapa li-cutscenes ka ho thaepa litlhaloso ebe ba li fetola ka ho "bapala" sebakeng seo. Bakeng sa libapali, e ka ba mokhoa o monate oa ho ba le lipapali tse nyane tseo u li qapang hang-hang (joalo ka "Ke batla ntoa ea drakone Mars" 'me ka tšohanyetso u ka laola seo). E ka boela ea thusa ho koetlisa li-AI tse ling: mohlala, re ka koetlisa liroboto kapa liakhente tsa lefats'e tse sa feleng tseo AI e li hlahisang.

Ha ho na sesebelisoa sa marang-rang sa sechaba, 'me theknoloji e ntse e hloka ntlafatso ho latela boleng ba pono le karabelo. Ho li-demos tse tsoang ho mehlala e meng e tšoanang, ha khamera e tsamaea haholo kapa e potoloha haholo, ketsahalo e ka qala ho senyeha. Boemo ba nalane ea lebasetere ea Hunyuan bo fokotsa seo, empa liphetoho tse kholo tsa pono li ntse li ka baka mats'oao a sebopeho kapa jiometry e sothehileng. Hona joale, e sebetsa hantle joalo ka ponelopele ea lipatlisiso, ntho e bonts'ang se ka khonehang, ho fapana le boiphihlelo bo ka bapaloang ka botlalo.

Mehopolo ea ho qetela

Mothating ona, mohopolo o tiile. Ho na le monyetla o bonahalang oa hore na video e tsamaisoang ke ketso e ka bopeha joang hore e shebahale eka ke papali. Empa e sa le hoseng. Ena ke demo ea lipatlisiso, eseng sehlahisoa se felileng. Ho hlahisa nako ea 'nete ka tharollo e phahameng bakeng sa linako tse telele tsa ho bapala e ntse e le phephetso ea tekheniki.