Henry· DI autorius, peržiūrėjo žmogusRunway Gen-4.5 su NVIDIA Rubin: AI vaizdo įrašų ateitis jau čia
Runway bendradarbiauja su NVIDIA, kad paleistų Gen-4.5 naujos kartos Rubin platformoje ir nustatytų naujus AI vaizdo įrašų kokybės, greičio bei vietinės garso generacijos etalonus.
Partnerystė, kurios niekas nesitikėjo
2026 m. sausio 5 d. Runway paskelbė apie precedento neturintį dalyką: jų pagrindinis Gen-4.5 modelis taps pirmuoju AI vaizdo įrašų generatoriumi, veikiančiu tiesiogiai NVIDIA Rubin platformoje. Ne optimizuotu jai. Ne su ja suderinamu. Tiesiogiai veikiančiu.
Ką tai reiškia kūrėjams? Viską.
Rubin NVL72 yra NVIDIA atsakas į AI infrastruktūros kliūtį. Kol konkurentai stengiasi išspausti našumą iš esamos aparatinės įrangos, Runway peršoko visą šią diskusiją. Gen-4.5 dabar generuoja vienos minutės vaizdo įrašus su vietiniu garsu, personažų nuoseklumu tarp kadrų ir fizikos simuliacija, kuri pagaliau paiso gravitacijos.
Kodėl tai svarbiau už dar vieną etaloną
Matėme etalonų karus. Kas kelis mėnesius kažkas paskelbiamas lyderiu, tik po kelių savaičių jo vietą užima kitas. Gen-4.5 Elo balas, 1,247 Artificial Analysis etalone, žinoma, svarbus. Tačiau svarbiau yra kaip jis buvo pasiektas.
Runway tai pasiekė vienu metu išsprendę tris problemas:
Vietinė garso ir vaizdo sintezė, nereikia atskiro darbo proceso. Kelių kadrų scenos su išliekančia personažo tapatybe. Fizika, kuri elgiasi taip, kaip turėtų elgtis fizika.
Garsas pridedamas kaip antraeilis elementas. Personažo kaita tarp montažo pjūvių. Objektai, kurie plūduriuoja, pereina pro sienas arba teleportuojasi.
Vietinė garso generacija ypač išsiskiria. Ankstesni modeliai generavo nebylų vaizdą, todėl kūrėjams tekdavo pridėti foninę muziką arba naudoti atskirus garso įrankius. Gen-4.5 generuoja dialogus, garso efektus ir aplinkos garsą kaip tos pačios difuzijos proceso dalį. Lūpų sinchronizacija veikia. Žingsniai sutampa. Lietus skamba kaip lietus.
NVIDIA Rubin veiksnys
Leiskite šiek tiek pasinerti į technines detales, nes aparatinės įrangos istorija paaiškina našumo istoriją.
Rubin NVL72 nėra tiesiog „greitesnis“. Jis architektūriškai kitoks. Platforma skiria konkrečius skaičiavimo kelius laiko nuoseklumui, dėl kurio AI vaizdo įrašai istoriškai atrodė kaip karštligiški sapnai, kuriuose objektai atsitiktinai keičiasi. Sukūrusi Gen-4.5 taip, kad jis veiktų tiesiogiai Rubin, Runway gauna specializuotą silicį būtent toms operacijoms, kurios leidžia vaizdo įrašui atrodyti gerai.
Partnerystė su NVIDIA taip pat paaiškina kainodarą. Už 25 kreditus per sekundę Gen-4.5 nėra pigus. Tačiau realaus laiko fizikos simuliacijos vykdymas naujos kartos aparatinėje įrangoje taip pat nėra pigus. Runway lažinasi, kad kokybė pateisina didesnę kainą.
Kaip jis atrodo konkurencijos kontekste
AI vaizdo įrašų rinka 2026 m. pradžioje visiškai nepanaši į 2025 m. Google atnaujino Veo iki 3.1 versijos su vietine 4K raiška ir vertikaliais vaizdo įrašais. OpenAI pavertė Sora socialine programėle. Kinijos konkurentai, tokie kaip Kling, mažina kainas visiems.
Tačiau Runway pasirinko kitą statymą: infrastruktūrą vietoje iteracijų.
| Modelis | Maksimali raiška | Vietinis garsas | Personažo nuoseklumas | Fizikos kokybė |
|---|---|---|---|---|
| Runway Gen-4.5 | 4K | Pilnas | Puikus | Puiki |
| Google Veo 3.1 | 4K | Pilnas | Geras | Gera |
| OpenAI Sora 2 | 1080p | Dalinis | Geras | Gera |
| Kling 2.6 | 1080p | Pilnas | Geras | Vidutinė |
Raiškos ir garso lygybė su Veo 3.1 paverčia tai dviejų varžovų lenktynėmis aukščiausioje rinkos kategorijoje. Tačiau stebėkite fizikos ir personažo nuoseklumo stulpelius. Būtent čia Rubin partnerystė parodo savo vertę.
Kūrybinės pasekmės
Praėjusią savaitę su Gen-4.5 kūriau viską, nuo muzikinių vaizdo klipų iki produktų demonstracijų. Štai kas pakeitė mano darbo procesą:
Kelių kadrų nuoseklumas dabar yra tikras. Galiu sugeneruoti personažą pirmame kadre, pereiti prie kito kampo antrame kadre ir pasirodo tas pats žmogus. Ne panašus žmogus. Tas pats žmogus. Skamba akivaizdžiai, tačiau prieš šešis mėnesius tai buvo neįmanoma.
Garso dizainas vyksta automatiškai. Kai generuoju sceną, kurioje žmogus eina per miestą, gaunu žingsnius, eismą, minios šurmulį ir vėją. Ne tobulai sumiksuotą garsą, bet tinkamą atspirties tašką. Anksčiau valandas praleisdavau kurdamas foley garsus. Dabar kelias minutes skiriu korekcijoms.
Fizika tiesiog veikia. Numesti objektai krenta. Mesti objektai juda lanku. Vanduo teka žemyn. Iki šiol AI vaizdo įrašai gyveno visatoje, kur fizika buvo neprivaloma.
Jei norite sužinoti, kaip geriausiai pasinaudoti Gen-4.5 raginimų inžinerija, peržiūrėkite mūsų išsamų AI vaizdo įrašų raginimų vadovą. Principai vis dar galioja, tačiau Gen-4.5 gerokai geriau interpretuoja sudėtingas instrukcijas.
Rinkos pokytis
Ši partnerystė signalizuoja apie kažką didesnio nei vieną produkto atnaujinimą. NVIDIA dabar tiesiogiai investuoja į vaizdo įrašų modelių našumą. Tai keičia konkurencinę dinamiką visoje pramonėje.
Runway-NVIDIA partnerystė
Paskelbta apie partnerystę, Gen-4.5 tampa pirmuoju modeliu Rubin platformoje
Veo 3.1 atsakas
Google skubiai pristato Veo 4K ir vertikalių vaizdo įrašų atnaujinimą
Kainų spaudimas
Kinijos konkurentai, reaguodami į tai, sumažina kainas 15-20%
Verslo diegimo banga, prasidėjusi 2025 m., paspartės. Kai 100 žmonių komanda gali vaizdo įrašų kokybe pranokti trilijono dolerių vertės įmones, senosios taisyklės apie tai, kas kuria kūrybinius įrankius, nebegalioja.
Kas toliau
Runway įsipareigojo kas ketvirtį teikti atnaujinimus Rubin platformoje. Gairės leidžia tikėtis generacijos realiuoju laiku, kuri šiuo metu neįmanoma net su naujos kartos aparatine įranga. Tačiau pagrindas dabar pakankamai tvirtas, kad tai taptų klausimu, kada tai įvyks, o ne ar tai apskritai įvyks.
Platesnė tendencija aiški. AI vaizdo įrašai skyla į dvi rinkas: aukščiausios klasės įrankius profesionaliems kūrėjams, kuriems reikia kokybės ir kontrolės, bei nebrangius įrankius visiems kitiems. Runway stato viską ant aukščiausios klasės rinkos. Vertinant pagal Gen-4.5, šis statymas atrodo vis išmintingesnis.
Esmė: Runway Gen-4.5 su NVIDIA Rubin yra pirmoji AI vaizdo įrašų sistema, kuri atrodo sukurta rimtam kūrybiniam darbui. Vietinis garsas, fizikos simuliacija ir personažų nuoseklumas pagaliau atitinka profesionalių darbo procesų reikalavimus. Už 25 kreditus per sekundę ji nėra skirta atsitiktiniams naudotojams. Tačiau kūrėjams, kuriems reikia rezultatų, atrodančių kaip tikri rezultatai, tai yra naujas etalonas.
AI vaizdo įrašų nebylioji era neabejotinai baigėsi. Sveiki atvykę į garsinio kino erą.
Šaltiniai
Kūrybinių technologijų specialistas iš Lozanos, tyrinėjantis DI ir meno susitikimo vietą. Tarp elektroninės muzikos sesijų eksperimentuoja su generatyviniais modeliais.
View profile →Patiko tai, ką perskaitėte?
Paverskite savo idėjas neribotos trukmės DI vaizdo įrašais per kelias minutes.
Susiję straipsniai
Tęskite pažintį su šiais susijusiais įrašais
Runway Gen-4.5 etalonai: kinematografinės kokybės analizė
Runway Gen-4.5 etalonai: 1 247 Elo, lenkiantis Veo 3.1 ir Sora 2. Išleistas 2025 m. gruodį. Sužinokite, kaip palyginama jo kinematografinė kokybė.
NVIDIA GTC 2026: Ką AI vaizdo kūrėjai turi žinoti
Praktinis kiekvieno GTC 2026 pranešimo, kuris svarbus AI vaizdo kūrėjams, paaiškinimas, nuo Runway realaus laiko generavimo iki naujos Vera Rubin aparatinės įrangos, kuri visa tai valdo.
AI vaizdo įrašai susitinka su žaidimais: ką NVIDIA GDC 2026 pristatymai reiškia kūrėjams realiuoju laiku
NVIDIA GDC 2026 renginyje pademonstravo, kaip AI vaizdo įrašų generavimas veikia lokaliai ir realiuoju laiku. Štai ką tai reiškia žaidimų kūrėjams, turinio kūrėjams ir interaktyviosios medijos ateičiai.