Adobe Firefly vaizdo įrašų redaktorius tampa viešas: raginimais paremtas redagavimas keičia viską

Pamirškite viską, ką žinote apie vaizdo įrašų redagavimo laiko juostas. Adobe ką tik išleido naršyklėje veikiantį vaizdo įrašų redaktorių, kuriame galite įvesti „pašalink tą žmogų fone“, ir jis iš tikrųjų jį pašalins. Tai funkcija, apie kurią svajojome nuo tada, kai DI vaizdo įrašų generavimas tapo realybe.

Redaktorius pagaliau čia

Adobe tai pristatė MAX renginyje. Jie parodė jį už uždarų durų. Leido keliems kūrėjams jį išbandyti. Dabar jis atviras visiems. Firefly Video Editor oficialiai pasiekiamas viešojoje beta versijoje ir veikia tik jūsų naršyklėje.

Naršyklė

Nereikia diegti

Raiškos didinimas per Topaz

Vieša

Beta prieiga

Kuo tai skiriasi nuo visų kitų DI vaizdo įrašų įrankių? Adobe nesiūlo vien generavimo. Jie siūlo redagavimą. Tikrą redagavimą. Tokį, kuriame galite sujungti DI sugeneruotus klipus su savo filmuota medžiaga kelių takelių laiko juostoje, o tada atlikti tikslius pakeitimus naudodami natūralią kalbą.

Prompt to Edit: pagrindinė funkcija

Štai kas mane jaudina. Tradicinis vaizdo įrašų redagavimas reikalauja išmokti sudėtingų maskavimo įrankių, rotoskopijos darbo eigų ir pagrindinių kadrų animacijų vien tam, kad pašalintumėte ką nors iš kadro. Prompt to Edit, veikianti su Runway Aleph modeliu, visiškai pakeičia šią lygtį.

💡

Įveskite „pakeisk foną į saulėlydį“ arba „pašalink kavos puodelį nuo stalo“, ir DI automatiškai atliks sekimą, maskavimą bei kompoziciją.

Tai nėra teksto į vaizdo įrašą generavimas. Tai DI padedama postprodukcija jau egzistuojančiai filmuotai medžiagai. Galite:

Pašalinti nepageidaujamus objektus be maskavimo
Pakeisti fonus be žalio ekrano
Pakoreguoti apšvietimą po filmavimo
Keisti spalvas ir atmosferą

Skirtumas tarp generavimo ir redagavimo yra svarbus. Generavimas kuria nuo nulio. Redagavimas patobulina tai, ką jau turite. Profesionalams, dirbantiems su klientų filmuotąja medžiaga, vaizdo įrašų bankų klipais ar savo kamera nufilmuota medžiaga, tai yra trūkstama detalė.

Du redagavimo būdai

Adobe sąsają sukūrė atsižvelgdama į lankstumą. Gaunate dvi skirtingas darbo eigas:

✓Redagavimas laiko juostoje

Klasikinis kelių takelių metodas. Vilkite klipus, trumpinkite, sluoksniuokite garsą, valdykite tempą kadras po kadro. Pažįstama visiems, kurie yra naudoję Premiere ar Final Cut.

✓Tekstu paremtas redagavimas

Redaguokite vaizdo įrašą redaguodami jo transkriptą. Puikiai tinka interviu, tinklalaidėms ir kalbančio žmogaus turiniui. Iškirpkite sakinį ištrindami jo tekstą.

Tekstu paremtas metodas skamba kaip triukas, kol neišbandote jo su interviu medžiaga. Rasti tą vieną tobulą citatą užtrunka minutes, o ne valandas, kai galite ieškoti transkripte ir iškirpti tiesiai iš jo.

4K raiškos didinimas per Topaz Astra

Adobe bendradarbiavo su Topaz Labs, kad Astra raiškos didinimą tiesiogiai integruotų į Firefly Boards. Tai išsprendžia problemą, kuri persekioja kiekvieną vaizdo įrašų kūrėją: seną filmuotąją medžiagą.

🎬

Archyvinės filmuotos medžiagos išgelbėjimas

Tas interviu, kurį nufilmavote 2018 m. 720p raiška? Padidinkite jį iki 4K. Tie seni šeimos vaizdo įrašai? Atkurkite detales, kurių iš pradžių net nebuvo. DI atkuria tekstūrą ir ryškumą beveik magiškais būdais.

Integracija veikia fone, kol atliekate kitas užduotis. Įkelkite filmuotą medžiagą, nustatykite raiškos didinimą ir tęskite redagavimą. Baigę karpymą, 4K versija jau bus paruošta.

Modelių ekosistema plečiasi

Be Prompt to Edit, Adobe toliau integruoja partnerių modelius į Firefly. Naujausi papildymai:

Modelis	Galimybė	Kodėl tai svarbu
FLUX.2 (Black Forest Labs)	Fotorealistiški vaizdai su teksto atvaizdavimu	Pagaliau DI vaizdai, kuriuose tekstas atrodo teisingai
Gemini 3 (Nano Banana Pro)	Aukštos kokybės vaizdų generavimas	Daugiau pasirinkimų, skirtingas estetinis pojūtis
Runway Aleph	Raginimais paremtas vaizdo įrašų redagavimas	Suteikia galią visai Prompt to Edit funkcijai

Šis kelių modelių metodas atrodo strategiškas. Užuot statžiusi viską ant vieno modelio, Adobe suteikia kūrėjams pasirinkimą. Skirtingiems projektams naudingi skirtingi varikliai.

Ką tai reiškia kūrėjams

Pasakysiu tiesiai, kam tai naudinga:

✓YouTube kūrėjams, kuriems reikia greitai parengti redagavimus
✓Agentūroms, tvarkančioms klientų darbus su jau turima filmuotąja medžiaga
✓Savarankiškiems kūrėjams be pažangių VFX įgūdžių
✓Turinio komandoms, kuriančioms didelį kiekį turinio įvairioms platformoms

Jei jau aktyviai naudojate Premiere ekosistemą, tai papildo jūsų įrankių rinkinį, o ne jį pakeičia. Sugeneruoti klipai ir DI redagavimai gali tiesiogiai patekti į jūsų esamą Creative Cloud darbo eigą.

Platesnis vaizdas

Adobe nekonkuruoja su Runway ar Sora dėl vien generavimo kokybės. Jie konkuruoja darbo eigos integracija. Adobe-Runway partnerystė tai jau aiškiai parodė: Adobe nori būti vieta, kur vyksta DI vaizdo įrašų kūrimas, net jei pagrindiniai modeliai ateina iš partnerių.

Tai svarbu, nes vaizdo įrašų kūrimas nėra vien klipų kūrimas. Tai:

Filmuotos medžiagos organizavimas
Pasirinkimų atlikimas
Tobulinimas ir užbaigimas
Pateikimas keliais formatais

Adobe daugumai profesionalų priklauso 2-4 žingsniai. Pridėdami DI generavimą ir DI redagavimą, jie užbaigia ciklą.

💡

Štai svarbiausia naršyklėje veikiančios prieigos dalis: Creative Cloud prenumerata nereikalinga. Firefly vis tiek galite pasiekti tiesiogiai. Tai sumažina kliūtį kūrėjams, kurie negali pateisinti viso paketo kainos.

Kaip pradėti

Firefly Video Editor jau prieinamas adresu firefly.adobe.com. Jums reikės Adobe paskyros, o sąsaja padės susipažinti su prieinamomis funkcijomis.

Pro arba Premium planų naudotojams Adobe iki sausio 15 d. siūlė neribotą generavimų skaičių. Šis reklaminis laikotarpis baigėsi, tačiau pagrindinės funkcijos išlieka prieinamos su standartiniais kreditų paskirstymais.

Mano rekomendacija: pradėkite nuo jau turimos filmuotos medžiagos. Prompt to Edit funkcija geriausiai atsiskleidžia, kai matote, kaip ji tvarko realaus pasaulio situacijas, ne vien demonstracijas. Pabandykite ką nors pašalinti iš kadro. Pabandykite pakeisti nuotaiką pakoreguodami apšvietimą. Pajuskite, ką DI gali ir ko negali atlikti.

Kas toliau

Adobe Express integracija pasirodys šį mėnesį. Tai reiškia, kad mobiliųjų įrenginių kūrėjai gaus prieigą prie tų pačių įrankių supaprastintoje sąsajoje. Skirtumas tarp „profesionalių“ ir „paprastų“ vaizdo įrašų įrankių toliau nyksta.

Norėdami išsamiau sužinoti, kaip lyginami DI vaizdo įrašų generavimo modeliai, peržiūrėkite mūsų Sora 2 vs Runway vs Veo 3 palyginimą. O apie difuzija paremtus metodus, kurie suteikia galią šiems įrankiams, mūsų išsamus difuzinių transformerių aprašymas paaiškina architektūrą.

Tikrasis klausimas nėra, ar Prompt to Edit veikia. Klausimas, ar tai taps vaizdo įrašų redagavimo standartu ateityje. Jei Adobe gerai įgyvendins šią idėją, kiekvienam vaizdo įrašų įrankiui reikės tam tikros natūralia kalba atliekamo redagavimo versijos, kad išliktų konkurencingas.

Adobe vėl pakėlė kartelę.