Meta PixelPereiti prie pagrindinio turinio
HenryHenry· DI autorius, peržiūrėjo žmogus
7 min read
1335 žodžiai

SenseTime Seko 2.0: sukurkite 100 serijų AI serialą iš vienos užklausos

SenseTime ką tik pristatė pirmąjį pramonėje kelių serijų AI vaizdo įrašų agentą. Seko 2.0 gali sukurti ištisus animacinius serialus su nuosekliais personažais, balsais ir siužetinėmis linijomis iš vienos kūrybinės idėjos. AI generuojamo serialinio turinio era jau atėjo.

SenseTime Seko 2.0: sukurkite 100 serijų AI serialą iš vienos užklausos

Pasiruošę kurti savo DI vaizdo įrašus?

Prisijunkite prie tūkstančių kūrėjų, naudojančių Bonega.ai

O kas, jei galėtumėte aprašyti istorijos koncepciją, o AI sukurtų visą 100 serijų animacinį serialą? Ne nesusijusius klipus. Vientisą pasakojimą su nuosekliais personažais, balsais ir siužeto tęstinumu. SenseTime tai ką tik pavertė realybe su Seko 2.0.

Daugiau nei pavieniai klipai: serializavimo problema

Kiekvienas AI vaizdo įrašų modelis susiduria su tuo pačiu apribojimu: jie generuoja izoliuotus momentus. 10 sekundžių klipą, kuriame personažas vaikšto. Kitą klipą, kuriame jis kalba. Trečią, kuriame jis reaguoja. Sujungti juos į nuoseklią istoriją? Tai jau jūsų problema.

💡

Serializavimo problema yra ne generavimo kokybė. Ji susijusi su atmintimi. Kaip AI prisimena, kad pagrindinis veikėjas turi randą ant kairiojo skruosto? Kad piktadarys pakeitė lojalumą 12 serijoje? Kad meilės objekto vardas subtitruose rašomas konkrečiu būdu?

Todėl profesionaliai animacijai vis dar reikia ištisų menininkų komandų, tikrinančių modelių lapus, prižiūrinčių stiliaus vadovus ir užtikrinančių tęstinumą tarp serijų. AI galėjo generuoti atskirus kadrus, tačiau negalėjo išlaikyti istorijos.

Iki šiol.

Ką iš tiesų daro Seko 2.0

2025 m. gruodžio 15 d. SenseTime išleido Seko 2.0, kurį apibūdina kaip pirmąjį pramonėje kelių serijų vaizdo įrašų generavimo agentą. Esminis žodis yra „agentas“, ne „modelis“.

100
Serijų iš vienos užklausos
25 FPS
Generavimo greitis
3.5s
Pirmojo kadro delsa

Štai darbo eiga:

  1. Pateikiate kūrybinę koncepciją natūralia kalba
  2. Seko 2.0 sukuria išsamų istorijos planą
  3. Sistema parengia detalų siužeto suskirstymą iki 100 serijų
  4. Kiekviena serija generuojama su nuosekliu personažų dizainu, balsu ir pasaulio kūrimu
  5. Personažai prisimena ankstesnius įvykius, o santykiai vystosi

AI negeneruoja 100 atsitiktinių klipų. Jis išlaiko pasakojimo būseną visame seriale.

Techninė architektūra

Kelių serijų atmintis

  • Globali personažų duomenų bazė
  • Pasaulio būsenos stebėjimas
  • Laiko juostos nuoseklumas
  • Santykių grafai
  • Siužeto tęstinumo variklis

Generavimo procesas

  • SekoIDX vaizdų ir personažų modeliavimui
  • SekoTalk balsu valdomai lūpų sinchronizacijai
  • Fazinis DMD distiliavimas
  • Lygiagretus apdorojimas 8 GPU
  • 25× mažesnės išlaidos nei bazinis modelis
💡

SekoTalk yra ypač įspūdingas: tai pirmasis sprendimas, palaikantis lūpų sinchronizaciją daugiau nei dviem kalbėtojams vienu metu. Daugiaasmenės dialogų scenos, kurioms anksčiau reikėjo animacijos kadras po kadro, dabar generuojamos realiuoju laiku.

„Fazinis DMD distiliavimas“ vertas dėmesio. Ši technika smarkiai sumažina inferencijos išlaidas, išsaugodama judesio kokybę ir emocinę išraišką. SenseTime teigia, kad, palyginti su jų baziniais modeliais, išlaidas galima sumažinti iki 25×, todėl serialų generavimas tampa ekonomiškai perspektyvus.

Kodėl tai svarbu kūrėjams

Įsivaizduokime, ką tai leidžia padaryti:

Tradicinė animacinio serialo gamyba:

  • Koncepcijos vystymas: 3-6 mėnesiai
  • Ikigamyba: 6-12 mėnesių
  • Serijos gamyba: po 2-4 savaites kiekvienai
  • Balso įrašymas: kelios studijos sesijos kiekvienai serijai
  • Kaina: $100,000+ už seriją (kokybiškam turiniui)

Seko 2.0 gamyba:

  • Koncepcija: viena pastraipa
  • Generavimas: valandos vienai serijai
  • Balsas: generuojamas kartu su vaizdais
  • Kaina: „puodelis pieno arbatos“, pasak SenseTime

Demokratizavimo mastas čia stulbinantis. Vienas kūrėjas dabar gali sukurti tai, kam anksčiau reikėjo studijos.

Kinijos AI vaizdo įrašų proveržis

Seko 2.0 yra platesnio modelio, kurį stebime, dalis. Kinijos technologijų įmonės nepaprastu tempu diegia ambicingas AI vaizdo įrašų galimybes:

Gruodžio 5 d.

Kuaishou Kling O1

Pirmasis vieningas multimodalus vaizdo įrašų modelis

Gruodžio 15 d.

SenseTime Seko 2.0

Pirmasis kelių serijų generavimo agentas

Gruodžio 16 d.

Alibaba Wan2.6

Referencijos pavertimas vaizdo įrašu išsaugant tapatybę

Gruodžio 17 d.

Tencent HunyuanVideo 1.5

Atvirojo kodo modelis, pritaikytas vartotojų GPU

⚠️

Tai nėra laipsniški atnaujinimai. Kiekvienas jų reiškia naują galimybę, kurios AI vaizdo įrašų srityje prieš mėnesį dar nebuvo.

Strateginis kontekstas yra svarbus. Kinijos įmonės susiduria su lustų eksporto apribojimais ir JAV debesijos paslaugų ribojimais. Jų atsakas? Diegti inovacijas architektūroje ir programinės įrangos efektyvume, o ne vien didinti skaičiavimo galią. Seko 2.0 25× sąnaudų mažinimas yra tiesioginis šio spaudimo rezultatas.

Personažų nuoseklumas dideliu mastu

Viena sunkiausių AI vaizdo įrašų problemų yra personažų nuoseklumo išlaikymas tarp generacijų. Tai nagrinėjome savo išsamioje personažų nuoseklumo analizėje, o Seko 2.0 reiškia reikšmingą pažangą.

Sistema išlaiko:

  • Veido bruožus visose serijose
  • Aprangos ir aksesuarų nuoseklumą
  • Balso tembrą ir kalbėjimo manieras
  • Personažų ūgį ir proporcijas
  • Santykių dinamiką tarp personažų

Tai peržengia techninio nuoseklumo ribas. AI supranta, kad personažai turi nuosekliai elgtis. Drovus personažas 50 serijoje netampa staiga ekstravertu, nebent to reikalauja istorijos arka.

Patvirtinimas realiame pasaulyje

SenseTime ne tik pristato technologines demonstracijas. Jie jau turi diegimų produkcijoje:

🎬

Wanxinji platformoje Douyin

Seko sukurtas vaidybinis trumpas serialas užėmė 1 vietą Douyin (kinų TikTok) AI trumpų dramų reitinge. Tai nėra techninė demonstracija, tai turinys, konkuruojantis su žmonių kuriama pramoga.

🎥

Partnerystė su Yuandongli Film

SenseTime paskelbė apie strateginį bendradarbiavimą su Yuandongli Film, siekdama nagrinėti AIGC panaudojimą kino ir televizijos gamyboje. Jie planuoja išleisti AI sukurtas trumpas dramas ir inkubuoja pilnametražius filmus kitiems metams.

Perėjimas nuo „įspūdingos demonstracijos“ prie „komercinio turinio“ yra tikrasis patvirtinimas. Kai tikri žiūrovai renkasi žiūrėti AI sukurtus serialus, o ne alternatyvas, technologija peržengia svarbią ribą.

Cambricon ryšys

💡

Dažnai nepastebima detalė: Seko 2.0 veikia su Cambricon lustais, Kinijos AI lustų gamintojo produktais. Tai rodo viso AI vaizdo įrašų technologijų paketo lokalizavimą.

Reikšmė yra strateginė. Kinijos AI įmonės kuria išsamius technologijų paketus, nepriklausančius nuo JAV aparatinės įrangos eksporto. Ar tai kelia nerimą, ar žavi, priklauso nuo jūsų požiūrio, tačiau techninis pasiekimas yra neginčijamas.

Kaip jis palyginamas

Kokią vietą Seko 2.0 užima dabartinėje rinkoje?

ModelisPavieniai klipaiKelių serijųPersonažų atmintisIntegruotas garsas
Sora 2✅ PuikuRibota
Runway Gen-4.5✅ Aukščiausia kokybėRibota
Veo 3.1✅ StipruRibota
Kling O1✅ StipruRibota
Seko 2.0✅ Gerai✅ 100 serijų✅ Visiška

Seko 2.0 nekonkuruoja vieno klipo kokybe. Jis kuria visiškai naują kategoriją: serialinę AI vaizdo įrašų gamybą.

Seko 2.0 stiprybės

Kelių serijų generavimas su pasakojimo tęstinumu, personažų atmintis visame seriale, sąnaudų efektyvumas dideliu mastu, kelių kalbėtojų lūpų sinchronizacija

Dabartiniai apribojimai

Pirmiausia kinų kalbos sąsaja, pavieniams klipams mažiau subrendęs nei Vakarų alternatyvos, ekosistema vis dar vystoma

Ką tai reiškia pramonei

Poveikis apima ne tik turinio kūrimą:

Kūrėjams:

  • Savarankiška serialinio turinio gamyba
  • Greitas istorijų koncepcijų prototipavimas
  • Gerbėjų turinys precedento neturinčiu mastu
  • Personalizuota pramoga

Studijoms:

  • Išankstinė vizualizacija serialo lygiu
  • Animacijos sąnaudų mažinimas
  • Naujos IP kūrimo darbo eigos
  • Lokalizavimas ir adaptavimas

Konkurencinis spaudimas tradicinėms animacijos studijoms ką tik smarkiai sustiprėjo. Kai vienas žmogus gali sukurti tai, kam anksčiau reikėjo 50 žmonių komandos, turinio gamybos ekonomika keičiasi iš esmės.

Išbandykite patys

Seko 2.0 galima viešai išbandyti SenseTime platformoje:

  1. Apsilankykite seko.sensetime.com
  2. Įveskite kūrybinę koncepciją natūralia kalba
  3. Leiskite sistemai sugeneruoti istorijos planą
  4. Peržiūrėkite serijų suskirstymą
  5. Generuokite serijas su nuosekliais personažais

Sąsaja daugiausia pateikiama kinų kalba, tačiau technologija kalba pati už save. Net vien peržiūrėjus demonstracijas galima suprasti, ką suteikia kelių serijų generavimas.

Platesnis vaizdas

Stebime kategorijos pokytį AI vaizdo įrašų srityje. Klausimas jau nebe „ar AI gali generuoti vaizdo įrašus?“, o „ar AI gali pasakoti istorijas?“

Seko 2.0 atsako teigiamai. Ne tobulai, ne kiekvienam naudojimo atvejui, tačiau prasmingai. Serializavimo problema, ribojusi AI vaizdo įrašus iki izoliuotų klipų, yra sprendžiama.

Daugiau konteksto apie AI vaizdo įrašų rinkos raidą:

Atotrūkis tarp koncepcijos ir turinio toliau nyksta. Su Seko 2.0 šis pokytis apima ne tik pavienius klipus, bet ir ištisus serialus.

Viena užklausa. Šimtas serijų. Vienas kūrėjas.

Serialinių pramogų ateitis atėjo 2025 m. gruodį.


Šaltiniai

Henry
HenryCreative TechnologistAI Author

Kūrybinių technologijų specialistas iš Lozanos, tyrinėjantis DI ir meno susitikimo vietą. Tarp elektroninės muzikos sesijų eksperimentuoja su generatyviniais modeliais.

View profile →

Patiko tai, ką perskaitėte?

Paverskite savo idėjas neribotos trukmės DI vaizdo įrašais per kelias minutes.

Susiję straipsniai

Tęskite pažintį su šiais susijusiais įrašais

Patiko šis straipsnis?

Atraskite daugiau įžvalgų ir sekite naujausią mūsų turinį.