Henry· AI 작성, 사람이 검토함Luma Agents와 에이전트 비디오 편집의 부상, AI가 감독을 배우다
Luma는 텍스트, 이미지, 비디오 및 오디오를 조정하는 창의적인 AI 에이전트를 방금 출시했습니다. a16z가 이 논점을 뒷받침하는 배경 속에서, 에이전트 비디오 편집은 텍스트 생성 비디오 이후 가장 큰 변화입니다.
아무도 해결하지 못한 80/20 문제
비디오를 만드는 모든 사람을 괴롭혀야 할 통계가 하나 있습니다: 제작 시간의 80%는 편집에, 20%는 실제 촬영에 소비됩니다. 지금 우리가 가진 모든 AI 도구에도 불구하고 이 비율은 10년 동안 거의 변하지 않았습니다.
생각해 보세요. 텍스트 프롬프트에서 1분 이내에 사진 같은 4K 비디오 클립을 생성할 수 있습니다. 음성을 복제하고, 얼굴을 바꾸고, 장면을 확장할 수 있습니다. 그러나 이 모든 것을 일관성 있고 시청 가능한 비디오로 함께 엮으시겠습니까? 그것은 여전히 수 시간의 수작업이 필요합니다. 여기서 자르십시오. 거기서 타이밍을 조정하십시오. 오디오를 수정하십시오. 색상 등급을 일치시키십시오. 세 개의 다른 플랫폼용으로 내보내십시오.
이것이 에이전트 비디오 편집의 목표입니다. 단일 클립을 더 좋게 만드는 것이 아니라 전체 제작 파이프라인을 자율화하는 것입니다.
비디오 에이전트는 정확히 무엇인가?
기존 AI 비디오 도구는 한 가지만 하는 매우 재능 있는 전문가를 고용하는 것과 같습니다. 하나는 영상을 생성합니다. 다른 하나는 오디오를 처리합니다. 세 번째는 색상 보정을 수행합니다. 당신, 인간은 여전히 모든 것을 조정하는 프로젝트 관리자입니다.
비디오 에이전트는 그 모델을 뒤집습니다. 고립된 도구 대신, AI가 전체 비디오 프로젝트의 계획, 실행, 평가 및 개선을 처리하는 조정된 시스템을 얻습니다.
Andreessen Horowitz의 파트너인 Justine Moore는 그녀의 2026년 1월 에세이에서 분명히 말했습니다: 에이전트는 비디오 제작에서 Cursor가 코딩에서 한 일을 할 것이라고. 이 비교는 우연이 아닙니다. Cursor는 단지 코드를 자동 완성하지 않았습니다. 프로젝트 맥락을 이해하고, 아키텍처 결정을 내리고, 다중 파일 변경을 처리했습니다. 비디오 에이전트는 동일한 도약을 목표로 합니다.
Luma Agents: 방금 출시된 것
2026년 3월 5일, Luma는 새로운 "통합 지능" 모델로 구동되는 Luma Agents를 발표했습니다. 이 출시가 중요한 이유는 다음과 같습니다:
이들 에이전트는 단순히 비디오 클립을 생성하지 않습니다. 그들은 텍스트, 이미지, 비디오 및 오디오 전체에 걸친 완전한 창의적인 워크플로우를 오케스트레이션합니다, 모두 단일 시스템을 통해 조정됩니다. Publicis Groupe 및 Serviceplan 같은 주요 광고 대행사가 이미 플랫폼을 사용하고 있으며, Adidas, Mazda 및 Saudi AI 회사 Humain을 포함한 브랜드도 사용하고 있습니다.
기술적으로 흥미로운 점은 Luma가 그들이 "통합 지능" 모델이라고 부르는 것 위에 이들 에이전트를 구축했다는 것입니다. 이 용어는 별도의 모델을 함께 고정시키지 않고 모달 간의 긴밀한 통합을 암시합니다. 이것은 API를 연결하는 것과 근본적으로 다른 접근 방식입니다.
에이전트 편집의 5가지 층
a16z 프레임워크를 기반으로, 비디오 에이전트는 5가지 서로 다른 작업 범주를 처리합니다:
처리
원본 영상을 정리합니다. A-roll 대 B-roll을 식별합니다. 장면에 태그를 지정하고, 스피커를 감지하고, 사용 가능한 테이크를 카탈로그합니다. Eddie AI 같은 회사가 여기에 집중합니다.
오케스트레이션
여러 AI 모델을 일관된 워크플로우로 조정합니다. 생성 모델, 오디오 엔진 또는 색상 보정 시스템이든 작업을 적절한 전문가에게 라우팅합니다.
다듬기
조명 불일치를 수정하고, 오디오를 정리하고, 필러 단어를 제거하고, 전환을 부드럽게 합니다. Descript의 Underlord 에이전트가 이 레이어에서 작동합니다.
적응
플랫폼 및 언어 전체에서 콘텐츠를 재사용합니다. 10분 YouTube 비디오를 15초 TikTok 클립, Instagram Reels 및 LinkedIn 포스트로 변환하며, 각각은 올바르게 형식이 지정됩니다.
최적화
가장 어려운 레이어. 속도, 스토리텔링 및 감정적 호에 대해 창의적인 결정을 내립니다. 이는 기술적 기술만이 아니라 "취향"에 가까운 것이 필요합니다.
대부분의 도구는 오늘 레이어 1~3에서 작동합니다. Luma Agents와 소수의 경쟁사가 실제 가치가 있는 레이어 4와 5로 밀어붙이고 있습니다.
왜 지금인가? 수렴하는 3가지 힘
비전 모델이 충분히 좋아졌습니다
Gemini 3은 단일 컨텍스트 윈도우에서 최대 1시간의 비디오를 처리할 수 있습니다. Molmo 2와 ByteDance의 Vidi2는 강력한 이해력으로 확장된 비디오 입력을 처리합니다. 에이전트는 편집하기 전에 비디오를 이해해야 하며, 2026년의 모델은 마침내 그 기준을 충족합니다.
도구 사용 에이전트가 성숙했습니다
모델은 이제 그들이 보는 것을 설명하는 것 이상으로 복잡한 소프트웨어를 작동할 수 있습니다. AI 에이전트가 Blender, After Effects 및 기타 창의적 도구를 제어하며, 이러한 기능은 연구 데모에서 초기 생산 사용으로 이동했습니다. 에이전트는 편집 타임라인을 조작하고, 매개변수를 조정하고, 최종 컷을 내보내야 하며, 2026년의 도구 사용 모델이 그것을 가능하게 합니다.
생성 품질이 전문가 표준에 도달했습니다
AI 생성 B-roll이 스톡 영상과 구별할 수 없을 때, 생성 및 촬영 콘텐츠의 혼합은 청중에게 보이지 않습니다. 이 하이브리드 워크플로우, 부분 촬영, 부분 생성, 부분 AI 편집은 에이전트 시스템이 빛나는 곳입니다. 그들은 무엇을 생성할지, 원본 영상에서 무엇을 유지할지, 그리고 둘을 어떻게 혼합할지 결정할 수 있습니다.
경쟁 환경
Luma는 혼자가 아닙니다. 에이전트 비디오 공간은 빠르게 형성되고 있으며, MiniMax의 비디오 에이전트는 이 추세의 초기 신호였습니다:
| 플랫폼 | 초점 | 주목할 사항 |
|---|---|---|
| Luma Agents | 엔드투엔드 창의적 오케스트레이션 | Publicis Groupe, Adidas가 출시 파트너 |
| Mosaic | 캔버스 기반 에이전트 편집 | Y Combinator W25 배치, Google Gemini Kaggle 대상 수상 |
| Moments Lab | 엔터프라이즈 비디오 발견 + 편집 | NAB Show 2026에서 전문 도구 통합 선보임 |
| Goldcast | B2B 비디오 재목적화 | 웨비나 및 이벤트 콘텐츠용 에이전트 편집기 |
| Descript Underlord | AI 편집 코파일럿 | 다듬기 레이어, 필러 단어 제거, 오디오 정리에 강함 |
| AutoCut Agent | 자동 자르기 및 포맷팅 | 소셜 미디어 최적화에 초점 |
이것이 크리에이터에게 실제로 변경하는 것
워크플로우 변화에 대해 구체적으로 설명하겠습니다.
에이전트 이전: Runway에서 클립을 프롬프트합니다. ElevenLabs에서 오디오를 생성합니다. Premiere에서 편집합니다. CapCut에서 캡션을 추가합니다. 다른 플랫폼용으로 3개 버전을 내보냅니다. 합계: 60초 조각에 3-4시간.
에이전트 사용: 원하는 것을 설명합니다. 에이전트는 샷 목록을 작성하고, 영상을 생성하거나 선택하고, 동기화된 오디오를 추가하고, 속도를 편집하고, 각 플랫폼에 맞게 조정하고, 내보냅니다. 당신은 검토하고 승인합니다. 합계: 20-30분, 대부분 검토.
감독 은유
이것은 추측이 아닙니다. Mosaic는 이미 사용자가 비디오 편집을 자동 조종으로 실행하고 동일한 원본 영상에서 여러 변형을 A/B 테스트할 수 있도록 합니다. Luma Agents는 4가지 미디어 유형을 조정합니다. 인프라는 오늘 존재합니다.
어려운 문제: 창의적 취향
이것이 나를 밤에 깨우게 하는 것입니다. 레이어 1~4는 해결 가능한 엔지니어링 문제입니다. 영상 정리, 모델 조정, 오디오 수정, 플랫폼 재포맷팅, 이것들은 모두 명확하게 정의된 작업이며 성공 기준이 명확합니다.
레이어 5, 창의적 최적화는 다릅니다. 감정적 영향을 위한 비디오 속도 조정. 샷에 2박자를 더 오래 머물러야 할 때를 알기. 점프 컷이 여기서 작동하지만 저기서는 작동하지 않는다는 것을 이해하기. 이는 "취향"이며, 인코딩하기 가장 어려운 것입니다.
이 공간의 승자는 취향 문제를 해결하는 플랫폼이거나 더 현실적으로는 크리에이터가 그들의 특정 취향을 에이전트 행동으로 인코딩하도록 허용하는 플랫폼이 될 것입니다. 당신의 에이전트는 당신이 편집하는 방식으로 편집해야 하며, 일반적인 알고리즘처럼이 아니라.
다음으로 어떤 것을 지켜보고 있는가
- ✓Luma Agents가 주요 브랜드 파트너와 함께 출시(3월 5일 발생)
- ✓a16z가 에이전트 비디오 편집을 검증하는 논문 발행(2026년 1월)
- ✓NAB Show 2026(4월) 엔터프라이즈 에이전트 워크플로우 전시
- ✓에이전트 편집 콘텐츠가 인간 공개 없이 처음 바이럴됨
- ✓Adobe가 Premiere에 에이전트 수준 오케스트레이션 통합(아마도 2026 MAX)
AI 비디오 생성에서 AI 비디오 방향으로의 전환이 지금 일어나고 있습니다. 단일 클립 생성은 개념 증명이었습니다. 에이전트 편집이 제품입니다.
크리에이터에게 메시지는 명확합니다: AI를 클립을 만드는 도구로 생각하는 것을 그만두세요. 완전한 비디오를 생성하는 협력자로 생각하기 시작하세요. 이 모델에 자신의 워크플로우를 적응시키는 사람은 동일한 창의적 품질로 10배의 볼륨으로 생산하기 때문에 불공정한 이점을 가질 것입니다.
AI 비디오의 무성 시대는 끝났습니다 모델이 오디오를 생성하는 것을 배웠을 때. 이제 솔로 시대도 끝났습니다. AI는 방금 자신의 제작 팀을 고용했습니다.
AI와 예술이 만나는 지점을 탐구하는 로잔 출신 크리에이티브 테크놀로지스트입니다. 일렉트로닉 음악 작업 사이에 생성형 모델을 실험합니다.
View profile →관련 글
관련 게시물을 통해 계속 살펴보세요
AI 동영상 생성과 편집이 하나의 도구로 통합되고 있습니다
처음부터 AI 동영상을 만드는 것과 기존 영상을 편집하는 것 사이의 경계가 사라지고 있습니다. 이것이 2026년의 워크플로우에 의미하는 바를 알아보세요.
Google Flow가 모든 것을 통합했습니다: 2026년 3월 재설계가 AI 비디오 크리에이터에게 의미하는 바
Google는 Flow를 비디오 생성 도구에서 생성, 편집 및 애니메이션을 통합한 통합 작업 공간으로 재설계했습니다. 이 업데이트는 Whisk와 ImageFX를 흡수하여 올인원 AI 비디오 플랫폼으로의 전환을 나타냅니다.
ByteDance Vidi2: 편집자처럼 비디오를 이해하는 AI
ByteDance가 120억 개의 매개변수를 가진 Vidi2를 오픈소스로 공개했습니다. 수 시간의 영상을 자동으로 완성도 높은 클립으로 편집할 수 있을 만큼 비디오 콘텐츠를 깊이 이해하는 모델입니다. 이미 TikTok Smart Split에 활용되고 있습니다.