LTX 소개

LTX는 Lightricks에서 개발한 실시간 AI 동영상 생성 모델로, 20억 개 매개변수의 DiT(확산 트랜스포머) 아키텍처를 활용합니다. 768x512 해상도, 24FPS의 5초 분량 영상을 2-4초 내에 재생 속도보다 빠르게 생성합니다. 이 모델은 텍스트-투-비디오 및 이미지-투-비디오 생성을 모두 지원하여, 창작자가 설명이 담긴 프롬프트에서 전문적인 콘텐츠를 제작하거나 정적 이미지에 애니메이션을 부여할 수 있도록 합니다.

Apache-2.0 라이선스 하의 오픈소스 프로젝트로서, LTX는 ComfyUI와 통합되어 사용자 정의 워크플로 설계가 가능하며, 소비자급 GPU 및 TPU에서 실행됩니다. 빠른 반복 주기는 영화 예비 시각화, 광고, 소셜 미디어 콘텐츠, 교육 자료와 같은 분야에 적합합니다. 출력물은 표준 MP4 형식으로 제공되어 플랫폼 전반에서 즉시 사용할 수 있습니다. 이 기술은 전통적인 제작 병목 현상 없이 신속한 프로토타입 제작을 위해 효율성과 접근성을 중시합니다.

LTX는 Lightricks가 개발한 실시간 AI 동영상 생성 모델로, 2B 매개변수 DiT(확산 트랜스포머) 아키텍처를 활용합니다. 텍스트 프롬프트 또는 입력 이미지를 처리하여 일반적으로 5초 길이, 768x512 해상도, 24FPS의 짧은 동영상 클립을 생성합니다. 이 시스템은 출력을 재생 속도보다 빠르게 생성하여 NVIDIA H100과 같은 호환 가능한 하드웨어에서 2~4초 내에 클립을 완성합니다. 텍스트-투-비디오 및 이미지-투-비디오 워크플로를 모두 지원하여 정적 입력을 애니메이션화할 수 있습니다. Apache-2.0 라이선스 하의 오픈 소스 모델로서, LTX는 ComfyUI와 같은 도구와 통합되며, 빠른 프로토타입 제작, 소셜 미디어 콘텐츠, 프리비주얼라이제이션 등의 사용 사례를 대상으로 합니다.

LTX는 최초의 실시간 AI 동영상 생성 모델로, 텍스트나 이미지로부터 2~4초 만에 전문가 수준의 동영상을 생성합니다. 20억 개의 파라미터를 가진 DiT 아키텍처를 통해, 768x512 해상도, 24FPS에서 재생 속도보다 빠른 생성이 가능합니다. 오픈 소스 도구로서, LTX는 ComfyUI와 같은 플랫폼과 통합되며, 텍스트-투-비디오 및 이미지-투-비디오 워크플로우를 지원합니다. 이러한 속도, 품질, 접근성의 조합은 신속한 프로토타입 제작, 소셜 미디어 콘텐츠, 영화 프리비주얼라이제이션에 적합하며, 크리에이터에게 고품질 동영상 제작을 위한 효율적인 솔루션을 제공합니다.

장점

• 5초 분량의 영상을 2~4초 내에 생성합니다.
• Apache-2.0 라이선스 하에 완전한 오픈 소스입니다.
• 텍스트-투-비디오 및 이미지-투-비디오 입력을 모두 지원합니다.
• 전문가 수준의 768x512 해상도와 24 FPS를 달성합니다.
• ComfyUI와 통합하여 시각적 워크플로우를 구현합니다.

단점

• 출력 해상도는 768x512로 고정됩니다.
• 로컬 배포에는 기술적 설정이 필요합니다.
• 5초 길이의 짧은 영상 클립만 생성합니다.
• 실시간 속도를 위해서는 상당한 GPU 리소스가 필요합니다.
• 모델 아키텍처로 인해 프레임 수가 제한됩니다.