Ето всичко, което трябва да знаете за най-новия съперник на Sora, Dream Machine, от Luma AI

OpenAI превзе света, когато стартира ChatGPT през 2022 г., впечатлявайки всички с възможностите на чатбота, когато става дума за търсене на информация и отговаряне на въпроси, като същевременно запазва контекста на разговора. След това компанията повтори това постижение, като разкри Sora, която може да създава висококачествени видеоклипове само с помощта на текстови подкани.

Този път обаче конкуренцията стана интензивна, като конкурентните компании обявиха подобни продукти. И последният сред тях е Dream Machine от Luma AI. Известна със своята платформа, която позволява на потребителите да създават 3D модели на текст, изображения или видео, новата Dream Machine на компанията има за цел да направи генерирането на AI видео по-просто и достъпно за всеки.

Какво е Dream Machine?

Dream Machine е универсален генератор на текст към видео, проектиран от Luma AI и разчита на усъвършенствани алгоритми, които му позволяват да генерира висококачествени видеоклипове, като използва прости подкани, предоставени от потребителите. Това е изключително полезен инструмент за създатели на съдържание, фирми, търговци и други и може да се използва за създаване на видеоклипове с дължина до пет секунди и в различни стилове.

За разлика от много други видео генератори, видеоклиповете, генерирани с Dream Machine, са доста близки до описанията, предоставени в подканите. Поради това е възможно да се създават видеоклипове с невероятно детайлни сцени, сложни анимации и реалистични движения на героите. Dream Machine е базиран на трансформаторен модел и е обучен директно на видеоклипове.

Кадър на Stormtroopers от видео, създадено от Dream Machine. Източник: Luma AI

Характеристики на Dream Machine

Dream Machine на Luma AI идва с определени функции, които му позволяват да предизвика големите играчи като Sora в пейзажа за генериране на AI видео.

Генериране на видео с висока разделителна способност

Dream Machine може да произвежда видеоклипове от кинематографичен клас с резолюция 1080p, което ги прави не само зашеметяващи за гледане, но и ги прави подходящи за професионална употреба.

Точна симулация и реалистично движение

Според Luma AI, Dream Machine може да разбере как хората, животните и обектите си взаимодействат в реалния свят, което му позволява да създава видеоклипове с точна физика. Той използва пространствено-времеви механизъм за съвместно внимание, за да изобрази физически взаимодействия в реалния свят и сложни действия точно, което води до естествено изглеждащи видеоклипове.

Поддръжка на множество аспекти

Dream Machine може да генерира видеоклипове в различни пропорции, което го прави подходящ за разнообразни цели. Можете да го използвате за създаване на видеоклипове за маркетингови и промоционални цели, образователни нужди, социални медийни платформи и др.

Удобен за потребителя интерфейс

Достъпността за потребителите е ключова характеристика на Dream Machine, а платформата се предлага с интуитивен интерфейс за лесно генериране на видео. Поради това потребители с различни нива на умения и опит могат да го използват без никакви проблеми, което го прави достъпен за широк кръг от аудитории.

Рамка с отворен код

За разлика от Sora на OpenAI, Dream Machine има рамка с отворен код, която позволява да бъде достъпен от почти всеки с познания и опит в кодирането. За разлика от това, Sora е достъпна само за избрана аудитория и се очаква нейните най-добри функции да останат ексклузивни за платени абонати.

Бързо подобрение

Dream Machine също има функция „Подобряване“, която автоматично добавя повече подробности към вашата подкана, помагайки на AI да генерира по-сложни видеоклипове. Когато го включите, можете да използвате прости подкани вместо подробни, а AI ще го подобри, използвайки езиковия модел на Luma за по-подробни видеоклипове. Можете да изключите тази функция, ако искате ръчно да добавите повече подробности към вашата подкана.

Luma AI Dream Machine видео — Видео, генерирано от Dream Machine. Източник: Luma AI

Как можете да използвате Dream Machine?

Използването на Dream Machine на Luma AI изисква изключително подробни подкани, по-подробни от това, което използвате с други AI инструменти като ChatGPT. Ето как можете да изпробвате платформата за генериране на видео безплатно точно сега.

За да изпробвате платформата, посетете официалната страница и кликнете върху бутона „Опитайте сега“ горе вдясно.

След това ще трябва да влезете в акаунта си в Google. За да направите това, щракнете върху бутона „Вход с Google“ на страницата, която се показва.

Трябва да предоставите разрешение на платформата за достъп до вашия акаунт в Google. Кликнете върху бутона „Продължи“, за да продължите.

Накрая можете да въведете вашата подкана в предоставеното поле. Въведете подробна подкана, като a close-up shot of an eagle soaring through the sky, looking down on the ground for prey. По подразбиране опцията „Подобряване на подканата“ ще бъде активирана, но можете да я деактивирате, ако искате, като щракнете в квадратчето за отметка. Щракнете върху сочещата нагоре стрелка, за да генерирате вашето видео.

Изчакайте няколко минути, докато Dream Machine генерира видеоклипа. Когато процесът приключи, ще видите генерираното видео под Моите творения. Щракването върху него ще започне да възпроизвежда видеоклипа.

Ако искате да разширите видеоклипа, щракнете върху бутона „Разширяване“ под видеоклипа.

Това ще покаже полето за подкана, където можете да добавите повече подробности за разширяване на видеоклипа. Въведете вашата подкана, харесайте the eagle lands on a rock next to a river, looking at fishes jumping out of the water and back insideи след това щракнете върху бутона със стрелка.

Dream Machine ще удължи вашето видео с пет секунди, като използва новата подкана, която сте предоставили.

Можете също да изтеглите генерираните видеоклипове, като щракнете върху бутона „Изтегляне“.

Ограничения за използване и ценообразуване

Въпреки че можете да използвате Dream Machine безплатно, ще трябва да регистрирате акаунт в платформата, за да го направите. Безплатният план позволява на потребителите да генерират 30 видеоклипа на месец, но има платен план, струващ $499, който позволява генериране на до 2000 видеоклипа на месец. Освен това, поради голямото търсене, платформата ограничава безплатните поколения до 5/ден. Въпреки това, няма дневни лимити за платени потребители.

Ограничения на Платформата

Докато Dream Machine може да генерира висококачествени видеоклипове, платформата има определени ограничения, които трябва да знаете. Те включват известния проблем с Janus, при който платформата показва множество изгледи на обект в различни посоки, вместо да предоставя последователен 3D изход. Освен това има проблеми с преобразуването, текста и движението.

Това обаче са проблеми, които са доста често срещани в продуктите за генериране на текст към видео, така че не са специфични само за Dream Machine.

Dream Machine е подобен на много други инструменти за генериране на видео, които се предлагат на пазара. Това, което го прави различен обаче, е високото качество на генерираните видеоклипове и неговата рамка с отворен код. За съжаление, неговите ограничения в сегашното му състояние означават, че Luma AI все още има да извърви дълъг път, преди платформата да стане подходяща за редовна употреба.

Ако искате да го изпробвате, можете да го направите, както обяснихме по-горе, въпреки че ви предлагаме да оставите деня си свободен от други дейности, тъй като голямото търсене може да означава, че може да се наложи да чакате до своя ред на опашката.