Нейросеть для видео из текста

Нейросеть для создания видео из текста делает видеоклип только по written-промпту, то есть по текстовому описанию. Вы описываете, кто в кадре, что происходит, где и как движется камера, а модель отрисовывает каждый кадр. Нет ни исходных съёмок, ни стартового изображения: слова — это всё задание.

Поэтому видео по тексту — самый быстрый путь от идеи к движущемуся кадру. Но и промпт для него написать сложнее всего: для картинки нужны только объект и стиль, а для клипа — начало, действие и конец. Хороший промпт для видео читается как строка из сценария, а не как подпись к фото.

В Mage несколько моделей для видео из текста собраны в одной строке промпта. Cherry 2 Pro, флагман Mage, создаёт клипы до 30 секунд в разрешении до 1080p со звуком. Lemon — универсальная модель по более доступной цене, Kiwi подходит для повседневных клипов без лишних настроек, а Melon создана для аниме. Если хотите начать с картинки, загляните на страницу генератора видео из изображения — это родственная страница этой.

Начинайте с действия, а не с декораций. Модели уделяют больше всего внимания тому, что вы описали первым, поэтому промпт, который открывается тремя строками о месте действия, часто даёт красивый, но почти неподвижный кадр. Ставьте глагол в начало: женщина мчится по крыше, дракон ныряет в облака, кот сбрасывает стакан со стола.

Затем управляйте камерой. Такие слова, как tracking shot, slow push-in, low-angle, aerial, handheld, whip pan и crash zoom, влияют на клип сильнее, чем прилагательные. Если нужно несколько планов в одном клипе, опишите их по порядку с примерным таймингом: например, общий план первые две секунды, затем крупный план лица, затем показ того, на что она смотрит.

Закончите светом, оптикой и звуком: golden hour, неоновый дождь, 35-мм плёнка, далёкий гром, шум толпы. Cherry создаёт звук вместе с картинкой, так что строка о звуке — часть промпта, а не запоздалая мысль. Когда у вас уже есть кадр, который вам нравится, генератор видео из картинки сохранит его в точности и оживит. Это предсказуемее, чем описывать кадр заново словами.

• Начинайте с одного понятного действия и одного объекта.
• Назовите движение камеры: push-in, tracking, aerial, handheld.
• Для клипов из нескольких планов перечислите планы по порядку с таймингом.
• Опишите нужный звук: Cherry создаёт аудио вместе с клипом.
• Делайте черновики короткими и в низком разрешении, а удачный вариант рендерите длинным и чётким.

Длительность и разрешение сильнее всего влияют на стоимость клипа, поэтому принимайте это решение последним, а не первым. Отточите промпт в 480p и на короткой длительности, а затем создайте финальную версию в 720p или 1080p и той длины, которая нужна сцене. Cherry 2 Pro поддерживает длительность от 4 до 30 секунд, а Lemon — любую от 2 до 30 секунд с шагом в одну секунду.

Соотношение сторон зависит от того, где клип будет жить. 16:9 подходит для трейлеров, YouTube и всего, что показывают на экране; 9:16 занимает весь экран телефона в Reels, Shorts и TikTok; 1:1 хорошо смотрится в ленте. Cherry поддерживает все три, а Lemon добавляет 4:3 и 3:4.

Длинную историю обычно лучше собрать из нескольких клипов, чем делать одним. Напишите каждый план отдельным промптом, оставьте в каждом одного и того же @character и соедините их в Storyboard, который объединяет до шести клипов в один MP4. Если хотите, чтобы история писалась сама, загляните в нейросеть для создания фильмов.