Нейросети всё активнее осваивают видеогенерацию. Dream Machine от Машина грёз от Luma AI: забавные ролики или нейрошедевры?
Стаья создана на основе обзора на Dream Machine от Luma AI
Нейросети всё активнее осваивают видеогенерацию. Dream Machine от Luma AI обещает создавать реалистичные ролики из фото и текста. Разберёмся, так ли это?
Что умеет нейросеть Luma AI?
Dream Machine — это нейросеть, генерирующая 5-секундные видеоролики по фото или текстовому описанию. Результат получается на удивление реалистичным и оригинальным, что делает этот инструмент важным шагом на пути к созданию ИИ-режиссёра.
За 5 секунд объект на видео успевает выполнить действие, а картинка — плавно измениться. При этом на создание ролика уходит всего 120 секунд — это одна из самых быстрых нейросетей такого уровня.
Бесплатно или за деньги?
Каждый пользователь Dream Machine может бесплатно создавать до 30 роликов в месяц. Этого достаточно, чтобы оценить возможности сервиса. Тем, кто хочет большего, предлагаются платные тарифы: “Стандарт”, “Профи” и “Премьер”. Например, “Премьер” за $499,99 в месяц даёт 2000+30 генераций.
Особенности Dream Machine:
- Яркие и живые видеоролики в высоком разрешении;
- Впечатляющая скорость работы;
- Плавное движение и кинематографичность;
- Реалистичность персонажей и их действий;
- Возможность бесплатного использования.
Немного о создателях
Luma AI — детище калифорнийской компании LumaLabs, основанной в 2021 году бывшим инженером Apple Амитом Джайном и техническим директором Алексом Ю. Компания специализируется на машинном обучении, 3D-фото и дополненной реальности.
Испытаем Dream Machine в деле!
Что нужно для создания ролика:
- Авторизоваться через Google аккаунт;
- Выбрать способ создания видео: загрузка фото, текст или фото + текст;
- Ввести запрос на английском языке (русский пока не поддерживается);
- Дождаться результата.
Тест №1: Фотография собаки
Загружаем фото собаки без текстового описания. Результат забавный, но не слишком реалистичный. Мордочка собаки выглядит мультяшно, движения неестественны, а непонятные крылья-лапы портят всё впечатление.
Тест №2: Фотография кружки + текстовый запрос
Загружаем фото кружки и пишем простой запрос: “Синяя кружка на столе”. Ролик получился качественным и реалистичным: цвета яркие, движения плавные, всё соответствует описанию.
Тест №3: Только текст
Пишем запрос: “Белый автомобиль едет вечером по оживленному шоссе”. Результат не впечатлил. Машина двигается как будто задним ходом, общая картина неправдоподобна. Кинематографичность присутствует, но общее впечатление смазано.
Тест №4: Генерация лиц
Загружаем чёрно-белое фото двух женщин без описания. Результат интересный: одна женщина пытается говорить, двигая головой, а другая моргает и смотрит в камеру. Нереалистично, но забавно.
Впечатления от Luma AI
Сама идея создания видео из фото казалась фантастикой ещё пару лет назад. Сегодня это реальность, которая не перестаёт удивлять.
Плюсы:
- Возможность бесплатного использования;
- Высокая скорость генерации;
- Кинематографичность видеороликов.
Минусы:
- Нереалистичность в большинстве случаев;
- Ошибки в движениях и позиционировании объектов;
- Необходимость использования английского языка;
- Невысокая схожесть сгенерированных лиц с оригиналами;
- Излишне плавные, “ненастоящие” движения.
Вердикт:
Luma Dream Machine — интересный инструмент с большим потенциалом. Пока сервис далёк от идеала, но уже сейчас способен удивить и развлечь. Будем ждать обновлений!обещает создавать реалистичные ролики из фото и текста. Разберёмся, так ли это?
Статья написана на основе обзора: Dream Machine от Luma AI
Что умеет нейросеть Luma AI?
Dream Machine — это нейросеть, генерирующая 5-секундные видеоролики по фото или текстовому описанию. Результат получается на удивление реалистичным и оригинальным, что делает этот инструмент важным шагом на пути к созданию ИИ-режиссёра.
За 5 секунд объект на видео успевает выполнить действие, а картинка — плавно измениться. При этом на создание ролика уходит всего 120 секунд — это одна из самых быстрых нейросетей такого уровня.
Бесплатно или за деньги?
Каждый пользователь Dream Machine может бесплатно создавать до 30 роликов в месяц. Этого достаточно, чтобы оценить возможности сервиса. Тем, кто хочет большего, предлагаются платные тарифы: “Стандарт”, “Профи” и “Премьер”. Например, “Премьер” за $499,99 в месяц даёт 2000+30 генераций.
Особенности Dream Machine:
- Яркие и живые видеоролики в высоком разрешении;
- Впечатляющая скорость работы;
- Плавное движение и кинематографичность;
- Реалистичность персонажей и их действий;
- Возможность бесплатного использования.
Немного о создателях
Luma AI — детище калифорнийской компании LumaLabs, основанной в 2021 году бывшим инженером Apple Амитом Джайном и техническим директором Алексом Ю. Компания специализируется на машинном обучении, 3D-фото и дополненной реальности.
Испытаем Dream Machine в деле!
Что нужно для создания ролика:
- Авторизоваться через Google аккаунт;
- Выбрать способ создания видео: загрузка фото, текст или фото + текст;
- Ввести запрос на английском языке (русский пока не поддерживается);
- Дождаться результата.
Тест №1: Фотография собаки
Загружаем фото собаки без текстового описания. Результат забавный, но не слишком реалистичный. Мордочка собаки выглядит мультяшно, движения неестественны, а непонятные крылья-лапы портят всё впечатление.
Тест №2: Фотография кружки + текстовый запрос
Загружаем фото кружки и пишем простой запрос: “Синяя кружка на столе”. Ролик получился качественным и реалистичным: цвета яркие, движения плавные, всё соответствует описанию.
Тест №3: Только текст
Пишем запрос: “Белый автомобиль едет вечером по оживленному шоссе”. Результат не впечатлил. Машина двигается как будто задним ходом, общая картина неправдоподобна. Кинематографичность присутствует, но общее впечатление смазано.
Тест №4: Генерация лиц
Загружаем чёрно-белое фото двух женщин без описания. Результат интересный: одна женщина пытается говорить, двигая головой, а другая моргает и смотрит в камеру. Нереалистично, но забавно.
Впечатления от Luma AI
Сама идея создания видео из фото казалась фантастикой ещё пару лет назад. Сегодня это реальность, которая не перестаёт удивлять.
Плюсы:
- Возможность бесплатного использования;
- Высокая скорость генерации;
- Кинематографичность видеороликов.
Минусы:
- Нереалистичность в большинстве случаев;
- Ошибки в движениях и позиционировании объектов;
- Необходимость использования английского языка;
- Невысокая схожесть сгенерированных лиц с оригиналами;
- Излишне плавные, “ненастоящие” движения.
Вердикт:
Luma Dream Machine — интересный инструмент с большим потенциалом. Пока сервис далёк от идеала, но уже сейчас способен удивить и развлечь. Будем ждать обновлений!