Ai Studio — Конструктор ИИ-видеороликов

Складчина: Ai Studio — Конструктор ИИ-видеороликов

Коллеги, приветствую.
Не буду писать длинных вступлений и сразу перейду к делу — расскажу о нашем решении для производства медиаконтента.

Перед нами стояла задача: поставить на поток создание видеороликов с помощью ИИ (от рекламных до обучающих), выдерживая заданный стиль и используя брендовых персонажей и предметы в мультяшном стиле.

Сначала мы попробовали генерировать видео вручную через всем известные сервисы, но столкнулись со следующими проблемами:

1. Огромное количество рутины. Приходится постоянно переключаться между моделями, скачивать, загружать и переименовывать файлы, заново выставлять настройки и пытаться всё это систематизировать.
2. Дороговизна качественного результата. Приемлемого качества через стандартный функционал можно добиться только на дорогих моделях (цена доходит до 1–3$ за секунду) и то не всегда. Хотя, более дешевые аналоги (от 0.02$ за секунду) способны выдавать схожее качество картинки, но для этого ими нужно управлять гораздо точнее, чего обычные интерфейсы не позволяют.
3. Нет контроля над сценой. Результат часто получается случайным, а на каждую попытку тратятся время и токены. С учетом второго пункта производство влетает в существенную копеечку.
4. Хаос в рабочем процессе. Приходится постоянно жонглировать десятком вкладок и окон, что превращает творчество в механическую работу.

Поработав так несколько недель, мы поняли: катастрофически не хватает удобного механизма, который объединит в себе весь нужный функционал и даст гибкий контроль над контентом.

Мы решили написать свой инструмент. Нам было важно превратить муторную рутину в управляемый процесс, где ресурсы тратятся на саму задачу, результат предсказуем, а бюджет проекта экономится.

Так появился Ai Studio.

Что такое Ai Studio?
Это умный ИИ-конструктор и единое рабочее пространство для сборки видеороликов. Процессом в реальном времени управляет встроенный ИИ-агент. Вы не просто генерируете случайные кадры в надежде на чудо, а собираете видео по кирпичикам — от персонажей до финальных переходов, полностью контролируя результат.

Для удобства мы реализовали систему проектов. Проект — это отдельное пространство, состоящее из следующих блоков:

• Стиль: подробное описание визуала (например, «в стиле Дисней»).
• Раскадровка: проектирование сцен с помощью ИИ.
• Персонажи: референсы героев для сохранения консистентности на протяжении всего ролика.
• Предметы: конкретные объекты, которые должны фигурировать в кадре (например, брендированный мяч).
• Локации: референсы мест, где происходят события (офис, двор дома и т.д.).
• Озвучка: готовые аудиозаписи для фонового голоса или генерации диалогов с липсинком.
• Кадры: сгенерированные изображения, которые служат стартовыми или финальными точками для видео.
• Шортсы: готовые сгенерированные фрагменты видео.

Всё это находится на одном экране, удобно сгруппировано и доступно в один клик. У каждой сущности есть история версий: если результат не подошел, можно перегенерировать и выбрать лучший вариант в любой момент.

Как работает ИИ-агент
Чтобы не прыгать по вкладкам, прямо на странице открыт чат с ИИ-агентом. Вы ставите ему задачи текстом, а он, используя встроенные инструменты, взаимодействует с файлами проекта и API нейросетей.

Под капотом у агента несколько десятков тулзов (на текущий момент более 30 штук), которые вызываются в фоновом режиме. Он может работать как полностью автоматически, так и под вашим управлением — вы всегда можете вмешаться и скорректировать его действия. Все базовые промпты (правила генерации, стилей, выбор моделей) легко настраиваются прямо в интерфейсе Ai Studio. Никаких сложных форм — всё предельно просто.

Функционал постоянно растет, поэтому расписывать всё не буду. Вот как выглядит процесс работы на практике:

• Настройка проекта: Описываем агенту общую задачу и просим задать единый стиль для будущих референсов.
• Создание персонажей: Просим создать нужных героев (или загружаем свои картинки перетаскиванием). Агент сам сгенерирует референс с учетом стиля проекта. Нужно что-то поменять? Просто пишем об этом в чат. Старые версии сохраняются, к ним всегда можно вернуться.
• Создание предметов и локаций: Точно так же генерируем нужные фоны и предметы, которые должны переходить из сцены в сцену.
• Создание кадров (ключевые точки): Чтобы ролики были консистентными и мы не упирались в ограничения нейросетей по длине видео, мы используем механику стартового и финального кадра. Просто описываем агенту композицию или в один клик выбираем нужные ассеты из проекта.
• Создание озвучки: Пишем агенту текст — он возвращает готовое аудио.
• Создание шортса (сцены): Выбираем начальный и конечный кадры, описываем действие, задаем длину ролика и прикрепляем звук. Агент всё собирает, просит подтвердить задачу и отправляет на генерацию.
• Создание переходов: Если нужен красивый стык между сценами, выделяем последний кадр одной сцены и первый кадр другой. Просим агента сделать переход — и получаем уникальную плавную анимацию.

При этом если у Вас уже есть что-то готовое и это необходимо использовать, просто перетащите в соответствующую секцию и это будет доступно агенту для работы.

Итог:
Вам остается только перенести готовые шортсы в любую программу для монтажа и склеить их. То, на что раньше уходили часы, теперь занимает буквально несколько минут. А главное — мы получаем функционал дорогих моделей, используя дешевые, за счет полного контроля над процессом.

Вопросы и ответы

На чем написан Ai Studio?
Golang + SQLite + React (shadcn ui)

Какие затраты на работу Ai Studio?
Затраты складываются только из оплаты API нейросетей. Можно использовать дешевые модели, можно дорогие, на свое усмотрение.
Лично мы используем в основном связку 0.005$-0.01$ за изображение + 0.02$ за сек видео (для некоторых задач подходит режим черновика, 0.005$ за сек) + агентная LLM 0.4$ за млн токенов (все цены указаны на 22.09.26) под свои задачи. Получая функционал дорогих генераций за счет полного контроля над процессом на более дешевых моделях.

Какие системные требования к Ai Studio?
Софт мультиплатформенный: поставляется в виде единого бинарника для Windows, MacOS, Linux.
В боевой работе ежедневно используется на MacOS и Ubuntu. Если локально запустить не удастся, систему всегда можно развернуть на недорогом VDS (рекомендуется Ubuntu 22).

Можно ли работать с несколькими проектами одновременно?
Да, Ai Studio работает по принципу дерева проектов. Открываем во вкладке браузера проект и работаем с ним. Количество проектов неограниченно, каждый имеет свою изолированную базу персонажей, ассетов, стиля и т.д.

Может ли перестать работать Ai Studio?
Нет, вся система спроектирована таким образом, что будет работать и через несколько лет. Взаимодействие с ИИ идет через стандартизированные API. Система не использует какие-либо хаки, нарушения правил поставщиков и прочее.

Какие форматы видео поддерживаются?
16:9, 9:16

Есть ли жесткая привязка к какому-то одному провайдеру или ИИ?
Нет, система максимально гибкая, жесткой привязки нет. Можно подключиться к любому поставщику, информация об этом будет в ветке поддержки.

Система полностью автоматическая?
90% всех процессов автоматизировано, но присутствует некоторый объем ручной работы — в частности, контроль над ключевыми кадрами (начальный и конечный) для сцен, что и является главной киллер-фичей для получения предсказуемого результата.

Есть ли еще какие-то важные нюансы?
По большому счету всего 2:

1. Нужно понимать, что поставщики ИИ блокируют доступ из РФ, поэтому для работы потребуется либо сервер в другой стране, либо всем известный сервис из трех букв. По обоим вариантам будут рекомендации.
2. Для пополнения балансов API необходимо иметь заграничную карту, либо воспользоваться услугами пополнения баланса, коих на рынке несчетное количество.

Какие есть ограничения на использование Ai Studio?
Система идет с привязной к железу, использовать на нескольких не получится, потребуется дополнительная лицензия.
Но, есть возможность снять это ограничение, об этом информация в блоке Бонус 2.

Бонусы

Бонус 1: Для всех участников, независимо от количества записавшихся:
Информация о том, как запустить модель для генерации видео на арендованных GPU сервере с оплатой за время.
Подготовленный "on start" скрипт, позволяет развернуть в один клик на сервере свой личный API с хорошей open source моделью, который можно использовать прямо из Ai Studio.
Когда видео много, просто подготоавливаем все кадры, включаем GPU сервер и разом генерируем все шортсы. Например, генерация 15 секундного ролика на GPU RTX PRO 6000 занимает в среднем 2 минуты, при текущих расценках экономия примерно в 4 раза по сравнению с API.

Бонус 2: Бонус за количество участников:
При наборе 60+ человек в основном списке — полный исходный код проекта без привязки к железу.
Вы сможете вносить любые изменения на свое усмотрение.

Для получения бонусов необходимо:

• Для ЧК и выше: 2 рекламных поста и ссылка в подписи на срок 1 месяц.
• Для остальных: 3 рекламных поста.

При выполнении условий отписаться в теме с указанием списка ссылок на рекламные посты.



Стоимость: 8500 руб с человека.
Для участия необходимо подать заявку.

 

@soctrap Приветствую.
1) Покажите, пожалуйста, пару лучших примеров видео, которые получаются на выходе, желательно в разных стилях, например мультяшный и более реалистичный.
2) Какие конкретно можно будет подключать модели нейронок?

 

Какая цена за финальный ролик в среднем? Если брать в расчет минуту. При цифрах выше выходит 1.2$ за минуту. Как часто нужно перегенерировать что-то из проекта?

 

Да, конечно, без проблем. Завтра подготовлю ролики.

На текущий момент можно подключить:

1. Текстовые модели: любые модели с openrouter
2. Изображения и видео: любые модели с replicate
3. Озвучка: elevenlabs

Здесь собраны тысячи различных моделей и их список обновляется постоянно, все актуальные игроки присутствуют.
В конструкторе реализован единый интерфейс для всех тулзов агента, поэтому при желании можно будет подключить любых других поставщиков.
Если нужен какой-то конкретный поставщик/модель – просто напишите, подключу и будет доступно сразу из "коробки" на момент выдачи материала.

 

Все зависит от длительности ролика и используемых моделей.
Для наших задач путем проб и ошибок был сформирован список из 5 моделей:

1. Агентная LLM: 0.4$ за млн выходных токенов
2. Модель генерации изображений: 0.005$ за изображение (персонажи, предметы, локации)
3. Модель редактирования изображений: 0.01$ за изображение (стартовые/конечные кадры, правки персонажей, предметов, локаций)
4. Модель генерации шортсов (видео от кадра к кадру): 0.02$ за 1 сек
5. Модель генерации видеопереходов: 0.005$ - 0.01$ за сек

Которые оптимально выполняют наши задачи.
Какие-то ролики сразу хорошо получаются, какие-то приходится по 1-3-5 раз перегенерировать – это нормально.
В системе есть настраиваемые промпты-инструкции по "переводу" задач из чата ии-агента в правила для конкретной модели, это значительно снижает кол-во битых вариантов.

Затраты на 15 секундный шортс при этом наборе моделей:

• 2 задачи на редактирование (создание кадра из локации, персонажей и предметов) = 0.01$ * 2 = 0,02$
• 1 задача на генерацию шортса на 15 секунд: 0.02 * 15 = 0,3$
• Агентная LLM и озвучка = микроценты, грубо говоря.

Получается, от 0.32$ за 15 секунд, или 1.28$ за минутный ролик, примерно.

Если запустить ту же самую модель на арендованном GPU, то используем RTX PRO 6000, в среднем 1.4-1.8$ в час на сегодня.
15-секундый ролик генерируется примерно 2 минуты. Если подготовить все стартовые кадры и задачи по анимации для каждого фрейма, то математика примерно следующая:

• 2 задачи на редактирование (создание кадра из локации, персонажей и предметов) = 0.01$ * 2 = 0,02$
• 1 задача на генерацию шортса на 15 секунд: 1.8$ / 30 = 0,06$
• Агентная LLM и озвучка = микроценты, грубо говоря.

Получается, от 0.08$ за 15 секунд, или 0.32$ за минутный ролик, примерно.
Но, тут нужно понимать, что на арендованном GPU расходуется время на выполнение "on start" скрипта, который развернет модель и запустит API, на это уходит минут 15-20 при первом запуске.

Это примерные цифры на сегодня, при условии, что изображения и видео получаются нужными с первого раза.

 

Здравствуйте.
1. С помощью вашего софта можно создавать аи персонажей людей, так сказать аи блогеров/инфлюенсеров делать, которые будут озвучены так, что не отличить что это аи персонаж? Не мультяшные. Не про закадровую озвучку.
2. Описание выглядит вкусно. Многое тут зависит от готовых правильных промптов. Вы их даете вместе с софтом?
3. Свои эндпоинты можно встроить и по апи любые другие сервисы использовать на свое усмотрение (даже не известные широкому кругу) и в том числе использовать те сервисы, которые вы по каким-то причинам не приемлите (люмен,роялтехно,фастген,веононстоп, другие китайские агрегаторы)?
4. В начале подумал что это как один интересный сервис doitong, но там ещё идет автосборка роликов, без обращения к капкуту. Есть в планах сделать автосборку роликов на этом софте? Монтажка многих напрягает.

 

Всем доброго времени суток!
@soctrap По каким причинам не получиться запустить софт локально? На Windows 10 запуститься?

Агрегаторы нерйронок по типу kie ai или anymodel org есть возможность подключить?

 

Да, можно. Просто нужно использовать дорогие модели по типу Nano Banana 2 PRO и Seedance 2.5

В отличии от работы напрямую через нейросеть, здесь ИИ-агент "переводит" Ваши задачи, написанные обычным языком, в промпты для работы с нейросетями.
Поэтому нет необходимости каждый раз составлять "правильные" промпты, куда важнее максимально подробно описать обычным разговорным языком, что конкретно хотите получить.

Да, можно.

Да, в планах есть, некоторые наработки уже имеются в этом направлении.

 

Да, на Windows 10 все будет работать. Главное, чтобы доступ к API ИИ не блокировался на уровне поставщика/провайдера. Но, об этом будет информация.

Да, можно.

 

Удачных продаж.
Сильно нравится, что автор на протяжении длительного времени, не меняет цены на свои продукты, какими-бы они ни были.
Ну и качество всегда на высоте.

 

Благодарю за добрые слова

Да, можно.

 

Soctrap приветствую, поздравляю с новым запуском. Очень интересная тема, но быбло бы здорово посмотреть видео-обзор вашей программы, ее возможностей изнутри, чтобы понять чем она принципиально лучше многих аналогичных сервисов и решений на рынке. Сможете записать?

 

Можно ди делать не сплошной ии, а инфографику?
У тебя есть рилс с экспертом в кадре.
Надо сделать монтаж вставить сабы, плашки, фотки по теме, чтобы получилось динамичнее

 

Лично я не встречал схожего по функционалу сервиса, именно по этой причине и было принято решение написать этот инструмент с нуля.
В любом случае, из основных преимуществ: абсолютная кастомизация ии-агента, полный контроль над роликами, свобода выбора моделей, экономия на подписках.
К тому же, есть возможность получить исходный код проекта, а это полная свобода действий и независимости (тот же nsfw контент, который далеко не всегда является чем-то плохим).

 

Да, можно генерировать инфографику с анимацией и переходы. Сам монтаж уже происходит в программе типа CapCut и прочее.

 

Здравствуйте, а есть примеры роликов для наглядности?

 

Собрал небольшой демонстрационный ролик, что называется "первой прогонки".
Намеренно не перегенировал шортсы с артефактами, чтобы показать примерный уровень результата.
Используется дешевая модель генерации видео, 0.02$ за секунду, 720p. При использовании более дорогих, качество будет выше, соответственно.

 

Добавлен навык ИИ-агента – апскеллер, для улучшения качества используемых изображений.

 

видел в обсуждении темы, что можно не только анимационные ролики генерировать и кто-то интересовался про создание роликов с аватарами
могли бы вы примерную стоимость +- озвучить 60-секундного ролика подобного рода

 

Для максимально реалистичных "киношных" роликов нужно использовать последние топовые модели, по типу Seedance 2.5 (0.23$ / сек) или Veo 3.1 (0.4$ / сек)
Но, нужно понимать, что ИИ постоянно улучшаются и с выходом новых моделей, предыдущее поколение дешевеет.
То, что сегодня стоит дорого и выдает отличный вариант, через несколько месяцев может стоить в разы, а то и на порядок дешевле.
Сама же схема построения консистентный длинных роликов останется прежней и как раз для максимального удобства и автоматизации этого процесса и используется Ai Studio.