ИП Горелов Максим Николаевич 8 (915) 093-74-75
Генерация видео из фото и текста
Доступно на тарифе:
Стартовый
Бизнес 2025
Профи 2025
Что такое функция?
Функции — внешние инструменты (фрагменты кода), к которым могут обращаться LLM модели для решения задач пользователей. Модель не исполняет функции, но самостоятельно принимает решение о том как, когда и с какими параметрами их следует вызвать. При принятии решения о вызове функции модель исходит из доступных знаний, данных текущего разговора и описания функции. После обращения к функции модель может обработать результат ее работы.
Что такое параметры?
Это входные данные, которые функция использует для выполнения своей задачи. Они позволяют сделать функцию гибкой и многоразовой, так как она может работать с разными данными без изменения своего кода. Например, функция для генерации изображений может принимать параметры query (описание изображения) и resolution (разрешение), чтобы создавать разные картинки по запросу. Параметры нужны, чтобы функция знала, что именно ей нужно обработать или какие условия учесть при выполнении действия.
Как научить ИИ агента использовать эти параметры в функции?
Чтобы объяснить ИИ, какой параметр нужно передать, вы должны включить в промпт бота четкие инструкции. Эти инструкции должны описывать:
Когда нужно вызвать функцию (условие или триггер).
Какую функцию вызвать (по названию или номеру).
Какие параметры и из какой информации в диалоге их брать.
Например, если у вас есть функция для отправки лида (№26), и она принимает параметры name, phone, email, вы можете написать в промпте:
"Если клиент пришлет свой номер телефона, то сразу же вызови функцию №26 (отправка лида). В качестве phone передай номер телефона клиента, в качестве name используй имя, которое клиент указал в диалоге, а email возьми, если клиент его предоставил."
ИИ будет анализировать диалог и, когда увидит соответствующее условие (например, клиент назвал свой номер телефона), он попытается извлечь нужные данные и передать их в указанную функцию.
Как научить ИИ агента правильно отвечать после выполнения функции?
Чтобы агент не отправлял технические данные, ему нужно дать инструкции что отвечать после того, как функция была вызвана.
Например для 26-й функции (отправка уведомлений) это выглядит так:
Если клиент пришлёт номер телефона, то сразу же вызови функцию отправки лида, а в качестве результата вышли клиенту дословно: «спасибо, заявка принята»
Например для 15й функции (генерация картинки) это выглядит так:
Если клиент попросит создать или нарисовать изображение, то сразу же вызови функцию 15, а в качестве результата вышли ему полученную ссылку.
Функция vsegpt_image_to_video позволяет создавать видео на основе предоставленного изображения и текста с использованием искусственного интеллекта. Она поддерживает различные соотношения сторон и модели генерации, что делает её гибкой для разных задач, таких как создание презентаций, рекламных роликов или визуального контента для соцсетей.
text – Текст, который будет использоваться для генерации видео. Может включать заголовки, описания или другие элементы, которые должны отображаться в видео.
image_url – Ссылка на изображение, которое будет основой для видео. Поддерживаются стандартные форматы изображений (JPEG, PNG и др.).
aspect_ratio – Соотношение сторон видео. Доступные варианты:
"16:9" (горизонтальное, стандартное для мониторов и YouTube)
"9:16" (вертикальное, подходит для Instagram Reels и TikTok)
По умолчанию: "16:9".
ai_model – ИИ-модель, используемая для генерации видео. Доступные варианты:
"img2vid-ltx/097-distilled" (базовая модель)
"img2vid-ltx/video-095" (альтернативная модель, возможно, с улучшенным качеством)
По умолчанию: "img2vid-ltx/097-distilled".
Создание горизонтального видео с текстом:
"Сгенерируй видео из фото по ссылке https://example.com/photo.jpg с текстом 'Новый продукт 2024: инновации и стиль'. Используй соотношение сторон 16:9 и модель img2vid-ltx/097-distilled."
Создание вертикального видео для соцсетей:
"Сделай видео из изображения https://example.com/promo.png с текстом 'Скидки 50% только сегодня!' в формате 9:16 и моделью img2vid-ltx/video-095."
ИП Горелов Максим Николаевич ИНН 500104951533 ОГРН 309500106900065