ИП Горелов Максим Николаевич 8 (915) 093-74-75
Задать вопрос к OpenAI GPT-5 передав одновременно текст и изображения
Доступно на тарифе:
Стартовый
Бизнес 2025
Профи 2025
Что такое функция?
Функции — внешние инструменты (фрагменты кода), к которым могут обращаться LLM модели для решения задач пользователей. Модель не исполняет функции, но самостоятельно принимает решение о том как, когда и с какими параметрами их следует вызвать. При принятии решения о вызове функции модель исходит из доступных знаний, данных текущего разговора и описания функции. После обращения к функции модель может обработать результат ее работы.
Что такое параметры?
Это входные данные, которые функция использует для выполнения своей задачи. Они позволяют сделать функцию гибкой и многоразовой, так как она может работать с разными данными без изменения своего кода. Например, функция для генерации изображений может принимать параметры query (описание изображения) и resolution (разрешение), чтобы создавать разные картинки по запросу. Параметры нужны, чтобы функция знала, что именно ей нужно обработать или какие условия учесть при выполнении действия.
Как научить ИИ агента использовать эти параметры в функции?
Чтобы объяснить ИИ, какой параметр нужно передать, вы должны включить в промпт бота четкие инструкции. Эти инструкции должны описывать:
Когда нужно вызвать функцию (условие или триггер).
Какую функцию вызвать (по названию или номеру).
Какие параметры и из какой информации в диалоге их брать.
Например, если у вас есть функция для отправки лида (№26), и она принимает параметры name, phone, email, вы можете написать в промпте:
"Если клиент пришлет свой номер телефона, то сразу же вызови функцию №26 (отправка лида). В качестве phone передай номер телефона клиента, в качестве name используй имя, которое клиент указал в диалоге, а email возьми, если клиент его предоставил."
ИИ будет анализировать диалог и, когда увидит соответствующее условие (например, клиент назвал свой номер телефона), он попытается извлечь нужные данные и передать их в указанную функцию.
Как научить ИИ агента правильно отвечать после выполнения функции?
Чтобы агент не отправлял технические данные, ему нужно дать инструкции что отвечать после того, как функция была вызвана.
Например для 26-й функции (отправка уведомлений) это выглядит так:
Если клиент пришлёт номер телефона, то сразу же вызови функцию отправки лида, а в качестве результата вышли клиенту дословно: «спасибо, заявка принята»
Например для 15й функции (генерация картинки) это выглядит так:
Если клиент попросит создать или нарисовать изображение, то сразу же вызови функцию 15, а в качестве результата вышли ему полученную ссылку.
Функция позволяет задавать вопросы к мощным моделям OpenAI GPT-5, передавая одновременно текстовую информацию и изображения для комплексного анализа.
Параметры, которые можно передать в функцию openai_question_omni_gpt_5:
ai_model - модель OpenAI для обработки запроса. Указывает, какую модель использовать для анализа, по умолчанию 'gpt-5-nano'. Допустимые значения: gpt-5, gpt-5-mini, gpt-5-nano.
text - текстовая информация. Указывает текстовые данные, которые будут анализироваться вместе с изображениями.
images_urls - URLs изображений. Указывает ссылки на изображения в формате: URL1;URL2;URL3 (разделенные точкой с запятой).
question - вопрос, который нужно задать. Указывает конкретный вопрос, на который нужно ответить на основе предоставленных текста и изображений.
"Проанализируй текст 'Описание продукта: новый смартфон с камерой 108 МП' и изображения по ссылкам https://example.com/phone1.jpg;https://example.com/phone2.jpg, задай вопрос 'Какие преимущества у этого смартфона?' используя модель gpt-5."
"Используя модель gpt-5-mini, проанализируй текст 'Рецепт торта' и изображения https://example.com/cake1.png;https://example.com/cake2.png, задай вопрос 'Какие ингредиенты нужны для этого торта?'"
"На основе текста 'Технические характеристики автомобиля' и изображений https://example.com/car_front.jpg;https://example.com/car_interior.jpg, задай вопрос 'Какие особенности интерьера у этой модели?' используя модель gpt-5-nano."
ИП Горелов Максим Николаевич ИНН 500104951533 ОГРН 309500106900065