@Reyfli

Возможно ли сделать так, чтобы Telegram GPT-Yandex.Cloud Бот отвечал не только на текстовые сообщения, но и на картинки? И если да, то как?

Появился вопрос: "А можно ли и как сделать так, чтобы GPT бот отвечал на полученные изображения? Сможет ли он их распознавать?" Вот мой нынешний код. Я, пока что, пробовал менять тип сообщения text на photo, но сам бот выдавал ошибки. Нужно ли подключать дополнительные библиотеки Yandex.Cloud и если да, то какие?

import requests
import telebot
from telebot import types

bot = telebot.TeleBot('АПИ КЛЮЧ БОТА ТГ')


@bot.message_handler(commands=['start'])
def start(message):
    markup = types.ReplyKeyboardMarkup(resize_keyboard=True)
    with open('C:/Users/User/OneDrive/Рабочий стол/2.png', 'rb') as photo:
        bot.send_photo(message.from_user.id, photo, caption='Привет!', reply_markup=markup, parse_mode='Markdown')


@bot.message_handler(content_types=['text'])
def get_text_messages(message):
    prompt = {
        "modelUri": "gpt://и тут ещё писать надо/yandexgpt-lite",
        "completionOptions": {
            "stream": False,
            "temperature": 0.6,
            "maxTokens": "2000"
        },
        "messages": [
            {
                "role": "system",
                "text": "Ты ассистент робот, способный помочь человеку будущего!"
            },
            {
                "role": "user",
                "text": message.text
            }
        ]
    }

    url = "https://llm.api.cloud.yandex.net/foundationModels/v1/completion"
    headers = {
        "Content-Type": "application/json",
        "Authorization": "Api-Key МОЙ АПИ КЛЮЧ"
    }

    response = requests.post(url, headers=headers, json=prompt)
    result = response.json()
    text_response = result["result"]["alternatives"][0]["message"]["text"]

    bot.send_message(message.from_user.id, text_response,parse_mode='Markdown')

bot.polling(none_stop=True, interval=0)
  • Вопрос задан
  • 143 просмотра
Решения вопроса 1
vabka
@vabka
Токсичный шарпист
У yandex gpt нет функции для распознавания картинок - это чисто текстовая нейросетка
Ответ написан
Пригласить эксперта
Ответы на вопрос 1
@Drevn1y
Попробуй использовать Chat GPT 4.0 токен
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы