Корпорация Microsoft объявила об интеграции визуального поиска по изображениям в ИИ-чатботе Bing. Теперь пользователи могут сделать или загрузить фотографию в чат и попросить нейросеть предоставить больше информации о ней через персональный компьютер или мобильные приложения.
Как рассказали в Microsoft, нововведение разработано на основе мультимодальной нейромодели GPT-4 OpenAI. Чатбот способен понимать контекст изображения, интерпретировать его и отвечать на вопросы о нем.
«Независимо от того, путешествуете ли вы в новый город в отпуске и расспрашиваете об архитектуре конкретного здания, дома пытаетесь придумать идеи для обеда на основе содержимого вашего холодильника — загрузите изображение в Bing Chat, чтобы использовать знания интернета для получения ответов», — объяснили в пресс-релизе Microsoft.