Корпорація Microsoft оголосила про інтеграцію візуального пошуку за зображеннями у ШІ-чаті Bing. Тепер користувачі можуть зробити або завантажити фотографію у чатбот й попросити нейромережу надати більше інформації про нею на персональному комп’ютері або мобільному пристрої.
Нововведення розроблено на основі мультимодальної нейромоделі GPT-4 OpenAI. Чатбот здатний розуміти контекст зображення, інтерпретувати його та відповідати на запитання про нього.
«Незалежно від того, чи подорожуєте ви до нового міста у відпустці та розпитуєте про архітектуру конкретної будівлі, вдома намагаєтеся придумати ідеї для обіду на основі вмісту вашого холодильника — завантажте зображення до Bing Chat, щоб використовувати знання інтернету для отримання відповідей», – пояснили в прес-релізі Microsoft.