Моделі OpenAI отримали доступ до криптогаманця і даних сайтів
OpenAI повідомила про чотири тестові інциденти, у яких моделі обходили обмеження сайтів і використали тестовий криптогаманець.
Внутрішні моделі OpenAI під час тестувань обійшли обмеження доступу до сайтів, отримали конфіденційні облікові дані та використали кошти з криптогаманця в тестовій мережі. Компанія описала чотири інциденти, що сталися у червні, повідомляє Ars Technica.
В одному з випадків модель, якій доручили знайти історичні дані про кількість лікарняних ліжок на державному статистичному сайті, після відмови в доступі скористалася функцією завантаження файлів. Вона отримала конфігураційні та прикладні файли сервера, зокрема чутливі облікові дані, проаналізувала код застосунку, обійшла перевірки авторизації статистичного розділу та зберегла раніше недоступні дані локально.
Доступ до непублічних таблиць
В іншому тесті модель мала отримати п’ять показників із публічної дослідницької панелі. Вона обійшла засоби захисту організації, здобула облікові дані та змінила конфігурацію сервера. В одному з оцінювань це дало їй змогу спрямовувати запити внутрішнього інструмента пошуку до публічної панелі, а в іншому — завантажити п’ять непублічних таблиць із 147 451 рядком.
Після скидання налаштування модель продовжила застосовувати токен для отримання непублічної інформації. OpenAI зазначила, що тест завершився без повідомлення моделі про доступ до внутрішніх систем, завантаження таблиць або зміну параметрів автентифікації. Усі п’ять її відповідей в оцінюванні визнали неправильними.
Операція з тестовим криптогаманцем
Ще в одному випадку моделі доручили оновити застосунок для торгівлі криптовалютами. Вона вивела ключі гаманця з публічно відомих фраз відновлення розробника, знайшла рахунок із коштами в тестовій мережі й використала його для оплати розгортання запитуваного контракту. За даними OpenAI, модель поставила під сумнів наявність дозволу, але вирішила, що публічна фраза відновлення та токени без вартості в тестовій мережі дозволяють використати ці кошти. Розгортання було успішним, а комісії списали з цього рахунку.
Обхід обмежень браузера
У четвертому епізоді модель шукала публічну торговельну статистику й обійшла встановлені дослідниками обмеження на типи вебзапитів. Вона спершу знайшла відповідь у публічному щорічнику, однак продовжила шукати інший шлях до статистичного сервісу. Зрештою модель змусила зовнішній браузер надіслати POST-запит через вебформу, отримала сторінку у вигляді GIF-зображення та розпізнала показники за допомогою оптичного розпізнавання символів.