Американське видання The Information з посиланням на джерела у сфері розвитку ШІ повідомило, що на галузь чекають не найкращі часи. Розкрилася несподівана для багатьох суттєва проблема – на глобальному рівні для навчання ШІ закінчуються високоякісні дані.
Так, згідно з результатами червневого дослідження «Чи закінчаться у нас дані? Межі масштабування LLM на основі даних, створених людиною», нова модель ШІ OpenAI – GPT-5 Orion – досягла рівня розвитку і навченості GPT-4 після проходження 20% навчання. І приросту продуктивності більше не передбачається. І це фундаментальна проблема, що стосується не тільки OpenAI, а й усіх поточних моделей ШІ.
Як зазначається, Orion виявився не кращим за GPT-4 у вирішенні низки завдань. Ця ШІ-модель добре себе показує в роботі з мовними завданнями, але не перевершує попередника, і навіть модель GPT-3, у кодуванні. Крім того, на думку інженерів, приріст продуктивності GPT-5 порівняно з GPT-4 буде меншим, ніж від GPT-3 до GPT-4.
Загалом це проблема всієї галузі – вичерпання високоякісних даних для навчання ШІ.