OpenAI: для розробки GPT-4 «з нуля» тепер потрібно лише 5-10 людей

Стрімкий розвиток LLM-моделей протягом останнього року призвів до неочікуваних наслідків у розробці цих популярних інструментів. За словами Алекса Пайно, керівника відділу машинного навчання OpenAI, зараз для розробки GPT-4 «з нуля» знадобиться лише 5-10 людей. Два роки тому над створенням цієї моделі працювали «сотні розробників», пише Windows Central.

Процес розробки колись флагманської моделі OpenAI спростився через масштабування генеративного штучного інтелекту. Тепер, коли допомога людей для написання коду все менш потрібна, це значно прискорює роботу над продуктом.

Генеральний директор OpenAI Сем Альтман розповів, що під час розробки GPT-4 у 2023 році були задіяні «сотні людей, майже всі зусилля OpenAI». Однак сьогодні Альтман відкрито висловлює своє розчарування цією моделлю, посилаючись на те, що вона «начебто відстойна» і, в кращому випадку, викликає збентеження. Крім того, він зазначив, що не радить зараз використовувати GPT-4, оскільки вона «буде найдурнішою моделлю, з якою користувачі коли-небудь будуть взаємодіяти».

Нагадаємо, що кілька днів тому OpenAI запідозрили в маніпуляціях з тестами LLM-моделі o3. Результати незалежних тестів поставили під сумнів твердження OpenAI про те, що її нова велика мовна модель o3 здатна впоратися з більш ніж 25% складних математичних завдань FrontierMath, тоді як інші моделі справлялися лише з 2% завдань із цього набору. Розбіжності між результатами внутрішніх та незалежних тестів ставлять питання про якість тестування нейромереж у OpenAI.