Издание The Information опубликовало большую статью о разработке GPT-5, в которой раскрыло и некоторые технические особенности ожидаемой модели OpenAI. Новинка будет основана на технологии обучения с подкреплением, к которой добавили Universal Verifier — специальный модуль, проверяющий каждый ответ перед его отправкой пользователю. Ожидается, что этот модуль значительно снизит количество галлюцинаций.
По данным The Infromation, при создании новинки был использован опыт GPT o1 и o3, которые хорошо решают сложные задачи, но плохи в качестве чат-ботов. В отличие от них, GPT-5 подходит для повседневных разговоров, а решение сложных задач в ней выведено на новый уровень — заявляется, что ей даже можно доверить задачи возврата денег в технической поддержке. В задачах на программирование модель «пишет более чистый, дружественный к пользователю и насыщенный фичами код».
Из других улучшений стоит отметить меньшие затраты вычислительных ресурсов на токен и улучшенные агентские особенности. Также в издании подтвердили, что в автоматическом режиме GPT-5 будет сама решать, сколько ресурсов выделить на задачу — меню с выбором между множеством моделей, существующее сейчас в интерфейсе ChatGPT, скоро уйдет в историю.
Разработка GPT-5 стала не самым простым этапом в истории OpenAI. Изначально планировалось, что GPT-5 станет Project Orion — однако в итоге эту модель выпустили в феврале под названием GPT-4.5 и быстро признали тупиковой из-за маленького прироста производительности в сравнении с GPT-4o. Прямо сейчас, по данным The Information, одной из проблем OpenAI является агрессивная политика Meta* (признана экстремистской в России), которая тратит огромные деньги, чтобы переманить ведущих исследователей компании.
P.S. Поддержать меня можно подпиской на канал «сбежавшая нейросеть», где я рассказываю про ИИ с творческой стороны.
Источник: habr.com