24 декабря 2024
Интересный обзор комментариев на тему запуска o3. Модель показывает впечатляющие результаты — например, 88% в тесте ARC-AGI против 32% у o1, и 25% в сложном математическом тесте, где другие модели не набирали больше 2%.
Правда, эта производительность достигается ценой огромных вычислительных затрат — более $1000 на одну задачу против $5 у o1. На полном тесте ARC-AGI o1 использовала ресурсов на $10 000 и набравшая всего на 12% меньше баллов, чем o3, использовавшая в 172 раза больше вычислительных ресурсов (цену им еще не сложили).
Это поднимает вопросы о практическом применении таких моделей — вряд ли o3 станет повседневным инструментом как GPT-4. Скорее, это будет специализированный инструмент для сложных задач, доступный только организациям с большими бюджетами. OpenAI уже предлагает тариф $200 для версии o1 pro (которая действительно очень круто работает) и даже ходят слухи о некоем тарифе Ultra со стоимостью до $2000.
Впрочем, индустрия видит в этом подходе — масштабировании вычислений во время генерации ответа, — большой потенциал. Джек Кларк из Anthropic считает, что в 2025 году прогресс AI ускорится даже по сравнению с 2024-м годом за счет комбинации традиционного масштабирования и test-time scaling. А производители специализированных AI-чипов, как Groq или Cerebras, могут сделать такой подход более доступным.
Новостей сегодня будет мало — канун Рождества все же, так что воспользуюсь своим атеизмом и намекну всем желающим, что я не случайно выбрал завтрашний день — 25 декабря, — для старта lite-версии своего “Курса молодого CEO”. Он включает в себя весь видеоконтент с конспектами и дополнительными заданиями и становится доступным сразу после подписки — вы сами выбираете темп его прохождения и сами следите за сроками, он просто доступен в течение полугода после подписки.
А если вы предпочитаете живое участие, возможность задать вопрос непосредственно мне и учиться вместе с группой — самое время начать записываться в очередную группу, которая стартует 21 января.
Тем более, что до 30 декабря на оба варианта действует скидка в 20% по коду NEWYEAR2025.
Впрочем, есть и новость — Лекс Фридман решил оживить свой телеграм канал и перевести его на русский. Он это связывает с тем, что ему предстоит интервью с Зеленским, которое он пока предлагает провести на русском, а пока разместил несколько аудиороликов и привязал чат к каналу.
Правда, почему-то на русском он говорит с легким кавказским оттенком, но это я придираюсь 😊.