Пока инвесторы вливают триллионы в дата-центры, в кулуарах главной научной конференции по ИИ — NeurIPS — царят совсем другие настроения. Издание *The Information* сообщает о растущем скепсисе среди элиты разработчиков.
Суть проблемы
Все больше исследователей из OpenAI, Google и других топ-компаний открыто говорят: нынешний подход зашел в тупик.
- Стена масштабирования: Просто скармливать моделям больше данных и давать больше чипов уже не работает так эффективно, как раньше.
- Нужен сдвиг: Отрасли требуется не «полировка» старых методов, а полная перестройка (overhaul) фундаментальных принципов обучения.
Настроения на конференции подтверждают, что индустрия ищет «следующую большую вещь» после Трансформеров, потому что старая лошадка, похоже, начала выдыхаться.