Относящаяся к области теоретической информатики работа исследователей Вишала и Варина Сикка представила формальное математическое доказательство фундаментального ограничения больших языковых моделей. Ученые утверждают, что для определенного класса промптов или многоэтапных задач LLM потребуется выполнить вычисления, превышающие их собственную вычислительную сложность, что сделает корректное выполнение таких запросов невозможным в принципе. Этот вывод ставит под сомнение центральную гипотезу индустрии о том, что бесконечное масштабирование данных и параметров неизбежно приведет к созданию полностью автономного искусственного интеллекта.

Исследование напрямую затрагивает популярное направление «агентного ИИ» — систем, способных самостоятельно выполнять сложные, многошаговые операции без вмешательства человека. Математический аргумент Сикка устанавливает принципиальный «потолок» для таких способностей, который невозможно преодолеть простым увеличением масштаба модели. Это контрастирует с оптимистичными прогнозами ряда компаний, рассматривающих автономные агенты как прямой путь к достижению искусственного общего интеллекта (AGI).

Выводы отца и сына Сикка добавляют строгое математическое обоснование к уже существующим в научном сообществе аргументам о природных ограничениях LLM. Работа перекликается с более ранними заявлениями других исследователей, например, специалистов Apple, о неспособности моделей к истинному рассуждению, а также со скептицизмом таких экспертов, как Бенджамин Райли.