Ведущие компании в области искусственного интеллекта, такие как OpenAI, Google и Anthropic, последние годы увеличивают вычислительную мощь языковых моделей, пытаясь снизить поверхностные ошибки и галлюцинации. Однако, несмотря на кажущуюся «умность» новых моделей, уровень глубоких структурных ошибок лишь растёт.
Современные языковые модели работают с замороженными параметрами, не обновляя свои знания в реальном времени. Это приводит к тому, что ИИ не успевает адаптироваться к изменяющемуся миру, что особенно критично для областей, где требуется актуальная информация и переобучение на лету.
Новое поколение ИИ-архитектур предлагает принципиально иной подход, основанный на байесовском ИИ с использованием метрики Фишера, которая учитывает изогнутую информационно-теоретическую геометрию. Это позволяет создавать живые модели, способные непрерывно обновлять свои убеждения и адаптироваться к новым данным.
Компании VERSES AI, causalLens, Symbolica AI и Layer 6 AI уже внедряют эти идеи, демонстрируя высокую эффективность и точность в реальных приложениях — от финансов до причинного анализа. Microsoft располагает масштабируемой инфраструктурой для развёртывания таких систем в промышленном масштабе.
Таким образом, эпоха масштабирования традиционных языковых моделей подходит к концу, уступая место более гибким и адаптивным решениям, которые отражают истинную природу интеллекта — живое, постоянно обновляющееся вероятностное пространство.