Published on:
Apple представила превью следующего поколения Persona в Vision Pro и архитектуру чипа M5 в ходе редкой технической дискуссии
Apple представила необычайно детальный обзор будущего Vision Pro, раскрыв важные обновления системы Persona, роль грядущего чипа M5 и общее направление компании в области пространственных вычислений и ИИ на устройстве.
Данные сведения получены в ходе редкого технического обмена мнениями между СМИ и двумя ключевыми руководителями команды Vision Pro, что дает более четкое представление о том, как Apple превращает Vision Pro в долгосрочную платформу пространственных вычислений.
Persona совершает значительный скачок с 3D Gaussian Splatting
После выпуска visionOS 2.0 пользователи заметили значительное улучшение реалистичности Persona. В основе этого обновления лежит относительно новая техника рендеринга, известная как 3D Gaussian Splatting (3DGS).
В отличие от традиционной компьютерной графики, которая полагается на созданные вручную меши, 3DGS работает путем изучения геометрии непосредственно из захваченных изображений. Система записывает видео с нескольких ракурсов и восстанавливает структуру лица как совокупность волюметрических элементов Гаусса — точек эллипсоидной формы с положением, масштабом и прозрачностью.
Apple подтвердила, что Persona теперь использует чисто гауссовский подход, без гибридной геометрии мешей, что обеспечивает естественные цветовые переходы и детализацию поверхности, которые сложно воспроизвести с помощью мешей.
От аватаров FaceTime к цифровой идентичности
Долгосрочное видение Apple в отношении Persona выходит за рамки простых видеозвонков. Persona разрабатывается как цифровое представление личности, интегрированное непосредственно в трехмерную среду.
Компания также выделила HUGS (Human Gaussian Splatting), проект с открытым исходным кодом, который расширяет эту технику на полноразмерные аватары тел. Эти представления могут быть оснащены скелетной анимацией, что обеспечивает иммерсивное телеприсутствие, где участники предстают в виде полномасштабных пространственных аватаров в реальной среде друг друга.
Чип M5: Новая архитектура GPU, созданная для ИИ + графики
Чип M5 обеспечивает наиболее значительный прирост благодаря архитектурным изменениям, а не простому масштабированию. Впервые каждое ядро GPU включает выделенный нейронный ускоритель (Neural Accelerator).
Эти ускорители на уровне GPU разработаны специально для рабочих нагрузок на стыке ИИ и графики, таких как:
- ИИ-шумоподавление
- Сверхвысокое разрешение видео (super-resolution)
- Генерация кадров
- Продвинутые эффекты рендеринга
Ранее данные должны были многократно перемещаться между GPU и NPU. С M5 эти операции могут выполняться полностью внутри GPU, что снижает задержку и повышает эффективность для пространственных задач в реальном времени.
Почему Vision Pro получает больше всего преимуществ от M5
Хотя на стандартных ноутбуках прирост может быть незначительным, Vision Pro является основным бенефициаром архитектуры M5. Как гарнитура со сквозным видео (VST), она постоянно выполняет ресурсоемкие ИИ-задачи, включая:
- SLAM (Simultaneous Localization and Mapping)
- Понимание окружающей среды
- Шумоподавление сквозного изображения на базе ИИ
- Рендеринг Persona
Почти все эти рабочие нагрузки точно соответствуют дизайну GPU M5 с ИИ-ускорением, обеспечивая бесшовный и высококачественный пространственный опыт.
Широкая философия ИИ Apple
Apple подтвердила, что ее стратегия сосредоточена на интеллекте на устройстве — создании устойчивых персональных моделей мира, сочетающих визуальные данные, данные о движении и пространственное понимание.
Такие проекты, как FastVLM, модель «зрение-язык» (vision-language model) с открытым исходным кодом, иллюстрируют это направление, предлагая быстрый и энергоэффективный вывод для контекстно-зависимого интеллекта в реальном времени. Это формирует замкнутый цикл: реальный мир векторизуется, интерпретируется ИИ и проецируется обратно в иммерсивный пространственный опыт.
Технологии, восприятие и будущее
Дорожная карта Apple Vision Pro указывает на более глубокие амбиции: изменить то, как люди воспринимают реальность и взаимодействуют с ней с помощью вычислений. Сочетая пространственный ИИ, реалистичное цифровое воплощение и специализированные чипы, Apple позиционирует Vision Pro не просто как гарнитуру — это эксперимент по расширению человеческого восприятия цифровыми системами.
