Интеллектуальный рендеринг в Mali G2 NX

Современный смартфон — это устройство с крайне ограниченным энергетическим бюджетом. В то время как стационарные видеокарты оперируют сотнями ватт, на графическую подсистему мобильного устройства выделяется всего 1–2 Вт. Однако требования к качеству картинки растут экспоненциально: пользователям нужны текстуры высокого разрешения, честная трассировка лучей и высокая плавность движений. В Mali G2 NX инженеры Arm применили смелый подход, фактически разделив ресурсы графического процессора в пропорции один к семи. Лишь одна восьмая мощности тратится на нативный рендеринг, а остальные семь восьмых отданы под управление алгоритмов искусственного интеллекта.

Эта стратегия реализуется через три ключевых технологических столпа. Первый из них — Neural Super Sampling (NSS). Система отрисовывает кадр в низком разрешении (например, 540p), после чего ИИ масштабирует его до 1080p и выше. Для восстановления деталей используются векторы движения, данные о глубине сцены и информация из предыдущих кадров. Такой подход не только обеспечивает временную стабильность и качественное сглаживание, но и вдвое снижает нагрузку на оперативную память (DRAM) и энергопотребление на каждый отдельный кадр.

Вторым важным элементом стала технология Neural Frame Rate Upscaling (NFRU), которая по своей сути является аналогом генерации кадров, знакомой по DLSS от Nvidia или FSR от AMD. Алгоритм анализирует два соседних отрисованных кадра, изучает динамику объектов и синтезирует промежуточное изображение. Для этого в GPU интегрирован специализированный нейроускоритель, который с высокой точностью определяет фактическое движение объектов, создавая иллюзию повышенной плавности без необходимости полноценного рендеринга каждого кадра.

Замыкает триаду Neural Super Sampling and Denoising (NSSD). Эта технология оптимизирует работу с трассировкой лучей в реальном времени. Вместо того чтобы просчитывать огромное количество лучей на каждый пиксель, что фатально для мобильного энергопотребления, ИИ сокращает их число, эффективно «дорисовывая» и очищая изображение от шумов.

Для реализации этих задач Arm предлагает гибкую линейку решений. Флагманская версия Mali G2-Ultra NX оснащается десятью и более шейдерными ядрами, минимум шестью нейроускорителями и выделенными блоками трассировки лучей в каждом ядре. Более сбалансированные версии — Premium и Pro — предлагают масштабируемое количество ядер (от одного до девяти) и опциональную интеграцию нейроускорителей и RT-блоков, что позволяет производителям устройств подбирать конфигурацию под конкретный сегмент рынка.

Помимо ИИ-реконструкции, в Mali G2 NX внедрены важные аппаратные улучшения. Трассировка лучей третьего поколения теперь использует совместный просчет общих ребер треугольников. Это позволяет эффективнее использовать кэш и существенно снизить объем данных, передаваемых в DRAM — в тестах нагрузка на память сократилась на 13%. Дополнительно реализована поддержка Hardware Opacity Micromaps (OMM), которая оптимизирует просчет лучей при взаимодействии с прозрачными или полупрозрачными объектами.

Результаты такого подхода впечатляют: в конфигурации Ultra NX производительность в играх может вырасти с 15 до 60 кадров в секунду, при этом потребление ресурсов DRAM снижается на 70%. Даже без использования функций ИИ обновленные блоки трассировки лучей дают прирост производительности на 14%, а в полноценном режиме — на 24%.

Очевидно, что переход на такую модель рендеринга потребует времени. По прогнозам Arm, полноценная интеграция этих решений разработчиками игр займет около полутора лет. Тем не менее, первые чипы на базе Mali G2 NX должны появиться на рынке уже в ближайшие недели, открывая эру, где качество мобильной графики будет определяться не столько «грубой силой» транзисторов, сколько интеллектуальной обработкой данных.