Valve представила технологию фовеальной потоковой передачи для гарнитуры Steam Frame

Компания Valve представила технологию фовеальной потоковой передачи (foveated streaming) для своей новой беспроводной VR-гарнитуры Steam Frame. Эта технология использует отслеживание взгляда для оптимизации беспроводного соединения и обеспечения высокого качества изображения.

Как объяснил инженер Valve Джереми Селан, технология работает аналогично фовеальному рендерингу, но оптимизирует именно процесс потоковой передачи. Система использует камеры отслеживания взгляда, встроенные в гарнитуру, чтобы определить, куда смотрит пользователь.

«Мы отправляем очень качественное представление исходных данных туда, куда вы смотрите, и тратим значительно меньше битов на окружающую область», — говорит Селан.

Вместо передачи двух полноразмерных изображений (по одному для каждого глаза) система отправляет четыре потока: два низкого разрешения для всего поля зрения и два высокого разрешения только для области, куда направлен взгляд пользователя.

Технология работает настолько быстро, что успевает передавать высококачественное изображение в новую область еще до того, как пользователь переведет туда взгляд. Тестировщики отмечают, что даже при целенаправленных попытках «обмануть» систему невозможно заметить переход между зонами разного качества.

«Мы обнаружили, что даже для самых наблюдательных пользователей очень сложно заметить, что происходит», — заявляет Селан.

Ключевое преимущество технологии в том, что она не требует дополнительной работы от разработчиков игр — система полностью реализована на стороне платформы Steam. При этом пользователи могут одновременно использовать как фовеальную потоковую передачу, так и фовеальный рендеринг в поддерживающих его играх.

Фовеальная потоковая передача не снижает требования к производительности игрового ПК, но значительно экономит пропускную способность беспроводного соединения, что особенно важно для гарнитуры с двумя экранами 2160×2160 и частотой обновления до 144 Гц.