Qualcomm Technologies совместно с Google разработала референсный дизайн автономного VR-шлема Daydream на базе платформы Snapdragon 835 VR. На основе этой платформы любой производитель может живо развернуть производство аналогичных шлемов. Данное усовершенствование Daydream основывается на более ранней совместной работе Qualcomm Technologies и Google по поддержке Daydream на смартфонах.
В новый референсный образец автономного VR-шлема Daydream включены спецификации для камер слежения и прочих датчиков, наихорошим образом использующих технологию отслеживания Tango, которую компания Google интегрировала в шлем. Ожидается, что первые из этих шлемов появятся в лавках до финала нынешнего года.
Сигнальный процессор Hexagon 690 в 835-ом Snapdragon аппаратно поддерживает технологию TensorFlow (искусственный интеллект для обработки изображений VR и AR) и Halide (обработка движений головы для VR, захват изображений в RAW с нулевой задержкой), и для задач, задействующих эти технологии, он в 25 раз эффективнее, чем CPU. В том же DSP имеется All-Ways Aware Hub — агрегатор всех наружных датчиков и интерфейсов.
Для VR также расширена на 60% цветовая палитра (аппаратная поддержка HDR-10), а также поддерживается Foveated Rendering — то бишь, все силы кидаются на качественную обработку той части изображения, которая находится в поле зрения пользователя вместо того, чтобы с равным качеством просчитывать все 360-градусное поле, в пределах которого пользователь теоретически может посмотреть.
Также поддерживается Q-Sync: частота обновления дисплея совпадает с частотой кадров при рендеринге; в конечном итоге это позволило выиграть 20% так именуемого VR-лага, то бишь, задержки между действительным заворотом головы и изменением картинки. Она составляет 15 мс; чем меньше это значение, тем меньше эффект головокружения и тошноты (в реальной жизни мозг привык к нулевой задержке изменения картинки).
На реалистичность работает и подсистема трекинга VIO: она соединяет данные с акселерометра, гироскопа и изображения с камер, позволяя максимально безошибочно выслеживать перемещение головы.
Кроме того, Hexagon DSP 690 имеет функции самообучения на основании нейросетей, функции распознавания образов и трекинга рук в режиме реального времени (то бишь, в VR вы будете видеть как бы «свои» руки, чувствуя их таковыми.
«Мы рады снова работать с Google и предложить сильный и исключительный опыт Snapdragon для устройств на платформе Daydream», - говорил Кейт Креcсин (Keith Kressin), старший вице-президент по управлению продукцией Qualcomm Technologies, Inc. «Наши компании делят одно видение: дать всем возможность наслаждаться глубокими и захватывающими впечатлениями от виртуальной реальности на смартфоне, а также на автономном VR-шлеме, с условием его полной мобильности и с неименьем кабелей и ограничений, связанных с исходными условиями для отслеживания движений в помещениях».