Сравнение задержки отслеживания рук Vision Pro и Quest 3

Сравнение задержки отслеживания рук Vision Pro и Quest 3

Отслеживание рук является единственным приоритетом в дизайне Vision Pro, тогда как Quest 3 отдает приоритет использованию контроллера, но предлагает отслеживание рук в качестве второстепенного варианта для определенного контента. Однако возможности отслеживания рук в Quest 3 могут вас удивить.

Задержка отслеживания рук Vision Pro

Отслеживание рук — единственный метод, который Vision Pro использует для ввода данных о движении, поскольку он не поддерживает контроллеры движений. Его основная система ввода объединяет движения рук и глаз для управления всем интерфейсом.

Перед выпуском гарнитуры мы наткнулись на несколько видеороликов, которые показали, что задержка отслеживания рук составляет примерно 100–200 миллисекунд. Однако это значительный диапазон. С тех пор мы провели собственные тесты и определили, что отслеживание рук Vision Pro в бета-версии VisionOS v1.1.1 составляет около 128 миллисекунд.

Мы измерили это, наблюдая за количеством кадров между движением проходящей руки в реальном времени и соответствующей виртуальной рукой, как видно на снимке экрана гарнитуры. Чтобы обеспечить точность, мы использовали систему Apple Persona для рендеринга рук, тем самым устраняя любую дополнительную задержку, которую могла добавить Unity.

Проведя несколько тестов (используя в качестве каламбура термин «образцы»), мы определили, что для завершения процесса потребовалось примерно 3,5 кадра. Учитывая частоту кадров 30 кадров в секунду, это соответствует примерно 116,7 миллисекундам. К этому значению мы должны добавить известную задержку Vision Pro, составляющую около 11 миллисекунд, для точного измерения задержки отслеживания фотонов и рук, в результате чего в общей сложности получится 127,7 миллисекунд.

Мы дополнительно изучили временной разрыв между сквозным касанием и виртуальным вводом, чтобы оценить, занимает ли отслеживание рук с использованием полных данных скелета больше времени, чем базовое распознавание касания. Однако нам не удалось обнаружить каких-либо значительных изменений задержки. Аналогично, тестирование при различных условиях освещения не дало существенных различий.

Задержка отслеживания рук в Quest 3

Как это можно сравнить с Quest 3, гарнитурой, которой управляют не только руками? С помощью аналогичного теста мы обнаружили, что задержка отслеживания рук в Quest 3 на Quest OS v63 составляет около 70 мс. Это существенное улучшение по сравнению с Vision Pro, но при фактическом использовании гарнитуры можно подумать, что Quest 3 имеет еще меньшую задержку отслеживания рук. Но оказывается, что часть воспринимаемой задержки замаскирована.

Посредством захвата изображения непосредственно на объектив с частотой 240 Гц мы провели тот же эксперимент с движением в Quest 3, что и в Vision Pro, чтобы определить разницу во времени между реальными движениями рук и соответствующими виртуальными действиями рук. Результат составил 31,3 мс. Добавление этой цифры к известной задержке прохождения Quest 3, составляющей примерно 39 мс, дает расчетную задержку отслеживания фотона в руке около 70,3 мс.

При использовании Quest 3 отслеживание рук кажется даже более быстрым, чем предполагает этот результат, так что же дает?

Поскольку задержка прохождения Quest 3 примерно в три с половиной раза больше, чем у Vision Pro (11 мс против 39 мс), разрыв между реальным движением руки и реакцией виртуальной руки кажется относительно небольшим, равным примерно 31,3 мс ( в отличие от 116,7 мс у Vision Pro).

– – – – –

Важный аспект, который следует учитывать: время отклика и точность отслеживания рук — это разные аспекты. В определенных ситуациях они могут даже двигаться в противоположных направлениях. Отдавая приоритет скорости в вашей системе отслеживания рук, вы можете пожертвовать некоторой точностью. И наоборот, сосредоточение внимания на точности может привести к увеличению времени отклика. В настоящее время у нас нет надежного метода оценки точности отслеживания рук для обеих гарнитур; наше суждение основано главным образом на интуиции.

Смотрите также

2024-03-29 00:56