Роботы создают фантастические системы дистанционного зондирования, идеально подходящие для отправки в районы бедствия или для поиска и спасения. В частности, дроны могут быстро перемещаться по большим площадям или через структуры, выявлять повреждения или искать выживших, отправляя видеопоток со своих бортовых камер удаленному оператору. Хотя данные, которые предоставляют беспилотные летательные аппараты, могут быть неоценимы, управление ими может быть довольно сложным, особенно когда они выходят за пределы прямой видимости.
Исследователи из Технологического университета Граца в Штирии, Австрия, во главе с Оканом Эратом, хотят изменить способ взаимодействия с беспилотными летательными аппаратами, используя дополненную реальность, чтобы превратить их из сложных летающих роботов в удаленные камеры, которые легко контролировать без обучения. Благодаря демонстрационному дисплею с голографической головкой HoloLens-Microsoft — беспилотный летательный аппарат может использовать своеобразное рентгеновское зрение, позволяющее видеть прямо сквозь стен.
Виртуальная реальность (VR) может обеспечить синтетический экзоцентрический вид, объединив живое видео с 3D-моделью окклюдированной среды с любой точки зрения, независимо от физической точки зрения пользователя. Использование рендеринга видеопотока видеоизображения на основе изображений обеспечивает реалистичное впечатление с живыми обновлениями. Соединив автопилот беспилотного летательного аппарата с направлением взгляда пользователя, опыт переопределяется из отдаленного пилотирования беспилотного летательного аппарата, чтобы воспринимать оккультированный мир с человеческим видением, дополненным дроном. В качестве особого случая VR дополненная реальность (AR) дополнительно добавляет иллюзию рентгеновского зрения: пилот, носящий прозрачный дисплей, может сделать частицу или другие окклюдеры частично прозрачными, чтобы выявить область, наблюдаемую в настоящее время дроном.
HoloLens работает, проецируя изображения в поле обзора. Он тщательно отслеживает, куда указывает ваша голова, и может накладывать видеоролик с дрона на другой стороне непрозрачной стены поверх того, что вы пытаетесь сделать, чтобы она выглядела так, как будто стена прозрачная. В зависимости от того, какая камера оснащена дроном, она может видеть только ограниченное поле зрения, поэтому, если вы повернете голову, чтобы посмотреть в другом направлении (или переместиться), дрон переместится, чтобы дать вам представление что ты хочешь.
В то время как беспилотный дрон движется автономно для большей части взгляда, его легко переместить вручную, снова воспользовавшись дополненной реальностью системы. Расположение беспилотного летательного аппарата видно в HoloLens как маленькая модель, и вы просто протягиваете руку, захватываете эту модель и перемещаете ее туда, куда вы хотите. Для целей этой демонстрации дрон полагается на внешнюю систему локализации OptiTrack для планирования своего пути, но SLAM на дронах — это то, что было сделано раньше.
Чтобы проверить, насколько лучше эта система, исследователи создали исследование, в котором участникам было предложено выполнять удаленные задачи, такие как чтение текста на мониторе через камеры беспилотного летательного аппарата или позиционирование дрона в определенном месте. Они либо сделали это через систему дополненной реальности, либо более традиционный пульт дистанционного управления вместе с видеопотоком от первого лица от беспилотника. Участники повсеместно предпочли представление об увеличенной реальности и дважды выполнили задачи исследования, так как люди с быстрым ходом сказали, что их контроль над беспилотным аппаратом был более точным и более захватывающим («крутым, естественным и точным»), в то время как система дополненной реальности чувствовала себя как будто они были «внутри сцены».
Свежие комментарии