研究人员展示了用于自主无人机的全息AR控制系统

发布时间:2020-08-10 14:54:21 【来源:

从理论上讲,控制飞行无人机与驾驶直升机应该没有多大区别,但是如果没有人在驾驶舱内,可视化无人机相对于环境障碍物的当前位置可能很棘手-通常是二维的,依赖于相机和操纵杆。本周,香港科技大学的研究人员刘楚浩和沉少杰透露了一种有趣的新解决方案,该解决方案使用全息增强现实硬件创建实时3D地形图,使无人机飞行员可以简单地指向任何平面上方可视化的目标。

全息界面依赖于多种有趣技术的结合:在显示方面,Microsoft HoloLens头戴式耳机将增强现实内容生成为彩色体素图,可以使用自动无人机的深度摄像头和实时射线广播从任何角度进行查看位置数据。至关重要的是,该系统提供了对环境高度和深度的实时且高度空间感,从而使无人机可以很容易地从第三人称视角看到并重新定位。

然后,HoloLens将命令反馈给无人机,通过将佩戴者的手势和注视转变为类似点击的控件,在全息图内确定其下一个目标。然后,无人驾驶飞机会飞到新位置,并在3D地图行进时对其进行更新。一个演示视频研究者提供一个看起来科幻电影的直出-至少在全息侧。由于带宽限制,无人机仅将3D地图数据提供给AR接口,而不提供随附的第一人称视频。

在准备部署全息无人机控制系统之前,香港大学团队还有一段路要走。最初,无人机的数据是在室内测试空间内使用Wi-Fi共享的,尽管一旦5G网络超过了目前无人机受限的阶段,低延迟5G蜂窝连接可能会在室外工作。研究人员还指出,HoloLens在一组测试人员中“ [AR]视野非常有限……引起了频繁的抱怨”,可以使用HoloLens 2或其他AR耳机解决此问题。此外,尽管测试人员先前对AR硬件很熟悉,但他们仍然需要练习才能精通3D定位,这可能是手势识别或不完善的3D UI的问题。

值得注意的是,3D地图数据比实时第一人称视频的带宽效率更高,每秒更新10次时仅需要272MB数据,而以每秒30帧的速度发送第一人称视频图像则需要1.39GB的数据。展望未来,该团队希望同时包括两种类型的流以使用户受益,从而优化数据以满足网络的最小带宽水平。

尽管存在这些问题,全息AR系统显然具有很大的潜力。除了界面的视觉新颖性以外,使用便携式,独立的AR耳机控制远程车辆还有一个巨大的便利优势,而无需使用完整的计算机,显示器和操纵杆。研究人员计划在预定于2020年10月25日至29日举行的国际智能机器人与系统会议上正式提出将AR与自动无人机相结合的“第一步”。

中国联通:已累计开通5G基站33.2万站 到今年年底预计超过38万个
饿了么现已入驻1000所高校食堂 校园内平均20分钟送达
谷歌在西雅图附近规划新园区 在亚马逊和微软总部所在地扩大触角
我国国家顶级域名“.CN”数量超过2300万个 IPv6规模化部署提速
邬贺铨:截至8月我国IPv6活跃用户达3.65亿 占互联网用户之比达40.32%
苹果、谷歌、英特尔等公司已经加入行业组织美国“6G联盟”
微软今天正式终止Win7嵌入式系统支持 花钱可买三年补丁
OPPO将发布首款概念级应用OPPO CybeReal 针对AR领域

[ 最新资讯 ]

始祖鸟之家双面派对,设计师系列惊艳亮相

  11月24日,被誉为户外爱马仕的始祖鸟(ARC’TERYX)全新概念店——始祖鸟之家在全国顶级商圈北京国贸开业了。现场门店实拍图片   ...

曝小米显示器34寸本月最后一单出货后将暂停供应 因三星无屏供应原因

  本月初,视讯堂消息称小米的 34 寸带鱼屏显示器型号,之后可能无法再保持 1999 元的价格进行销售。今天,视讯堂发布最新消息,称小 ...

微星Stealth 15M超轻游戏本纯净白即将上架 屏幕为15.6英寸

  根据微星笔记本官方的消息,微星 Stealth 15M (纯净白)即将上架预约,这款笔记本是首款采用 11 代低压酷睿 + RTX 2060 配置的 ...

EG7今天宣布收购《机甲战士5》开发商Piranha Games 增加其游戏公司种类

  Enad Global 7(EG7)今天(11 27)宣布收购《机甲战士5》开发商Piranha Games,增加了其游戏公司的种类。  EG7已同意以2410万美元的 ...

华米将推出GTS 2 mini手表:将于12月1日发布 外观更轻薄更精致

  根据华米创始人黄汪的消息,华米将推出 GTS 2 mini 手表,外观更轻薄更精致。    根据华米微博的消息, GTS 2 mini 手表将 ...

冬季必看的小黑裤穿搭指南|九牧王男裤专家

  伴随着秋冬而来的除了购物欲还有穿搭热情,但如果你正苦于衣服少、缺乏穿搭灵感,那么,一条百搭、舒适的九牧王小黑裤,或许可以帮到你,只 ...