您的位置 首页 VR

格拉斯哥大学研发1000fps刷新率单光源3D传感方案

VR之家消息:市面上用传感器测量距离有多种方式,比如稀疏光子成像、非视距成像(NLOS)等。不管是基于超声波传感还是红外线传感,他们的相似之处在于都是通过计算声波或光波到达某一表面并反射回来的时间来推算距离。

  VR之家消息:市面上用传感器测量距离有多种方式,比如稀疏光子成像、非视距成像(NLOS)等。不管是基于超声波传感还是红外线传感,他们的相似之处在于都是通过计算声波或光波到达某一表面并反射回来的时间来推算距离。

格拉斯哥大学研发1000fps刷新率单光源3D传感方案.png

  通常,基于光学传感的3D扫描需要两个或以上个摄像头,以捕捉跟合成人眼双目视差效果。或是通过光源阵列和多个单一的光传感器来对空间中的物体进行3D识别和重建。

  近期,英国格拉斯哥大学的科研人员提出了一种结合深度学习算法的低成本SPAD传感方案。它的特点是只需要单一光源和传感器,就能通过光线从场景反射回来的时间来进行3D测距。据悉,该方案的平均误差仅为四分之一纳秒,而且最远可识别4米内的物体,刷新率高达1000fps。

  专家表示:通常光子到达3米远处任何表面并反射回来平均需要10纳秒,但这个时间并不能直接反映出该表面的方向和角度。

  而格拉斯哥大学科研人员在实验初期进行测距时,获得的图像虽然比普通ToF摄像头的要更模糊、缺少细节,但外观轮廓比较清楚。接着,他们利用在同一场景训练的神经网络,来破解和优化3D扫描信号。

  具体来讲,该方案分为三个部分:1)脉冲光源;2)单点时间识别传感器;3)图像重建算法。科研人员在场景中用单一方向的脉冲激光源进行照射,接着单光子雪崩二极管(SPAD)将收集这些反射回的光线,并生成时间柱状图。然后,在使用人工神经网络来通过单一的时间柱状图识别和重建3D场景。

  在训练神经网络的过程中,科研人员将使用脉冲光源、ToF模组、SPAD传感器,对空间中移动的人进行动态扫描。通过对比ToF模组识别到的3D数据和SPAD传感数据重建的图像,来完成对神经网络的训练。

  为了验证效果,科研人员首先通过数字模拟来进行分析。在一个20立方米空间,用类似于人形的物体摆出多种不同的姿势,并利用时间测量法来重建3D图像和时间柱状图。同时,也使用同步的ToF模组(也可以用LiDAR、立体成像或全息装置)来收集对比数据。

  结果显示,通过SPAD方案重建的3D图像比ToF方案缺少一些细节,但整体轮廓得以体现。接着,科研人员通过重复用时间柱状图重建,来进一步分析脉冲响应函数(IRF)对3D图像分辨率的影响。结果发现,IRF响应时间变长,场景中3D图像的轮廓也依然可以分辨。

  不过也发现,该方案将依赖于在特定场景中训练过的神经算法。也就是说,科研人员所训练的神经网络仅识别特定的静态背景,同样的物体或人物在其他背景中则不再识别。

  由于在实验中,算法训练使用到的均为动态背景中移动的物体,所以目前只适合扫描设备固定在静态背景中运行。尽管如此,这一方案的优势在于刷新率高,可用于自动驾驶、基于笔记本电脑摄像头和无线电天线的实时3D监控或是AR测距等场景。

  此外,SPAD方案重建的图像分辨率受训练神经网络时所使用的3D传感器局限,而且图像质量受到时间测距传感器的刷新率决定。

  以上就是小编为大家带来的格拉斯哥大学研发1000fps刷新率单光源3D传感方案的介绍,想要了解更多VR资讯请关注本站。下载盒子即可享受一键下载游戏、搜索礼包、查找攻略等一站式服务,喜欢玩破解版的玩家就下载【破解游戏盒子】

免责声明:文章内容不代表本站立场,本站不对其内容的真实性、完整性、准确性给予任何担保、暗示和承诺,仅供读者参考,文章版权归原作者所有。如本文内容影响到您的合法权益(内容、图片等),请及时联系本站,我们会及时删除处理。

作者: dawei

【声明】:第七手机网内容转载自互联网,其相关言论仅代表作者个人观点绝非权威,不代表本站立场。如您发现内容存在版权问题,请提交相关链接至邮箱:bqsm@foxmail.com,我们将及时予以处理。

为您推荐

Meta上线Personal Boundary功能以减少骚扰

据报道,Meta公司正在为其Horizon Worlds体验添加一个Personal Boundary功能,旨在阻止VR中的骚扰行为。这项新功能将建立一个环绕在虚拟人物身边圆圈范围,对他人保持安全距离,以避免不必要的触碰与互动,在Horizon Worlds创作平台和Horizon Venues现场活动

致力元宇宙!Meta研发世界最快的AI超级计算机

据报道,Meta Platforms Inc对外透露,其研究团队建造了一款新的人工智能超级计算机,这台超级计算机被命名为AI研究超级集群(RSC),包含16,000个英伟达A100 GPU,算力达5 EFLOPS(混合精度)。Meta认为,等到2022年年中组装完成时,它将是世界上最快的AI

AR营销解决计划提供商Nextech AR加入Khronos Group

AR体验技术和服务提供商Nextech AR Solutions Corp。近日宣布加入The Khronos Group,这是一个由开创性公司组成的开放联盟,主要致力于为3D、AR/VR和元宇宙创建行业标准。 作为The Khronos Group的成员,Nextech将与其他科技公司合作创建和定义行业标准,共

steam deck掌机2月25日开卖 国内无法预订

V社Valve近日正式宣布Steam Deck掌机将于2月25日发售,起售价399美元。Steam方面表示,考虑到Steam Deck的货源紧张问题,将于2月25日向这款掌机的预订者发送第一批电子邮件,用户在收到邮件后,将会有72小时的时间确认是否购买。 Steam Deck将于2月28日开始

VR高评价网游《ZenithThe Last City》正式推出

期待已久的VR MMO游戏《Zenith:The Last City》已于1月27日正式上线推出,登陆Quest、SteamVR和PS VR等各大VR平台,售价30美元,提供100小时的游戏体验。 据了解,《Zenith:The Last City》采用了赛博朋克风格,并且糅合了受VR音游《Beat Saber》启发的动