事件相机的工作原理和应用场景_M6米乐APP下载_米6米乐体育app官方下载
搜索

事件相机的工作原理和应用场景

来源:M6米乐APP下载   

发布时间:2024-02-06 18:07:50

  事件相机最早诞生于1990年,那时候,许多研究人员探讨动物感知环境的方式,发现对变化更为敏感,所以设计出了实验室用的事件相机。2008年,诞生了第一款商用的事件相机。如今国内外都有企业和机构进行事件相机的研究。传统相机,无论是CMOS传感器,还是CCD传感器,亦或是RGBD相机,都有一个参数:帧率。它们是以恒定的频率拍摄获取图像。这样,即使帧率能达到1KHz,那也具有1ms的延时。所以传统相机存在一定的延迟问题。此外,传统相机需要通过一段时间的曝光,使感光器件积累一定的光子,那么在曝光时间之内如果物体在高速运动,则会产生模糊,这也是传统相机的一个问题。另外,传统相机的范围较低,具体表现为在光线极差或者亮度极高时,相机获取的信息有限。这样一些问题极大的限制了传统相机在一些应用场景中的应用。而事件相机则能很好的解决这样一些问题。事件相机,也称神经形态像机,或动态视觉传感器(DVS,Dynamic Vision Sensor),是一种能够响应局部亮度变化的成像传感器。事件相机不像常规相机那样使用快门捕获图像。相反,事件相机中的每个像素都独立且异步地运行,并在发生亮度变化时输出这些变化,否则保持沉默。下图可以非常形象的展示出事件相机和传统相机在工作原理上的不同。左侧:假设拍摄的是一个圆盘转动(圆盘此时逆时针转动一段时间然后停止)。右侧:上面是传统相机,圆盘停止时,标准相机输出不间断,然而这一些信息其实不是我们关注信息。下面是事件相机,其输出信息为亮度动态变化的位置,并且当图片无变化时即为no events,无输出。此前有业内人士对电子发烧友表示,基于这样的工作原理,事件相机有几个典型的特点:一是它的动态范围非常高,能够达到140dB;二是因为它只输出有效信息,不输出无效信息,它的数据量非常小;三是它的速度很快,能够达到1/10000s,甚至更高。因为这些特点,事件相机可适用于传统相机难以解决的一些场景中。比如城区场景中的鬼探头,传统相机在面对横向的鬼探头场景时,无法快速做出一定的反应,而事件相机可以更快感知到危险信号;再比如高速场景下的避障,车辆在高速上快速行驶时,遇到前方路面有一个轮胎,传统相机不能及时做出一定的反应,事件相机可以依靠低时延优势,快速识别并做出避障的动作。目前,不少公司都在致力于事件相机的发展,包括iniVation、prophesee(普诺飞思)、索尼(收购Insightness)、芯仑光电(韦尔股份子公司)、锐思智芯(Alpsentek)等。iniVation起源于瑞士,由基于事件视觉的发明者创立。该公司已推出多款产品,热门型号包括:DAVIS346 Color/Mono、DVXplorer、DVXplorer Lite/Mini、Stereo Kit等。iniVation的动态视觉平台可为诸多应用和行业提供支持和解决方案,包括物联网(超低功耗监控和智慧城市)、无人驾驶(车辆测距、SLAM和乘员监控)、机器人技术(场景理解与定位)、工业视觉(过程监控和基础设施检测)等。Prophesee于2014年成立于法国巴黎,专注于神经拟态视觉传感技术,目前基于事件的视觉技术推出多款传感器。其研发的普诺飞思原视觉(Metavision)传感器可应用于手机、无人驾驶、工业自动化、物联网、AR/VR、医疗设施等领域。比如在智能驾驶领域,Xperi旗下子公司DTS基于普诺飞思原视觉(Metavision)传感技术提供的事件数据,开发了基于神经拟态视觉系统的驾驶员监控解决方案(DMS),提供了更优的微光性能,以及新的检测功能,如眼跳或微表情检测等。再比如,高级驾驶辅助软件开发商Terranet AB与梅赛德斯-奔驰共同开发的VoxelFlow传感器,采用了普诺飞思原视觉(Metavision)传感器,可扫描车辆四周半径为40米的区域,反应时间为3毫秒。锐思智芯成立于2019年,拥有一支兼备芯片、算法、软件和硬件研发经验与能力的团队,核心专家来自全球顶尖机构。在高端视觉传感器领域拥有超过16年的技术积累,在事件相机领域拥有超过8年的研究经验。2021年10月,锐思智芯(Alpsentek)发布了首款融合仿生事件视觉传感器芯片——ALPIX-Pilatus(简称 ALPIX-P)。专为机器感知设计的传感器,可大范围的应用于机器人、智能手机、无人驾驶、无人机、安防等场景。ALPIX-P 采用锐思智芯自主研发的 Hybrid Vision融合式仿生事件视觉传感技术,即将仿生事件视觉技术与传统图像传感技术在像素级别进行融合。芯片可以在传统图像传感器模式和仿生事件相机模式之间快速切换,实现事件相机与 CIS 相机功能 “二合一”。在图像模式下,ALPIX-P 是一款最高帧率为 120 帧的全局曝光传感器,其图像质量与现有的商化的 CIS 输出的图像质量一致,兼容现有成熟的视觉系统。在仿生事件相机模式下,ALPIX-P 具有超高帧率,高有效信息占比,大动态范围的特点。事件相机的核心是神经拟态,神经拟态技术最早源于瑞士苏黎世联邦理工学院(ETH Zurich)。目前研究的企业主要有两个方向,一是传感器,即事件相机,就是文章提到的几家公司;另一个是神经拟态计算,主要是SoC芯片,如九天睿芯、时识科技。目前从两个方向来看,神经拟态在产品和应用上都有不错的进展。

  高通在移动处理器行业拥有无可争议的霸主地位,虽然说目前已经有其他芯片厂商对高通形成压力,但其优势依旧很明显,各大品牌的旗舰机几乎都清一色使用了高通芯片,下半年预计将会有更多使用高通芯片的高端产品。目前业内有关人员分析了高通中国的一些战略思路,并分享了完整详尽的高通处理器、基带路线图。 首先来看看高通在今年的芯片策略,高端市场的优势不用多言,但目前中低端则面临着联发科的严峻挑战,并且高通最有优势的4G方面已经受到海思、联发科和英特尔的多家突破,下半年将会持续狠抓4G,尤其是提前将64位八核心带到中国,无论价格、支持都会更加务实。 具体芯片方面,今年下半年除了骁龙805的全面商用外,还会带来全新的骁龙615、骁

  :4G中高端持续升级 /

  华为已经宣布,麒麟970芯片将在9月2日亮相德国IFA。 外媒已经在柏林的展会现场拍到了华为布展的情况,包括芯片的官方LOGO、玻璃陈列柜、巨幅海报等。 其中,芯片被放置在人类大脑的相应位置,无疑,这是呼应华为此次演讲的主题“人工智能”,也就是麒麟970不仅有着强悍的性能,而且是全球首款手机生产厂商自主研发的AI处理器(集成神经单元NPU)。 与此同时,麒麟970的核心参数也被爆料大神Roland Quandt在推特泄露,似乎翻拍自官方Sheet。 具体来说,麒麟970采用台积电10nm工艺打造,内建55亿颗晶体管(余承东表示复杂程度超过Intel处理器),芯片面积近似指甲盖(约100平方毫米)。 PS:骁龙835是31亿颗,苹果

  HTC One A9新机早前已经在台湾地区开卖,据说销量还不错,但大家更关心的应该是国行何时到来,据HTC内部员工消息称,HTC One A9将于11月中旬在国内上市,同时红色版也会开卖。而价格这一块,有贴吧网友爆料称会是2999元。 HTC One A9 & iPhone 6s   简单回顾一下该机的配置,HTC One A9搭载5英寸1080P显示屏,覆盖2.5D大猩猩4代玻璃,搭载骁龙617处理器,前置400万超像素摄像头,后置1300万像素摄像头,支持光学防抖,内置2150mAh电池,支持快充,预装Android 6.0系统。该机有2GB RAM+16GB ROM和3GB RAM+32GB ROM两个版本。

  Note 7的意外事故让三星更看重产品的质量,这对于消费者来说是个好事,这次从测试上看,Galaxy S8的电池似乎格外安全。 上周,三星移动事业部负责人高东真对外宣布,在韩国新旗舰S8/S8 Plus预定量超100万的目标,同时他也希望这款手机能够在中国取得不错销量。 现在,有网友在微博上爆料了一些S8国行的细节,其会在5月15日发布,然后25日正式开卖,而移动版本SM-G9508会在5月30日出货(移动定制版,售价比全网通便宜)。 至于大家关心的售价,爆料中还提到,三星S8的价格要低于大家的预期,价格的范围在5200-5800,至于移动版的价格有很大的可能是为5288元,而大家关心的6+128GB皇帝版,仅S

  索尼在今天晚上曝光了全新的索尼 Xperia XA2 Plus手机,而现在索尼Xperia XZ3手机也已经曝光,日本媒体在今天公布了一张索尼Xperia XZ3所使用的CMOS,从图上来看,索尼Xperia XZ3将会搭载前后双摄像头。 根据之前曝光的谍照,Xperia XZ3与已经发布的Xperia XZ2在外观设计上保持了高度的一致,都是采用了全新的3D流动设计,背部为3D曲面玻璃,采用了双摄,与闪光灯纵向排列在背部中轴线上。 正面上,该机采用了18:9显示屏,但是上下边框依旧宽厚。硬件配置方面,如无意外的线GB ROM,后

  锤子T2在还没发布的时候就已经被数次曝光,日前更是有一整套图出现在微博当中。有网上的朋友表示,在喝咖啡的时候捡到了一部锤子T2手机,从放出的照片来看,锤子T2采用了2.5D弧面玻璃以及金属磨砂中框,质感还是十分好的。不过随随便便就能捡到一部手机,锤子内部的保密意识还是有待提升的。 外形设计方面,锤子T2与锤子T1相比变化并不大,正面仍然采用对称式设计,保留了三颗实体按键。 配置方面,锤子T2搭载六核2.3GHz处理器(骁龙808),拥有3GB RAM及16/32/64GB ROM三种内存组合,配备一块4.95英寸的1080p屏幕,搭配前置500万、后置2100万的两枚摄像头,且传闻该机将支持光学防抖并着重改善了夜拍

  不少消息显示,三星Galaxy Buds Pro将和S21系列一起在2021年1月14日发布。随着发布时间的接近,网上关于这款耳机的消息多了起来。近日,外媒91mobiles曝光了更多关于三星Galaxy Buds Pro的信息。 据91mobiles报道,三星Galaxy Buds Pro续航将长达28小时。作为对比,三星Galaxy Buds Live配合充电盒使用的续航时间为21个小时。爆料称新耳机将配备11mm低音驱动器和6.5mm高音扬声器,并带有同轴双扬声器。耳机还支持35dB的噪音消除功能,支持ANC(主动降噪)、双连接,拥有IPX7防水等级。 此外,之前的消息还称,三星Galaxy Bud

  魅族方面今日宣布将在本月21日召开魅蓝E3新品发布会,从宣传海报上的“给热血青年,更好的装备”字样能够准确的看出魅蓝E3的配置值得期待。不过在小编整理完所有与魅蓝E3的相关信息之后,发现魅族发布会不用开了,直接公布上市日期得了,魅蓝E3已经毫无秘密可言了。 昨天线下经销商【宇通手机】吴飞便在微信朋友圈公布了魅蓝E3的售价与外观,据悉魅蓝E3将有蓝、黑、金三种配色,2299元起接受独家预订。 硬件配置方面,我们综合了工信部官网与3C认证中心官网得知,魅蓝E3将采用5.99英寸大小的FHD+TFT屏幕,搭载主频为1.8GHz的处理器(可能是高通骁龙636处理器),RAM方面分为4GB与6GB,ROM方面为32GB、64GB

  21天学通HTML+CSS+JavaScript Web开发-第7版(带目录)

  中的图像传感器和信号处理

  MPS电机研究院 让电机更听话的秘密! 第一站:电机应用知识大考!跟帖赢好礼~

  电源小课堂 从12V电池及供电网络优化的角度分析电动汽车E/E架构的趋势

  2月5日消息,AMD线程撕裂者竖起了工作站、发烧桌面处理器的天花板,Intel至强虽然无力抗衡,但也不能放弃,只是实力所限,提升有点慢,下一 ...

  DevEco Studio 4.1带来多种调试能力,助力鸿蒙原生应用开发高效调试

  目前,HarmonyOS NEXT星河预览版已经正式面向开发者开放申请,面向鸿蒙原生应用及元服务开发者提供的集成开发环境——DevEco Studio也迎 ...

  英特尔 Thread Director 技术助力,Linux 用户运行 Windows 虚拟机性能提升 14%

  2 月 5 日消息,去年 10 月,微软发布了一份指南,鼓励 Windows 用户通过 WSL 尝试 Linux,这多少让人有些意外。而如果你是一位 ...

  不支持超线,新款英特尔 Arrow Lake-S 芯片样品现身测试数据库

  2 月 3 日消息,消息人士 InstLatX64 近日在 X 平台分享了一条来自英特尔测试机数据库的信息,称发现了一款不支持超线 ...

  智能家居是在物联网的影响之下物联化体现。智能家居通过物联网技术将家中的各种设备(如音视频设备、照明系统、窗帘控制、空调控制、安防系 ...

  最后一周:免费获取Pasternack《RF产品选型指南》2018 印刷版!

  4月26日上午10:00邀您观看 基于TI SitaraAM5708的工业派开源平台介绍 有奖直播

  直播已结束【借助 TI DLP 技术,开始您的下一代4K显示应用设计】

  “慧眼”识PCIe——阅读《PCIe要了解的十件事》和泰克OPEN-DAY的培训资料 抽奖、分享赢好礼!

  站点相关:嵌入式处理器嵌入式操作系统开发相关FPGA/DSP总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科