工程

事件相机的工作原理和应用场景

发布日期:2024-01-08 01:05:44作者: hth华体育app官网登录

  事件相机最早诞生于1990年,那时候,许多研究人员探讨动物感知环境的方式,发现对变化更为敏感,所以设计出了实验室用的事件相机。2008年,诞生了第一款商用的事件相机。如今国内外都有企业和机构进行事件相机的研究。传统相机,无论是CMOS传感器,还是CCD传感器,亦或是RGBD相机,都有一个参数:帧率。它们是以恒定的频率拍摄获取图像。这样,即使帧率能达到1KHz,那也具有1ms的延时。所以传统相机存在一定的延迟问题。此外,传统相机需要通过一段时间的曝光,使感光器件积累一定的光子,那么在曝光时间之内如果物体在高速运动,则会产生模糊,这也是传统相机的一个问题。另外,传统相机的范围较低,具体表现为在光线极差或者亮度极高时,相机获取的信息有限。这样一些问题极大的限制了传统相机在一些应用场景中的应用。而事件相机则能很好的解决这样一些问题。事件相机,也称神经形态像机,或动态视觉传感器(DVS,Dynamic Vision Sensor),是一种能够响应局部亮度变化的成像传感器。事件相机不像常规相机那样使用快门捕获图像。相反,事件相机中的每个像素都独立且异步地运行,并在发生亮度变化时输出这些变化,否则保持沉默。下图可以非常形象的展示出事件相机和传统相机在工作原理上的不同。左侧:假设拍摄的是一个圆盘转动(圆盘此时逆时针转动一段时间然后停止)。右侧:上面是传统相机,圆盘停止时,标准相机输出不间断,然而这一些信息其实不是我们关注信息。下面是事件相机,其输出信息为亮度动态变化的位置,并且当图片无变化时即为no events,无输出。此前有业内人士对电子发烧友表示,基于这样的工作原理,事件相机有几个典型的特点:一是它的动态范围非常高,能够达到140dB;二是因为它只输出有效信息,不输出无效信息,它的数据量非常小;三是它的速度很快,能够达到1/10000s,甚至更高。因为这些特点,事件相机可适用于传统相机难以解决的一些场景中。比如城区场景中的鬼探头,传统相机在面对横向的鬼探头场景时,无法快速做出一定的反应,而事件相机可以更快感知到危险信号;再比如高速场景下的避障,车辆在高速上快速行驶时,遇到前方路面有一个轮胎,传统相机不能及时做出一定的反应,事件相机可以依靠低时延优势,快速识别并做出避障的动作。目前,不少公司都在致力于事件相机的发展,包括iniVation、prophesee(普诺飞思)、索尼(收购Insightness)、芯仑光电(韦尔股份子公司)、锐思智芯(Alpsentek)等。iniVation起源于瑞士,由基于事件视觉的发明者创立。该公司已推出多款产品,热门型号包括:DAVIS346 Color/Mono、DVXplorer、DVXplorer Lite/Mini、Stereo Kit等。iniVation的动态视觉平台可为诸多应用和行业提供支持和解决方案,包括物联网(超低功耗监控和智慧城市)、无人驾驶(车辆测距、SLAM和乘员监控)、机器人技术(场景理解与定位)、工业视觉(过程监控和基础设施检测)等。Prophesee于2014年成立于法国巴黎,专注于神经拟态视觉传感技术,目前基于事件的视觉技术推出多款传感器。其研发的普诺飞思原视觉(Metavision)传感器可应用于手机、无人驾驶、工业自动化、物联网、AR/VR、医疗设施等领域。比如在智能驾驶领域,Xperi旗下子公司DTS基于普诺飞思原视觉(Metavision)传感技术提供的事件数据,开发了基于神经拟态视觉系统的驾驶员监控解决方案(DMS),提供了更优的微光性能,以及新的检测功能,如眼跳或微表情检测等。再比如,高级驾驶辅助软件开发商Terranet AB与梅赛德斯-奔驰共同开发的VoxelFlow传感器,采用了普诺飞思原视觉(Metavision)传感器,可扫描车辆四周半径为40米的区域,反应时间为3毫秒。锐思智芯成立于2019年,拥有一支兼备芯片、算法、软件和硬件研发经验与能力的团队,核心专家来自全球顶尖机构。在高端视觉传感器领域拥有超过16年的技术积累,在事件相机领域拥有超过8年的研究经验。2021年10月,锐思智芯(Alpsentek)发布了首款融合仿生事件视觉传感器芯片——ALPIX-Pilatus(简称 ALPIX-P)。专为机器感知设计的传感器,可大范围的应用于机器人、智能手机、无人驾驶、无人机、安防等场景。ALPIX-P 采用锐思智芯自主研发的 Hybrid Vision融合式仿生事件视觉传感技术,即将仿生事件视觉技术与传统图像传感技术在像素级别进行融合。芯片可以在传统图像传感器模式和仿生事件相机模式之间快速切换,实现事件相机与 CIS 相机功能 “二合一”。在图像模式下,ALPIX-P 是一款最高帧率为 120 帧的全局曝光传感器,其图像质量与现有的商化的 CIS 输出的图像质量一致,兼容现有成熟的视觉系统。在仿生事件相机模式下,ALPIX-P 具有超高帧率,高有效信息占比,大动态范围的特点。事件相机的核心是神经拟态,神经拟态技术最早源于瑞士苏黎世联邦理工学院(ETH Zurich)。目前研究的企业主要有两个方向,一是传感器,即事件相机,就是文章提到的几家公司;另一个是神经拟态计算,主要是SoC芯片,如九天睿芯、时识科技。目前从两个方向来看,神经拟态在产品和应用上都有不错的进展。

  在黑莓推出KeyOne后,有消息说将会于10月推出一款触摸屏手机,目前这款手机又有了最新的消息,现在一款名为BlackBerry Krypton手机已经通过了美国FCC的认证。  BlackBerry Krypton曝光 通过美国FCC网站上曝光的一张图片来看,我们没办法得到有关这款手机的更多信息,但是根据此前外媒的报道,黑莓Krypton将搭载高通骁龙625或骁龙626处理器,4GB内存,1080P屏幕,4000mAh大容量电池,采用全触摸屏设计。 TCL全球销售经理弗朗索瓦·马修(Francois Mahieu)在此前的采访中表示,TCL计划在2017年发布至少三款黑莓手机,而10月将发布一款触摸屏的手机,并且保证将

  本文来自快科技 最近有关三星大屏机皇Galaxy Note 6的爆料慢慢的变多,而且越来越猛。今天,《福布斯》又给出消息称,Note 6或许也会配备曲面屏,而且仅此一个版本,没有传统平面型! 至于是单侧曲面,还是双侧曲面,目前还没有一点说法。  三星这两年的Galaxy S6 Edge、S6 Edge+、S7 Edge能够说是大获成功,S7 Edge更是被誉为最美手机,集精美的外观、强大的硬件于一体,国内厂商也在纷纷上马曲面屏。 Galaxy Note系列则一向以大屏幕、独特手写笔作为标志,如果也引入曲面屏,无疑将成为集大成者,但也有一定可能会造成定位重叠、市场冲突,影响彼此的销量。 Galaxy

  腾讯数码讯(水蓝)随着索尼两款新机UA描述文件的曝光,坊间传出索尼或将在IFA展会上发布新款机型的消息。而现在,波兰零售商Komp.Tech已经悄然上线两款索尼新机,据传有可能会被命名为索尼Xperia XZ1和Xperia XZ Companct,均预装Android8.0系统,并传闻骁龙835处理器和拥有4GB内存,预计将在IFA展会上与我们见面。 两款新机上线 根据国外网站GsmArena的报道称,索尼将于今年8月31日在柏林举办IFA2017新品发布,预计将会像往常那样推出新款智能手机。虽然现在还没有更具体的机型被公布,但日前波兰零售商Komp.Tech悄然上线的两款索尼新机却引起了人们的注

  9月2日消息,有国外博主在推特上放出了华为Mate 30 Pro的前面板谍照。根据泄露图可以确认Mate 30 Pro将采用刘海瀑布屏方案,还将支持3D人脸识别和屏幕指纹。 同时,华为Mate 30 Pro后置徕卡四摄,并首次搭载双4000万主摄,辅以800万+TOF镜头组成徕卡四摄的配置。 另外Mate 30 Pro还支持无线充电。报道称Mate 30 Pro支持25W无线mAh,支持无线反向充电功能,还将首发麒麟新一代旗舰芯片。 据了解,Mate 30 Pro将于9月19日在慕尼黑亮相,国行版或将在9月底发布。

  根据 iSuppli、iFixit 的拆解分析,Verizon 版 iPhone 在硬件规格上有不少改变,被视为是下一代iPhone 5的轮廓。 苹果Verizon版的iPhone 4使用高通芯片,可能也会在iPhone 5 和 iPad 2 上出现 iFixit 与 IHS iSuppli 日昨发表报告说明,Verizon 版 iPhone 4 的变革,不仅是系统上的不同 (CDMA),连电池、振动器、基频芯片与GPS芯片都不一样。最引人关注的,是连天线都经过重新设计。 iFixit 指出,实际上 Verizon 版 iPhone 4 整个机板都重新设计过,包括天线,因此应不会再发生过去收讯死点的问题。

  低配版小米手机4曝光 新浪手机讯 9月24日上午消息,近日,小米公司在工信部电信设备进网管理网站中对4G版小米手机4的配置信息进行了更新。在之前的版本添加了两个新的配置版本:增加 “3GB RAM+64GB ROM”版本和“2GB RAM+16GB ROM”两个版本。这在某种程度上预示着小米将会在近期推出低配版小米手机4。 在仔细看过进网管理网站上信息后,能够准确的看出低配版小米手机4的配置似乎只有运行内存从3GB缩水到了2GB,其它均未改变,依旧配置四核2.5GHz骁龙801处理器、16GB机身存储空间、1300万/800万像素摄像头等配置。(基德) 目前该机的售价还未公布,但可以预想应该会低于1799而以和魅族MX4进行

  《每日经济新闻》记者从运营商内部人士处独家获悉了5G套餐详情,三家运营商5G套餐每月均不低于128元。同时,运营商首次采取按上网速度定价的方式,中国联通分了两个5G网速档次,中国移动分了三个5G网速档次。如中国联通199元及以下价格的5G套餐,上网速度限制在500Mbps,299元及以上5G套餐速度可达1Gbps,超出套餐外的流量为3元每GB。 中国移动的5G智享套卡(个人版),5G基础服务5G上网速度限制在300Mbps,5G优享服务5G上网速度限制在500Mbps,5G极速服务5G上网速度限制在1Gbps。 具体资费方面,如中国联通129元月租的5G冰激凌套餐,包括流量30GB(前期再赠送10GB流量),语音通线

  !高速高价,低速低价,均不低于128元 /

  日前,谷歌已经逐步开始向 Android 开始推出行的4.4.3版本的升级。不过此次升级仅是一些小升级,并没有太多实质性的改变。很显然大家已经把关注点放在了谷歌下月下旬召开谷歌I/O大会上了,有传闻指出 Android 4.5或将在本届开发大会上推出。 从最近国外曝光的一些截图内容来看, Android 4.5将会采用更大的图标以及更年轻的配色设计风格。截图中全新设计的Google+界面中,使用了橙红色的配色,这与之前泄露的 Android 4.5主屏截图相同。 另外,在全新的Google+中,当用户访问顶部 导航 栏或者正在编写新动态时,整个屏幕界面也会被覆盖上同样的橙红色。除此之外,在添加新用户是,界

  中的图像传感器和信号处理

  Cadence Allegro 22.1编程下载器ST_LINK全套PCB设计教程

  ADI世健工业嘉年华——深度体验:ADI伺服电机控制方案

  解锁【W5500-EVB-Pico】,探秘以太网底层,得捷电子Follow me第4期来袭!

  随着科技的快速的提升,汽车工业正迈入一个全新的时代。在这个时代里,无人驾驶汽车已不再是遥不可及的梦想,而是正在慢慢地变为现实。随之而 ...

  汽车充电桩是电动汽车外围最主要的设备,为电动汽车提供源源不断的电力。根据供电方法不一样,可分为交流充电桩和直流充电桩。汽车充电桩产品 ...

  丰田第二代混合动力系统(THS-Ⅱ),机械构造之精妙,控制策略之严谨,可谓独步全球,其核心竞争力就在于动力分配行星齿轮机构Power S ...

  电动车辆供电设备在1级和2级额定电压下为电动汽车电池充电。电动汽车(EV)车主依靠电动汽车供电设备(EVSE)为电池高效充电。EVSE通常被称 ...

  Cybertruck的EPA文件提供了关于它电池包的一些基本信息参数信息。电池电压,电池容量为150Ah,总电量(816V*150Ah)约为122 4kWh,单位体积内的包含的能量约为 ...

  站点相关:嵌入式处理器嵌入式操作系统开发相关FPGA/DSP总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科