当前位置:首页 > 新闻动态 > 公司动态

实现动静态视觉融合「锐思智芯」推出全球首款融合仿生事件视觉传

发布时间:2022-08-10  阅读:1

  原标题:实现动静态视觉融合,「锐思智芯」推出全球首款融合仿生事件视觉传感器ALPIX-Pilatus|LCIG Portfolio

  近日,联想创投被投企业锐思智芯发布了一款仿生视觉传感器芯片——ALPIX-Pilatus芯片(简称ALPIX-P),这一款芯片不仅与三星、索尼站在同一起跑线上,凭借其核心技术优势,未来很有可能打破三星、索尼等大厂在视觉传感领域的铜墙铁壁,并逐渐向手机、汽车等领域拓展,为行业带来更多选择。

  近几年,随着人工智能、计算机视觉等技术兴起,机器感知时代已经到来。传统摄像头因其响应慢、功耗大、拍摄运动物体模糊等痛点制约了计算机视觉技术的发展。

  为了解决这一问题,事件相机仿造人眼视网膜的工作原理,具备对信息响应速度快、冗余数据少、功耗低、动态范围大等优势,因而适用于机器视觉。2015年,事件相机步入产业化阶段并应用于少数场景。

  而在事件驱动相机+传统图像传感器的双摄系统中,由于两颗摄像头的视角差别以及事件相机与传统图像传感器的数据类型不同,因而对于两路数据进行实时配准存在较大困难。

  为了解决现有局限性,锐思智芯自主研发了Hybrid Vision技术,即融合仿生视觉方案,将事件相机与传统视觉传感器合二为一,实现“静态”与“动态”的视觉融合。

  技术方面,其运作原理及优势主要体现在以下三方面,首先,将仿生视觉技术与传统图像传感器融合在同一芯片上,可同时输出高质量图像数据和事件流数据,实现了实时图像融合。

  其次,该方案的事件相机功能,为模仿人眼视网膜神经元的工作原理,基于事件进行驱动,只输出变化信息,其响应速度达到微秒级,全时域捕捉变化的信息。

  第三,延续传统图像传感器的技术优势,在图像拍摄模式时保证全幅画质和影像细节。

  锐思智芯本次发布的ALPIX-Pilatus(简称ALPIX-P)即是基于“Hybrid Vision”开发而成,为全球首款将传统图像传感器技术和仿生事件相机技术在同一像素内融合的芯片。

  ALPIX-P可以在传统图像传感器模式和仿生事件相机模式间快速切换。在图像模式下,ALPIX-P是一款最高帧率为120帧的全局曝光传感器,与现有的传统图像传感器完全一致,并与现有成熟的视觉系统完全兼容。

  在仿生事件相机模式下,ALPIX-P具有超高帧率,高有效信息占比,大动态范围的特点。

  目前该芯片已开始送样。也验证了“Hybrid Vision”技术在量产、成本、性能上具备落地可行性。

  基于ALPIX-P的设计,锐思智芯研发了两款ALPIX系列传感器芯片产品,分别是ALPIX-Titlis(简称ALPIX-T)融合式低功耗仿生视觉传感与ALPIX-Eiger(简称ALPIX-E)融合式高端仿生视觉传感器。

  两者的不同之处主要在于应用场景方面,ALPIX-T传感器芯片应用于各类对功耗敏感的视觉IoT应用,如智能门锁、智能安防等,在保持对场景连续感知的同时降低系统功耗。

  而ALPIX-E融合式高端仿生视觉传感器则主要应用于高端成像领域,如手机、安防等场景。在保证业内最高分辨率的同时,其像素大小达到行业内最小值。

  目前,锐思智芯已积累了一批alpha客户。未来,其芯片应用产品将会向手机等消费电子、汽车领域拓展。

  在团队核心优势方面,主要体现在锐思智芯对技术难点的突破及创始团队的技术积累。一方面,其技术难点在于:

  首先,仿生视学传感器的核心像素内设计(in-pixel)复杂度高,晶体管数量多。要将传统图像传感器与之融合,既需要拥有前者的设计经验,又需要有仿生视觉传感器的研发经验。

  其次,ALPIX是个系统级的设计,需具备较强的工程经验,这需要研发时间积累。

  此外,若把ALPIX做得体积更小,需要先进的工艺以及对其深入了解,目前团队与该类顶级代工厂有着十几年的长期合作。

  另一方面,从核心成员技术背景来看,锐思智芯CEO邓坚、CTO查颖云等核心成员均从事过各类高端视觉传感器研发工作,如高端图像传感器,TOF芯片,X ray,神经元信号探测芯片等。

  邓坚表示,团队对仿生事件相机的研究始于2014年,如今已积累七年研发经验。

  当时,团队参与仿生视觉传感器芯片产品化雏形项目的研发,该项目由瑞士创新基金支持,主要目标是设计一款用于植入盲人眼球的仿视网膜芯片,令盲人重新感知外界事物轮廓。

  基于该项目,团队接触到仿生视觉领域。后来团队又陆续开发了两款可商业化的动态视觉传感器芯片,基于原有的技术路线进行不断优化。

  由此,团队对于仿生事件视觉传感器技术路线研究得深入透彻。除此,核心创始人员均毕业于剑桥大学、苏黎世联邦理工(ETH)、浙江大学等名校,并具备多年在NXP、ARM、飞思卡尔、Intel、Magic Leap等企业工作经验。

  创立初期,核心团队成员仅有6人左右,如今团队规模扩至50人,其中研发人员占比达85%。

  2020年底,锐思智芯完成近亿元人民币Pre-A轮融资,老股东联想创投继续加注。返回搜狐,查看更多


  • 解决方案
  • 技术支持

TOP
关注我们
  • 电话:
    总机:010-8074 9982、80795548、80795794,
    分机:2101(售后)、2156(营销中心)、2133及2136(总师办)、2009(商务)、2092(测试)、2033(人力)、2028(综合办)
  • 手机:185 1390 7570(网站客服)、分机2150
  • 邮箱:hanming@zysy123.com
  • 地址:北京市回龙观龙城华美达酒店南侧
关联企业