冲破三星 从事件相机说起 索尼的铜墙铁壁 (冲破三星从事什么行业)

文章编号:37897 资讯动态 2024-11-30 CIS 事件相机 锐思智芯

智能手机间的竞争已经变成了拍摄能力的竞争。

主要体现在两个方面,一是摄像头数量叠加,手机厂商自研图像处理芯片,甚至同传统镜头厂商合作; 二是CMOS 图像传感器(CIS)的市场增长,据 Yole Développement 报告显示,2020 年 CIS 应用领域手机占比高到 68%。

CMOS 图像传感器相当于机器的眼睛,将光信号转变为数字信号,供机器“观看”,是实现手机拍照功能的关键元器件,性能好坏直接影响摄影质量,其成本占据整个摄像头模组的 52%,同时也被广泛应用在安防、工业、汽车等领域。

冲破三星、索尼的铜墙铁壁,从事件相机说起

正因如此,在半导体领域,CIS 被视为细分领域的一块大蛋糕。据 Yole Développement 报告预测,到 2026 年,CIS 市场规模将达到 315 亿美元(约 2040.22 亿元人民币)。

尽管市场很大,但长期以来传统传感器市场基本被三星、索尼和豪威三家分食,初创企业难有机会冲破桎梏进入市场。不过难有机会不等于没有机会,视觉芯片技术仍在演进,机器视觉仍有难题未解。

近日,国内新锐企业锐思智芯发布了一款仿生视觉传感器芯片——ALPIX -Pilatus芯片(简称ALPIX-P),这一款芯片不仅与三星、索尼站在同一起跑线上,凭借其核心技术优势,未来很有可能打破三星、索尼等大厂在视觉传感领域的铜墙铁壁,为行业带来更多选择。

冲破三星、索尼的铜墙铁壁,从事件相机说起

锐思智芯 ALPIX -Pilatus融合仿生视觉传感器芯片

CIS 之后,巨头入局事件相机

一个月前,索尼半导体发布了两款全新的视觉传感器芯片,与传统 CIS 不同,这两款传感器芯片被称之为堆叠式事件监测视觉传感器(EVS, Event-based Vision Sensor)。后者仿照人眼视网膜的工作原理,每个像素都相当于一个视网膜细胞,独立工作,且只对变化敏感,也被称之为事件相机。

不仅仅是索尼,三星也开发了系列芯片,入局事件相机行业。

回顾图像传感器的发展,最初是以高像素、高制造难度的 CCD 器件为主流,日本公司扛大旗,直到 1995 年,几位华人留学生在硅谷创办了豪威,将传统的 CMOS 工艺用在图像传感器中,取代 CCD,就此打破日企垄断格局。

CMOS 最终得以取代 CCD 的原因众多,一方面 CMOS 虽然成像质量较 CCD 差,但功耗和成本降低,适合消费电子市场,另一方面,豪威切入苹果供应链,加速了 CMOS 对 CCD 的替代。

据市场调研机构 Strategy Analytics报告显示,豪威、索尼、三星在视觉传感器的市场占有率达80%以上。CMOS 技术保持传感器市场主旋律的同时,规模也在不断增长。

既然 CMOS 火爆至今,那么视觉传感器巨头们为何还要切入事件相机呢?

原因有二,一是 AI 与 CIS 集成是未来趋势,二是传统 CMOS 只适用于拍摄人眼观看静态图片,在机器视觉方面,则依然面临众多痛点

锐思智芯创始人兼 CEO 邓坚告诉雷锋网,传统机器视觉面临四大痛点:运动捕捉差、数据冗余大、功耗高、环境适应力差。

这主要是因为 CIS 本身的工作原理造成的。CIS 主要是对光电流进行时间上的积分来实现曝光,而从曝光到数模转化再到数据的传输耗时长,时间越长意味着能耗越高,同时图像的帧率也会降低。帧与帧之间的间隔时间长造成信息缺失,从而增加了机器对图像的判断难度。

同时,CIS 输出的是 8-12 bit 信息,数据传输量大、能耗高,读取慢,存储空间需求大且处理图像耗能高。

“CIS 也尝试解决这些痛点问题,但基于其通过快门控制所有像素在同一时间内进行积分曝光的工作原理,其帧率、数据量和动态范围三个参数难以平衡。” 邓坚解释道。例如在高动态范围的拍摄中,常常使用多重曝光算法,即融合多个不同曝光时间的帧图像而成高动态范围的图像,必然导致帧率下降,更多的数据运算和更大的系统延时,在要求短响应时间和捕捉快速变化的场景中无法适用。

冲破三星、索尼的铜墙铁壁,从事件相机说起

仿生视觉传感器与传统CIS传感器参数对比

基于不同的工作原理,事件相机则能过打破 CIS 在机器视觉上的限制。 邓坚表示,事件相机模仿人眼的工作原理,每个像素都像神经细胞一样独立工作,独立连续地感知光的变化,并将光的变化转换为数字脉冲信号,若光强无变化则不输出。

“总结起来,事件相机具有速度快、数据量少、功耗低和动态范围大的特点,与当下机器视觉面临的痛点一一对应。”邓坚说道。

国内唯一事件相机独立创企,核心技术领先索尼、三星

正是因为事件相机能够解决传统 CIS 无法解决的难题,三星、索尼等视觉传感器大厂纷纷入局仿人眼视网膜的机器视觉传感器。

据邓坚介绍,由于仿生视觉技术起源于瑞士,目前主要的技术团队主要集中在国外,包括法国的 Prophesee、瑞士的 insightness 和 inivation,其中瑞士的两家公司已经分别被索尼和三星收购,国内除了锐思智芯外,上海芯仑光电也涉足仿生视觉技术,不过目前芯仑光电已经被韦尔股份收购。

“在事件相机领域,锐思智芯是目前国内唯一一家独立的创企。”邓坚说道。

虽然是在国内创业,但与其他几个事件相机公司类似,锐思智芯核心团队来自瑞士,核心成员曾从事过各类高端传感器研发,如高端图像传感器、ToF、X ray、神经元信号探测芯片等。锐思智芯成立至今不到3年时间,不过其核心团队最早于 2014 年参加瑞士国家基金会项目,设计一款植入盲人眼球的仿视网膜芯片,就已经进入仿生视觉领域。

融资方面,今年初,锐思智芯完成近亿元 Per-A 轮融资,由海康威视和耀途资本联合领投,讯飞创投、舜宇中央研究院、全志科技、追远创投、同创伟业跟投,老股东联想创投、中科创星继续加注。

值得一提的是,锐思智芯拥有独有的核心技术,从一开始就同索尼、三星等形成差异化格局。

“为何发展了 6 年多的事件相机,至今依然活跃在工业测振领域,而在消费电子领域不见其身影?”邓坚说:“市面上现有的事件相机技术理念和方式还是基于二十年前的技术,导致最终设计制造的芯片功能受限,适用范围并不广泛。”

事实上,在真实拍摄场景中,机器视觉既需要事件信号做快速的预判,也需要图像信号做精细的判断或重建,因此既需要事件相机捕捉动态信息,也需要传统 CIS 呈现细节丰富的静态信息。

“现有的事件相机,由于其底层设计还是沿用比较传统的方式,存在一些问题,难以兼容输出图像信号,并且像素尺寸大,噪声大。”邓坚说。

正因如此,锐思智芯将仿生事件相机功能和 CIS 功能在像素层面融合,用一颗摄像头代替两颗摄像头,同一个像素中放置两套电路,一套用于生成事件信号,一套用于输出图像信号。这一技术,被锐思智芯命名为 Hybrid Vision 融合式仿生视觉技术。

冲破三星、索尼的铜墙铁壁,从事件相机说起

Hybrid Vision 融合式仿生视觉技术原理

不过由于一个像素内电路数量是传统 CIS 的十倍,设计难度也大大增加,同时也可能导致设计出的芯片像素面积大。

为解决这一问题,锐思智芯采用先进的 3D 堆叠工艺,将像素感光部分和图像信号输出电路放置上层晶圆,事件信号输出电路放置下层晶圆,然后通过铜互连技术将上下层晶圆的电路在每个像素上对应连接,既能大幅度减小像素尺寸,又能隔离不同电路之间的信号串扰,降低噪声。

进军消费电子,预计明年年中出货

基于独有的核心技术,锐思智芯设计出 ALPIX 系列芯片产品,目前ALPIX-P正式发布。

据锐思智芯介绍,最新公布的 ALPIX-P,可以在传统图像传感器模式和仿生事件相机模式间快速切换。在图像模式下,ALPIX-P是一款最高帧率为120帧的全局曝光传感器,与现有的传统图像传感器完全一致,与现有成熟的视觉系统完全兼容。在仿生事件相机模式下,ALPIX-P具有超高帧率,高有效信息占比,大动态范围的特点。预计到明年,将在VIoT领域落地。

不过低功耗的 IoT 领域并不是锐思智芯的全部市场目标,其计划于今年年底发布的 ALPIX-Eiger,就适用于超高画质拍摄的小型相机设备,如手机、安防摄像头等。锐思智芯称,该款芯片将进一步缩小像素尺寸,提升分辨率。

“事实上,现阶段我们想的不是如何去颠覆视觉传感器行业,只是想尽量满足市场需求空白,作为初创公司,我们会脚踏实地,早期先聚焦于 VIoT 领域,未来将扩展至汽车和消费电子领域。”邓坚说道。

为扫地机器人再加两个传感器

视觉感知堪比人眼!这款突破性传感器模仿人类视网膜,有望带来 AI 重大进展

血氧传感器一夜成手表新宠,含金量到底有多高?

原创文章,未经授权禁止转载。详情见 转载须知 。


本文地址: https://www.gpxz.com/article/d948e31eb84c59c0dbdd.html
全局中部横幅
全局中部横幅
忠仕网站商务通在线客服系统

网站商务通在线客服系统是一款国内技术领先、最专业、最权威的企业在线客服系统,网站访客只需点击网页中的对话图标或链接,无需安装或者下载任何软件,就能直接和网站客服人员进行即时交流。是企业进行在线咨询、在线教育、在线客服、在线寻医的有力工具。

u盘启动盘制作工具

电脑店u盘启动盘制作工具,随时随地自制引导盘和光驱,随心所欲更新系统,电脑店u盘pe用户无需经验就可以自己用u盘重装系统,方便快捷,一键安装

广东俊朗

广东俊朗是实力雄厚的卫浴厂家,专注于龙头,卫浴,马桶,浴室柜等产品生产与销售,拥有先进的加工设备,质量有保证,价格合理,型号规格全,品牌产品,节能环保,健康舒适,放心选择.合作热线13533056788.

清洁球生产厂家

临沂蜜源日用品有限公司专注的清洁球机器生产厂家,厂家主要生产各种钢丝球,清洁球机器,高速拉丝机,清洁球设备等产品,电话:15854999196.

广西桂天能源

广西桂天能源有限公司(0771-4177177)总部位于广西首府绿城南宁,在广西各主要地市已建、在建液化石油气站30余家;加油站、LNG加气站及工业气体站20余家;自主研发的聚羧酸母液为核心技术的环保建材公司1家。公司秉承“勤奋·感恩·合作”的企业核心价值观,在液化石油气板块居广西行业领先地位。通过“互联网+”进一步服务终端用户,为用户提供优质安全的用气体验,百站千店服务千家万户。

域名购买

感悟成长网(gwczedu.com)是太友帮旗下网站,专业提供域名注册和域名申请服务,☏:15928132840(微信同号),详细包括:详细包括:域名注册、注册域名、域名购买、购买域名等网站申请服务,是您申请域名可信赖服务商。

合肥模块砖

合肥市成功新型节能建材厂是集生产制造、市场推广为一体的综合性企业。公司主要生产经营:环保型模块砖、预制钢筋混凝土装配式组合型检查井、预制水泥盖板等城建配套产品本公司全体员工将倍加努力,努力满足广大客户的需求。同时欢迎用户及设计单位前来订购。

刺客信条:大革命

刺客信条:大革命游戏专题;提供刺客信条:大革命中文版下载,刺客信条:大革命攻略大全,刺客信条:大革命汉化补丁,刺客信条:大革命视频解说,攻略视频,修改器,汉化下载,完美存档,MOD,配置,教学,截图,壁纸等资料。更多《刺客信条:大革命》相关内容尽在游侠网。

阳鑫租赁

阳鑫租赁(域名yaoyurc.com)

安全光栅

我司是一家致力于安全光栅研发、制造,以安全防护,保障工人安全为己任的品牌公司。我们不仅能够提供可靠的安全防护,还可以让工作环境更加智能化,我们的产品还具有人性化的设计,方便快捷的操作界面,让您的工作更加轻松便捷。为您的团队提供一个更加智能、高效的工作环境!

全局底部横幅