
作者:电子创新网张国斌
目前,汽车智能领域最大的挑战就是多传感器融合以及由此带来的海量数据处理以及算力不足的挑战--越高级的智驾就需要越多的传感器,越多的传感器带来更多的数据,由此需要更大的算力处理器,由此带来了功耗、续航以及数据处理延迟等问题,一些车厂通过提升电池容量,减少算力处理器功耗来试图解决海量数据处理问题,但效果差强人意,那有没有办法在源头解决问题?就是从传感器端解决海量数据处理问题?有!
去年8月,老张报道了上海叠铖光电超宽光谱图像传感器技术颠覆智驾的新技术,详见《重磅!本土新创公司超宽光谱图像传感器破解自动驾驶世界级难题!》,近日,好消息传来,这颗由叠铖光电与利扬芯片联合打造的超宽光谱叠层图像传感芯片成功点亮了!颠覆智驾由此开始!
叠铖光电创始人王平博士在点亮仪式上说:“这是一个意义非凡的时刻,标志着全球首颗真正为无人驾驶应用设计的传感器芯片正式亮相,我把这款芯片命名为’TerraSight’,呼应全天候全地形应用场景,也传递芯片对复杂环境的感知能力。”
据他介绍该芯片性能指标全球领先,其动态范围达到了惊人的240dB!灵敏度更是达到了0.0000001LUX!“几乎就是无光环境下可以使用!穿透性比普通视觉芯片距离远50倍,它将给智驾带来革命性的颠覆!”王博士激动地表示。“现在的智驾是弱感知强算力,我们搞的是强感知弱算力,大大降低对算力的消耗!此外,在智驾里,物体和背景在普通视觉里有一定概率区分错误,我们传感器通过温度等温线可以把物体边缘显示出来,物体和背景就不会区分错误了,这样按温度等温线显示物体边缘智驾算法的识别率和召回率都大幅度提升,解决了感知的核心困难。”
据他介绍,叠铖光电超宽光谱图像传感器解决了目前自动驾驶领域视觉传感器遇到的所有挑战,并利用红外等多光谱成像技术,完美实现了对在于雨、雾、烟、霾、雪、尘等极端天气以及炫光逆光暗光等恶劣环境的图像感知,而且,只需要30TOPS的算力就可以实现对数据的处理和融合感知!
“在传感器发展的横轴上,从单元探测器到线列探测器、再到面阵探测器、再到叠层立体探测器成为不可逆的发展方向。我们的超宽光谱图像传感器成像波段覆盖范围可达其他可见光摄像头成像波段的12倍以上,并由此带来了革命性的视觉感知能力,可极大地提升各种复杂道路、天气、光照情况下的自动驾驶感知可靠性。”他指出,“多年来,世界范围内的科学家和工程师们投入巨大的力量发明、发展高性能激光雷达、摄像头、红外等各光谱的传感器,并通过算法尝试将各光谱传感器「融合」以应用在L3以上的自动驾驶中。然而,基于各独立传感器的「融合」(含前融合、后融合)带来固有的物理与数学上的矛盾,导致L3以上的自动驾驶目前无法在所有场景和所有车速情况下实现。”
他表示叠铖光电研发独有知识产权的超宽光谱(可见光至远红外)叠层图像传感器,为所有场景和所有车速情况下的自动驾驶提供类似摄像头一样的主传感器。这款多光谱图像传感器在自动驾驶场景的雨天、雾/霾天、太阳逆光、车灯炫光、无光/弱光等经典场景下的成像能力表现优异,超越现有的主流车载摄像头,可极大地提升车辆辅助/自动驾驶系统的全天候安全性和适应性。并且同时带来了视觉感知识别率的提升和对算力资源需求的下降,是当前最适合辅助/自动驾驶需求的视觉传感器。
这是一段叠铖光电超宽光谱图像传感器应用视频!震撼吧!在完全没有视觉图像的烟雾中,超宽光谱图像传感器可以清晰地提供车辆信息!
据王平博士介绍叠铖光电全天候超宽光谱图像传感器是解决自动驾驶到无人驾驶的革命性创新解决方案,一经问世便得到业内广泛关注,目前已经在环境极其恶劣的矿场应用,在视觉传感器无法感知的环境下,下面视频中叠铖光电全天候超宽光谱图像传感器能完全感知矿卡。
此外,基于对象的光谱特征还可以对图像的材质进行分析,如上图中,可以分析出两人抬的是玻璃!(上图右)
上海叠铖光电成立于2021年10月,叠铖致力于用核心技术提升各行业的智慧化感知水平,推动社会进步,并持续不断地为更多的客户创造更大的价值。传感器的发展遵循更可靠、更高效的基本原则。
在此次芯片点亮仪式上,利扬芯片总经理张亦锋表示利扬芯片自成立以来一直专注于集成电路测试领域,已经积累了多项自主核心技术,测试工艺涵盖3nm、5nm、7nm、8nm、16nm等先进制程,目前公司制定了以“独立第三方晶圆测试、芯片成品测试等技术服务”为主体,以“晶圆激光开槽、隐切、减薄等技术服务”为左翼,以“无人驾驶的全天候超宽光谱叠层图像传感芯片等技术服务”为右翼,打造“一体两翼”的战略布局,未来利扬芯片将聚焦AI、高算力芯片及车规级芯片测试领域,持续加大研发投入,提升技术水平和服务能力。
去年,利扬芯片全资子公司光瞳芯与叠铖光电已经签署了合作协议,光瞳芯独家为叠铖光电提供超宽光谱叠层图像传感芯片的晶圆异质叠层、测试等工艺技术服务。
王平博士表示和光瞳芯合作非常愉快,光瞳芯的服务和技术给他留下了深刻的印象!
这次,叠铖TerraSight成功点亮正是基于这个合作,利扬芯片全资子公司光瞳芯独家为叠铖TerraSight提供晶圆异质叠层及量产化测试等服务。该芯片将首先在大型卡车上实现无人驾驶应用,第一台样车预计7月份开始投入使用,同时也接受无人驾驶方案公司、车厂样品预定。
用中国力量破解世界智驾难题!就从叠铖TerraSight开始!