面向未来智能驾驶的嵌入式视觉的探索与思考
2024-02-10 23:45:16软板装配

  感知系统包括视觉系统在内,未来随着从ADAS到无人驾驶的逐步过渡,对感知系统会有一个巨大的变化。一方面,之前ADAS更多关注点在解决误报率方面,而未来无人驾驶行业会更加关注漏检率。

  近日,在上海举办的2018高工智能汽车开发者大会上海站上,来自国内双目嵌入式视觉初创公司元橡科技CTO任杰表示,未来无人驾驶对安全性要求更高,不能漏报,一旦漏报就是一个很严重的交通事故。比如除了车、人等常见的一些障碍物,未来车辆感知系统必须检测到全类型的障碍物。

  传统的单目视觉,首先依赖于大量的样本,对于中国这样的复杂道路场景,就要采集更多有特色的样本,谁采集的数据更多就优势越大。同时,需要对图像有一个精准的识别,只有识别了以后才能判断这个物体大概离车有多远。

  因此,单目视觉系统如果不知道这是一个什么障碍物,就无法知道它离车有多远。所以,传统的单目视觉取决于识别图像的精准度。而对于双目视觉系统来说,不管认不认识这个物体,它的点云就在三维空间里,首先能够保证车辆安全,这是双目的最大优势之一。

  双目做ADAS不依赖样本库,测距直接通过简单的规则——将路面以上凸起的物体都可视为障碍物,整个算法是全白盒化的,不会存在识别不到的问题。而且如果出现问题,就可以直接找到原因,不会像单目深度学习算法是黑盒的逻辑。

  此外,传统的单目视觉最大瓶颈在于天气变化,尤其是雨雾及夜晚环境。而双目识别是一个全类型环境识别,以目前的主流自适应巡航ACC为例,双目视觉能够大大减少光照变化带来的影响。

  比如,车辆在过隧道的时候它的颜色、纹理发生了非常大的变化,可能从一辆白车变成黑车,对于摄像头跟踪来讲是一个很大的难度。双目视觉可以很大的程度上做弥补,因为在三维空间上这个点云始终存在的。甚至是一些相对环境恶劣的天气,由于双目能获取深度信息,在很大程度上可以克服此类情况。

  但此前,国内做双目立体视觉的公司并不多,之所以没有被大范围应用于无人驾驶,主要是受制于硬件条件的不成熟。

  在任杰看来,做立体相机的量产落地,几个关键的指标要达到,包括尺寸、功耗、成本、性能等。以元橡科技的产品为例,尺寸能做到目前世界最小的车载立体视觉相机。性能方面,100米测距范围保持误差5%以内,可完全达到883要求,同时做到功耗低于5W,延时小于3ms。

  双目的摄像头是一个天然融合的传感器,它将深度学习和图像学习糅合,使得后续的处理速度会非常快。目前,元橡科技使用FPGA的方式,将传感器深度图像生成的时间压缩到了毫秒级别,这在某种程度上预示着处理解析图像数据,得出结果几乎是实时的,给控制决策部分留下了非常充裕的时间。

  立体视觉的另外一个难点就是两个相机的一致性问题,就像天下没有两片相同的叶子,哪怕是工业流水线上产出的相机,也存在一定的差异性。

  因此,为了使得立体相机达到同步拍摄,系统的软件结构、运行机制都有必要进行软硬件调整,才可以做到统一性。双目跟单目最大的区别是,前者需要软硬件的联合优化,这也是为什么元橡科技选择要做软硬件一体的解决方案商。

  双目摄像头的方案,CMOS融合图像数据需要相匹配的ISP处理,现有的ISP方案都是针对单目的,不太适合做双目的处理,所以元橡科技从ISP这个硬骨头开始啃,争取在相机的每个处理单元做到最优。

  任杰透露,公司从去年已经在研发芯片,预计在今年第四季度可以对外发布自主研发的双目图像处理芯片。

  而在国际上,斯巴鲁1989年开始对立体摄像头(即双目摄像头)技术进行研究,并于1999年把该技术应用(命名为EyeSight)到量产车的ADAS系统之上。在新的第三代ADAS系统中,加入制动控制车速的功能成为了一个重要设计目标,以提升主动巡航控制的舒适性。

  后来随着毫米波雷达技术逐渐成熟,斯巴鲁通过融合立体摄像头数据和毫米波雷达数据提升了ADAS系统的工作稳定性及对极端天气的适应能力。

  目前EyeSight已发展到3.5代,但仅限于日本市场(别的市场为第三代)。第三代EyeSight功能包含PCB预防碰撞刹车系统、ACC主动车距定速控制管理系统、PCTM预防碰撞油门控制管理系统、LDW车道偏移警示系统、LSW车道偏摆警示系统、LVSA前车驶离警示系统这六大功能。

  2017年3月,欧洲Euro-NCAP(安全评鉴协会)发布了新一系列包扩奥迪、丰田、路虎等在内的车型的碰撞测试结果,其中路虎的发现车型获得了五星。获得五星的路虎车型,搭载的主动安全系统中,前向采用了双目摄像头的方案,而这个方案也成为了它能脱颖而出的关键。

  谈及大规模量产,元橡科技希望将来把产品做成一个标准件,然后批量给主机厂、无人驾驶公司使用,而不是忙不迭的做一个又一个的定制项目。同时,未来希望做全球顶级的双目视觉软硬件方案提供商。

  2017年,我们正真看到「智能驾驶」从概念向产品开始慢慢地进化,有更多的量产车搭载了不同程度的无人驾驶辅助功能。那么问题来了:2017年有哪些产品在这方面做到了领先水平? 我们的评判标准:使用者真实的体验是否足够突破、技术是否足够领先、产品是不是足够有话题性。 “年度最佳:奥迪A8首款L3无人驾驶量产车” 就像标题中所写,新一代奥迪A8是全球第一款号称实现L3级别无人驾驶功能的量产车,同时也是第一款搭载激光雷达传感器的量产车,它的突破性毋庸置疑。 新A8中控台上的那个「AudiAI」按键,承担着唤醒无人驾驶功能的「重任」,同时也颇有象征意义。在科技公司、新造车公司大举入侵自动驾驶领域的大背景下,它让人看到传统整车厂商的自我革

  2022 年刚拉开序幕,一家名为 MAXIEYE 的公司便发布了 NOM 领航辅助系统。 速度很快。 要知道,目前国内能够推出领航辅助的玩家少之又少,仅有蔚小理和长城汽车等几家在量产车上搭载了领航辅助系统,也就是大家常常听到的 NOP、NGP、NOA、NOH。 「NOM」的加入,让领航辅助这条赛道更加热闹。 而且,与蔚小理开发的系统仅供自家使用、长城汽车的 NOH 来自其关联无人驾驶公司毫末智行不同,MAXIEYE是作为一家中立的第三方供应商,希望将 NOM 提供给所有整车厂。 这会考验系统的功能实现、算法和成本等多个层面,是真正放到市场中厮杀的竞争。 那么,MAXIEYE 的 NOM 到底是什么,与市面上

  10月20日,斑马智行在云栖大会上发布AliOS智能驾驶系统内核,预计2022年面世,将是业内首个面向车企免费开放的内核。 大会期间,斑马智行宣布联合上汽乘用车首发洛神智能座舱系统,并首次搭载在名爵MG ONE和荣威全新RX5 MAX,新车同步发布。 斑马智行表示将持续在车载操作系统领域打“地基”,联合国内外顶尖高校、产业伙伴共同筹建新汽车云栖实验室,搭建汽车技术生态的产学研用协同创新平台。首批联合发起专家有核高基重大专项操作系统专家罗蕾教授、清华大学陈虹教授、中汽中心秦孔建等软件领域顶尖专家学者。

  系统内核,免费向车企开放 /

  新年开工第一天,智能驾驶领域的热火就迫不及待地重燃起来。 1 月 28 日,理想汽车 CEO 李想在企业内部发布全员信,提出在 2023 年底,推出不依赖高精地图的城市 NOA,该消息一出,立马成为各大汽车媒体的头条。 究其原因,理想此举刚好代表了过去一年行业最热的方向之一:「不依赖高精地图」和「城市 NOA」。 2022 年 4 月,正当业内「苦高精地图久矣」时,毫末智行提出「重感知、轻地图」的智能驾驶路线,以期通过最大化开发传感器的能力,强化车端感知,以摆脱对高精地图的依赖,这一思路大振人心,很快在业内流行开来,华为、小鹏等纷纷跟进,造就一波「轻高精地图」热潮。 而这也随之带动城市导航辅助驾驶取得突破性进展。

  未来一年的趋势秘密,都写在了 2022 八大关键词里 /

  4月2日,大疆车载在“中国电动汽车百人会论坛2023”上公布了新新一代智能驾驶解决方案,该方案以低至32TOPS的算力,7V/9V的纯视觉配置,通过“强视觉在线实时感知、无高精地图依赖、无激光雷达依赖”实现了包括城区记忆行车(32TOPS)/城区领航驾驶(80TOPS)在内的L2+智能辅助驾驶功能。同时,该纯视觉辅助驾驶系统也支持扩展毫米波雷达、超声波雷达、激光雷达、高精度地图等传感器,增强系统的安全冗余。 大疆车载新新一代智能驾驶解决方案结合了当前智能车的电子电气架构演进水平,以及中国市场对智能驾驶的真实需求;简洁高效的同时具有极高的性能上限、可靠性和可拓展性。 大疆车载新新一代智能驾驶解决方案支持低至32TOPS

  解决方案:低算力、纯视觉、可扩展 /

  近日,福瑞泰克智能系统有限公司宣布其乌镇工厂正式投入运营,该工厂启动运营是福瑞泰克应对汽车智能化发展的重要布局,不仅仅可以提升我们的量产能力,也将让我们为客户提供更快、更灵活、更及时的服务。 据了解,福瑞泰克乌镇工厂主要生产应用于 ADAS 以及无人驾驶系统上的先进汽车零部件,包括雷达传感器、摄像头传感器、域控制器等。乌镇工厂建筑面积共 3000 平方米,工厂拥有自主知识产权的全自动雷达装配和测试生产线 年下半年,工厂还计划建设一条全国领先的全自动化柔性组装生产线,生产福瑞泰克自主研发的第二代前视摄像头和中央域控制器。 工厂内的生产车间、进料检验室和电子料仓库均按照百万级洁净车间要求建设,并具有严格的温湿度控制

  技术 /

  CES Asia 2018在6月13日正式开展,今年的展会主要涵盖5G相互连通、人工智能(AI)、增强现实和虚拟现实和汽车技术等等,整体规模也比去年扩大了25%。其中最耀眼的“黑科技”不再是IT领域的专利,相反智能汽车所带来的辅助/无人驾驶则成为了新的亮点,至少在智能化方面已全面超越传统车展。 2018 CES Aisa:新车与有关技术 L4级无人驾驶成“关键词” 拜腾K-Byte概念轿车首发 如果再CES上仅看汽车的话,拜腾无疑是个关注度最高的“网红”,因为之前拜腾就以首款概念车上的49英寸大屏抢足了眼球,同时对传统汽车的思维和理念也进行了颠覆性。而在此次CES Asia展会上,拜腾在首款概念车还未产量前,又发布了

  中科创达与地平线宣布成立合资公司。据悉,该合资公司将由中科创达控股,聚焦智能驾驶赛道,并围绕地平线车规级AI芯片为主机厂及一级供应商等公司可以提供高质量的智能驾驶软件平台和算法服务,共同加速智能驾驶的规模化量产落地。 图片来自:中科创达 具体来看,新成立的合资公司将基于地平线征程系列车规级AI芯片,依托中科创达在操作系统、中间件等领域领先的产品和技术能力,以及在智能驾驶关键技术方面丰富的项目落地经验,助力主机厂及一级供应商打造开放的无人驾驶平台,并作为地平线的“授权软件服务商”为客户提供算法集成与优化、软件适配与开发等服务。 资料显示,中科创达是智能操作系统产品和技术提供商,可提供从操作系统/中间件开发、

  赛道 /

  MPS电机研究院 让电机更听话的秘密! 第一站:电机应用知识大考!跟帖赢好礼~

  电源小课堂 从12V电池及供电网络优化的角度分析电动汽车E/E架构的趋势

  2月5日消息,AMD线程撕裂者竖起了工作站、发烧桌面处理器的天花板,Intel至强虽然无力抗衡,但也不能放弃,只是实力所限,提升有点慢,下一 ...

  DevEco Studio 4.1带来多种调试能力,助力鸿蒙原生应用开发高效调试

  目前,HarmonyOS NEXT星河预览版已经正式面向开发者开放申请,面向鸿蒙原生应用及元服务开发者提供的集成开发环境——DevEco Studio也迎 ...

  英特尔 Thread Director 技术助力,Linux 用户运行 Windows 虚拟机性能提升 14%

  2 月 5 日消息,去年 10 月,微软发布了一份指南,鼓励 Windows 用户通过 WSL 尝试 Linux,这多少让人有些意外。而如果你是一位 ...

  不支持超线,新款英特尔 Arrow Lake-S 芯片样品现身测试数据库

  2 月 3 日消息,消息人士 InstLatX64 近日在 X 平台分享了一条来自英特尔测试机数据库的信息,称发现了一款不支持超线 ...

  智能家居是在物联网的影响之下物联化体现。智能家居通过物联网技术将家中的各种设备(如音视频设备、照明系统、窗帘控制、空调控制、安防系 ...

  下载有礼|是德科技电子书 《通过了解测试精度的基础知识, 提高良率并降低风险》,不做“差不多先生”

  你评论,我送礼!《玩转TI MSP430 Launchpad》TI社区与EEWORLD联合首发!

  关注 PI 最新 SCALE-iDriver IC产品系列 答题有好礼!

  站点相关:嵌入式处理器嵌入式操作系统开发相关FPGA/DSP总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科

Copyright © 2018 BOB电子(中国)官方网站 All Rights Reserved
网站地图 备案信息: 湘ICP备14017517