9月14日，由盖世汽车主办的2021中国商用车无人驾驶大会隆重召开。本次峰会主要聚焦商用车无人驾驶行业发展的新趋势，一同探讨从感知、决策到执行层面的核心技术，以及港口、矿区、干线物流、园区等不同终端场景的产业化落地方案。下面是虹软科技股份有限公司视觉车载事业群副总经理陈锋在此次大会上的发言。

  虹软公司是一家算法公司，我们自1994年成立以来一直都在做视觉感知算法，只做一件事情。

  视觉感知是无人驾驶的基础，离开感知就等于你看不见，是一个盲人，什么样的事情也做不了。感知方面有毫米波雷达，有激光雷达，有其他的传感器，包括夜视红外，每个级别从L0到L5不能离开视觉传感器。我们把视觉分为舱内和舱外，在2035年到来之前，十几年以内可能在车上面还是有驾驶员，有驾驶员就需要做驾驶员状态监控，需要DMS，需要很多让他工作起来更安全更快捷的方法。

  虹软公司是1994年在美国成立的，在2017年把总部搬到中国以后，2019年在上海科创板上市，是首家视觉感知的公司（科创板上市），也是25家第一批科创板上市的公司之一。我们做的视觉感知都是嵌入在客户的设备之中，比如说最早的打印机、电脑、数字摄像机、功能手机、智能手机等等，装载虹软算法的终端设备已超越100亿台。

  这是我们视觉感知的每个方面，从传统基础摄影技术到图象增强，再到智能感知。我们进入汽车行业并不太久，但在进入到汽车行业以后，我们的定点的项目已超越了50个车型，覆盖了乘用车领域国内主要的主机厂，还包括新能源汽车。

  我们的视觉感知绝大多数都是全栈式的，从舱内到舱外，DMS、OMS、Authenticate、人机互动、ADAS、AVM/MOD、AR导航、HUD、舱内娱乐系统。为什么有舱内娱乐系统？主要在乘用车，但是商用车也可能发展起来，为什么？刚才嘉宾讲商用车司机疲劳是常态，长期驾驶是他工作的一部分，有什么办法不光能检测到他的疲劳，而且减轻他的疲劳，舒缓他的疲劳，在舱内智能技术是不是能起到帮助的作用呢？咱们也可以一起来探讨。

  在商用车方面，我们的算法主要是舱内的DMS以及人机交互、OMS、舱外ADAS、AVM相关的产品，在商用车领域除了算法授权之外，我们也有软硬一体解决办法，有硬件产品，包括了一个摄像头的AI Camera，这个摄像头可以只做DMS，也可以只做开门提醒，我们也有2-4路中低端硬件解决方案AI BOX，4路摄像头可以做AVM，也能组合做其他功能，包括4-8路高端解决方案AI BOX。

  AI Camera应用最多是舱内感知DMS。2-4路的，比如说BSD，前左右BSD加上DMS，还有别的的组合，我们不仅有硬件，算法也是一起提供的。这是AVM，也可以把4路全部用做AVM，4-8路就更多了，这里有部标机形态，也可以做其他非部标的形态，这里可以有不同组合。

  下面主要用视频跟大家伙儿一起来分享一下我们实际做的产品情况，首先是DMS。这里面包括人脸识别，可以识别驾驶员是谁，包括疲劳、分心、抽烟、打电话以及手势控制等。（VCR内容）

  疲劳除了简单的眼部以及脸部表情识别之外，我们加了很多其他功能来做疲劳检测，比如说视线方向和状态，可能会显示出你该不会是疲劳状态。比如你在疲劳前，真正要打磕睡以前，很多人会揉揉眼睛，也有一定可能会揉揉脸，也有一定可能会扭扭脖子做做其他的动作，我们就可以把早期疲劳状态提前检测出来。

  昨天讨论的时候也提到，目前DMS设备等到报警的时候已经太晚了，已经太疲劳了，没有用，我们大家可以有其他办法让这个疲劳检测更精准，且能预判，让决策和执行机构依据感知结果进行决策和控制。还有生理特征，通过同样一个DMS摄像头检测到血流的变化得到心率情况，如果心率变慢也有一定的可能是开始进入疲劳状态，这样各种组合真正知道驾驶员身体和生理状态是不是疲劳。

  还有安全带检测，各个视角的摄像头，以及驾驶员玩手机、看手机、发微信等可以非常鲁棒性的知道，真正的检测到你这个行为的状态。还可以用三维视觉TOF来检测到这个手是否是真正在方向盘上面。

  OMS主要在客运里面用的比较多，在共享汽车后排遗留物，乘客的流量，比如说比亚迪这样的客车公司，把人流统计应用在调度系统，根据车上乘客多少的情况，可以实时进行监控，调度各路公交车。

  儿童检测，在欧洲和美国都开始有立法，就是对车上面的儿童安全进行保护。有没有儿童，有没有儿童座椅，在不在座椅上面，大人走了是不是儿童遗留在上面，这些都有法规要求，在2024年以后可能所有的车都要搭载这个功能，这些都是能够最终靠视觉来感知的。

  身份认证，简单来说能够最终靠手机进行注册，上车以后通过同一个DMS摄像头，就能够直接进行人脸识别驾驶员验证。

  在互动方面，现在的技术很多，对于驾驶员来讲，特别是卡车，大的车辆驾驶员来讲，有的时候做一个手势可能更便捷更安全，所以我们是通过种种手势进行舱内操作，比如说接电话，切歌等等都能够最终靠手势进行控制。

  视线唤醒各种屏幕，现在车上各种屏幕很大，包括前面讲的EMS，把侧视镜子用摄像头替代，用视线交互来控制何时亮，还有通过控制器来交互，这也是视线唤醒的一种应用。

  ADAS不用多讲，大家都很熟悉，我们有几乎所有功能的ADAS，针对车辆、车道线、行人、交通标志、地面交通标志、三维汽车模型、三阶曲线拟合等等都做了很多工作，包括红绿灯。

  AVM，这个现在在商用车上面是一个必备的功能。因我们做手机的全景拍摄很多年，所以对于拼接、去畸变、去鬼影等技术已有非常多的积累，所以我们用在车辆上面能轻松实现很快的转化。

  （PPT内容）这是加了一个透明底盘，就是说把这些图像做处理以后，底盘下面情况也能够正常的看到。这是加了倒车指引线以及行人识别与障碍物识别，这些都是有机整合在同一个摄像头一套系统里面。

  讲到盲区，这是在商用车里面很重要的一个技术，确确实实商用车盲区非常大，特别是大型卡车和客车，司机是真的看不见，那么怎么帮他们避免事故的发生，也是我们技术很看重的部分。

  每一辆车盲区不一样，它要安设的摄像头个数和位置都不一样，对我们视觉感知技术也是有不同的要求，我们的算法能适应不同车辆、位置和环境，能做到最大限度减少盲区危险。

  同时也可以在广角鱼眼摄像头上面直接做障碍物和行人车辆非机动车的检测，复用同一颗摄像头，不要增加另外一个设备，在司机看得到的同时能提醒你有没有危险，有没有行人，有无另外的的障碍物。

  我们有可行驶区域，虽然检测到有行人，但是在人行道上不可能被你撞到，所以这样的一种情况下就没有必要对你进行提醒。

  还有一个非常好用的功能就是开门提醒，我们用AVM摄像头或者其他摄像头可以跟门锁控制联动在一起，这也是在中国道路上常常会出现的事故。

  AR HUD，这个量产现在也慢慢变得多了，在商用车上以后可能也会用，因为确实能够让司机专注在前方道路上不需要向另外的地方去看。

  最后讲讲车内娱乐系统，可以在车上面做手机可以做的事情，可以美颜，可以虚化背景，可以做各种各样的AI的事情，乘用车上这也是为吸引年轻一代的消费者，而在商用车上在休息的时候是否也可以做一些直播或者加一些美颜等等，这也是有可能的。

  虹软二十多年一直在做一件事情视觉感知算法，我们的优势，首先是算法优势，我们是一站式全解决，从基础的图像增强、图像处理到图像分析到智能分析都有。另外就是平台优势，我们做的平台很多，不管是高通的，TI的和其他平台都有明确的目的性优化算法。此外是服务的优势，装载我们的设备超过100亿台，我们有专业的服务团队可以就地在车厂帮助你们进行落地。

  我们的算法落地就是覆盖所有影像视觉基础技术，在AI、AR/VR上面，还有三维立体建模等等都是非常成熟的方案。

  对于算法，比如说ADAS算法，这是一个视频前方测试，前方静止车辆或者静止行人的时候，我们跟市场上比较优秀的算法比较，我们的算法跟他们相比不相上下，有些时候有一些优势。对于静态行人是相同，如果从80米开始，前方有一个静态行人，何时开始检测到这个行人，检测到距离精确度也有比较多的测试，我们的算法还是有不少优势的。

  平台优势有主流平台，高通就不用多讲了，我们是战略合作伙伴，每次高通新的芯片发布的时候，基本会放一段虹软算法展示他们的效果，在其他的NXP、TI、Ambarella、MTK等等上面都有很好的落地案例。

  虹软从算法到平台二十多年的耕耘，二十多年的优化落地的能力。我们大家都认为，对于客户来讲，最关键的就是要成就他们，不光有算法，还要落地，对我们产品来说最重要的是算法和工程，我们常讲的优势就是三个P：Price、Performance、Power Consumption。在各种不同环境下，在暗光、强光各种情况下都有很好的表现，我们在多年手机上面芯片上面深度优化的积淀对资源的利用非常地高。比如说在现有硬件上加功能，比如你对自己的DMS不满意，但是你现在只有有限的资源，能不能用我们的DMS来取代，让你做的更好更精确，比如只给一个DSP或者一个CPU有限算力的情况下，我们大家可以帮助你做到最优，做到最好。

  特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。

  还要争做帕梅?全新Panamera可线万权益 长安启源双十二购车盛典提前享

  三星Galaxy S24 Ultra的S Pen信息曝光 型号EJ-PS928

  妈妈问女儿一亿元和清华大学录取通知书选哪个，“选了钱还是能学习呀”，网友：格局打开了新脑子就是好使

  爸爸和女儿谈心下辈子想做什么？女儿：下辈子还想做你的宝宝。爸爸：下辈子我想做一条狗。

  爸爸在干活女儿突然走过去跟爸爸贴贴，爸爸直接被拿捏的死死地，这种幸福无可替代。

  赛后战报丨2023电竞上海大师赛英雄联盟项目赛报【上海EDG合创汽车 VS Gen.G】