广告

ADAS和DMS可以协同工作吗?

2021-02-09 17:08:47 Junko Yoshida 阅读:
ADAS和DMS可以协同工作吗?
汽车制造商总是将一些花哨的东西吹嘘为高级驾驶辅助系统(ADAS)的安全功能,希望驾驶员使用这些功能。但是,过分依赖自动驾驶会导致不安全的行为,而驾驶员监控系统(DMS)恰好处于这种危机四伏的人机关系之间。迫在眉睫的问题是,DMS是否可以调解这种陷入困境的关系。

驾驶员监控系统(DMS)技术长期以来一直被束之高阁,近来在汽车安全性讨论中重新引起了人们的关注。Qc6ednc

人们越来越清楚地认识到DMS可以提高汽车安全性,这推动了新法规的制定,提升了新型汽车的安全等级。欧洲议会已更新了其通用安全法规(GSR),确定了要求安装DMS的车辆类型,欧盟新车安全评鉴协会(NCAP)也正在完善其DMS测试规程。NCAP的五星碰撞评级计划推迟了两年,将于2024年开始测试。Qc6ednc

然而,这还不够。Qc6ednc

汽车行业面临一个严峻的事实,就是人们驾驶半自动化汽车的时间越长,就越容易疏忽大意。Qc6ednc

确实,汽车制造商总是将一些花哨的东西吹嘘为高级驾驶辅助系统(ADAS)的安全功能,希望驾驶员使用这些功能。但是,过分依赖自动驾驶会导致不安全的行为,而驾驶员监控系统(DMS)恰好处于这种危机四伏的人机关系之间。Qc6ednc

迫在眉睫的问题是,DMS是否可以调解这种陷入困境的关系。Qc6ednc

Qc6ednc

图1:麻省理工学院AgeLab的研究科学家Bryan Reimer。Qc6ednc

笔记最近采访了麻省理工学院AgeLab的研究科学家Bryan Reimer(图1),他重申了长期以来一直坚持的观点:“DMS数据需要与主动安全系统融合在一起。”Reimer是美国公路安全保险协会(IIHS)的一个研究项目的架构师,这项研究显示了在1级和2级自动驾驶汽车中实施半自动化所产生的不利影响。Qc6ednc

Reimer指出,他们的目标是同时利用自动化及人类的优势,以实现最高的安全性(图2)。为了确保人车联合系统比纯人工驾驶系统更好,需要考虑利用强大的数据来支持。Qc6ednc

Qc6ednc

图2:将自动化和人类的优势结合起来实现最好的安全性。(图片来源:MIT AgeLab)Qc6ednc

Semicast Research首席分析师Colin Barnden也强调:“必须将ADAS和DMS结合起来。”他指出,DMS检测到的驾驶员状态需要转化为ADAS动作,如制动和转向。Qc6ednc

Qc6ednc

图3:Seeing Machines公司人为因素和售后解决方案高级副总裁Mike Lenné。Qc6ednc

Seeing Machines公司人为因素和售后解决方案高级副总裁Mike Lenné(图3)承认:“将内部传感和外部传感结合起来可以提高安全性。”他列出了将ADAS和DMS结合起来的两个好处:切实了解驾驶中存在的安全风险,确保检测到人的真实状态;利用DMS为ADAS功能设置阈值。例如,虽然驾驶员将手放在方向盘上驾驶汽车,但实际上他是不是昏昏欲睡呢?Qc6ednc

Lenné说:“根据各种驾驶场景/环境来调节DMS功能,这是一个项持久的挑战。例如,如何设定城市驾驶和乡村驾驶的分心指标?”Qc6ednc

Lenné认为,除此之外,汽车制造商要“大胆地让人机界面(HMI)/车辆根据不同的风险严重程度进行响应,即由安全风险的严重程度来决定HMI和车辆的响应” 。Qc6ednc

Qc6ednc

图4:欧洲NCAP技术主管Richard Schram。Qc6ednc

基础版DMS

我们不应操之过急。在由Affectiva主办的“驾驶员监控之外的高级安全性”网络活动中,欧洲NCAP技术主管Richard Schram(图4)介绍,欧洲NCAP采取了一种非常快速务实的方法。他强调,欧洲NCAP希望先在每辆车上安装DMS基础版本,然后遵循其技术路线图来发展。“我们永远无法得到完美的DMS系统。”Qc6ednc

这个基础系统,是否就是只有摄像头的视觉DMS呢?欧洲NCAP正在开发的DMS测试规程,重点就放在视觉系统上。Smart Eye首席执行官Martin Krantz打趣道:“特斯拉使用的方向盘扭矩传感器,虽然有时也被认为是DMS……但它们已经过时了。”Qc6ednc

Qc6ednc

图5:Jungo Connectivity首席执行官Ophir Herbst。Qc6ednc

Jungo Connectivity首席执行官Ophir Herbst(图5)在访谈中承认:“驾驶员监控系统和乘客监控系统(OMS)技术都采用了2D摄像头……确实有一些公司与我们合作(或使用我们的产品)来测量驾驶员的“认知能力”或“精神状态”。OEM厂商也在探索其他一些传感器,但他们意识到摄像头的各种功能都提供了最大的投资回报率。成本是必须考虑的事。”Qc6ednc

最近更名为Cipia的Eyesight Technologies则坚持“视觉方法是驾驶员监控的主要方法”。Qc6ednc

Qc6ednc

图6:Cipia公司产品副总裁Tal Krzypow。Qc6ednc

该公司产品副总裁Tal Krzypow(图6)在采访中说,视觉方法“能检测到眼睛的闭合与凝视以及面部表情(还有其他功能),这些都是驾驶员困倦和注意力分散最直接的表现。”Qc6ednc

他补充道:“尤其是注意力分散,是造成事故的主要原因之一,没有其他更好的方法可以跟踪驾驶员的视觉专注力了。”Qc6ednc

Krzypow并不反对使用其他传感器,例如用于监测呼吸的雷达,但他强调说:“目前的市场很大程度是由法规要求推动的,只有视觉方法才能最大限度地满足法规要求。”Qc6ednc

那么,下一代DMS传感器发展如何呢?Qc6ednc

尽管视觉DMS是许多OEM厂商的优选方案,但DMS开发人员不会停止开发新传感器,以便能进行更多检测。Qc6ednc

Qc6ednc

图7:Smart Eye首席执行官Martin Krantz。Qc6ednc

Smart Eye首席执行官Krantz(图7)描绘了一幅更广阔的画卷。“在2020年国际消费电子展(CES)上,我们展示了一款雷达呼吸探测器。”Krantz说,“许多DMS技术供应商都在研究乘客监控解决方案,我们也在开发全车舱感知方案,采用一到两个广角摄像头跟踪监测整个车舱,测量乘客身体姿势、儿童是否在后座、安全带是否系好等。”他补充说:“我们还提取所有乘客的面部表情,并将其与基本情绪对应。这种方法也可以用来识别车中的每个人。”Krantz认为,未来汽车内部将由“多模态传感器套件”进行监控。Smart Eye计划“持续开发软件,使其能够适应多种形式的传感器。”Qc6ednc

一些一级供应商(如Valeo)据报道正在探索可以检测遗留在车内的“生命体”(婴儿、小狗等)的雷达技术。Qc6ednc

飞行时间(ToF)传感器也有可能用于DMS。2020年初,ADI与Jungo宣布进行合作。当被问及为什么要合作时,Jungo首席执行官Herbst解释说,ToF传感器可提高面部识别、手势以及座位占用/姿势等算法的准确性,而且,在某些情况下,ToF传感器还可以提供其他功能,例如检测手是否离开方向盘。他指出,ToF传感器将在“未来一年内”用于DMS系统。Qc6ednc

但是,也有人对此提出疑问:在DMS中添加传感方法就能解决诸如检测驾驶员困倦之类的棘手问题?Seeing Machines的Lenné认为,困倦是最难检测的一种状态,“我们研究了大脑活动、心律活动和呼吸。”他们使用的一些生理传感器是由澳大利亚和英国的学术机构开发和设计的。他说:“我们发现,其他传感器都会产生很大的噪声,导致心率或呼吸速率变化的原因多达101种。”Qc6ednc

DMS的强制性要求正在逐步实施,Seeing Machines重申:“眼睛能看见,而且眼睛不说谎。” Lenné强调了他们通过广泛研究得出的结论:“如果你真的想知道一个人的注意力和认知状态,就去研究他们的眼睛和面部表情(图8)。”Qc6ednc

Qc6ednc

图8:检测驾驶员状态需要考虑多种因素。(资料来源:IEEE Pervasive Computing)Qc6ednc

欧洲NCAP测什么,如何测?Qc6ednc

Smart Eye公司的Krantz指出,DMS测试的首要任务是将系统安装在汽车中进行测试,许多在测试平台上正常的系统在实际的恶劣驾驶环境下却无法工作。”Qc6ednc

Qc6ednc

图9:Semicast公司主分析师Colin Barnden。Qc6ednc

Semicast公司主分析师Barnden(图9)指出,现实中的许多情况往往让DMS技术无所适从,比如阳光直射和路灯频闪,甚至驾驶员戴着口罩和太阳镜也会让DMS系统困扰。Qc6ednc

那么DMS必须具备哪些功能呢?许多供应商拒绝透露详细信息,只是提及他们参与了欧洲NCAP的测试开发工作。但Smart Eye的首席执行官强调,基本信号(例如头部姿势、眼睑张开、视线方向等)的质量很重要。Qc6ednc

“基本信号的准确性和质量都很重要。如果这些信号不够完整,就无法在上层创建告警应用。告警需要谨慎处理,确保低误报率。”Qc6ednc

Krantz补充道:“瞥一眼仪表盘与微睡眠是不同的,不能搞混了。”Qc6ednc

Krantz称Euro NCAP的测试规程正在制定中,“我们有信心提供先进的标准,不会遗漏对DMS系统最重要功能的测量。”Qc6ednc

Jungo的首席执行官Herbst列出了可能的DMS功能需求:Qc6ednc

  • 通过头部姿势识别注意力分散,如瞥一眼手机、调节信息娱乐系统
  • 识别微睡眠和其他睡眠状态
  • 通过多种信号(眼睛、哈欠、脑电图、方向盘)识别长时间犯困
  • 各种光照条件(白天、夜晚、阳光直射)
  • 各种配饰(眼镜、太阳镜、帽子、口罩)

最后,OEM厂商当然期望符合NCAP要求的系统成本较低,Herbst说:“DMS可以在现有的计算系统(如信息娱乐系统或仪表盘)上运行。”汽车制造商还要考虑提供其他功能,如软件升级。此外,一级供应商情有独钟的是最适合他们所用芯片组的解决方案。监管机构不会规定采用什么技术,他们只专注于使用和极端情况。”Qc6ednc

有没有会犯困的假人呢?

这个问题可能有点奇怪,但它却指出了欧洲NCAP如何在车内测试DMS的问题。有会犯困的假人用来做测试吗?Qc6ednc

Seeing Machines的Lenné说:“我们认为,无论是在模拟还是实际测试中,都需要人类驾驶员主动参与测试。目前尚不清楚如何实施,但可能需要在困倦程度方面达成一些共识。”Qc6ednc

对于微睡眠,Smart Eye的Krantz说:“我们不仅要对微睡眠发出警告(微睡眠之后就会陷入睡眠),还要对严重犯困(此时驾驶能力急剧下降)发出警告。”他建议:“在模拟和实际驾驶中,让驾驶员一直处于同样的场景下(例如凌晨时分长时间的乏味驾驶),并在固定的时间间隔内对自己的困倦程度进行自我评估。两者的区别在于,模拟驾驶中的测试可以持续到驾驶员陷入睡眠。”Qc6ednc

实际测试比Krantz和Lenné提到的要复杂得多。正如Cipia的Krzypow指出的那样,“识别困倦(不同于闭眼)面临双重挑战:它很难测量,也很难仿真。”还没人解释欧洲NCAP计划如何应对这个挑战。Qc6ednc

如何避免DMS系统干扰驾驶员?Qc6ednc

说了这么多,实际上DMS技术最薄弱之处是误报警太多,驾驶员常常不厌其烦,最终关闭DMS使其无用。Qc6ednc

Jungo首席执行官承认:“的确,过多的误报警会令人生厌。我们的做法是只对一些注意力不集中的事件进行报警,例如不看路、打电话或吸烟等。现在我们还没有去评估驾驶员的“认知”状态,如眼睛看着路心里却在想着事。这确实太容易出错了。”Qc6ednc

Smart Eye首席执行官Krantz说:“最大程度降低误差率的关键是具有非常高精度的基本信号。”他补充道:“这需要利用设计良好并经过全面测试的应用,将基本信号转换为有价值的驾驶员状态信息,最终形成周全的告警策略,在不干扰驾驶员驾驶的情况下通知他们。”Qc6ednc

Seeing Machines的Lenné也认为驾驶员是否愿意接受监控至关重要。“在设计中要考虑人的因素,这非常重要。我们需要了解人类行为及可能带来的风险(例如注意力分散),并在功能设计中考虑这些因素,使这些功能对驾驶员有用。”他说,“误报警的数量还受到其他一些因素的影响,包括是否可以获得高质量信号,这都很重要。”Qc6ednc

麻省理工学院的Reimer强调,反应过度的驾驶员警报系统可能会给消费者带来问题,他提到了一个通用汽车公司的例子。Qc6ednc

“通用汽车好像为其Super Cruise系统开发了一种分级报警方法,将无声提示报警和逐步升级报警结合起来解决这一问题。”Qc6ednc

从理论上讲,识别驾驶员注意力是否集中并将其连接到DMS警报系统,可以降低干扰因素。Qc6ednc

但是Reimer说:“我不清楚有没有系统分得清全神贯注和心不在焉。这正是我们公司以及我们合作的多家OEM和供应商积极研究的领域。”Qc6ednc

在用的DMS

笔者撰写这篇文章意在搞清领先DMS供应商的想法,了解他们在开发更安全的驾驶员监控系统方面所做的努力。Qc6ednc

但正如Semicast Research的Barnden常说的那样,“实现低端驾驶员监控其实很容易。”Qc6ednc

在有关现代Genesis前视警示(FAW)系统的一则宣传视频中有旁白警告:“在某些情况下,FAW系统可能无法正常工作……例如,驾驶员戴着偏光镜、浓密的眼妆、面部被头发或帽子遮挡,或者视线被方向盘遮挡。”Qc6ednc

旁白总结道:“请注意,前视警示系统不能代替正确而安全的驾驶,驾驶员有责任随时检查车速以及与前方车辆的距离。”Qc6ednc

因此,尽管DMS系统还无法完全监控驾驶员,汽车制造商却已将其投入使用,这样节省了研发费用,还将责任推给了车内戴眼镜和帽子的女士。Qc6ednc

(本文授权编译自EDN姐妹网站EETimes,原文参考链接:Can You Get ADAS and DMS Work Together?,由Jenny Liao编译)Qc6ednc

本文为《电子技术设计》2021年2月刊杂志文章,版权所有,禁止转载。免费杂志订阅申请点击这里Qc6ednc

本文为电子技术设计原创文章,未经授权禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
Junko Yoshida
ASPENCORE全球联席总编辑,首席国际特派记者。曾任把口记者(beat reporter)和EE Times主编的Junko Yoshida现在把更多时间用来报道全球电子行业,尤其关注中国。 她的关注重点一直是新兴技术和商业模式,新一代消费电子产品往往诞生于此。 她现在正在增加对中国半导体制造商的报道,撰写关于晶圆厂和无晶圆厂制造商的规划。 此外,她还为EE Times的Designlines栏目提供汽车、物联网和无线/网络服务相关内容。 自1990年以来,她一直在为EE Times提供内容。
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 思特威正式发布子品牌飞凌微,首发产品定位智驾视觉处理 思特威(上海)电子科技股份有限公司(股票简称:思特威,股票代码:688213)正式发布全资子公司品牌——飞凌微电子(Flyingchip™,以下简称“飞凌微”)。同时,飞凌微M1车载视觉处理芯片系列正式亮相,包括M1(Camera ISP)以及M1Pro(Camera SoC)和M1Max(Camera SoC)。
  • 56g的无人机自动导航100m只需1.16kB数据,蚂蚁立大功? 最近荷兰代尔夫特理工大学(TU Delft)的研究团队从蚂蚁等昆虫的导航模式中获得了灵感,发明了一种新型的微型机器人自动导航方式···
  • 儒卓力系统解决方案推出RAB4新型适配器板,实现厘米级精 儒卓力系统解决方案 (Rutronik System Solutions) 的专家与儒卓力无线技术中心 (Rutronik Wireless Competence Center) 携手开发了RAB4适配器板,无需设计任何硬件即可测试 RTK 性能,从而加速预开发阶段并降低成本,帮助客户更快地将应用推向市场……
  • 打飞的成为现实,eVTOL是飞行汽车还是“大号无人机”? 首飞航程中,eVTOL“盛世龙”模拟了一家人从深圳蛇口邮轮母港飞至珠海九洲港码头,如果驾驶汽车这两个目的地间距离单程约150km,需要2.5到3小时的车程,而“盛世龙”仅用约20分钟就成功在珠海九洲港着陆···
  • LG电子采用芯原矢量图形GPU 业经验证的2.5D GPU可通过芯原的VGLite API全面支持行业标准SVG和LVGL
  • 苹果M3、M3 Pro、M3 Max芯片规格提前曝光 苹果在这场新品发布会中,将同时发布三款新的 M3 芯片,包括基础版的M3,以及更强大的 M3 Pro和M3 Max,据报道这些芯片采用与 A17 Pro 相同的尖端 3nm 工艺批量生产。至于CPU和GPU数量,据称M3在核心数量上似乎并没有太大的突破……
  • 自动驾驶:挑战与机遇 尽管ADAS系统正加速发展,但距离实现自动驾驶还有几大步骤有待完成,在真正的自动驾驶成为现实之前,还有许多技术和监管障碍需要跨越。
  • CEVA和Autotalks扩大合作连手创建全球首个5G-V2X解决 Autotalks推出CEVA助力的最新V2X芯片TEKTON3和SECTON3已获主要汽车OEM厂商准予批量生产。
  • 打脸马斯克?研究称雷达对自动驾驶至关重要 特斯拉一直以来都是计算机视像(Vision)技术的坚定支持者,并多次在公开场合吐槽“傻子才用激光雷达”。但据IDTechEx的一份研究报告指出,以技术为导向的专家认为雷达技术是安全驾驶的基础,专家们判断,这项技术对于达到 4 级自主权至关重要。
  • 特斯拉自研芯片为弃用激光雷达买单,但D1仍存在一些技术 日前,特斯拉发布了名为 D1 的定制 AI 芯片,用于训练其 Autopilot 自动驾驶系统背后的机器学习算法,号称性能上已经完全碾压英伟达GPU和谷歌TPU。斯坦福大学的 Gerdes 表示,特斯拉的战略是围绕其神经网络构建的。
  • 小鹏进军“AI玩具”,要做儿童的第一个可骑乘智能机器马 小鹏汽车的生态企业鹏行智能这是鹏行智能发布了全球首款可骑乘智能机器马。这是鹏行智能智能机器马的第三代原型机,其内部代号为“小白龙”。前有小米首款仿生四足机器人"铁蛋",后有特斯拉AI机器人“Tesla Bot”,再到日前的鹏行机器马,为何新兴势力纷纷入场AI机器人呢?
  • 为什么传感器技术是自动驾驶的关键? 五六年前一辆新车可能包含大约60到100个传感器,而今天一辆汽车的传感器数量接近200个甚至更多。随着汽车变得更加智能及更加自动化,传感器的发展和复杂程度也随之增加。技术供应商和汽车制造商正在积极应对传感器性能退化、行业标准、以及在汽车使用寿命内维护软件的网络安全等挑战。
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了