DVN 内饰总编Philippe Aumont 4月初通过视频会议对Seeing Machines首席执行官 Paul McGlone进行了专访。
DVN内饰:贵司的发展历程如何?
Seeing Machines:Seeing Machines成立至今已23年。起初由4名学生共同创办,其中两名一直伴随公司至今。公司将专业知识集中与机器人技术开发,涵盖各个领域的应用。他们一直坚信汽车将成为世界上率先实现自动化的机器人之一。因此,他们研究了这项技术可以应用于哪些领域,并决定致力于人类理解或人机界面(HMI),重点关注运输行业。机器人和运输将我们引向传感器领域,而传感器将我们引导至眼动追踪。眼动追踪最终将我们引向了驾驶员监控系统技术,通过对身体位置、移动、大小和整体认知状态获得对监测对象的深入了解。
DVN:贵司的使命和愿景是怎样的?
SM:我们的使命是提高运输安全性,这是我们10年来非常明确的重点。交通伤害和死亡在道德和成本方面对社会造成了很大负担。由于各种原因,这个问题变得越来越关键,包括智能手机的普及,甚至是汽车中的功能(例如更大的触摸屏),这可能会导致更多驾驶员分心的情况,此外疲劳驾驶也是一个难题。我们的目标是让每个人都能安全回家,并支持“零愿景”全球倡议,致力于实现一个零交通死亡事故的世界。我们经过验证的技术如今已上路,搭载于超过 700000 辆汽车和近 50000 辆卡车和公共汽车。可以说,我们对安全性提升贡献了实实在在的影响,并且这种影响随着更多新车辆的连接将不断扩大。

DVN:贵司提供的产品主要有哪些?商业模式如何?
SM:Seeing Machines实际是一家软件公司,这也反映在我们差异化的商业模式和多元化的产品上市方式中,包括与一级汽车供应商和制造商建立相互信赖的合作伙伴关系:
- 我们的软件可以集成到OEM和一级供应商汽车客户定义的任何系统或处理器中
- 我们可以将我们的软件作为硅平台上的嵌入式系统提供给客户,例如我们的FOVIO芯片或高通的Snapdragon Ride平台
- 我们将我们的软件授权给客户,例如芯片供应商,然后将其嵌入到他们的平台上,以针对汽车行业的DMS算法和性能进行优化
商业模式其实很简单,对于汽车行业来说,主要基于特许权使用费,在定制开发情况下为一次性工程(NRE)收入。
DVN:贵司如何量化DMS效率?
SM:当我们谈论DMS效率时,我们通常指的是处理效率。
处理效率必须考虑三个关键要素——我们可以包含多少功能(处理)、需要多少功率以及总成本如何。
我们需要许多不同的指标来充分了解处理效率和性能,但一个特别有用的指标是:TOPS(每秒数万亿次操作)vs 瓦特(多少热量)vs 成本。
当我们开发算法时,我们会考虑实现特定信号性能(例如分类精度)所需的处理量(例如 TOPS)。在这方面,少即是好,汽车制造商需要低成本、高性能的方案。
DVN:您认为监管如何推动市场发展?
SM:监管方面的势头来自欧洲,EuroNCAP 是领先的消费者组织,其五星评级(包括 DMS 等一系列技术)现已成为基准。Seeing Machines与Euro NCAP密切合作,作为二级供应商代表,在他们提出要求时协助开发DMS协议。欧盟通用安全法规 (GSR) 要求, 从 2024 年起对所有新车型包括汽车、货车、卡车和公共汽车,必须强制安装DMS。从 2026 年起扩展至所有新车。
在这方面,中国往往紧随欧洲趋势。而美国这边,DMS一直是关注重点,但其关注重点不在于一般安全,主要在于支持新兴的自动驾驶,具体来说,L2+ 级自动驾驶,允许驾驶员在一段时间内放开方向盘。目前美国的关注重点正在转向一般道路安全,我们预计它将在未来3至4年内成为强制要求。
可以说,欧洲是DMS方面的领导者,因为其监管规则已正式制定。中国在密切关注,美国也逐步将重点转向一般安全。DMS有望成为全球性要求。
DMS性能需要适应监管环境。安全性就如剥洋葱,每剥开一片,都会露出新的、更紧密的限制(或机会!)洋葱的下一片将在于功能便利性。

DVN:贵司主要技术有哪些?这些技术有哪些独到之处?
SM:准确观察眼睛和瞳孔是基本原则。我们使用先进的机器视觉技术,在各种苛刻的车载照明条件下精确测量和分析头部姿势、眼睑运动和眼睛凝视。通过这些数据了解驾驶员的注意力状态、睡意和受障碍水平,以实时触发车辆驾驶舱、舒适性和便利性系统以及 ADAS。
眼动追踪技术还能够监测驾驶员的情绪和驾驶员的舒适性。事实上,有句老话“眼睛是心灵的窗户”,我们非常认同。
DVN:未来技术将如何发展?
SM:从传感的角度,可以将我们的测量值与从其它现有或新的传感器获得的其它数据(如心跳和/或温度)叠加在一起,再将数据合并。我们称之为“传感器融合”。我们还与语音合作伙伴合作。举个例子,我称之为声音,实际上是通过观察唇动,也就是唇读,这也是通过视觉系统实现的。
另一个重要趋势是从2D转向3D。这将是最具影响力的。通过观察和理解人类行为可以实现更多功能。通过传感器和软件将所有信息进行集成,并从中得出相关结论。我们也在探索雷达等技术,以及雷达在车辆中的应用。在进行硬件和软件的融合时,挑战随之而来,这是复杂的一面。此外,组件的增加也意味着成本的增加,这将给汽车制造商带来阻碍。
DVN: DMS市场蓬勃发展的原因是什么?
SM:市场目前处在明显的拐点。迄今为止,自动驾驶无疑支撑了大量需求,但监管显然也是增长的推动力。我们预计,到2028年,全球至少75%的汽车将配备DMS。因此基于全球轻型汽车产量的总数,5年内将有7500万辆汽车安装某种DMS。到今年年底,我们估计将有1200万辆汽车安装。未来5年将实现显着增长。仅就我们Seeing Machines而言,基于我们迄今为止获得的定点,未来三年的同比增长将达到显着的百分比。

DVN:贵司也提供追踪乘员状态的功能,除了DMS之外,还能实现哪些功能?
SM:市场需要不同级别的监控能力,包括全屏、语音交互、手势控制功能。了解驾驶员是否处于可控状态还是无法有效驾驶更加重要。DMS市场发展将持续发展,我们认为安全永远是核心的核心。
DVN:通过摄像头可以提供哪些额外的便利和舒适功能?
SM:新的市场需求包括为流媒体或Zoom会议提供彩色视频。通过后视镜或摄像头,可以了解一个人的年龄、体重、性别。有了这些信息,可以监控安全气囊的轨迹,了解谁在后座,以及乘员或驾驶员是否有身体障碍或可能发生障碍。再比如,当驾乘人员心情不佳时,可以选择换一种内饰照明风格。
当用户看向汽车脚部区域,摄像头能够检测到这一动作,并打开脚井中的灯光,确保能见度清晰,缩短分心时间。归根结底,或许一切都将与平视显示器集成?
DVN:汽车制造商提出了哪些要求?
SM:预算方面,以 25 美元为例,如果要配备雷达传感器、双摄像头驱动器和乘员监控功能是比较难的!如果预算是 200 美元,可以直接用于一款超豪华车。正如我们提到的,汽车制造商期望的功能很多,但希望预算越低越好。
传感器融合将有助于降低成本。目前,汽车制造商往往不断要求我们提供新功能,其中一些是感应和安全相关的,而另一些则与舒适性和便利性有关,最终目的在于实现差异化。
DVN:软件方面有怎样的挑战?
SM:功能越多,软件越多,所需功耗就会更高,响应时间也会更长。Seeing Machines专注于软件加速,我们可以在很大程度上克服这些挑战,但也不得不面临相应的成本挑战。
DVN:贵司下一步规划如何?
SM:凭借我们的学科背景,我们希望保持不断创新,例如眼睑感知,特别是通过瞳孔识别的眼睑感知,结合来自其它传感器的额外数据,这些传感器大部分已用于内饰,或通过视觉系统进行唇读。
我们的人因团队展示了我们科研方面的努力,在研发,工具和非战略功能方面开放合作。未来的挑战在于信息处理、处理的信息量、软件加速。
DVN:贵司是否在寻找汽车以外的市场?
SM:我们仍然专注于运输,从乘用车开始,但也包括卡车和公共汽车等商用车辆,包括重型采矿车辆。对于航空业,我们的技术已经在飞行员培训模拟器中,我们的目标是驾驶舱解决方案,以减轻飞行员疲劳的风险。
除了目前的重点核心业务,我们确实也看到了我们的技术在其它领域应用的可能性,包括医疗保健(验光、眼科、患者监护和远程手术);娱乐(游戏、元宇宙)、消费者(智能家电、3D 和非接触式显示器、数字镜子)和零售(智能商店、广告牌、出租车)。

DVN Interior:贵司是否与科研院校等保持合作?
SM:是的,我们与全球许多大学合作,包括利兹大学、华盛顿州大学、麻省理工学院和莫纳什大学。
我们还与合作伙伴合作开发工具。我们不时地将非核心功能(例如机器学习、合成成像)的开发外包给开发基本算法,然后我们可以将其集成并应用于我们的功能开发。
DVN:在澳大利亚运营一家全球性企业是否存在一些挑战?
SM:确实有不少挑战,这些挑战主要与时区有关,但我们擅长管理,我们的团队致力于为客户提供服务,这需要灵活性。从事对外贸易的澳大利亚企业应该都习惯了这一点。关键是确保我们的员工在工作时间和工作方式方面的灵活性。当然,我们海外设有办事处,这也能解决一部分难题,与客户保持更及时的沟通。虽然澳大利亚地处南半球,但如今也有不少澳大利亚软件成功案例,成功地解决了跨时区这一难题。
DVN:感谢您接受DVN内饰专访,作为结束语,您还有希望分享给DVN内饰社区的吗?
SM:我们仍然专注于运输——汽车、商业运输和物流以及航空。
作为行业先驱和领先的驾驶员监控技术二级供应商,我们已实现不错的规模效应,目前有 15 个正在进行的项目和超过 700000 辆道路车辆安装了我们的技术。
接下来,我们将继续保持增长。我们的团队专业干练高效。下一步我们将扩大欧洲业务,包括德国,此外还计划扩大美国的业务,目前主要在底特律。
软件方面,我们正在开发Seeing Machines 2.0!