Fraunhofer: Pioneering In-Cabin Monitoring

原始资料:../evidence/vendor-and-news/2025-fraunhofer-pioneering-incabin-monitoring.pdf

资料层级:evidence/vendor-and-news

资料类型:PDF 白皮书,Fraunhofer IOSB,2025。

状态:已用 pdftotext 抽取,已索引法规、传感器、ToF 评估和 sensor fusion 线索。

基本信息

内容结构

白皮书覆盖范围较广,不是单一实验论文。主要章节包括:

  • legislation and consumer tests。
  • DMS / OMS / CPD / smart airbag / health monitoring applications。
  • camera sensors、2D / 3D sensors、thermal、radar。
  • ToF for in-cabin monitoring evaluation。
  • sensor fusion future prospects。

可直接引用的事实

Melexis + Emotion3D DOMS

白皮书描述 CES 2024 中 Melexis + Emotion3D 的 DOMS 方案:

  • 单个 Melexis ToF sensor。
  • full VGA 640 x 480 depth + NIR image。
  • readout up to 120 fps。
  • 支持 ASIL B system integration。
  • FOV 110° x 85°。
  • DMS 功能基于 NIR image,Emotion3D 算法据称只需 little retraining。
  • OMS / passive safety 基于 depth + NIR 的 3D body pose。

Infineon ToF evaluation

白皮书描述 Fraunhofer IOSB 对 Infineon ToF 的评估/仿真:

  • REAL3 ToF imager IRS2877A(S)。
  • VGA system resolution 640 x 480。
  • ISO 26262 ASIL-B compliant。
  • 模拟 120° x 90° FOV 和 VGA resolution。
  • 约 120° horizontal angle 被认为是座舱覆盖的较好 compromise。
  • 120° 宽 FOV 可覆盖大部分座舱,但精细 eye tracking / eyelid 等 DMS 任务更适合约 50° narrow FOV。
  • ToF 适合 driver/passenger monitoring in 3D,尤其是 occupant position、body pose、airbag / seat adjustment。

Sensor fusion 线索

白皮书在 sensor fusion 部分给出一个清晰方向:

  • 2D image + 3D ToF point cloud + radar 被视为相关应用的 promising setup。
  • smart airbag 需要 occupant size、weight、position、motion。
  • driver incapacitation / health critical situations 需要 vital signs。
  • radar 能在 no-line-of-sight 情况下补足 CPD、seat occupancy、vital signs。
  • Infineon portfolio 包含 3D ToF、60 GHz radar、silicon microphones、gas sensors。
  • Ofilm RGB-D camera 案例:REAL3 VGA ToF + 2.3MP RGB-IR,1 ToF + 6 RGB pixel upscaling,FOV 110 x 80°,尺寸 120 x 36mm,已用于 mass production 的后排监控/后排娱乐。

关键判断

白皮书给出的系统性判断:

  • in-cabin monitoring 首先由 safety / regulation 驱动,之后扩展到 entertainment / comfort。
  • health monitoring 正在出现,但仍需要 intensive sensor fusion。
  • 单个传感器很难覆盖 DMS、OMS、CPD、smart airbag、health 的全部需求。
  • 2D/NIR 适合高分辨率眼部/面部任务;ToF/3D 适合 body pose、size、position、distance;radar 适合遮挡下 CPD/vital signs。
  • 软件 OTA 可以推动功能升级,但前提是对应硬件已经上车。

证据价值

这份资料对 技术方向筛选 的价值在于:它提供了一个相对中立的传感器路线框架,能把 Wi-Fi、acoustic、event camera、UWB 等新增资料放回主流 2D/3D/radar 融合路线中比较。

它也提示 MINIEYE 不应把“新传感器”理解为替代视觉 DMS,而应拆成应用驱动:

  • CPD hidden area:radar/UWB/Wi-Fi/acoustic 更有价值。
  • smart airbag:ToF / RGB-D / body pose 更有价值。
  • eye attention / eyelid:高分辨率 NIR 仍关键。
  • health / incapacitation:radar、thermal、camera、microphone、gas sensor 可能都进入融合。

不能直接推出的结论

  • 白皮书混合了综述、供应商访谈和案例,不是每个判断都有独立实验指标。
  • “ASIL-B compliant”需要区分 imager support、system integration support 和完整功能安全目标。
  • “EuroNCAP compliant”需要回到具体 protocol、软件版本、测试条件核验。
  • ToF 宽 FOV 与 eye-level DMS 精度之间存在分辨率权衡,不能简单用一个 ToF 替代现有 NIR DMS。

对 MINIEYE 的启发

最有价值的不是某个单点产品,而是传感器选择方法:

  • 按应用拆传感器:DMS eye/face、OMS body pose、CPD hidden child、smart airbag、health/vital signs。
  • 对每个应用列出 required evidence:FOV、resolution、遮挡、功耗、ASIL、误报漏报、法规 protocol。
  • 对 ToF/RGB-D/radar 供应链建独立观察表,不要只跟踪传统 DMS camera。
  • 把 Fraunhofer 的 sensor comparison 转成 MINIEYE 内部的技术筛选矩阵。

相关页: