驾驶员监控系统的基础功能是疲劳监测、分心监测、危险行为监测。但随着2D/3D摄像头的引入以及人脸识别算法的发展,DMS系统也在融合ADAS等自动驾驶技术的发展,催生出了一些创新人机交互HMI智能化的场景应用,提升高级别自动驾驶/智能网联汽车时代的驾乘体验。 大陆集团DMS系统,来源大陆官网 作为创新人机交互的传感器,这些DMS功能的拓展功能主要是获取驾驶员信息,从而进一步完善未来汽车座舱中的新应用,并实现定制化体验: 1、面部身份识别 当用户靠近传感器时,无需动作配合,即可快速完成活体判断并进行身份识别,主动为用户打开车门,调整座椅位置,并快速登陆车机系统,保障座舱系统高效运行。 面部识别的引入,不仅提升了驾驶的舒适体验,更可以提高车辆使用安全,比如说防盗功能。 识别二维码加入DMS/OMS交流群 2、眼球追踪 利用摄像头进行视野追踪、头部姿态跟踪技术,识别出驾驶员注视的区域(主驾挡风玻璃、副驾挡风玻璃、左后视镜……)。这一功能可以与当前热门的HUD抬头显示系统联动,可以实时调整并为驾驶员提供更合适的显示画面。 松下AR HUD 3、手势识别 手势识别,基于视觉手势识别技术,与车机系统相连,提供新的结合方式,通过车载摄像头完成全部功能。如做了相应手势之后,主机会进行歌曲切换或静音等操作,具体定义由各个主机厂自己定义。 手势交互方案属于在传统触摸控制方案之外的新交互方案,在宝马上已经应用多年。这个摄像头与DMS系统也可以产生一定联动。 4、表情识别,情绪感应 通过创新AI算法,识别出驾驶员当下的情绪,可以联动氛围灯、香氛系统。这种应用丰田在CES 2019上有展示。 丰田纺织的 AceS概念 5、娱乐互动 自动驾驶技术研发商MINIEYE在其I-CS座舱感知量产方案中创新性地打通了前后排的互动空间,借助视线、手势、头部动作等多种自然身体语言的交互方式,可实现多人多位置便捷互动。 图源MINIEYE 6、座舱乘员检测OMS 将专门对应驾驶员的摄像头拓展到整个座舱内部,可以进一步提升整体车内的安全性。 通过位于车顶的摄像头,并结合毫米波雷达的感知数据,系统可以综合分析人脸属性、人体骨骼比例以及身长信息,能够准确判断成人与儿童。当识别到儿童,系统将主动触发儿童看护功能,持续对儿童进行状态、行为监测,并实时反馈给前排家长,提醒其采取必要措施。 The article is compiled from various sources on the internet. summary 虽然行业正在快速发展,但其实也面临着许多挑战:比如说疲劳、注意力如何标定,成本考量、以及如何平衡消费者对于隐私问题的考虑等等。这需要主机厂、tier 1、镜头模组、芯片算法、材料、设备等产业链上下游的朋友来共同探讨,寻求突破。 艾邦现建有汽车座舱DMS/OMS产业链交流群,现已有长城、吉利、蔚来、法雷奥、博世、麦格纳、佛吉亚歌乐、德赛西威、均胜、福瑞泰克、佑驾、自行科技、经纬恒润、智华、天实、丘钛、欧菲、信利、豪恩、商汤、地平线、虹软、科大讯飞、东软、MINIEYE等上下游厂家参与,欢迎扫描下方二维加入群聊。 Recommended activities:
The original article was posted on the WeChat official account "Smart Car Club."一文读懂汽车驾驶员监控DMS
Aibang now has a car cockpit DMS/OMS industry chain exchange group, and sincerely invites OEMs, tier 1, lens modules, chip algorithms, materials, equipment and other upstream and downstream enterprises in the industry chain to participate. Welcome everyone to join the Aibang Automotive Cockpit DMS/OMS Industry Chain Exchange Group for communication. Please forward this article before joining the group.