集微网 · 2022年04月26日

【专利解密】自行科技专注保障驾驶员安全

【嘉勤点评】自行科技的驾驶员动作检测专利,通过采集驾驶员行为动作图像数据进行分析,并将坐标点输入到动作识别模型中,得到驾驶员动作监测结果,解决了目前检测技术存在的真实场景下检测准确性低的问题。

集微网消息,自行科技推出的舱内监控系统已向商用车和乘用车客户规模化量产交付。该系统除了支持驾驶员和乘员疲劳检测、注意力检测和视线检测、行为识别的核心功能以外,还可定制姿势识别等扩展功能。

通过对驾驶员进行动作检测可以在驾驶员出现行车动作不规范的情况下时对驾驶员进行提醒,避免因不安全规范的动作导致交通事故的发生。在现有技术中,主要采用特征点、肢体的运动方向轨迹的图像的特征。如DT算法,即通过连接连续几帧的关键点(稠密光流)的轨迹和轨迹过程中的HOG等特征进行预测。然而这种方式不能有效利用图像多尺度且特征计算量巨大,鲁棒性差。在真实场景下检测准确性低。

为此,自行科技于2020年7月7日申请了一项名为“驾驶员特定动作检测方法、系统和装置”的发明专利(申请号: 202010643665.X),申请人为深圳市自行科技有限公司。

image
图1 驾驶员特定动作检测方法、系统和装置结构示意图

图1为驾驶员特定动作检测方法、系统和装置结构示意图,其中包括数据获取端100,获取驾驶员在驾驶过程中的图像数据进行预处理后发送到数据处理端进行分析处理;数据处理端200,接收到图像数据并分析,得到驾驶员动作检测结果。

具体包括获取模块101,获取驾驶过程中所采集到的驾驶室中的图像信息,并将图像信息传给检测模块201,获取模块包括摄像头采集单元1011,对驾驶室中的图像信息进行采集。具体的,摄像头采集单元将在驾驶舱中驾驶员的一系列行为动作进行图像采集,将采集到的图像数据进行预处理,预处理为对图像进行图像归一化处理。

数据处理端将输入的图像进行预处理,分别获得驾驶员各个关节点的二维坐标,映射到驾驶仓位下的三维坐标系上,对三维坐标系下的坐标点进行分析,得到驾驶员动作监测结果,检测模块包括关键点检测模块2011、三维关键点映射模型2012和动作识别模型2013;关键点检测模块根据图像数据分析获得驾驶员各个关节点的二维坐标,三维关键点映射模型在关键点检测模块输出关节点的二维坐标之后将图像上的二维关键点映射到驾驶仓位下的三维坐标系中,动作识别模型识别驾驶仓位下的三维坐标系下的坐标点,得到驾驶员动作监测结果。

image

图2 驾驶员特定动作检测方法流程示意图

图2为的驾驶员特定动作检测方法流程示意图,主要包括以下步骤:首先进行驾驶员图像采集,摄像头采集单元获取驾驶员在驾驶过程中的图像数据,将采集的图像数据进行预处理后发送到关键点检测模块中(S1);之后获取关节点的二维坐标,关键点检测模块接收摄像头采集单元发送的图像数据并进行分析,获得驾驶员各个关节点的二维坐标,将驾驶员各个关节点的二维坐标发送到三维关键点映射模型(S2);然后映射三维坐标,三维关键点映射模型接收关键点检测模块发送的驾驶员各个关节点的二维坐标,将各个关节点在图像中的二维坐标映射到驾驶仓位下的三维坐标系上,将映射完成的三维坐标系发送到动作识别模型(S3);最后进行动作分析,动作识别模型接收三维关键点映射模型2012发送的映射完成的三维坐标系并进行分析,得到驾驶员动作检测结果(S4)。

简而言之,自行科技的驾驶员动作检测专利,通过采集驾驶员行为动作图像数据进行分析,并将坐标点输入到动作识别模型中,得到驾驶员动作监测结果,解决了目前检测技术存在的真实场景下检测准确性低的问题。

自行科技是一家以嵌入式AI技术为核心的智能汽车电子服务商,专注于智能汽车电子领域。公司基于领先的计算机视觉,人工智能与传感器融合技术,致力于成为世界一流的智能汽车增量价值提供商。

推荐阅读
关注数
12739
内容数
1029
从专利出发,浅析一切关于柔性屏、折叠屏、10倍光学变焦技术等有趣的前沿技术
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息