4月9日,由工信部、深圳市人民政府指导,车载信息服务产业应用联盟、深圳市智慧交通产业促进会主办,海王传媒承办的2017中国车联网大会暨第十二届中国卫星导航运营商大会在深圳会展中心隆重举行。 本次大会吸引了来自商用车车联网及北斗卫星导航行业超过1200位精英与会,近30余位行业大咖围绕“跨界突围,创新驱动,变革发展”主题,在大会上分享了他们的智慧与韬略。深圳市信合智通科技有限公司廖渝川发表了题为《车辆驾驶行为分析系统》的主题演讲,文章根据速记稿整理,未经演讲者本人审核。
深圳市信合智通科技有限公司 廖渝川
大家好,今天简单的介绍一下我们公司和产品。信合智通是新成立的,目前推出的产品是驾驶员的行为分析,以及主动安全防御系统。
下面介绍一下我们的产品。驾驶员行为分析系统是基于图像识别的方式。基于驾驶员司机本身面部的表情以及驾驶员行为特征,实现疲劳监测,同时前装摄像头也能够进行识别。这个系统具有基于感知层,在图像识别的方式实现主动的安全防控的状态。
下面看一下驾驶员行为分析系统,这个系统主要是防止司机疲劳驾驶。通过图像识别系统,进行对前车以及障碍物的判断,然后对紧急刹车,通过速度的感应进行识别。同时,通过图像识别,能够对驾驶员司机的身份进行识别。它的应用非常的广泛,系统可以非常容易的安装在货柜车、普通的的士车辆,以及常规的公交车上。
技术方面。
第一部分,基于局部的宽动态技术,对暗处增强+强光抑制+多重降噪,能够识别人的眨眼次数,是否脱离方向盘,以及驾驶员非常规的不安全行为。通过人脸识别有一个三维重建的技术,以往的设备进行人脸识别,会有单角度的问题,对人脸识别的精度不够高。现在只需要通过三维重建的技术,在不同的角度拍照,最终可以合成为可识别的图像,这样就可以在识别人脸的精度上大幅提升。而且对摄像头的部署角度更加的方便,不一定站在特定角度识别,只需要在相应的位置上出现,三维重建技术就能准确的判断出驾驶员身份。
在测量前端,其中有一部分就是主动防御的系统,它能够识别车道标线,判断车辆是不是已经偏离安全的驾驶路径,在车道保持能力下降的时候进行报警。当出现前端障碍物的图像不断变大,并达到一定的值之后,会做出碰撞的预警。其他的像车距的预警、刹车的预警,通过加速的传感器能够进行识别;高速拐弯预警等都可以做到。
第二部分,行为分析。对驾驶员行为的分析主要有几个方面:一是疲劳的状态。驾驶员如果打哈欠,包括眨眼睛频率的变化,疲劳之后出现闭眼的状态都会自动的识别。如果司机打电话,无论是左手打电话还是右手打电话都无法规避摄像头的拍摄。安全带也会进行自动的识别,安全带会做相应的图像识别标志。目前,对点燃的香烟也非常容易的识别,但是否点燃还需要提升判断准确值,只要是点燃的香烟,其光点在图像识别中能迅速的发现,并且做出紧急的提醒。
在车主的身份识别上,系统可以通过眼球的瞳距,以及车主的位置进行身份的识别。核心的部分都是软件基础的算法,有专业的技术人员。在疲劳的预警上通过眼睛以及面部表情的变化,检测司机的疲劳程度,并且根据这种疲劳程度进行分级的管理,做出不同级别的报警。在检测过程当中,即使带上墨镜也可以识别,不同品牌的墨镜我们都做了测试,对识别的准确度不会造成影响。化妆、车内的光线,包括隧道光线变化的时候,仍然可以对疲劳状态进行测量,灵敏度也是非常的精准。在安全带的检测上,确认驾驶员有没有正确的佩戴安全带,这个也是通过图像识别的算法去完成。
在行驶当中司机打电话,我们也可以屏蔽掉驾驶员本身的装饰,以及发型、穿着等变化,这些不会对识别造成任何的影响。在实时驾驶过程当中抽烟行为,可以在不受光线的影响下进行充分精确的测量。当驾驶员出现双手离开方向盘或者是单手持方向盘的情况,系统也会进行识别。在车辆行驶当中,当出现驾驶员低头或者是左顾右盼从而脱离驾驶轨迹,这种情况也可以识别,并在发现异常的时候系统会自动实时告警。在系统安装部分,是有一个前端的摄像头对着驾驶员的,来进行实测监控连续的驾驶过程,避免疲劳驾驶的状态。
来看一下实体设备的形态,我们使用专用采集摄像头,以及红外成像技术,可以自动采集区域内图像,并且能够高频的确认被监控的人所在面部表情,以及他的特征点的数据,从而进入到智能分析主板当中进行分析。这个主板会在本地进行高速的智能分析测算后发送到云端。数据都是已经算出的结果,不需要云端进行单独计算,所以这样精度测试可以在本地迅速的完成。
实际使用情况的一些模型。
当司机出现疲劳状态的时候,图像自动对他的人脸进行识别。下面视频可以看见图片中这个司机有数秒瞌睡的情况,设备做出了精准的识别。还有一种情况,司机在行驶过程中可能会出现低头现象,注意力点不在道路上,通过调查录像发现在看手机,这也是非常精准的测量在图像识别中。
另外,如果出现图像没有办法识别的时候,例如有驾驶员用了一些遮挡物屏蔽掉监控,那么就会出现人脸异常的现象,从而说明摄像头可能被遮挡了。
在出现急转弯的情况,通过图像识别和加速度传感器,两者结合的方法来计算,并且识别。在这个案例当中,在限速40公里的转弯道路,司机却用了70公里的速度进行超速,像这种危险驾驶行为也是能够进行识别的。还有一种情况,当其他车辆突然加速穿越到前方,系统可以进行识别,提醒司机警惕。
我们运营的方式。
在运营的方式方法上,可以采用PPP运行的模式,通过与政府间的合作,提供相应的运营。财务公司做投资,我们投入技术和设备,进行自营,帮助政府实现监控的作用。这个投资不需要政府投钱,公司自己来投就可以了,这是一种方式。另外一种,各运营商可以采购我们的平台,合作来做这件事情,我们可以提供技术,运营商可以在现有的平台当中增加驾驶人员主动防御图像识别系统,运营的方法是比较多种多样的。
今天主要讲的这个在这里,简单的介绍一下图像识别的系统。感谢大家!