“新系统实时拆析摄像头数据 不仅探测乘员面部特征还可识别姿势”

盖乌斯是司机累还是睡着了？ 车内的摄像头都可以监控。 特别是在自动驾驶车辆中，车内摄像头不仅非常重要，还需要法律安装。 据外国媒体报道，德国夫琅和费光电、系统技术和图像解决研究所( Fraunhoferinstituteforoptronics，systemtechnologiesandimageexploitation，iosb )全球

不仅可以检测身体姿势，还可以检测活动状况(图像来源: iosb )。

在自动驾驶中，车辆需要决定自己的行动是转向装置、刹车还是加速。 但是，在车辆完全不需要驾驶员的情况下，半自动驾驶车只能为驾驶员提供一点帮助，提高驾驶员的自由度。 半自动驾驶车在从高速公路的施工区域或高速公路转移到市区时，还是有必要将车辆的控制权移交给驾驶员。 因此，车辆必须具备两种程度的智能。 1、需要能够了解交通状况； 2、能监视车内情况，与司机交流。 司机在做什么？ 司机能以多快的速度控制车辆？ 目前，虽然出现了驾驶员监控系统，但在这样的系统中相机图像数据基本不使用，首先只能检测驾驶员的疲劳状况。

人工智能技术检测司机在做什么

iosb的研究者们关注着司机和车辆之间的相互作用，努力填补差距。 研究小组的负责人michael voit说:“我们的技术不仅能识别脸部的特征，还能识别司机和乘客现在的姿势。 而且，我们可以从这样的姿势明确司机和乘客在做什么。 ”

该研究的核心是机器学习算法和过程，如人工智能( ai )。 算法实时分解摄像头数据，搞清楚司机是在打电话，还是在和孩子玩，还是在看乘客的手机。 因此，iosb技术可以超越图像识别技术，根据具体情况解读各种活动。 首先，研究人员训练了这个系统，手动标记了大量的相机照片。 人们的手、脚、肩膀在哪里？ 手机、书和其他物体在哪里？ 然后，研究人员利用新图像判断算法，修改或验证结果。

该系统是提取司机或乘客的图像，形成数字骨骼，再现人体姿势的简单笔划。 这是因为，可以利用骨骼的运动，在所识别的物体的辅助下，推测驾驶员和乘客的活动。 voit解释说:“因此，算法可以识别出是有人在睡觉，还是在看路，这个人分心是怎么回事，需要多长时间。” 该系统既支持以前流传的摄像机、可以在黑暗中看到东西的红外线摄像机，也支持可以测量物体和摄像机距离的3d摄像机。 此外，该系统还允许设计师在车内自由安装摄像头。

驾驶模拟器(图像源: iosb ) ) )。

研究人员一直在众多的研究项目中，研究与汽车内部活动探测相关的问题，并与奥迪、大众等知名汽车制造商以及博世、大陆等汽车供应商进行合作。 德国联邦教育和研究部( bmbf )、德国联邦经济事务和能源部)宝马I )或德国联邦交通和数字基础设施部) bmvi )也支持了这样的项目。 voit表示:“我们不仅可以检测司机的活动，还可以检测车内前排座位和后排座位的所有乘客的活动。 这项技术已经可以试制，我们也在和想使用我们技术的企业接触。 我们正在开发和使用自己的驾驶模拟器，领域的顾客可以从这样的研发项目中获益。 交通状况模拟是收集相关驾驶和行为数据的基础，此外，该模拟器搭载的各种传感器技术意味着可以研究所有乘客的行为。 ”。

当务之急是保护数据

在数据保护和安全性方面，研究人员从一开始就将其作为重要因素。 iosb高级科学家pascal birnstill表示:“摄像机数据不会被实时分解和保留，不需要被发送到车外或个性化模式，因此也不会收集个体数据。” 因此，该技术从研发之初就尊重隐私，符合欧盟严格的管制和高水平的数据保护意识。

不仅用于活动检测，还被广泛使用

欧盟的新规定强调了活动探测的重要性，无论车辆自动化程度如何，配备自动驾驶技术的车辆都必须配备驾驶员监视技术。 通过使用iosb技术，汽车制造商不仅可以满足这一要求，还可以实现关于自动驾驶的各种设想。 例如，用于汽车与人的交流的语音识别正在迅速接近发展的极限，“在此停止”的语音命令本身没有意义，但通过将身体的姿势识别和活动检测结合起来，可以明确当前客户指的是哪个停车位 此外，该系统还能应对无人驾驶汽车的安全问题。 即使现在也是驾驶员的责任，要去确认全体乘员遵守安全规定，系好安全带，但很快就会变成自动驾驶出租车和巴士等无人驾驶车辆的业务。