申请试用
登录
核心技术
以原创技术体系为根基,SenseCore商汤AI大装置为核心基座,布局多领域、多方向前沿研究,
快速打通AI在各个垂直场景中的应用,向行业赋能。

硬核!这里有一幅商汤智能驾驶技术的完整图谱

2019-09-04

未来的智能汽车什么样?在很多科幻电影中,大家对自动驾驶已经有了一些想象——能够自动检测道路环境实现自主行驶,可识别驾驶员状态并进行人车互动,甚至还能自主应对各种极端危险状态保护乘客安全……如今,伴随人工智能技术的飞速发展,自动驾驶早已不只停留在人们的想象中了,而是正在变为现实。

 

在上周举办的2019世界人工智能大会(WAIC 2019)上,商汤科技研发执行总监石建萍博士,就在商汤科技“智焕新动能”人工智能主题论坛上向与会者展示了商汤科技智能驾驶技术的阶段性成果,详细介绍了“商汤智能驾驶量产解决方案”和“商汤科技自动驾驶解决方案”。

微信图片_20200617232650.png

 

打造智能驾驶量产解决方案


商汤科技智能驾驶量产解决方案,主要包括两大部分:ADAS驾驶辅助系统和智能车舱系统。同时,为了更好地符合量产标准,商汤搭建了完整的车规质量体系。


打造以“视觉”为核心的感知技术是商汤实现可量产智能驾驶解决方案的基础。商汤ADAS驾驶辅助系统,利用摄像头和AI算法分析感知周围驾驶环境,包括车道线识别、车辆行人和交通灯标识检测等,帮助驾驶员更好地预判潜在危险,增强行车过程中的“安全性”。

640 (1).gif

以视觉为核心的感知技术


在“感知”技术落地过程中,商汤智能驾驶团队通过在多种天气、不同光照和各种城市场景下进行上千万次的测试,确保“汽车大脑”能够在不同环境中提供稳定、正确的结果。


为了更好达到整套体系的可量产,确保在控制成本的同时最大化提升性能以及精准化输出结果,商汤还自研了FPGA(Field Programmable Gate Array)解决方案,将算法和硬件进行深度融合,以此实现自动驾驶、辅助驾驶这类技术的灵活配置。


商汤智能驾驶量产解决方案在安全性方面的考虑非常完善,ADAS驾驶辅助系统能够帮助驾驶员更好预判车外的驾驶环境,而在车内,商汤智能车舱的驾驶员分析系统则能够及时检测到司机疲劳、分心等状态,并作出判断和提醒。


这一功能的实现,主要通过红外单目摄像头捕捉人脸图像,配合商汤人工智能技术对驾驶员眼睛的睁闭状态、打哈欠频率进行综合判别,输出驾驶员状态判定。同时,系统还可对驾驶员头部转角和视线方向进行追踪,以识别驾驶员的注意力是否在道路视界上。


如果识别到驾驶员处于“疲劳”或“分心”状态,系统就会即刻发出不同级别的报警信号。在实车道路测试环境下,商汤智能车舱的疲劳检测和分心检测准确率均可达到98%,误报率小于5%。


此外,在人车交互方面,商汤智能车舱还引入了“手势识别”功能,通过IR摄像头和商汤手势识别算法,即可轻松实现用手势调节车载娱乐系统的音响音量、切换歌曲、控制车窗等操作。

6402.gif

通过识别手势动作,完成歌曲切换


除了为前排司乘带来安全、便捷的智能车舱体验,商汤也充分考虑到车舱后排乘客的应用体验。借助乘客属性分析,根据需求实现对诸如手机、笔记本电脑等这类贵重物品的定制化检测。未来,可用于对后座儿童的特别看护,以及出租车遗失物体检测等应用场景。


以快速的商业量产为目标,一系列成熟、严谨的标准规范一定是必不可少的,这样才能确保技术应用运行的稳定。为了将人工智能技术快速赋能于汽车行业,提供符合客户和市场要求的量产产品,商汤科技还自建一套“车规级”的质量标准,目前已应用在商汤智能车舱和高级辅助驾驶平台上。



面向L4级自动驾驶解决方案

着眼未来,商汤科技也在积极打造一套面向L4级别的自动驾驶解决方案,其中包括对感知技术、分析预测、地图定位、决策规划和控制等全套流程的研发。


针对固定区域的L4级别自动驾驶,商汤设计了特有的多传感器方案,并攻克了多传感器时空同步技术难题,通过借助摄像头来提升信息感知及推理能力,进一步实现了精准化的行人、车辆行为预测,将商汤在视觉感知方面的技术优势发挥到极致。


目前,商汤科技自动驾驶解决方案,可通过对行人的面部特征、身体朝向、各种手势和运动姿态进行分析,精准判断行人在不同场景、不同路况的潜在意图;通过对车辆姿态、轨迹、车灯状态等多种信息捕捉,提前预判车辆可能发生的行为轨迹,从而帮助驾驶员提前做出决策,使自动驾驶方案具有更强的预判性。

6403.gif

行人及车辆预测


而在高精度地图与定位整体方案中,商汤提供了城市内10cm级别的高精度地图与定位服务、高精度语义地图格式和兼容标准地图格式。基于这一高精地图的自动驾驶解决方案,“汽车大脑”能够提供百公里低成本快速建图,同时提供丰富的交通规则信息、以及多种定位元素,从而达到完整支持各种复杂路况的要求。

6405.gif

多传感融合的高精度定位方案配合语义地图,以及商汤深厚的SLAM技术积累,为自动驾驶提供了稳定、精准的定位服务


同时,商汤还研发了基于强化学习的智能决策方案,来辅助传统决策、路径规划和控制方案,提供更加智能的关键决策。通过有效利用大数据,让智能汽车更好地获取驾驶决策信息,比如最佳超车、换道时间等等这类需要大量驾驶经验的信息。


自2016年投入到智能驾驶研究以来,经过三年多的技术积累和产品打磨,商汤科技已在智能驾驶技术的产业化道路上,跨越了多座里程碑。2017年商汤与本田达成长期合作协议,共同研发面向L4级的自动驾驶技术;2018年,商汤在日本常总市、中国杭州及上海临港等地建立了自动驾驶测试基地,在半开放的道路上做自动驾驶演示。


商汤还与众多行业伙伴达成合作,除了传统汽车厂商,也包括一些新势力电动车制造厂商以及众多国内外知名Tier 1供应商。未来,商汤希望能扩大这项技术的辐射范围,让智能驾驶技术服务到更多客户,让更多的汽车用户体验到AI技术带来的便利。

03.png