您正在使用IE低版浏览器,为了您的雷峰网账号安全和更好的产品体验,强烈建议使用更快更安全的浏览器
此为临时链接,仅用于文章预览,将在时失效
智能驾驶 正文
发私信给丛末
发送

0

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

本文作者: 丛末 2018-11-12 09:39
导语:分享自动驾驶独角兽 Momenta 如何「打造自动驾驶大脑」~

雷锋网 AI 科技评论按:目前全球汽车行业公认由美国高速公路安全管理局(NHTSA)和国际自动机工程师学会(SAE)提出的的分级制度,把自动驾驶分成 L0 到 L5 级,分别承担相应的职责,而 L4 作为级别第二高的无人驾驶,是指在特定场景下(如高速公路)可以在完全没有人干预时进行全自动无人驾驶,到现在为止,实现 L4 无人驾驶依旧是人工智能领域最具挑战性、最复杂的难题之一。

近日,在雷锋网 AI 研习社第 4 期职播间上,中国最高估值自动驾驶创业公司 Momenta M4U 技术负责人陈凯深度分享了自动驾驶独角兽 Momenta 如何「打造自动驾驶大脑」,并解读实现 L4 级别的自动驾驶需要怎样的技术与人才。

陈凯:Momenta M4U 技术负责人,中国科学技术大学博士,RoboCup@Home League 2014 世界冠军,多年从事机器人研究和相关工作。

分享主题:从人才角度看 L4 无人驾驶的实现(附 Momenta 招聘解读)

分享提纲:

1、Momenta 团队介绍:打造自动驾驶大脑

2、三大平台实现大数据与 AI 算法的反馈闭环

3、Momenta 核心技术的实现:基于深度学习的环境感知、高精度地图、驾驶决策算法

4、实现 L4 级别的自动驾驶需要怎样的技术与人才

雷锋网 AI 研习社将其分享内容整理如下:

今天主要在这里跟大家分享一下 Momenta 的技术路线,另外会重点介绍一下 L4 级别无人驾驶的人才需求。

Momenta 团队介绍:打造自动驾驶大脑

Momenta 的公司定位是打造自动驾驶大脑,简单来说,大脑就是跑在无人驾驶系统中的软件。下图是公司的核心团队:

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

  • CEO 曹旭东,清华大学毕业,在人工智能行业积攒了近 10 年的研发和管理经验。他曾在 CVPR/ICCV/ECCV 等计算机视觉顶级会议发表论文数十篇,并曾在美国 National Data Science Bowl 比赛拿下全球亚军。在创办 Momenta 之前,曹旭东曾任商汤科技执行研发总监,率领百人研发团队,具有丰富的管理经验及产品落地经验。在加入商汤科技之前,曹旭东任职微软亚研研究员,其研发技术广泛用于 Xbox、Bing、How-old 等知名产品,其中现象级产品 How-Old 有着数亿用户。

  • 研发总监任少卿,中国科技大学和微软亚洲研究院联合培养博士。任少卿先生是当前最流行的物体检测框架 Faster-RCNN 的第一作者、当前最有影响力的深度学习网络结构 ResNet 的第三作者,同时也曾获得 ImageNet 2015 物体检测、图像分类、物体定位冠军,MS COCO 2015 多项比赛冠军,及 CVPR 2016 最佳论文等众多荣誉。

  • 研发总监夏炎,中国科技大学和微软亚洲研究院联合培养博士,深度学习和大数据领域专家。在 Bing 等知名产品中,都有应用夏博士的研发成果。

  • 研发总监孙刚,中国科学院计算机视觉博士,高性能并行计算系统专家,大规模图像识别专家。孙刚先生曾获 ImageNet 2016 场景分类亚军、ImageNet 2017 图像分类冠军,并曾参与设计世界上首个针对深度学习的 GPU 训练集群。

此外,Momenta 的团队成员主要来源于 MIT、CMU、清华大学、北京大学、中国科学技术大学等国内外高校及研究机构,以及 Google、Amazon、Facebook、微软亚洲研究院、腾讯等知名高科技公司,拥有深厚的技术积累、极强的技术原创力和丰富的行业经验。

Momenta 是一家拥有世界级研发能力的公司。下面是深度学习领域中比较有名的三项成果,都出自于 Momenta 的核心团队成员。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

第一个是 SENet,它是业界性能最好的深度学习网络单元,Momenta 也凭借 SENet 获得 2017 年 ImageNet 图像分类世界冠军。

第二个是 Faster R-CNN,任少卿是其作者,它是引用频率最高的物体检测框架,Momenta 在此基础上做了很多改进。

第三个是 ResNet,它是当前最有影响力的深度学习网络结构,这篇论文也获得了 2016 年 CVPR 的 Best Paper。

这 3 项研究成果相关的论文引用数已经超过 17000 次;同时,团队还拿下 ImageNet 2015 物体检测、图像分类、物体定位冠军,MS COCO Challenge 2015 冠军,ImageNet 2017 图像分类冠军等一系列国际顶级赛事的奖项。

Momenta 的定位是打造自动驾驶大脑,始终专注于在人工智能方面的软件和算法的实现上。

Momenta 的技术包括三大模块:

基于深度学习的环境感知。它主要解决的问题就是,无人驾驶车辆可以感知它身边的一些物体,包括静态的路面、路牌以及动态的车辆、行人、自行车等等。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

高精度地图。不同于人类司机,无人驾驶汽车在道路上运行时非常依赖于高精度地图,这样它才能知道其正处于什么样的位置、要到达的位置与当前位置有什么样的关系,并根据定位和信息去做较为精准的导航,最终自动前往目的地。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

驾驶决策算法。驾驶决策由数据推动,类似于建立一个拥有 1000 亿公里驾驶经验的智能司机。通过众包路测,Momenta 获得了高精度语义地图中海量的驾驶轨迹。通过对海量驾驶轨迹的学习,Momenta 的算法可以根据当前环境感知和高精度地图信息,做出驾驶决策规划。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

基于这些技术,Momenta 开发了不同级别的自动驾驶方案,而底层技术之前是有很强的通用性的,后面我再具体介绍。

底层平台实现大数据与 AI 算法的反馈闭环

接下来介绍一下如何运用大数据和大计算平台实现大数据与 AI 算法的反馈闭环。

1. 大计算平台,它是支撑 Momenta 去训练得到一个比较好的模型所需要的基础能力,主要是针对深度学习的 GPU 训练系统。在创立以来的两年多时间里,团队不断优化训练平台,在 2018 年上半年,Momenta 的自有平台已有数千块的 GPU,这个数量在创业公司以及大公司内部都是一个非常大的规模。不过仅拥有这么多数量的 GPU 是远远不够的,团队也设计了一种分布式深度学习训练系统 ROCS,它针对深度学习做了很多优化,包括跨服务器间高速信息传输、优秀的存储优化,其基于该系统和 SENet,助力了加速产品迭代过程。这一训练系统的几大特点是:稳定、高效、软硬件协同优化、易用。

2. 大数据平台,指的是百亿公里数据采集能力。Momenta 利用众包的思路积累驾驶相关的数据。不同车辆所面临的路况、天气和光照情况在不同的城市千差万别,积累下来的数据能更好地助力感知算法的研发。数据来源于产品,通过多渠道收集来的数据,能让技术得到更好的迭代,有助于提升产品的质量和性能,最后形成良性的闭环。

拿到这么多数据后,并不能直接接到大数据平台,中间会有一些步骤:

第一步是数据采集,通过产品采集数据;

第二步是数据筛选,数据回收后,其中有一些数据是没用的,所以需要将一些没用的、模糊的数据挑选出来去掉;

第三步是对有效数据的数据标注,数据系统实际已经使用了 Momenta 精准的算法去进行检测,而这些算法能大大提高标注效率,不需要从 0 开始进行标注;

第四步,数据接入到 Momenta 的大数据平台上,进行模型训练。

训练过程其实是非常需要消耗存储和计算资源的,因此内部也有一套在线远程众包数据标注系统,能利用训练结果模型帮助数据筛选,并用算法辅助数据半自动化标注。加入 Momenta 的同学也有机会接触到这些项目,自己的一些想法也有机会去实践并验证。

另外值得一提的是深度学习算法模型,Momenta 能将性能好的模型更好地集成到产品中。在模型精度几乎不受损的情况下,让模型计算速度提升 10-100 倍,同时将模型尺寸压缩 100 倍,让模型在时间和空间上都有两个数量级的提升,并让训练出来的模型更好地放入车载嵌入式平台等低计算、低功耗的平台上,从而更易于产品化。

此外,公司内部还有仿真平台,用到了非常专业的物理仿真引擎,可对车辆动力进行真实仿真,也可以对在道路上添加动态和静态障碍物进行仿真,能帮助高级别无人驾驶进行在线测试。

Momenta 核心技术的实现

具体介绍一下 Momenta 的环境感知能力,它对不同类型障碍物进行检测和识别。

道路上最常见的障碍物就是车辆,Momenta 现在可以识别多种车型,而且检测的不仅仅是外边框,还能通过一些方法去还原出车辆本身接近 3D 的姿态、轮胎位置等,有了这些信息,就能对障碍物的相对速度、离相机的位置进行一个比较好的估计,从而更好地判断车与周围其他车辆的相对关系。

除了车辆,人也是道路上非常常见的障碍物。环境感知能对人体的 17 个关节点进行追踪检测,识别每个路人的姿态和动作,例如识别人是在骑车还是走路,人如果走路的话,就要检测其是否走到车道等与车辆行驶相关的位置上了;人如果在骑车的话,就会检测其速度和 3D 姿态。

除了这些动态障碍物,静态障碍物对于车辆也非常重要,包括车道线、路口引导线、交通标识牌、红绿灯等。例如一些竖着的路灯杆,由于遮挡可能只被识别出一部分,但是环境感知算法会估计出它们的长度,并利用一些先验信息确定路灯杆的 3D 位置。另外,车道线也是非常有帮助的语义信息,在这些信息基础上,再加上交通牌等信息,它可以构建基于视觉的语义地图。

Momenta 也针对中国场景,对感知算法进行了优化,对有国内特色的车辆采集了一些数据,并对这些数据进行针对性的训练,以更好适应路况、道路上不同类型的障碍物等。

基于车道线、标识牌等信息,Momenta 可以构建一个高精度语义地图。为什么要构建一个高精度语义地图?相对于传统的地图而言,Momenta 高精度语义地图具有如下优势:

第一个是支持更快的更新。对于同类型道路,车辆只需要使用众包设备上的相机进行道路采集,就可以更新当前所面临的情况。另外,如果因为道路维修以及发生了一些变化情况,车辆也能通过摄像头采集相关信息,对其进行很好的维护;

第二个是高度压缩。高精度语义地图的空间存储占用非常小,此外,还具有更好的鲁棒性。一些比较底层的特征,势必由于受到光线、观测角度等因素,对 2D 特征的提取产生不利影响,而高精度语义地图就能减少这些因素的影响;

第三个是建图精度和定位精度,高精度语义地图从不同视角、不同时间、多摄像头采集到数据,能最大化地保证地图的精度,天时能实现定位精度误差小于 10 cm。

实现 L4 级别的自动驾驶需要怎样的技术与人才

目前 Momenta 累计完成融资超过 2 亿美金,估值超过 10 亿美金。Momenta 的技术领先性及产品落地能力除了为资本市场广泛认可外,也深受行业合作方的认可。

接下来针对想加入的小伙伴,介绍一下 Momenta 的成长空间。

Momenta 是一家非常开放、具有分享精神的公司,大家加入公司后都有机会参加国际顶级会议,聆听行业专家的分享。另外 Momenta 的培养机制也非常健全,包括:

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

以下是 Momenta 的热招岗位,感兴趣的话可以直接扫描右下方二维码投递简历。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

首先,Momenta 非常通用的岗位就是无人驾驶软件开发工程师(C++)。不同于一般的软件开发,无人驾驶系统方向的算法和软件开发对数据结构、算法优化能力的要求非常高,需求量非常大但是要求也非常高。不过这个岗位有很多机会接触到系统架构、算法优化的实践,而在这些项目中,大家都需要去跟同事进行深入的沟通和交流,才能将相关工作做得非常出色。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

Planning 算法工程师也是需求量比较大的岗位,负责无人驾驶汽车的行为预测、路径的决策与规划,因此需要用到自动化和规划学习的一些方法。不同的优化和算法都有各自的优势和局限性,因此,这个岗位需要很好地去运用策略,使得驾驶系统对不同场景能进行更好地处理。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

传感器融合与环境建模算法工程师,需要利用感知来构建精确的车辆周围动态和环境信息。该岗位需要对多相机、毫米波雷达、超声和激光物体检测的数据进行融合,以提高静态、动态障碍物位置、速度的估计精度,从而构建环境感知模型。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

无人驾驶仿真系统工程师,这个岗位除了仿真器相关工作,还有很多数据方面的工作,另外还需要使无人驾驶系统在仿真器上更好地还原所看到的情景,对强化学习和机器学习方面的能力都有一些要求。这个岗位会与仿真开发的同事进行协作,一起去实现更真实的仿真系统开发。

Momenta 陈凯:Momenta 自动驾驶背后的底层技术及人才需求 | 职播间第 4 期(附 Momenta 招聘解读)

除了研发相关的岗位,Momenta 还有一些测试岗位——无人驾驶测试工程师,我希望任职这一岗位的人有相应的背景知识,从而更好地了解无人驾驶产品怎样更好地进行系统层面的测试,分析不同的测试结构,并定位模块,更好地推动开发团队去改善相关问题。

欢迎大家加入 Momenta,一同在最好的时间,跟一群对的人,做一件对的事。

以上就是本期嘉宾的全部分享内容。更多公开课视频请到雷锋网AI研习社社区(https://club.leiphone.com/  )观看。关注微信公众号:AI 研习社(okweiwu),可获取最新公开课直播时间预告。

雷峰网原创文章,未经授权禁止转载。详情见转载须知

分享:
相关文章
当月热门文章
最新文章
请填写申请人资料
姓名
电话
邮箱
微信号
作品链接
个人简介
为了您的账户安全,请验证邮箱
您的邮箱还未验证,完成可获20积分哟!
请验证您的邮箱
立即验证
完善账号信息
您的账号已经绑定,现在您可以设置密码以方便用邮箱登录
立即设置 以后再说