新闻  |   论坛  |   博客  |   在线研讨会
黑芝麻为自动驾驶带来“视觉感知”芯科技
wangying | 2018-07-05 15:20:46    阅读:33957   发布文章

       2018年6月,在北京举行的“安创成长营(ARM Accelerator Camp)”第五期路演上,黑芝麻智能科技(上海)有限公司获得“最具潜力奖“。

1微信图片_20180705143742.jpg

图:安创加速器联合创始人杨宇欣先生(左)为黑芝麻联合创始人与COO刘卫红先生颁奖
       在此前的1月5日,黑芝麻曾宣布完成近亿元A+轮战略融资。该轮融资由蔚来资本领投,芯动能投资基金、北极光创投等共同参与投资。2016年11月黑芝麻已获得北极光领投的A轮融资。
        那么,黑芝麻有哪些黑科技?

        黑芝麻联合创始人与COO刘卫红在安创成长营上称,该公司要做感知系统全球领先者
             黑芝麻的产品定位
       黑芝麻提供基于图像处理、计算图像以及人工智能(AI)的嵌入式视觉感知平台,不仅要看清楚世界,而且要理解世界,致力于成为全球领先的自动驾驶“感知“技术方案提供商。
1.png
        最近,总会看到一些关于自动驾驶车祸的报道,例如Uber的感知系统不稳定,所以把warning关掉了,结果发生了车祸;特斯拉没有把隔离带识别出来,结果直接撞了上去;上图右下角的是Intel Mobile无人驾驶测试车,没有识别出红绿灯,直接闯过去了……。可见,如果没有一个好的感知系统,自动驾驶无从谈起。

         实际上,一个稳定、可靠的感知系统需要有四个方面的功能:清晰的视觉、优质的算法、多传感器融合、足够的计算能力。
           黑芝麻的解决方案 QQ截图20180705152927.png       上图是黑芝麻提出的解决方案。面对复杂的外部环境,如车、人、道路、交通标识等,通过传感器感知信号,利用控光技术把光场进行处理(摄像头),使摄像头能够在各种特殊工况条件下成像。再通过毫米波雷达、超声波雷达、GPS、IMU(惯性测量单元)与摄像头融合,将这些信号传入到黑芝麻的感知系统。
       在黑芝麻感知系统中搭载独特的图像处理技术,感知理解算法以及优化的计算平台。关于感知理解算法,例如人的特征、行为和场景的识别等;黑芝麻还有一个优化的SoC计算平台,这样能够将感知结果传达给下游自动驾驶企业去做决策、控制。因此,黑芝麻提供的是端到端、全栈式的感知解决方案。
           智能感知计算芯片 QQ截图20180705153211.png       上图是黑芝麻第一次对外展示智能感知芯片SoC的架构。

2QQ截图20180705153444.png

       上面中间的部分是Arm 架构CPU,蓝色部分都是黑芝麻的技术,包含ISP(图像信号处理器)、Codec(编/解码器)、计算机视觉和神经网络等。和国内很多企业只关注神经网络加速相比,黑芝麻的技术更加丰富。
       目前,汽车是黑芝麻着重关注的领域。利用黑芝麻的独特技术,黑芝麻能够开发出车规级的芯片,实现的功能包括支持多种传感器的输入,针对超低光、超高动态范围的图像处理,也能够满足L3、L4自动驾驶的计算能力。同Mobileye EyeQ4和EyeQ5相比,黑芝麻的感知芯片在单位功耗下的计算能力有优势。

2.png         在高动态HDR成像当中,经常会出现如上图的亮暗高度对比的情景。通过黑芝麻的算法能够得到比较完整、清晰的图片,这样能够为深度学习、网络加速提供很好的图像信息来源。

3.png
       上图demo(演示)展示了在不同工况下,可有效识别出车道和汽车、行人、交通标志,此外,弯道、大逆光、低光、雨/雾天等也能进行识别。
4.png
       上图demo展示了利用多种传感器的融合,进行高精度定位。绿线是黑芝麻定位的轨迹,红色的是普通GPS信号的轨迹。可以看到,经过传感器融合后的定位与实际位置几乎没有偏差。
              黑芝麻实力
        黑芝麻成立于2016年8月,在美国硅谷、中国上海、深圳、武汉建立了自己的研发机构和办事处,员工近百人,都是来自于细分领域的顶级公司,包括OV(豪威)、Ambarella(安霸)、高通、英伟达,甚至美国国防部,平均工作时间超过15年,在芯片的设计和验证方面有着丰富的经验。

            与车厂的合作进展
        车规级芯片选择了三家有代表性的汽车厂,一家是中国实力最强的主机厂,另一家是中国新能源汽车中的佼佼者,还有一家是新势力造车的典型代表。
         关于车规级芯片的进展,目前芯片设计部分已经结束,完成所有验证要到2021年。
那么,在我国的智能网联汽车规划中提到,我国需要有自主的智能驾驶计算平台,现在整车厂的进程如何?刘卫红先生介绍道,现在中国的自主品牌主机厂都有一个很明确的A/B方案,A方案就是上文提到的外围公司(笔者注:英伟达等),B方案就是黑芝麻,所以黑芝麻需要跟着自主品牌一起成长。
           与传感器、算法厂商的合作
        感知平台需要有与第三方传感器有紧密的合作,为此,黑芝麻的芯片的功能特征是有雷达和GPS接口等。
        现在也出现了新的激光雷达,但目前激光雷达商业化比较难,成本也比较高,目前黑芝麻只是留了接口,但还没有进行具体布局,实现商业化还需要一定时间。
         那么,现在算法已经固化到芯片里了吗?刘卫红先生称没有固化,只是留了接口。黑芝麻有ISP(图像信号处理),再加上神经网络,SoC架构中还有基于RISK-V保密和加密安全方面等。
       值得指出的是,基于视觉的识别都是黑芝麻自己做的。当然,第三方也有一些专门做机器视觉的公司,他们的算法也可以应用于黑芝麻的芯片。黑芝麻是比较开放的平台,会给第三方开发两种选择:一是用黑芝麻提供的神经网络开发工具直接进行原始网络的硬件合成;二是用黑芝麻提供的神经网络开发工具进行网络的深度优化,包括剪裁和再训练。

          关于“安创成长营”

         前文提到,此次报道的是“安创成长营”路演活动。

         “安创成长营”(Arm Accelerator Camp)于2016年1月正式启动,每年运营2期,致力于聚集创新创业力量,培养前沿科技独角兽。借助Arm丰富的生态资源,为人工智能及物联网领域创新创业提供以技术为核心的一站式深度加速服务,帮助初创企业走上良性成长的轨道。
        近三年,安创成长营成功运营五期,共孵化与加速海内外项目89个,32% 项目具国际背景,项目总估值约325亿元人民币,被红杉、经纬、IDG、华登、真格、创新工场、晨兴、高榕、高瓴、金沙江等知名机构投资;产品和技术被宝马、吉利、戴姆勒、博世、海尔、科沃斯机器人、中移物联网等厂商试用或采用;Demo Day(路演)更以黑马之姿燃爆北京、上海、深圳、杭州,为学员们提供了一个展示各自创新成果及技术“硬”实力的平台,为业界带来了一场又一场无与伦比的科技盛宴。

           关于“安创加速器”

       安创加速器(Arm Accelerator)是Arm全球唯一加速器,聚焦于人工智能和物联网产业的创新服务平台。安创一直致力于帮助技术驱动型创新创业企业精准对接生态资源、投资机构、销售渠道、宣传渠道,提供一站式深度加速服务;帮助资本市场对接最具投资潜力的创新团队,挖掘早期优质项目;帮助大企业寻找所需要的创新型项目,加速项目落地,做真正的创新引擎;帮助国外先进技术在国内落地,以及国内项目在国外渠道布局,注重国际合作与交流,推动全球创新。

微信图片_20180705155430.jpg

图:Arm/安谋科技(中国)执行董事长兼CEO吴雄昂在现场观摩

*博客内容为网友个人发布,仅代表博主个人观点,如有侵权请联系工作人员删除。

参与讨论
登录后参与讨论
推荐文章
最近访客