用“芯”看懂世界,黑芝麻为自动驾驶带来

发布于:2018/7/6 9:59:29 | 1432 次阅读

               在北京举行的“安创成长营(ARM Accelerator Camp)”第五期路演上,黑芝麻智能科技(上海)有限公司获得“潜力奖“。


  图:安创加速器联合创始人杨宇欣先生(左)为黑芝麻联合创始人与COO刘卫红先生颁奖

  在此前的1月5日,黑芝麻曾宣布完成近亿元A+轮战略融资。该轮融资由蔚来资本领投,芯动能投资基金、北极光创投等共同参与投资。2016年11月黑芝麻已获得北极光领投的A轮融资。

  那么,黑芝麻有哪些黑科技?

  黑芝麻联合创始人与COO刘卫红在安创成长营上称,该公司要做感知系统者

  黑芝麻的产品定位

  黑芝麻提供基于图像处理、计算图像以及人工智能(AI)的嵌入式视觉感知平台,不仅要看清楚世界,而且要理解世界,致力于成为的自动驾驶“感知“技术方案提供商。

  最近,总会看到一些关于自动驾驶车祸的报道,例如Uber的感知系统不稳定,所以把warning关掉了,结果发生了车祸;特斯拉没有把隔离带识别出来,结果直接撞了上去;上图右下角的是Intel Mobile无人驾驶测试车,没有识别出红绿灯,直接闯过去了……。可见,如果没有一个好的感知系统,自动驾驶无从谈起。

  实际上,一个稳定、可靠的感知系统需要有四个方面的功能:清晰的视觉、优质的算法、多传感器融合、足够的计算能力。

  黑芝麻的解决方案


  上图是黑芝麻提出的解决方案。面对复杂的外部环境,如车、人、道路、交通标识等,通过传感器感知信号,利

  用控光技术把光场进行处理(摄像头),使摄像头能够在各种特殊工况条件下成像。再通过毫米波雷达、超声波雷达、GPS、IMU(惯性测量单元)与摄像头融合,将这些信号传入到黑芝麻的感知系统。

  在黑芝麻感知系统中搭载独特的图像处理技术,感知理解算法以及优化的计算平台。关于感知理解算法,例如人的特征、行为和场景的识别等;黑芝麻还有一个优化的SoC计算平台,这样能够将感知结果传达给下游自动驾驶企业去做决策、控制。因此,黑芝麻提供的是端到端、全栈式的感知解决方案。

  智能感知计算芯片



  上图是黑芝麻次对外展示智能感知芯片SoC的架构。



  上面中间的部分是Arm 架构CPU,蓝色部分都是黑芝麻的技术,包含ISP(图像信号处理器)、Codec(编/解码器)、计算机视觉和神经网络等。和国内很多企业只关注神经网络加速相比,黑芝麻的技术更加丰富。

  目前,汽车是黑芝麻着重关注的领域。利用黑芝麻的独特技术,黑芝麻能够开发出车规级的芯片,实现的功能包括支持多种传感器的输入,针对超低光、超高动态范围的图像处理,也能够满足L3、L4自动驾驶的计算能力。同Mobileye EyeQ4和EyeQ5相比,黑芝麻的感知芯片在单位功耗下的计算能力有优势。



  在高动态HDR成像当中,经常会出现如上图的亮暗高度对比的情景。通过黑芝麻的算法能够得到比较完整、清晰的图片,这样能够为深度学习、网络加速提供很好的图像信息来源。



  上图demo(演示)展示了在不同工况下,可有效识别出车道和汽车、行人、交通标志,此外,弯道、大逆光、低光、雨/雾天等也能进行识别。



  上图demo展示了利用多种传感器的融合,进行高定位。绿线是黑芝麻定位的轨迹,红色的是普通GPS信号的轨迹。可以看到,经过传感器融合后的定位与实际位置几乎没有偏差。

  黑芝麻实力

  黑芝麻成立于2016年8月,在美国硅谷、中国上海、深圳、武汉建立了自己的研发机构和办事处,员工近百人,都是来自于细分领域的公司,包括OV(豪威)、Ambarella(安霸)、高通、英伟达,甚至美国国防部,平均工作时间超过15年,在芯片的设计和验证方面有着丰富的经验。

  与车厂的合作进展

  车规级芯片选择了三家有代表性的汽车厂,一家是中国实力最强的主机厂,另一家是中国新能源汽车中的佼佼者,还有一家是新势力造车的典型代表。

  关于车规级芯片的进展,目前芯片设计部分已经结束,完成所有验证要到2021年。

  那么,在我国的智能网联汽车规划中提到,我国需要有自主的智能驾驶计算平台,现在整车厂的进程如何?刘卫红先生介绍道,现在中国的自主品牌主机厂都有一个很明确的A/B方案,A方案就是上文提到的外围公司(笔者注:英伟达等),B方案就是黑芝麻,所以黑芝麻需要跟着自主品牌一起成长。

  与传感器、算法厂商的合作

  感知平台需要有与第三方传感器有紧密的合作,为此,黑芝麻的芯片的功能特征是有雷达和GPS接口等。

  现在也出现了新的激光雷达,但目前激光雷达商业化比较难,成本也比较高,目前黑芝麻只是留了接口,但还没有进行具体布局,实现商业化还需要一定时间。

  那么,现在算法已经固化到芯片里了吗?刘卫红先生称没有固化,只是留了接口。黑芝麻有ISP(图像信号处理),再加上神经网络,SoC架构中还有基于RISK-V保密和加密安全方面等。

  值得指出的是,基于视觉的识别都是黑芝麻自己做的。当然,第三方也有一些专门做机器视觉的公司,他们的算法也可以应用于黑芝麻的芯片。黑芝麻是比较开放的平台,会给第三方开发两种选择:一是用黑芝麻提供的神经网络开发工具直接进行原始网络的硬件合成;二是用黑芝麻提供的神经网络开发工具进行网络的深度优化,包括剪裁和再训练。

  关于“安创成长营”

  前文提到,此次报道的是“安创成长营”路演活动。

  “安创成长营”(Arm Accelerator Camp)于2016年1月正式启动,每年运营2期,致力于聚集创新创业力量,培养前沿科技独角兽。借助Arm丰富的生态资源,为人工智能及物联网领域创新创业提供以技术为的一站式深度加速服务,帮助初创企业走上良性成长的轨道。

  近三年,安创成长营成功运营五期,共孵化与加速海内外项目89个,32% 项目具国际背景,项目总估值约325亿元人民币,被红杉、经纬、IDG、华登、真格、创新工场、晨兴、高榕、高瓴、金沙江等知名机构投资;产品和技术被宝马、吉利、戴姆勒、博世、海尔、科沃斯机器人、中移物联网等厂商试用或采用;Demo Day(路演)更以黑马之姿燃爆北京、上海、深圳、杭州,为学员们提供了一个展示各自创新成果及技术“硬”实力的平台,为业界带来了一场又一场无与伦比的科技盛宴。

  关于“安创加速器”

  安创加速器(Arm Accelerator)是Arm加速器,聚焦于人工智能和物联网产业的创新服务平台。安创一直致力于帮助技术驱动型创新创业企业精准对接生态资源、投资机构、销售渠道、宣传渠道,提供一站式深度加速服务;帮助资本市场对接投资潜力的创新团队,挖掘早期优质项目;帮助大企业寻找所需要的创新型项目,加速项目落地,做真正的创新引擎;帮助国外先进技术在国内落地,以及国内项目在国外渠道布局,注重国际合作与交流,推动创新。


  图:Arm/安谋科技(中国)执行董事长兼CEO吴雄昂在现场观摩








参与讨论
后参与讨论

//评论区

推荐阅读

智能网联汽车国际标准法规协调专家组(HEAG)召开工作会议

近年来智能网联汽车快速发展,新技术不断涌现,与相关产业融合度持续提升,正在推动全球汽车产业发生深刻变革。为应对此种形势,欧、美、日等汽车工业发达国家和地区都加大了智能网联汽车的国际标准法规协调的参与力度,在联合国世界车辆法规论坛(UN/WP.29)和国际标准化组织(ISO)层面,智能网联汽车相关国际标准法规协调活动正快速推进。 为更有效地支撑上述组织的国际标准法规协调活动,2017年全国汽车标准

0215jiejie | 发布于:2022-12-01 0评论 0赞

苹果推出搭载M2芯片的新款iPad Pro 799美元起售

据苹果官网,苹果推出搭载M2芯片的新款iPadPro。 11英寸wifi版起售价为799美元,wifi+蜂窝网络版起售价为999美元;12.9英寸wifi版起售价为1099美元,wifi+蜂窝网络版起售价为1299美元。

0215jiejie | 发布于:2022-10-19 0评论 0赞

新能源汽车领衔 “中国智造”加速登陆欧洲市场

全球五大车展之一巴黎车展时隔四年再度启幕。在这场被视为“全球汽车行业风向标”的盛会上,国内外汽车品牌云集,长城汽车、比亚迪等再次领衔中国汽车出海。 长城汽车欧洲区域总裁孟祥军表示:“欧洲是长城汽车最重要的海外市场之一,巴黎车展是长城汽车向欧洲市场展示GWM品牌和产品的最佳机会。长城汽车正在研究汽车行业碳排放的整个生命周期,到2025年,将推出50多款新能源产品,全力支持可再生能源使用,为全球用户

0215jiejie | 发布于:2022-10-19 0评论 0赞

严监管时代来临,电子烟“通配”大战走向何方?

针对通配烟弹厂商的一系列诉讼的结果,将对生产通配烟弹的品牌未来在电子烟行业的发展产生深远影响。 10月1日,《电子烟强制性国家标准》正式实施,中国电子烟监管全面生效。而在电子烟行业进入规范化、法治化阶段前夕,一场围绕着通配烟弹的争论在行业里发酵。 “通配”是电子烟从业者约定俗成的概念。换弹式电子烟由烟杆和烟弹组成,“通配”烟弹指的是非品牌商生产、可与品牌烟杆匹配使用的烟弹。多位业内人士表示,被

0215jiejie | 发布于:2022-10-19 0评论 0赞

Bourns 全新大功率分流电阻器

采用金属感应引脚,专用于大电流应用中进行精确测量 全新分流电阻器专为电池管理系统、大电流工业控制和电动汽车充电站 提供高可靠性、高成本效益的解决方案 美国柏恩Bourns全球知名电子组件领导制造供货商,宣布新增12款CSM2F系列功率分流电阻器,扩展其产品组合。全新系列采用铆接通孔金属传感引脚,可满足大电流应用中对电压测试点精确定位日益增长的需求。最新型Bourns?CSM2F系列分流电阻器

0215jiejie | 发布于:2022-10-18 0评论 0赞

请尊重元宇宙“这个筐”

元宇宙是个筐,啥都往里装,但区别在于有的像聚宝盆,有的像垃圾桶。国庆假期刚结束,中青宝“90后”董事长李逸伦便亲自上阵,玩起了元宇宙婚礼。靠着老板首秀和代言,中青宝顺势推出“MetaLove元囍”App,正式进军元宇宙婚礼赛道。 就产品而言,如同其他元宇宙产品,李逸伦的元宇宙婚礼“新奇与吐槽齐飞”:有人说是有趣的尝试,有人则认为像QQ炫舞结婚系统。要知道,QQ炫舞是一款推出了十余年的老游戏。

0215jiejie | 发布于:2022-10-13 0评论 0赞

边缘计算:突围商业模式痛点

截至8月末,中国5G基站总数达210.2万个,中国5G发展已经进入下半场。随着5G加速融入千行百业,互动直播、vCDN、安防监控等场景率先大规模落地,车联网、云游戏、工业互联网、智慧园区、智慧物流等场景也快速走向成熟,这些更大流量、更低时延、更高性能的场景涌现,对边缘计算的刚性需求势必爆发。 GrandViewResearch预测,即使在新型冠状病毒肺炎疫情肆虐全球的背景下,边缘计算和5G网络市

0215jiejie | 发布于:2022-10-13 0评论 0赞

商务部回应美商务部升级半导体等领域对华出口管制并调整出口管制“未经验证清单”

商务部新闻发言人10日就美商务部升级半导体等领域对华出口管制并调整出口管制“未经验证清单”应询答记者问。 有记者问:近日,美国商务部在半导体制造和先进计算等领域对华升级出口管制措施。同时,在将9家中国实体移出“未经验证清单”过程中,又将31家中国实体列入,请问中方对此有何回应? 对此,商务部新闻发言人回应称,中方注意到相关情况。首先,通过中美双方前一阶段共同努力,9家中国实体zui终

0215jiejie | 发布于:2022-10-13 0评论 0赞

TCL华星官宣与奔驰合作:推出全球首款横贯A柱的车载显示屏

今年1月,奔驰带来了VISIONEQSS概念车,其中控台采用了一块完全无缝的47.5英寸曲面显示屏,横贯整个A柱,令人印象深刻。今天,TCL华星正式官宣与奔驰达成合作,并认领了VISIONEQSS上这块全球首款横贯整个A柱曲面的车载显示屏。 根据TCL介绍,这款显示屏采用了完全无缝的超薄一体化设计,将仪表盘、中控与副驾娱乐显示融为一体,并能够与3D实时导航系统相辅相成。 同时,这块显示屏还采用

0215jiejie | 发布于:2022-10-12 0评论 0赞

半导体板块暴跌 谁最受伤

国庆假期后首日开盘,上证综指时隔5个月再次失守3000点,与此同时,半导体板块也再度走低,其中,北方华创、雅克科技等个股跌停。10月11日早盘期间,半导体板块持续下挫,北方华创、雅克科技再度跌停。截至下午收盘,北方华创、雅克科技维持跌停状态,华海清科、拓荆科技-U、盛美上海、清溢光电、海光信息的跌幅则超10%。同日,半导体板块中的119只个股中超五成呈现下跌趋势。 在半导体板块遭遇下挫的同时,北

0215jiejie | 发布于:2022-10-12 0评论 0赞