首页 > 传媒 > 关键词 > 华为云HiLens最新资讯 > 正文

搭载华为云HiLens,揭秘无人车背后的黑科技

2019-09-10 16:38 · 稿源:站长之家用户投稿

  随着人工智能的普及和渗透,“无人”的场景越来越丰富,无人超市、无人车、无人机等已经融入我们的生活。

  乘着这股热浪,华为云携手上海交通大学学生创新中心举办了华为云人工智能大赛——无人车挑战杯。而此次大赛用的正是华为云人工智能平台:华为云一站式AI开发平台ModelArts和视觉AI应用开发平台Huawei HiLens(以下简称HiLens),无人车的设计由上海交通大学提供,旨为全面锻炼和提高赛队的AI解决方案能力及无人驾驶编程技巧。然而,无人车是怎么搭载华为云HiLens实现智能行驶的呢?下面就来解密这背后的黑科技。

  ModelArts与HiLens是什么关系?

  Modelarts是云侧面向AI开发者的一站式开发平台,提供数据预处理、半自动化标注、大规模分布式训练、自动化模型生成等能力。而HiLens是一站式AI应用开发、分发、部署的端云协同管理平台,并提供开放的AI技能市场,支持海量设备管理、动态应用部署、在线训练、端侧模型优化等端云协同能力。既然是端云协同,少不了端侧设备,随着HiLens平台发布的同时,华为还发布了一款具备AI推理能力的摄像机——HiLens Kit,构建“云-端-芯”的人工智能生态。参赛者在Modelarts平台训练好模型,再将模型导入HiLens平台进行技能开发,然后一键式部署到HiLens Kit推理,实现“云-边-端”一体化流程,大大提高开发效率。

  对于开发者来说,模型部署到端侧设备,需要考虑的不仅是芯片(CPU/GPU)、内存、网络带宽和稳定性等各种设备规格在内的开发问题,海量设备管理和维护的问题,还有业务和安全的问题。而HiLens平台和设备的出现,提供了一套完整可靠的全栈端云协同解决方案。在无人车中,HiLens Kit主要提供AI分析和ROS控制的能力,实现小车基于深度学习算法模拟实际场景的识别和控制。

  无人车搭载华为云HiLens带来哪些优势?

  1. 端云协同

  开发者可基于华为ModelArts AI开发平台训练算法模型,通过HiLens平台做技能开发并部署到HiLens Kit推理。在本次大赛中,参赛者运用华为云ModelArts平台训练好各类算法模型,然后把模型导入HiLens平台进行业务逻辑编写,完成技能开发,并将技能一键式部署到HiLens Kit,快速实现红绿灯识别、行人避障、线路识别、目标跟随等自动驾驶功能。

  对于参赛者来说,只需简单四步:创建模型、导入模型、创建技能、部署技能,最快 10 分钟即可定制符合交通场景需求的技能,并部署到任意已注册的端侧设备运行,后期还能通过HiLens技能管理平台一键实现端侧设备的技能升级和卸载。这样实现了从云到端的一体化,降低了参赛者训练时间和算法移植成本,提高了效率。

  2. 端侧设备HiLens Kit

  这是为HiLens平台打造的一款支持推理的智能摄像头,专用于开发者做端云协同的视觉应用开发。(1)超强的算力,内置华为自研Ascend 310 AI芯片(16TOPS INT8 算力),可以实现 1 秒百帧的处理能力,毫秒级人脸检测;超强处理能力可同时支持高达 16 路1080P视频分析;同时,内置轻量级容器,具备资源占用少、降低网络带宽、下载启动时间快等特性。让参赛者任性的开发更多复杂交通场景的算法而不用担心内存和算力的限制。(2)丰富的接口,包括USB接口、视频接口、音频接口、网口、WIFI、SD卡等提供了开发的便利,实现多模态交互。(3)可靠的管理,HiLens提供的端云连接持续可靠的通信组件,使端侧设备对于与云侧仅有间歇性连接或者无连接的场景,也具备制定决策的能力,在未连接网络的情况下也能保持设备状态。

  3. 内置技能开发框架Skill Framework

  为了简化技能开发流程,HiLens提供了自研端侧技能开发框架Skill Framework,通过封装底层接口、实现常用的管理功能,让参赛者可以在Huawei HiLens管理控制台上方便的开发Skill,培育AI生态。具体如下:

  (1)提供易用的开发组件,Skill Framework封装了视频分析算法的基础组件,如底层多媒体处理库(摄像头/麦克风驱动模块Media_mini)、Ascend310 芯片相关的图像处理库(DVPP)和模型管理库(ModelManager)等,提供了技能推理平台、视频管理、外部接口管理等能力,开发者只需少量代码即可开发自己的技能。

  (2)结合芯片性能优化,针对AI算法中比较耗时的计算单元,结合海思芯片架构进行优化,内置NPU专用硬件加速单元,与CPU处理AI运算相比,拥有约 50 倍能效和 25 倍性能优势,使计算性能得到极大提升。

  (3)技能移植,在HiLens平台上开发的Skill可以运行到任何基于华为海思芯片的设备上。因底层封装了系统平台适配层,且基于HiAI Engine自适配底层芯片,可无缝对接端侧设备,让开发者无需操心底层硬件的适配和系统平台的兼容问题,使开发更容易上手。

  (4)提供Python和C++接口,同时支持两种语言接口,参赛者可根据场景和开发习惯使用不同语言的接口。

  4. 在线更新技能

  训练并开发后的技能可远程下载发布,使比赛更具有实时性。HiLens管理平台提供技能管理功能,包括技能部署、停止和卸载,开发者优化后的技能,可在平台一键式部署更新,高效而快速,避免了传统的算法更新依赖固件更新周期长成本高的限制。

  5. 自动模型转换

  云侧开发框架丰富多样,开发者可根据喜好选择TensorFlow、MXNet、Caffe等,然后将训练好的模型导入HiLens平台通过模型转换功能,能够自动转换成适配端侧昇腾 310 芯片的OM框架模型,而参赛者只需提供三个文件:原始模型文件、网络结构文件和转换文件.cfg(cfg需参赛者简单配置参数生成),这样参赛者不用有云侧框架与端侧设备不兼容的顾虑,从而降低学习成本。

  6. 自动数据采集

  参赛者可利用HiLens Kit实现自动数据采集并上传到云端进行训练。为了更好的优化模型,少不了成千上万的真实数据,而开发者可通过HiLens Kit快速而实时地采集实际场景的数据,例如红绿灯识别照片和视频、路线照片等,传回云侧利用Modelarts针对性训练,提高模型精度,同时极大降低数据采集时间,实现设备的在线自动学习与更新。

  另外,Huawei HiLens也提供具有丰富技能的技能市场,可以让开发者将自己开发好的技能一键发布到技能市场供其他人使用、购买。同时,华为也将在技能市场发布多项技能,针对家庭、园区、车载等不同场景,覆盖物体检测、动作识别、语音识别等多种应用,供开发者和企业使用。为的就是打造一个全民用AI会AI的生态。

  基于HiLens独有的优势和能力,无人车挑战杯的参赛者可以结合“云-端-芯”的场景挖掘和探索更多复杂的场景,智行天下,为我们的生活带来更多的便利。未来,是智能的世界,人们对人工智能在不同行业和领域的探索也会越来越深入、越来越紧密,而Huawei HiLens给视觉AI领域提供了最可靠的端云协同能力和最高效的AI应用开发平台。

  日前,无人车挑战杯初赛刚刚结束,全国十强战队已经产生,选手们将前往上海,在即将举办的 2019 华为全联接大会上一决雌雄,现在售票通道已开放,登录大会官网即可在线购票,欢迎现场观战,一起见证无人车大赛的决赛过程。

网友热搜:

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 华为云优秀伙伴带来公开课,北明软件与泰克教育携手精彩分享

    社会生活中,摩擦纠纷难免发生。但据研究统计,相当部分的矛盾纠纷,根本无需走到诉讼程序,通过协商、调解、仲裁、公证等非讼渠道就能化解。加之信息网络的快速发展,也催化了当事人和相关工作人员通过在线的方式处理问题的需求。如何利用云计算、AI等新技术,在线多元化解纠纷,成了构建新型纠纷治理模式的迫切需求。然而,纠纷处理面临着种类繁多、流程各异、涉及到的部门和人员多等一系列复杂问题。比如纠纷类型,除了刑事犯罪

  • 企业数字化转型关键期,华为云送来了一记助攻

    2020年初的黑天鹅,造成了企业复产复工的难题,与此同时,数字化转型成了逆势中的一道曙光,助力企业快速恢复和崛起。 36氪此前的调查和报道中发现,处于发展不同阶段、规模不一的大中小企业,不管是危机时期,还是正常时期,用数字化方式谋求生存和增长已逐渐成为当下的共识。 大数据、人工智能、云计算、物联网等创新技术和日益数字化的业务流程,让我们看到数字化技术正迅速席卷大多数行业和地域,数字化进程正在被前所未有的?

  • 华为云FusionAccess连续四年中国桌面云市场第一

    IDC最新研究数据显示,华为云FusionAccess桌面云一马当先,又一次斩获中国桌面云市场第一。这已经是自该报告2016年发布以来,华为连续第四年领跑中国桌面云市场,显示了客户对华为在桌面云市场多年来持续投入的认可。 IDC数据显示,华为不仅继续在其耕耘多年的政府市场持续领先,并且在金融、制造、能源等更多的行业也越来越受欢迎。同时期待FusionAccess基于华为鲲鹏生态会有更加优异的表现。 2020年,华为云FusionAccess针对日?

  • 第四届世界智能大会“云上”启幕,华为云与计算破解“新基建”底层密码

    6月24日,由国家发改委、科技部、工信部、国家广电总局、国家网信办、中国工程院、中国科学院、中国科协和天津市政府共同举办的第四届世界智能大会通过“云上”方式启动,行业专家齐聚线上,为智能科技领域的良性发展献言献策,为聚力建设人工智能先锋城市打造“天津智港”贡献力量。华为公司副总裁、华为云与计算中国区总裁史耀宏出席云上会议并发表观点:未来十年将是中国产业升级最关键的十年,尤其是在宏观环境变化的情况下,

  • IDC:华为云容器软件市场份额位居中国第一,全球第二

    近日,全球权威咨询机构IDC发布《PRC SDC Software Market Overview, 2019H2/2019》报告,报告显示,华为云容器软件市场份额排名位居中国厂商第一、全球厂商第二。数据来源:IDC《PRC SDC Software Market Overview, 2019H2/2019》目前,华为云容器已构建起包括八大基础服务、四大解决方案在内的全栈容器产品,广泛服务于泛互联网、金融、政府、制造、生物等行业客户。华为云容器八大基础服务具体包括云容器引擎(CCE)、云容器?

  • 掌门教育携手华为云展开“5G+教育”深度合作 打造更有趣的智慧课堂

    信息技术的进步为千行万业的升级带来变革,4G的诞生改变了我们的生活,5G的落地则将改变世界。5G时代,绝不仅仅是网速和容量的提升,而是将掀起一场颠覆式的产业变革,以及再一次的数字生活大爆炸,每一个垂直行业企业,都将面临一场全新的变局。作为智能化教育的先锋探索者,掌门教育一直坚持创新教学场景应用,促进智能教育的升级发展。近日,掌门教育与华为云“5G+X”联创营展开深度合作,利用5G、AI、云等创新科技持续为教育赋

  • Counterpoint Research:华为云IoT物联网平台竞争力国内排名第一世界第三

    据全球行业分析咨询公司Counterpoint Research最新发布的数据显示,华为云IoT物联网平台在全球 20 家知名厂商竞争力排名中位居国内第一、全球第三。

  • 连续4年 华为桌面云稳居中国第一!

    据市调机构IDC的最新数据,华为云FusionAccess桌面云斩获2019年度中国桌面云市场第一,份额为24%。这也是该报告2016年首次发布以来,华为连续第四年领跑中国桌面云市场。IDC报告指出,华为

  • DNF云上长安战未央入场条件 云上长安战未央怎么入场

    ​DNF在6月18日开启了最新的副本云上长安战未央,很多玩家还不知道云上长安战未央到底怎么入场,下面就来为大家分享一下云上长安战未央入场的条件。

    dnf
  • 大搜车宣布并购云漾科技

    今日,大搜车宣布完成对北京云漾信息科技有限公司的并购。大搜车称,此次并购,将闭环汽车流通领域全场景数字化能力,为汽车厂商搭建从厂商端、店端到用户端“三端合一”用户全旅程数字化管理系统能力,进一步推动汽车产业迈向数字文明。

  • 让安全运营简单高效,腾讯云获首批可信云SOC行业标准认证

    6 月 17 日,由中国信息通信研究院指导,云计算标准和开源推进委员会承办,云计算开源产业联盟支持的“构建云时代下的安全运营中心在线分享会”正式召开,会上重磅发布了首批可信云安全运营中心(SOC)能力评估结果 ,腾讯云成为首批通过认证的四家企业之一。据了解,可信云服务认证是由数据中心联盟、云计算发展与政策论坛与中国信息通信研究院联合组织的我国唯一针对云服务可信性的权威认证体系。可信云自 2013 年推出以来,评估范

  • 腾讯安全推战略新品,SaaS化云防火墙打造云上第一道防线

    伴随企业核心业务大量上云,在云端混合环境、移动访问及在线应用程序迅速发展的趋势下,上云企业亟需更具细粒度的安全技术来替代传统防火墙。 6 月 16 日,腾讯安全举办线上新品发布会,宣布推出战略级新品——新一代SaaS化云防火墙,即开即用,助力企业解决云上业务隔离、统一访问管控等基础安全问题,为企业打造上云的第一道安全防线。企业上云后,面临四大基础网络安全挑战企业上云后,应用程序和数据可以在云端和混合环境中处?

  • 来领上云消费券!2020阿里云618全攻略

    阿里云 618 活动(6.1-6.30)火热进行中,发亿元 “上云消费券”——来活动会场立领 618 大礼包。活动入口:https://www.aliyun.com/activity/618/index

  • 阿里云宣布未来一年投入20亿资金 助力50家伙伴云上营收过亿

    凤凰网科技讯 6月16日消息,在2020阿里云合作伙伴峰会上,阿里云宣布深耕“被集成”战略,做强生态,未来一年投入20亿专项资金,助力50家伙伴云上营收过亿。2019年,阿里云提出“被集成”战略。阿里云表示,截至目前,阿里云与合作伙伴已发布500多款联合解决方案,覆盖30多个重点细分行业,一批伙伴在阿里云上已营收过亿。一周前,阿里云公布“再生长”三大方向:做深基础、做厚中台、做强生态。“被集成与做强生态是一脉相承的。?

  • 大搜车宣布并购云漾科技 收购金额未知

    大搜车宣布完成对北京云漾信息科技有限公司的并购。大搜车称,此次并购,将闭环汽车流通领域全场景数字化能力,为汽车厂商搭建从厂商端、店端到用户端“三端合一”用户全旅程数字化管理系统能力,进一步推动汽车产业迈向数字文明。大搜车未对外透露具体交易金额。大搜车表示,此次并购完成后,大搜车将整合云漾科技的产品、业务和能力,加速布局汽车流通领域的全场景数字化,从营销、销售、服务等场景提

  • 从“流失访客”到“销售机会”,火眼云这样帮您搞定

    B2B研究机构 SiriusDecisions 曾针对企业客户的购买旅程做过一个研究,结果表明,有67%的B2B购买过程是在网上进行的。所以,那些在网站上显示出的购买信号是企业绝对不能错过的。这也就要求B2B企业首先具备关注这些信号的能力,然后进行主动联系,以确保那些感兴趣的潜在客户能时刻保持活跃的参与度。 而承载B2B企业这项能力的技术就是我们经常所说的访客召回。 访客召回是一种在线营销形式:通过对一个人的在线行为进行洞察,为?

  • 新裸金属功能加持 ZStack深化云进程

    转载自公众号:信息化时代“新基建”是当前的业界热点话题。发展“新基建”既是国家考量今后一段时间经济形势做出的科学决策,也是应对数字化未来、支撑数字中国建设的战略决断。信息技术应用发展,作为“新基建”的重要内容,是拉动经济发展的重要抓手之一,将迎来黄金发展期。工信部相关负责人也曾在国务院联防联控新闻发布会上表示,数字基础设施建设是支撑未来经济社会发展的新型基础设施的重心和基础。一方面,在基础软硬件方

  • “云”办公时代,MAXHUB助力开启高效会议模式

    当下,线上办公和远程协同的需求在持续高涨,而数字化技术对于办公场景的重塑,也加速了“云”办公时代工效的提升。正如 3 月份基于远程视频形式成功召开的G20 峰会,不仅成为史上首次国际大型“云”会议,也充分印证了云场景下远程视频会议功能对于工效提升的保证。 “云”办公提效成为可能 其实,近几年智能会议平板已经成为不少大、中型企业的智能办公标配,而特殊期间“云”办公模式的常态化让智能会议平板的提效潜能进一步?

  • 滴滴云AI大师码:4321,购买滴滴云GPU云服务器享9折优惠

    滴滴云GPU云服务器提供了P4、P40、P100 和T4 四种机型,适用于深度学习推理/预测、深度学习训练、图像处理、浮点高性能计算、视频编解码等应用场景;滴滴云GPU云服务器具有超高性价比,价格优势明显。购买滴滴云GPU云服务器之前,可以输入AI大师码,有 9 折优惠。下面我就分享一下滴滴云AI大师码。滴滴云AI大师推荐码,购买滴滴云GPU云服务器享 9 折优惠。用户购买滴滴云GPU云服务器的时候,输入AI大师码:4321,即可享受 9 折优惠

  • 抖音推高校专属毕业特效 学生可与母校“云合影”

    6月,国内各大高校相继迎来了“毕业季”。受新冠肺炎疫情影响,今年毕业季不少师生、同窗难以相聚,只能“云答辩”、“云毕业”。为了弥补众多毕业生的遗憾,抖音联合北京大学、中国人民大学、浙江大学等近四十所高校,发起“全国高校云毕业贴纸”活动。基于抖音特效开放平台提供的能力,高校自主创作专属的毕业贴纸,融入本校的地标建筑等文化元素,传递高校对于毕业生真挚的祝福。毕业特效有“纪念册”

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议