首页 > 传媒 > 关键词 > 华为云最新资讯 > 正文

华为云FusionInsight MRS全面升级,构建坚实数据底座使能新云原生企业

2020-12-30 16:35 · 稿源:站长之家用户投稿

12月30日,华为云TechWave云原生2.0峰会在深圳顺利举行。在此次大会上,华为云FusionInsight首席架构师徐礼锋出席并做主题演讲“华为云FusionInsight MRS云原生数据湖构建一企一湖、一城一湖”。

IMG_256

华为云FusionInsight MRS云原生数据湖为政企客户海量数据提供大数据解决方案,支持大数据实时分析、离线分析、交互查询、实时检索等应用场景,助力政企释放海量数据价值,实现一企一湖、一城一湖,业务洞见更准,价值兑现更快!

HC2020由华为云CTO张宇昕在峰会上重磅发布了华为云FusionInsight新一代智能数据湖,原FusionInsight HD与华为云MRS强强结合,架构、内核归一,全面升级到FusionInsight MRS云原生架构,将为客户提供以下更具竞争力的云原生数据湖:

1.OBS大数据存算分离方案:首先,相较传统大数据存算一体化方案,软硬件解耦,提供更高性价比、更灵活的OBS大数据存算分离方案。OBS+大数据将计算与存储资源按需灵活扩容,避免资源浪费,OBS采用企业级EC,传统大数据需3副本,华为提供最低1.2副本的大数据存算分离解决方案,存储利用率从33%提升至80%+,使得整体TCO降低60%+。其次,OBS大数据存算分离方案将数据统一存储在OBS,数据在一个支持多协议共享,实现多引擎共享,数据免搬迁;同时,全局一套数据,统一数据管理,从而降低了运维的难度。最后,在性能方面,OBS大数据存算分离方案通过算子下推、软硬件调优,与同等成本的集群相比,性能提升30%+。

2.Data Lake Catalog统一数据目录:相较传统数据孤岛,DLC统一全局数据视图,让元数据全局可见。DLC还兼容Hive MetaStore,性能超越其3~5倍,在保持高性能的前提下,实现数据的全局可视。

3.BMS裸金属服务器:相较传统虚拟机部署,性能零损耗。其兼具大数据所需资源弹性,更是做到分钟级发放。同时,华为云大数据具备独家的SDI技术,基于擎天加速卡,拥有超低时延,可做到100%释放完整算力,让大数据分析、计算等高CPU、高内存、高IO等计算密集型场景如虎添翼。

新版本的FusionInsight MRS云原生数据湖除过以上云原生优势,还在以下5个方面持续发力:

IMG_257

1.快:基于MRS可构建实时数据湖,湖内建仓,一份数据支持全场景,缩短分析链路,加速数据分析全过程。首先,在数据入湖方面,通过Hudi实现全量数据的T+0实时增量更新;其次,在数据集市构建方面,通过ClickHouse实时OLAP能力构建大数据实时数据湖,基于Kimball直面业务构建主题数据,湖内建仓将数据的贴源加工、整合关联、主题加工过程都在湖内完成,一份数据支持数据应用全场景,缩短数据加工链路;通过HetuEngine实现数据虚拟化访问,统一SQL接口,简化用数,全民BI!经实测,在某客户营销业务场景下(大表多表关联场景)使用HetuEngine,较传统大数据性能提升10倍!

2.融:助力客户从孤岛建设方式向云原生数据湖演进,提供跨源、跨域、跨引擎融合分析,数据免搬迁。

3.大:支持最大2万+节点大规模集群,可集群联邦无限扩容。

4.稳:支持在线滚动升级,无需拆集群、搬应用,使客户一个架构持续演进,十年无忧;支持资源隔离,业务互不影响;支持两地三中心高可用灾备,确保业务连续性!

5.开放:华为云FusionInsight MRS积极拥抱开源,与世界同行,已获专利500+;具有20+开源PMC&Committer,先后开放CarbonData和openLooKeng等组件。

同时,华为云FusionInsight MRS作为最懂行的大数据解决方案,拥有雄厚的技术研发实力,深入了解客户场景痛点,为政企数字化转型提供最坚实的数据底座,连续多年获得了客户和权威机构的认可。在IDC MarketScape报告中,华为云位居领导者(Leaders)象限,并在市场份额和技术实力两个维度双领先!2020年,华为云FusionInsight已连续四年入选中国大数据企业50强,并荣获金融行业大数据最佳解决方案奖、中国信息通信大数据行业影响力奖、中国大数据平台类最佳解决方案奖。

IMG_258

截止2020年11月,华为云FusionInsight MRS云原生数据湖已广泛应用于政府、金融、运营商、大企业、互联网等行业,携手800+合作伙伴,服务于全球60+国家和地区3000+政企客户。

在金融领域,国内50%的TOP20金融客户(含银行、证券、保险等)均已使用华为云FusionInsight MRS构建其大数据平台。金融某大行之前使用传统大数据的三副本存储性价比低,往往10PB的存储空间,有效容量仅3PB;同时存在存储、计算等资源不均衡,往往存储利用率超过70%,但CPU利用率不足50%,扩容时需要计算、存储资源一起扩容,存在资源浪费现象;该金融客户使用FusionInsight后,实现了大数据平台与OBS对象存储服务的对接,在保证性能的前提下,实现了计算与存储独立按需扩容,提升整体资源利用率,TCO降低60%。

在运营商领域,国内三大运营商均使用华为云FusionInsight MRS构建其大数据平台。广东移动大数据平台的集群规模已超1500节点,日均处理作业21万+,承载业务达200+,其中包括对内精准营销、收入稽核,对外广告投放等关键业务,服务连续性需求较高。而大数据技术迭代快,传统升级方式需断电、重启等操作,升级操作复杂,运维繁琐,影响现网业务运行,且大集群升级耗时长,突发故障易中断升级动作。为了保持业务的连续性和技术引领,广东移动通过华为云FusionInsight MRS滚动升级能力,实现大集群分批次滚动升级,业务0中断;故障节点隔离功能确保升级动作的稳定运行,实现7*24小时不间断服务;1000+精细化运维指标及可视化操作简化运维,实现一个架构持续演进。

在交通领域,深圳地铁在6、10号线采用华为云FusionInsight MRS构建大数据分析平台,打造领先的5G+大数据方案,并构建其数据资产中心和运行监控中心,承载地铁各业务系统,支撑设备健康、能耗管理、客流统计、线路中心级监控、应急决策和图像型火灾分析等线路级数据分析,数据分析效率从周级缩短至分钟级,实现高效运营,推动深圳步入更美好的全联接数字化轨道交通新时代…

除过在以上各行业的应用,在环境保护方面,青海绿能数据有限公司基于华为云FusionInsight MRS构建了国内首个能源大数据创新平台,实现了规划辅助决策、用气象数据科学指导发电等创新业务,为上下游产业链企业提供25类47项数据服务,推动28座新能源场站实现了“无人值班、少人值守”,并有效支撑了青海“绿电15日”,以大数据为基石,建设绿色新青海,守护高原和谐生态。

同时,华为坚持“自己的降落伞自己先跳”,华为集团IT通过FusionInsight MRS构建OneData大数据集群,实现大数据平台在大规模场景下的开拓,OneData集群其规模已至1万+节点;同时,实现了统一的数据管理服务,在菩提海UniDB产品中,通过逻辑统一方式,把50+物理分散的计算集群(Hadoop),基于五统一(数据安全,元数据目录,数据集成,数据访问,任务调度),整合成湖仓一体的架构,支撑上千个企业租户的PB级数据分析处理需求。一个基于FusionInsight MRS 的“+治理,+AI,+运营,+云”的融合数据底座(菩提海)已经在华为集团IT广泛使用,未来可期。

以上只是“冰山的一角”,华为云FusionInsight MRS一方面不断深入理解客户不断发展的业务诉求,另一方面,持续技术创新并引领行业发展,商业诉求+技术创新双轮驱动行业可持续、高质量发展,“用数”助力客户商业成功!上面的论述已经充分证明,华为云是“懂行”的大数据领导者,真正让客户用好数、管好数、放心用,构建数字世界黑土地!


免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 华为云的选择与突破

    文/财经杂志 沈知一成立三年多,华为云经历了看、试、聚焦、做稳的阶段,在中国云市场初步塑造了自己独特的竞争力,但它面临的压力也颇大,如何突围,再次书写传奇,这是华为云未来需要面对的现实。2020年12月30日,华为创始人及总裁任正非一份关于该司企业业务和云业务的发言不仅以总裁办文件形式签发,还被发布在了华为心声社区之“公司文件”板块。心声社区是供华为员工畅所欲言的内部论坛,但许多内容外部人也能看得到,可谓敢

  • 任正非敲打,华为云自白:窄门里能否走出宽路

    岁末年初,华为对外公开了任正非在企业业务及云业务汇报会上的讲话,发言中对三岁的华为云“敲打”了一番,要求“一定要有所为,有所不为,不能面面俱到”。上述发言公之于众后,众议纷纷,不少业内人士甚至认为,任正非是在“踩刹车”。还有人猜测,任正非话里话外暗示,正式上线三年多、如今跻身国内第二的华为云,也许又要大动筋骨。争议并非空穴来风,看似出身“豪门”的华为云,比国内友商后发数年,未来能否先至?有所为有所?

  • 华为人事调整 余承东增任华为云与计算BG总裁

    华为刚刚发布公示:余承东增任华为云与计算BG总裁。这也意味着余承东将同时负责手机、汽车、云计算三大板块业务。

  • 华为云鲁班会训练营第三期如约而至,助力成为引领智慧未来的1%

    1月11日至1月13日,华为云鲁班会-核心伙伴训练营第三期“鲲鹏创新中心专场”正式开启,鲁班会高级开发者社群运营活动持续召开。来自全国各地的60余位技术大咖与企业高管相聚华为松山湖园区,共同围绕云原生、SaaS化、应用使能、AI使能与数据使能五大课题展开了学习和交流。 知者创物·聚为共赢——鲁班会品牌理念与视觉VI焕新升级 在本期训练营中,鲁班会正式发布全新的品牌理念和视觉设计。新logo充分提炼并优化鲁班锁的结构,代?

  • 消息称华为消费者业务CEO余承东将负责华为云与计算BG,2月宣布

    据每经网报道,消息人士称,华为消费者业务CEO余承东将负责华为云与计算BG,2月将对外宣布。

  • 云端花粉年会与华为终端云服务一起解锁更美好的数字生活

    1 月 23 日一年一度的华为花粉年会如约而至不同往年本次花粉年会首次以线上形式举办为花粉们带来了一场别开生面的潮酷盛会期间一场有关个性化表达一起游戏的分论坛更是聚焦华为主题和华为游戏中心两大业务让广大花粉和在线观看的网友进一步感受到独特的美学享受和别样的游戏创新体验更透过生动的讲解演绎以及妙趣横生的观点碰撞领略到华为终端云服务的魅力在一起更美好不只是说说而已数字化的浪潮

  • 华为、北汽新能源合作车型「华为版」将于今年4月发布

    据财联社从北汽新能源获悉,华为与北汽新能源合作的“华为版”车型将于今年 4 月发布, 11 月上市。此外,北汽新能源IMC架构方面,BE21 平台将有阿尔法t和s二款车型推出,之后会有基于BE22 平台产品推出。

  • 阿里云云效助力企业10倍研发效能提升

    2021年1月15日,《揭秘阿里云云效如何助力企业10倍研发提效》活动在云端举行。阿里云云效资深技术专家何勉发布云原生时代的研发新范式——ALPD及《阿里云云效助力企业10倍效能提升案例集》。阿里云云效资深技术专家陈鑫(神秀)深入浅出的讲解了云效云原生DevOps平台的产品特性、云原生解决方案,并正式发布云效的五大安全特性:基础安全、备份与恢复、安全与加密、审计与洞察、代码安全检测。通过新的研发模式和云原生DevOps平台?

  • 华为:全网打开5G SA 功能的终端中华为手机占9成

    2020年11月,三大基础电信运营商宣布5G SA 正式商用。华为方面表示,截止12月中旬,全网打开 SA 功能的终端里华为手机占比超过90%,遥遥领先业界其他厂商。

  • 云之家周勋:推出专属云助力伙伴掘金SAAS协同市场

    近日,在“成就客户 成就伙伴 决胜云端”为主题的金蝶集团生态合作伙伴大会上,云之家首席增长官周勋表示:云之家将聚焦“客户驱动产品引领 经营提速”新战略,以更优的产品和服务,助力伙伴开发更大的协同办公市场,共创共赢。2019年云之家提出了“新机遇,新征程,新目标”的战略并首战告捷,2020年在营收方面实现高速增长,超额完成预期目标。同时在产品稳定性、客户满意度、方案完整性方面都取得重大突破。2020年新一代智能协?

  • 未来已来,无言电器云做饭让智能云科技走进厨房

    “互联网+”的概念甫一出现就受到各行业追捧,其火爆程度不亚于当初的区块链,在其影响下,智能家电的发展也是如火如荼,最近,智能家电行业用一朵“云”玩出了智能家电的新高度。

  • “云+安全”加快壮大云计算产业,超级科技与阿里云签署战略合作协议

    过去十年是云计算突飞猛进的十年,全球云计算市场规模增长数倍,我国云计算市场从最初的十几亿增长到现在的千亿规模。同时,我国公有云市场规模首次超过私有云,越来越多的中小企业进入了核心业务上云的新阶段,对云计算的依赖程度不断提升。云计算为中小公司提高企业信息化应用水平,降低企业信息系统构建成本,得到了更多企业的认可。2021年2月2日,杭州超级科技有限公司(以下简称“超级科技”)与阿里云计算有限公司(以下简称“阿里云”)

  • 智汇华云 | 安超OS为企业数字化转型构建坚实的云基座

    随着越来越多的用户将超融合用在重要的系统上,使得整个系统的安全性和可靠性也就显得尤为重要。那么安超OS是怎样构建出让用户放心的安全性和稳定性呢?本期智汇华云为您深入剖析!安超OS采用的是端到端的全容错冗余架构设计,完全支持了数据容错、网络容错、SSD容错、HDD容错、节点容错、机架容错、站点容错这7种容错方案设计。从而从根本上解决了硬件故障导致的安全风险。除此之外,还做了很多安全性方面的设计与考虑。安超OS安?

  • 年会防疫新思路,梦网云会议助力企业玩转“云年会”

    不平凡的 2020 终成过去,满载着希翼的 2021 如约而至。 随着新的一年的到来, 对过去的总结以及对新年的规划是每个企业必不可少的一环,所以所有企业都不约而同地把“年会”提上了日程,意在鼓舞全员士气、奏响新年的奋斗号角。然而令企业困扰的是,肆虐全球的疫情并未随着 2020 年的离开而消失,人员聚集的高风险性使传统模式下的年会计划难以落地。各地政府“三令五申”,严格要求企业控制年会规模,提倡以视频会议的形式召开年

  • 借AI技术升级在线课堂 作业帮直播课让“云同桌”进行“云对话”

    2020年1月,作业帮行业内首家在“直播大班课”中上线“小组直播间”,对大班课的学员进行分组。在“小组直播间”中,学员进入课堂可自由选择伙伴,6人一组,6组之间进行PK。一些小学生还会将课堂上的这种伙伴关系延伸到课下。在对“小组直播间”的用户产品调研中,作业帮小学产品负责人了解到,在辅导老师的家长群里,妈妈们会帮孩子寻找小伙伴的妈妈“加微信”,结成一起学习的小伙伴。2021年1月27日,根据用户调研问卷中学员和家

  • 在拼售后服务的时代,看瑞云服务云如何助力发那科赢得客户认可!

    在“新基建”的背景下,作为自动化和智能化技术集大成者的工业机器人,迎来了新的发展“契机”。而且,今年受到疫情的影响,少人化、无人化生产方式成为制造型企业的新需求,这一趋势也将促使工业机器人快速增长。机器人作为高端精密制造行业,其后续的维护、修理等服务要求都会比较高,而且工业机器人的客户是生产型企业,如果一台机器人停机,将会造成整条生产线全线瘫痪,因此对工业机器人行业来说,售后服务非常重要,尤其是服

  • 历史转折中的华为,为何选择了余承东?

    ​近期,华为种种变动为外界高度关注,尤其是围绕手机业务及其掌舵人——华为消费者业务CEO余承东本人。1月26日,刚否认出售华为Mate和P系列手机业务后,27日,紧接着以官宣的方式,回应了余承东调任的不实传闻——余承东将兼任华为云与计算BG总裁。

  • 未来华为手表或可测高血压,华为揭晓三项全新数字健康研究

    【北京时间2021年1月23日】今日,华为花粉年会在线上举行,华为消费者业务CEO余承东,华为消费者业务手机产品线总裁何刚参与活动,并带来关于华为品牌与战略、全场景智慧生活、数字健康全新研究的精彩演讲。华为消费者业务手机产品线总裁何刚首次公布了华为正在进行的三大健康研究项目,即高血压管理研究、智能体温健康研究、冠心病筛查研究,持续探索未来数字健康新方向。与此同时,面向全球布局,覆盖设计美学、软件创新、硬件创

  • 天翼云硬核助力华科大新冠病毒蛋白质分析系统上云

    新冠来袭,一场人类与新型冠状病毒的“战役”就此打响。作为抵御病毒的强有力武器,疫苗被无数人寄予厚望,在这场疫苗研发的攻坚战中,中国一直走在前列。 2020年12月31日,国内首批新冠灭活疫苗获得国家药监局批准附条件上市,该疫苗保护率为79.34%,实现了安全性、有效性、可及性、可负担性的统一,达到世界卫生组织及国家药监局相关标准要求。据不完全统计,当前全球已有40余个国家批准中国疫苗注册上市、紧急使用或提出进口疫

  • 云管理服务专家新钛云服为企业数字化转型赋能

    近日,由云管理服务专家新钛云服主办的“创新驱动 服务赋能 | 云时代,企业数字化转型创新研讨会”在浙江安吉落幕!

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签