首页 > 传媒 > 关键词 > 西部数据最新资讯 > 正文

西部数据推出分区存储技术 引领数据中心进入ZB时代

2019-06-18 13:51 · 稿源:站长之家用户投稿

  这是一个万物皆可数字化的时代,我们的世界正在全面交由 0 和 1 来构建。IDC的报告指出,现在每一年人类所创造的数据总量都相当过去人类历史中产生数据的总和。根据预测, 2023 年人类数据的产生将会超过 100 个ZB(数据单位量级GB\TB\PB\EB\ZB)。

  过去几年,全球及中国的ICT市场规模一直处于快速增长态势,尤其是IT技术架构市场,北美和中国是数据中心市场的主要带动区域,而中国仍然是整个全球ICT市场增长速度最快的。

  到 2025 年,无论是用户产生的,还是IoT设备捕获的数据,或者是数据中心创建并复制的数据,将会达到“ZB”级别(1ZB=1,073,741,824TB),与我们现在常接触到的存储容量单位TB、GB相比,是一个非常巨大的数字。我们将会迈入一个全新的数据时代。

  而在这个大数据时代,如何处理海量数据就变得相当关键。从现在的趋势来看,解决ZB级数据的存储和处理有三种方式,分别是多云间的数据流动、数据分层与智能化。

  其中根据数据的热度分级选择存储介质和存储方式是很关键的。在数据中心或是云服务器里面,数据分层的情况很普遍,我们上传到云端的冷数据和热数据的区别是非常明显的。据IDC的数据显示,整个数据中心的冷数据可以占到整个比例的60%-90%,这部分数据包括长期保存的数据和容量导向的介质所存储的数据,对于存储容量的要求是非常大的。

  随着数据规模的不断扩大以及应用程序需要负载的工作更多样,如何更好地存储大量数据?如何有效管理数据爆炸的数字化时代?

  在这个大背景下,数据存储技术和架构的革新迫在眉睫。

   6 月 12 日,西部数据公司宣布推出分区存储技术,旨在为云和超大规模数据中心架构师融合创新与行业标准,从而设计出高效的存储层,帮助用户在ZB级容量的存储时代保持具有竞争力的总体拥有成本,实现更大的规模效益。

  西部数据指出,82%的数据在 2022 年都会变为流媒体数据写入的视频数据,通过在存储部件中建立不同的分区,根据数据的不同类型在存储固件中存储、转移和管理数据,将会提高整个存储效能,并且作为定制化的数据基础架构的时候,可以把控制和智能协同从原来的系统硬件的层面,下沉到系统存储部件的层面。

  针对于此,西部数据提出了基于开源技术的分区存储的技术提案,这套新的存储技术不仅包含了开源工具和文件系统支持,还包括了面向数据中心的SMR(叠瓦式磁记录)超大容量HDD以及ZNS NVMe SSD开发平台。

  (分区存储设备原理示意图 来自Zonedstorage.io)

  开发套件中的软件库囊括了最主要的开发工具、数据库和相关的命令集库,并且都会公布在开源社区网站Zonedstorage.io,该网站提供了软件开发库、工具、ZNS信息、SMR资源和参考架构等,帮助数据中心基础架构工程师更好的利用分区存储技术。这也是西部数据作为在NVMe联盟持续贡献以及长期为开源社区提供基于SMR开发工具的延伸。

  打造整个分区存储生态,显然不单单是软件就能解决的。除了推出ZonedStorage.io网站外,西部数据的产品套件还包括Ultrastar ZNS NVMe开发SSD和Ultrastar DC HC620 SMR HDD 15TB。Ultrastar DC HC620 15TB现已推出并向已通过验收的客户批量供货,Ultrastar ZNS NVMe开发SSD也将向部分客户开放。并且西部数据还透漏将在明年出货20TB容量的SMR HDD。

  预计到 2022 年,HDD和SSD的支出将达到IT基础架构总支出的27%。而采用SMR技术的HDD可以做到比普通HDD更大的容量,甚至高达20%,它的容量优势对于数据中心降低其总拥有成本(TCO)是非常重要的。例如在一个1ZB级的超大规模数据中心,全部采用20TB的SMR HDD的话,将可以减少 2500 万个硬盘、 42000 个 60 槽位机架数量,并且相应的温控成本也会下降。

  另外一点,SMR目前已经得到了生态系统当中广泛的支持,包括内核的支持,SUSE已经全面支持SMR,而SMR在硬件方面需要IO控制器、HBA和拓展其产品的支持,现在包括HBA的厂家、ATTO、BROADCOM、MICROCHIP等等都推出了支持了SMR的产品。西部数据甚至把今年看做是SMR HDD推入部署的元年,预计在 2023 年,全世界将有超过50%的数据会在SMR HDD中存取。

  (NVMe划分区域中的命名空间数据放置示意图 来自Zonedstorage.io)

  西部数据还宣布针对早期分区存储工作推出ZNS(分区命名空间)开发SSD。ZNS是NVMe标准规划内的新特性,也是对SMR技术的补充,它让开发人员在共同的软件堆栈下可以不分存储介质类型有效的调用SMR和ZNS。ZNS SSD通过将“区域”与SSD的内部物理属性进行匹配而实现这些改进,有效的减少数据存放低效能的现象,旨在减少写放大,增加可用容量,并提供更高的吞吐量和更低的时延。

  西部数据分区存储架构将会赋能应用层、主机和存储互相协调数据存放位置,以充分利用在SMR HDD上可以实现的最大存储容量,以及ZNS SSD上实现更好的耐久性和可预测的低延迟和QoS性能。

  随着生态系统的不断发展和SMR的推广,西部数据致力于在提供高容量的同时不断演进能源辅助磁记录技术。目前也有越来越多的云服务提供商正在投入资源管理高容量SMR HDD的主机软件,SMR和ZNS正在从根本上重塑云和企业数据中心,将通过智能化应用架构成为当前和未来ZB级数据时代的关键基石,以便协助大体量客户实现更好的TCO。

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 聚焦数据管治,快手举办数据管治技术交流会

    近日,快手大数据团队联合“快手中学”,举办“快手数据管治技术交流会”,各行业数据相关开发者报名参与。快手是短视频行业开创者与引领者,致力于成为全球最痴迷于为客户创造价值的公司,帮助人们发现所需、发挥所长,持续用有温度的科技提升每个人独特的幸福感。在海量的 UGC 数据、业务数据、用户数据背后,支撑快手数据业务的快手大数据平台,秉承“以领先的大数据技术,激活数据价值,赋能业务,打造快手核心竞争力”的使命?

  • 专业技术、数据服务赋能快消行业数智化——舟谱数据出席第五届华糖万商大会

    第五届华糖万商大会于 2020 年 12 月6- 8 日在郑州国际会展中心举办。华糖万商大会暨中国糖酒食品精品展(简称AFBC)由华糖云商股份于 2016 年创立,因其万商汇聚、千企领秀、大咖云集,引发中国糖酒食品行业的广泛关注,已成为中国快消品产业领域具影响力的商业展会!舟谱数据,作为国内领先的产业赋能型数据智能公司,也受邀出席了此次会展。在万商大会上,舟谱数据展台醒目的企业logo蓝色,搭配灯带设计,配备场景化的视频解读等,

  • AI技术赋能大数据服务 蜜度信息获中国软件技术大会两项大奖

    12月18日至19日,由中国科学院软件研究所、中科软科技股份有限公司联合主办的2020中国软件技术大会在北京举行。大会以“软件赋能行业,技术驱动创新”为主题,设置“大数据与AI平台”、“云计算与移动架构”、“创新金融科技”、“产品设计与研发”、“技术架构变革”、“技术趋势与热点”等多个专场论坛,围绕新基建时代的科技创新等话题展开。大会上公布了软件技术领域大数据、人工智能、创新金融科技等领域优秀企业、人员的评选

  • Google 回应全球宕机:内部存储配额问题导致

    Google 服务遭遇全球大面积宕机,旗下Gmail、Google Drive、Google Docs、Google Adwords、Google Adsense和Google Pay等等服务出现宕机,无法正常使用相关服务,但大部分搜索引擎业务仍然完好。

  • DataPipeline亮相2020数据库技术大会,揽获「技术卓越奖」

    近日,第十一届数据库技术大会(DTCC2020)在北京国际会议中心落下帷幕,DataPipeline携旗下实时数据融合平台精彩亮相本次盛会,同时揽获「2020技术卓越奖」。历经十年的积累与沉淀,DTCC已然成为国内数据库领域的技术风向标,见证了整个行业的发展与演变。DataPipeline受邀参与本次顶级数据领域技术盛会,与华为、阿里、腾讯、中兴、SAP、浪潮等国内外33家领先的软件产品、技术方案提供商同台亮相并揽获「2020技术卓越奖」。体现?

  • 华云大咖说|企业级统一存储解决方案

    随着技术的发展,分布式存储采用可扩展的系统结构,更加易于扩展和管理,其成本低、硬件灵活度高以及可快速集成等特点,对于正在经历数字化转型的企业来说非常重要,越来越受到不同行业用户的青睐,已被逐步应用于大规模数据应用的场景中。本期大咖说,邀请到华云数据产品营销经理张开亮为大家带来“企业级统一存储解决方案”。核心内容1.随着云原生应用的兴起,企业用户对存储提出了新的要求,在保证安全性的前提下,灵活、敏捷、

  • 云原生数据库正当时,华为云TechWave云原生2.0技术峰会等你来

    云原生2.0时代,数据库将面临怎样的变革?云原生数据库将如何如何加速企业数字化转型,助其成为“新云原生企业”。12月30日,来华为云TechWave云原生2.0技术峰会,听华为云数据库技术专家解读云原生数据库的新动向。云原生数据库新时代来了云原生,即云上内生的云能力,基于统一的架构和云原生基础设施,实现多云协同、混合云解决方案、边云协同等能力。云原生时代下,企业使用数据库的方式发生了根本性变化,基于统一云基础设施的?

  • 数据备份不用愁,易我备份专家呵护您的数据!

    现在生活中很多小伙伴基本都离不开电脑,而在此过程中,难免会产生很多的文件。所以,能够做好这些文件的备份,不仅仅可以减小因文件丢失造成的损失,也能够后期提升自己做事的效率。易我备份专家升级13.0,更全面地呵护您的数据安全。(易我备份专家曾获日本最大在线软件平台之一VECTOR平台——最受欢迎人气软件)最新13.0升级版本解决了因快照点问题导致的克隆和备份还原数据不一致的问题;修改启用排除文件选项时备份的实现方式?

  • 华云数据夯实数字新基建 与滁州市政府正式签约深耕新一代信息技术产业

    2020年12月31日,滁州华云数据中心项目签约仪式顺利举行。滁州市委副书记、市长许继伟,滁州市人民政府副市长张其广,滁州市人民政府党组成员刘茂松,华云数据董事长、总裁许广彬,董事、首席财务官陆君,安徽公司副总经理王建宏,润迅数据副总经理许冬冬以及滁州市各相关部门领导等出席签约仪式。滁州市作为安徽东向发展的桥头堡、长三角27个中心区城市之一。近年来抢抓长江经济带等重大国家战略机遇,按照“双创+新基建”思路,?

  • 什么魔力让Drift相机成为维缔技术的首选

    在信息化高速发展的今天,我们的生活、工作等方方面面都依托联网完成,极简的设备操作方式辅以强大的云端数据处理系统,让我们的工作效率得到了前所未有的提升,而每一次效率的提升,都为企业带来了丰厚的回报,这也就是为什么众多企业一直孜孜不倦地寻找通过科技提升效率的方式和方法。 近日,美国知名企业维缔技术(VERTIV)与Drift公司达成首轮战略合作,将Drift公司的头戴式相机产品X1+运用在其维保服务领域,为其业务发展带来?

  • 妄想山海捏脸数据汇总 好看男女捏脸数据一览

    妄想山海最近上线了,在进入游戏之后就是捏脸了,很多玩家对捏脸很头疼,不知道捏什么样的脸比较好看,下面就来为大家分享一下捏脸的数据。

  • 天谕手游捏脸数据怎么导入 捏脸数据导入详细方法教程

    天谕手游在最近正式的上线了,在这个手游中也是对喜欢捏脸的玩家很友好,有大量内容可以捏,下面就来为大家分享一下天谕手游捏脸数据怎么导入。

  • 击穿医疗数字化转型壁垒 有孚网络专有存储云助力产业升级

    足不出户就能挂号问诊,诊断报告可实时在线查询……这些新兴的看病方式,大大缓解了广大群众足不出户就能挂号问诊,诊断报告可实时在线查询……这些新兴的看病方式,大大缓解了广大群众在疫情期间出门难、看病难等难题。长久以来,医疗行业自身的特殊性让医疗行业的信息化建设相比于其他行业总是慢人一步,为何在疫情期间却得到了突飞猛进的发展?医疗行业在疫情期间能够快速发展,一方面得益于我国互联网行业的发展,互联网+医疗的

  • 智伍云数据上线啦,免费好用的各类数据采集API接口

    智伍云数据是智伍应用旗下的一套api数据采集接口系统,通过特定的api接口可以毫秒级采集到你需要的数据,你无需编写任何爬虫,也不用懂采集规则和任何技术,零基础就可以采集到你想要的任何数据,通过任何一门编程语言调用一下智伍云数据的api接口即可,接口成熟稳定,调用简单方便。有很多人的Discuz和微擎插件应用模块,在资讯内容栏目建设方面,都集成进了智伍云数据,全自动无人值守,更新发布跟自己业务有关的资讯内容。很多?

  • 美团也玩大数据杀熟?

    一篇名为《我被美团会员割了韭菜》的文章刷屏,该文作者基于自己点外卖的经历发现,在美团上的同一家店铺,用同一个配送地址,在同样的时间点单,会员比非会员的配送费更高。文章中称,本以为开通外卖会员会省钱,但附近几乎所有外卖商户的配送费都比非会员高1-5元。

  • 安徽探索区块链助农获“世界数字农业十大技术成果”,蚂蚁链提供技术支持

    近日,在首届2020世界数字农业大会上,“区块链技术帮助乡村振兴区域特色农作物全产业链”获评“世界数字农业十大技术成果”。

  • 预计2021年将出现另一个半导体超级周期,存储器生产商竞争加剧

    外媒分析称,预计2021年将出现另一个半导体超级周期,半导体公司正在加大努力以获取更大的市场份额。尤其在存储器半导体市场中,对新技术的竞争正在加剧。

  • 苹果的这项新技术,能替代微信小程序?

    不知道大家是否还记得,在今年WWDC20发者大会上,苹果推出了App Clip,用户无需下载应用,即可体验到部分功能。此前,海外部分地区已经上线App Clip功能和轻App码,用户只需将iPhone靠近轻App码或用摄像头扫描该代码,便可快速打开轻App完成需要的任务。

  • 中国教育科技大会|作业帮发力OCR+AI技术,持续打造技术壁垒

    12月23日,2020中国教育科技大会于北京召开。本届教育科技大会以“新业态·新动能·新教育”为主题,围绕中国教育进行深度剖析,并以最新、最全、最优的视角,全方位深入教育本质,聚焦业态发展。作业帮智能技术实验室负责人王岩出席会议,并进行了《创新科技助力作业帮在线教育》主题演讲,对教育科技的应用和创新发表前瞻性观点。 据了解,中国教育科技大会由中国计算机用户协会指导,iTechClub(互联网技术精英俱乐部)教育专委

  • 重磅!霄云科技再获殊荣,荣获“2020年度软件定义存储产品金奖”

    日前,百易传媒(DOIT)公布了2020年度“百易奖”获奖名单,霄云科技自主研发的碧海分布式存储凭借其领先的技术创新能力、优秀的产品品质,荣获2020百易存储风云榜·软件定义存储产品金奖”。百易传媒(DOIT)发起评选的“百易奖”, 是对企业级IT和存储产业的年度总结与回顾,百易奖分为“百易IT风云榜”和“百易存储风云榜” 两大榜单。凝聚榜样力量,鼓励产品创新,两大榜单以产业视野聚焦用户需求,经专家评审组严格流程得出,

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签