首页 > 传媒 > 关键词  > 数据服务最新资讯  > 正文

持续引领一栈式数据服务 PingCAP 发布 TiDB 5.3 版本

2021-12-20 17:34 · 稿源: 站长之家用户

2021 年 11 月 30 日,企业级开源分布式数据库厂商 PingCAP 正式发布 TiDB 5.3 版本。TiDB 在规模化联机交易和实时分析能力两大领域实现快速的迭代创新,TiDB 5.3 版本中 HTAP 架构的性能和稳定性取得显著提升,系统可观测性得到进一步增强,生态工具提速为 MySQL 用户带来重磅福利,累计优化和更新 40 多项功能,以“一栈式数据服务平台”帮助企业用户更好地应对双十一等海量数据严苛场景下的挑战。

HTAP 架构的性能和稳定性取得显著提升

在数字化转型的过程中,企业对“海量、实时、在线”的数据需求变得更加迫切,企业中的任意人在任意时间、任意地点对任意形态的数据都可能产生消费的需求,作为 HTAP (Hybrid Transactional/Analytical Processing,即混合事务 / 分析处理)数据库的引领者,TiDB 用“一栈式数据服务平台”应对企业规模化交易和实时分析的需求,提升关键业务的时效性,降低数据技术栈的复杂性。

自 TiDB 5.0 版本 HTAP 架构发布以来,已经广泛地应用到金融、物流、零售、新经济等行业头部用户的风控、反欺诈、实时数据中台、实时数仓等场景。在小红书反欺诈数据分析场景中,面对单表破 50 亿的数据规模,TiDB HTAP 实时查询技能发挥稳定,分钟级呈现促销发放优惠券的使用与分发情况。汽车之家把 TiDB HTAP 应用于个性化营销场景,根据用户画像实时推荐喜好信息与促销信息推荐,相较 MySQL 聚合场景效能提升 20-50 倍。

得益于开源社区大量真实场景的验证与反馈,5.3 版本对 TiFlash 列式存储引擎进行了大幅深层优化,如调整存储引擎底层文件结构和 IO 模型,优化访问不同节点副本和文件区块的计划等。新版本中 TiFlash 支持更多的函数(涵盖字符串、时间和其他计算)下推到 MPP 引擎,提升了分布式计算时远程数据的读取效率,消除了高负载条件下数据等待造成内部进程超时引起的例外和任务失败。此外,数据校验的完善、SQL 告警信息和日志收集的优化提升了集群的综合运维能力。

TiDB HTAP 架构可随数据量和业务增长轻松扩展到 200 节点以上的大规模集群,并且做到 OLTP 和 OLAP 负载隔离互不影响,在双十一等读写压力双高的极致场景下提供性能优异、可靠稳定的服务。经实际验证,TiDB 5.3 版本在金融、物流等超高吞吐实时在线交易场景下读写混合负载的综合性能,提升幅度可达 50%~100% ,并大幅度降低了同等负载下 CPU、内存资源使用率以及由于 IO 阻塞等待造成的查询失败概率。

系统可观测性进一步增强

分布式系统的可观测性成为基础软件设计的重要方向,TiDB 一直以来致力于通过技术手段描绘分布式系统的全貌,帮助技术人员快速诊断系统的健康状态,从而降低业务风险。

TiDB 5.3 版本的 TiDB Dashborad 新增持续性能分析(Continuous Profiling)功能,提供在集群运行状态下(包括故障状态)自动保存实例性能分析结果的能力,为用户带来数据库源码水平的性能洞察,让原本“黑盒”的数据库变成“白盒”。用户可通过火焰图进行快速的故障排查和定位,故障诊断时间缩短 50% 以上。持续性能分析提供对 TiDB、PD 和 TiKV 节点持续的性能分析并保存结果,功能开启后对集群读写损耗低于 0.5%,对业务不构成影响。

某银行技术负责人反馈:在分布式数据库选型 POC 测试中,某些业务的查询语句响应时间不达预期,分布式数据库厂商往往需要花费 1-2 天的时间进行大规模的性能排查。通过使用 TiDB 的持续性能分析功能,仅需 30分钟就能定位到性能瓶颈,为全链路的快速调优奠定了基础。

生态工具提速为 MySQL 用户带来重磅福利

TiDB 经常被用户比喻为”加大号的 MySQL”,当 MySQL 遇到容量和性能瓶颈的时候,可以轻松迁移到 TiDB 实现性能和容量的弹性扩展,减少分库分表对业务的侵入以及繁琐的运维工作,让 MySQL 用户即刻享受到 TiDB 实时查询分析的红利。

TiDB Data Migration (DM) 是一款实时数据同步工具,支持数据从与 MySQL 协议兼容的数据库同步到 TiDB。在 5.3 版本中,DM 在合并单行数据的多次变更、点查更新合并为批量操作等方面进行了多项优化,使得分库分表 MySQL 同步至 TiDB 的延迟大幅降低,保障了下游 TiDB 数据查询实时性,企业无需进行大规模数据架构的改造就能快速引入 TiDB 以增强实时查询分析效率。经场景实测,在 300K QPS 数据同步流量下,99.9% 时间内上下游同步延迟降低至 1 秒以内,尤其适用于高负载业务压力下 TiDB 作为只读从库的场景。

TiDB 5.3 版本中,TiDB Lingtning 实现了全量数据迁移的再提速,为 MySQL 分库分表架构上超过 100 TB 规模的业务迁移到 TiDB 提供了升级版方案。新版本 TiDB Lingtning 具备水平扩展能力,支持用户同时部署多个 Lightning,并行地将单表或者多表数据迁移 TiDB。例如:在升级后,上游为 10 个分表 MySQL 集群,数据总规模 10 TB,使用 5 个 Lightning 实例并行导入,导入速度较上个版本提升 400% 以上。

除了上述三大方向的突破和升级之外,新版本 TiDB 对分布式事务一致性的核心组件分布式时间戳(TSO)的处理流程进行了深度优化,在保障分布式事务线性一致性的前提下降低时间戳获取延迟,以更好地支撑百 TB 以及百万 QPS 超大规模集群的扩展,优化后集群整体 QPS 吞吐实现 100% 以上的提升。

TiDB 5.3 版本还引入了临时表功能,提供 Global 和 Local 两类临时表来缓存业务的中间历史数据,计算完成后临时表可实现自动的清理回收。一条 SQL 即可轻松创建临时表,高效地解决了业务中间计算结果的临时存储问题,帮助用户简化业务逻辑并提升性能。

PingCAP 首席架构师唐刘表示:TiDB HTAP 的使命不仅仅局限于对传统数据库的升级或者是交易和分析处理性能的提升,本质上 TiDB HTAP 是一个开放的生态体系,在企业中承担着支持数据服务消费化和构建统一实时数据服务平台的角色,为用户带来业务与架构的创新与提升。本次发布的 5.3 版本是 TiDB 迈向成熟企业级 HTAP 平台的一个重要里程碑,越来越多的企业希望通过“一栈式数据服务平台”简化数据技术栈,提升业务的实时洞察能力,用户只需要掌握最基础的 SQL 语言能力和数据分析能力就可以驱动业务决策。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,文章为企业产品宣传内容,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 大家在看
  • AMD Instinct MI300加速卡或有融合Zen 4+CDNA3的Exascale APU版本

    在披露 AMD 多代霄龙(EPYC)服务器平台路线图的同时,AdoredTV 还在最新一期油管视频中提到了初代 Exascale APU 。据说 Exascale APU 会被命名为 Instinct MI300,并通过 Zen 4 CPU + CNDA 3 GPU 内核、以及 HBM3 高带宽缓存来实现极致的 HPC 性能。(via WCCFTech)事实上,AMD Exascale APU 的概念,可以一路追溯到 2023 年。然后 2015 年的时候,就披露了 EHP 计划。作为一种 Exascale 异构处理器,其基于当时即将推出的 Zen x86 内核 + Greenland GPU,并在 2.5D 中介层上配备了 HBM2 高带宽缓存。Adored is back with some new AMD

  • 环信发布即时推送PUSH 2.0,APP开发一站式服务

    环信PUSH提供消息成功率、推送厂商通道占比等推送后续数据分析,可视化展示消息推送数→消息推送成功数→消息送达数→消息点击数的推送转化漏斗,区分在线、厂商推送效果,不同任务、样式、内容、推送目标、推送类型推送效果直接展示,优化推送策略...环信PUSH是业界首个承诺不收集用户隐私的即时推送,致力于做干净的推送工具,基于用户名完成推送,推送不需要依赖设备ID,并可保证消息推送的准确下发......

  • 高德地图宣布推出Apple Watch版本

    高德地图宣布推出Apple Watch版本,iPhone用户升级至高德地图最新版,就能将骑行、步行导航信息同步到手表上...用户需将手表升级到Apple watchOS 8. 0 以上并且安装高德地图后,同意将骑步行导航同步到关联的手表上...高德地图Apple Watch版本目前已支持市面主流苹果手表: Apple Watch Series3/4/5/6/7,以及Apple Watch SE...

  • 索尼宣布 Playstation Plus 订阅服务将于 5 月 23 日起上线

    Playstation Plus 订阅服务将现在 5 月 23 日登陆除日本之外的亚洲市场,而日本地区将在 6 月 1 日上线该服务,美国市场将会在 6 月 13 日上线,而欧洲地区则要等到 6 月 22 日...而PlayStation Plus Extra 升级服务价格为每月 75 港币 / 每季 215 港币/ 每年 515 港币,可以可下载并游玩 400 款广受欢迎的 PS4 和 PS5 游戏,包括 PlayStation Studios 和第三方合作伙伴的畅销作品......

  • 苹果iPod touch部分版本售罄

    在苹果官网,iPod touch2019款的部分版本也已售罄...5月10日,苹果宣布停产iPod,剩余库存售完即止...2019年5月28日,苹果公司发布新款iPod touch,搭载苹果A10Fusion芯片,中国区起售价1599元...

  • 分层PlayStation Plus最快下月推出

    亚洲市场最早可于5月23日(日本6月1日)开始部署分层式PlayStation Plus定期服务,即Essentials级、Extra级,以及带有云游戏功能的Premium级PlayStation Plus会员,年费分别为60/100/120美元。Essentials会员与现有Plus会员待遇一致,费用不变;Extra会员可下载多达四百款(老)游戏,比如《死亡搁浅》、《战神》、《漫威蜘蛛侠》、《死亡回归》等已上市多时的第一方或第三方作品。相较于Extra会员,最顶级的Premium会员的性价比反而更高,多花20美元年费即可额外下载另外340款PS4/PS5作品,且玩家可通过云游戏运行PS3作品,通过云游戏或?

  • 小鹏汽车:新增P7/P5车型版本 变更免费充电服务权益

    按照规划,小鹏汽车P5新增460P车型,全系补贴后售价17.79万-24.99万;小鹏P7新增480G+/480E+/586G/625E四款车型,全系补贴后售价分别为23.99万元、26.29万元、25.99万元、28.59万元...与此小鹏汽车550P车型补贴后价格调整为22.59万元,600P车型补贴后价格调整为24.99万元...本次除P5和P7车系配置和价格调整外,小鹏汽车品牌充电服务权益也将进行变更...

  • 骑车不用看手机了!高德地图Apple Watch发布

    高德地图官方宣布,正式推出Apple Watch版本,iPhone用户升级至高德地图最新版,即可将骑行、步行导航信息同步到手表上...用户需下载最新版高德地图手机端,手表升级至Apple Watch OS 8.0以上并且安装高德地图后,同意将骑步行导航同步到关联的手表上即可...去年12月,高德地图推出智能手表版,支持小米Watch S1、华为Watch GT2、华为Watch GT2 Pro、华为Watch GT2e、华为Watch 3等设备......

  • 苹果向开发者和公测者发布iOS15.5和iPadOS15.5 RC版本

    苹果公司今天将即将发布的iOS15.5和iPadOS15.5RC更新给开发者和公共测试者进行测试,正式版软件更新将在测试版发布后一周内推出...苹果正在利用iOS15.5的更新为功能奠定基础,该功能将让 「阅读器」应用的开发者添加一个外部网站的链接,以便在App Store之外注册和管理账户...Apple Cash也有小的变化,苹果增加了请求和发送选项,苹果正在对过去在钱包应用中提供的iTunes Pass进行一些改变......

  • Solidigm发布首款PCIe 4.0 SSD:最大15.36TB!性能最高提升123

    2020年10月,SK海力士宣布斥资90亿美元收购Intel NAND闪存业务,并在2021年12月顺利完成第一阶段工作,组建了新公司Solidigm”。Solidigm的名字取自Solid”(固态)、paradigm”(范式)两个词语的组合,取树立固态存储行业范式之意,目标是成为优化数据存储解决方案的首选合作伙伴。Solidigm有着同行不可比拟的天然优势,既受益于Intel半导体产品和方案的领导地位,也能享受SK海力士存储产品和技术的支持,目前已有员工约2000人,总部位于美国加州圣何塞,在全球有20个办事处。经过快速整合、磨合,Solidigm很快就开花结果,近日正式发布了成

今日大家都在搜的词: