首页 > 传媒 > 关键词  > 阿里云原生数仓最新资讯  > 正文

AnalyticDB 搭载 AMD 性价比提升30%

2024-05-28 16:10 · 稿源: 站长之家用户

1、概述

阿里云原生数仓 AnalyticDB for PostgreSQL 与 AMD 新一代硬件深度优化,结合全自研计算引擎及行列混合存储实现性能升级,综合性能提升30%。结合丰富的企业级能力帮助企业构建离在线一体、流批一体综合数据分析平台,采用同一引擎即可满足离线批处理、流式加工,交互式分析三种场景,在开发运维、时效性及成本上具备更高的性价比。

2、性能优化路径

2.1硬件架构优化

2.1.1芯片性能提升

AMD 和阿里云联合打造的新一代硬件采用全新 CIPU 架构,处理器采用 AMD EPYC Genoa 处理器,可提供稳定的算力输出、更强劲的I/O引擎以及芯片级安全加固。

第四代 EPYC 较第三代 EPYC 性能提升显著,针对分析型数据库产品痛点在高算力、高内存带宽、低延迟等特点进行优化,可帮助企业用户在数据仓库、在线分析场景中具备更好的性能。

2.1.2计算能效提升

在性能功耗比方面,新一代服务器在相同核心数量下(对比搭载两个64核AMD EPYC9534和两个64核的AMD EPYC7763的服务器)整数性能提升约24%,浮点性提升约52%。可以用更少的服务器来完成同样的工作,或者用同样数量的服务器在相同的时间内完成更多的工作。

2.1.3安全性和隔离性提升

第四代 AMD EPYC 支持安全内存加密(SME)和安全加密虚拟化(SEV),将内存与拥有他的线程相关联,从而帮助击退旁路攻击;增加了SEV中加密上下文的数量,可以容纳更多的安全虚拟机。

通过 AMD 安全加密状态(SEV-ES)帮助保护虚拟机状态不受恶意或受损管理程序影响;还增加AMD安全嵌套分页(SEV-SNP)功能,以防止数据重放、内存重映射等攻击。

2.2数据库内核优化

2.2.1全自研计算引擎

AnalyticDB for PostgreSQL 全自研计算引擎为数据处理和交互式分析加速。它通过以下技术实现性能提速:

●       应用芯片向量化技术如 SIMD 指令集等把芯片的并行化计算能力利用到极 致。

●       采用 LLVM JIT 即动态编译优化,加速计算以提高数据处理效率。

●       自适应内存模型,根据计算模式动态选择行存/列存内存模型。

●       针对典型场景提供加速方案,比如针对 Runtime Filter 加速Join分析,字典特性加速低基数字段计算场景等。

2.2.2全自研行列混存

一份存储下即可支持实时高吞吐写入/更新和实时高聚合分析两种场景。

写入方面利用 Write Optimized Part 有效承接批量/流式数据并通过内部 Optimize 优化,将数据转化为更利于查询的 Read Optimized Part,从而实现有效的查询性能。利用 Metadata 实现高并发 Update/Delete。

支持基于 Btree 索引的强主键模型,在写入数据时实现有效准确去重。在实时写入场景中单 CPU Core 可达到10万行/秒的写入性能。

支持 Upsert 功能在产生主键冲突时用户可根据实际业务需要灵活地选择忽略更新、覆盖更新或是条件更新模式。

在查询方面存储引擎无缝兼容多种索引类型如 Btree , GIN , GIST 和 自研向量检索索引,可以实现任意维度的高性能点查,全文检索和向量检索。

2.2.3资源隔离增强

支持混合负载实现资源最 大化利用,可同时承载流式写入,数据加工,交互式分析三类任务。

引擎通过资源组实现资源管理,相对使用资源队列更精细化、管理资源类别更全面。

它支持对CPU、内存按照业务优先级设置资源隔离策略,支持动态配置,配置即生效不需要重启引擎,大大减轻运维压力。

2.2.4安全能力增强

完善和增强安全能力:

●       网络连接安全,支持 SSL TLS1.1/1.2/1.3加密算法,满足最 新的网络安全要求。

●       存储安全,支持云盘加密实现数据加密存储。

●       加密算法,支持非对称加密和对称加密算法如 SM4。

●       支持行级和列级权限管控,做到最细权限粒度控制和最小化敏感数据访问。

●       动态数据脱敏,引擎级支持对敏感字段设置脱敏规则,实现敏感信息过滤和保护。

●       支持 SQL 审计可对 SQL 操作明细进行审核。支持事件审计可实现对异常行为追溯。

3、测试结果

性能测试采用国际标准 TPC-H 测试集进行,实验组搭载 AMD EPYC Genoa 服务器 ,对照组集群搭载同等规格下的其它主流硬件。

3.1测试资源

3.2测试过程

3.3测试总结

采用国际标准 TPC-H 测试集以及在同等运行环境下,AnalyticDB for PostgreSQL 采用 AMD EPY 服务器较比常规主流服务器平均性能提升32.7%。

4、优势及应用场景

4.1离在线一体分析

AnalyticDB for PostgreSQL 在 AMD 硬件加持和全自研计算引擎及存储助力下,可同时提供稳定有效的离线批处理和高性能在线报表分析能力,具备高性价比:

●       数据加工后即可为下游报表工具或系统提供在线数据分析服务,避免在多引擎中同步数据造成数据不一致和时效性低的问题。

●       全自研引擎实现高性能交互式分析,行列混合存储可实现有效的IO裁剪,加速多维组合分析。

●       支持实时物化视图实现高并发报表查询。

4.2海外数仓平滑迁移

SQL语法全覆盖并且支持自定义函数和存储过程。高度兼容 Greenplum/Redshift/Synapse/Snowflake 语法。

可覆盖海外云数仓产品企业级能力,在安全能力、资源隔离、容灾等方面实现加强。在实时分析、交互式分析能力上较比海外数仓功能及性能更好,更具性价比。

4.3流批一体实时数仓

自研业界领先流批一体引擎让用户在数仓内即可开发流式任务,支持对批和流任务进行细粒度的资源隔离。

●       可消费 Kafka/Flink/DTS 实时数据源,支持高吞吐流式数据写入。

●       支持增量实时物化视图同步和异步刷新,可实现实时多表关联(支持左连接和右连接)、全量历史数据回溯、流和批表关联。

●       可支持实时 Ad-hoc 查询,满足实时报表分析和下游应用系统高时效性数据需求。

5、开启方式

新购实例优先开启AMD形态。在选择地域时,建议用户勾选“北京、上海、杭州、深圳”地域开启实例。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • DigitalOcean 携手 AMD 推出 AMD Instinct MI300X GPU Droplet,加速 AI 创新

    DigitalOcean与AMD达成合作,将推出搭载AMD Instinct MI300X GPU的云服务器,支持AI/ML/HPC工作负载。该GPU具备192GB HBM3内存,能完整加载数十亿参数模型,显著提升训练和推理效率。服务定价每小时1.99美元起,支持1-8个GPU配置,并与Kubernetes无缝集成。未来还将推出MI325X GPU,并面向中国市场提供服务。此次合作旨在为开发者提供经济高效的AI开发解决方案,简化云端GPU部署流程。

  • 出门问问发布Agentic AI软硬结合产品TicNote,定义新一代“AI思考伙伴”

    出门问问发布新一代AI硬件TicNote,内置"Shadow AI"系统,实现"有记忆的AI记录+主动洞察+主动分析+陪伴创作"功能。该产品通过软硬件结合,成为用户的随身AI思考伙伴,适用于会议、商务沟通、学习等场景。TicNote具备20小时续航、10米远距收音、120+语言转写能力,支持跨文件项目管理。CEO李志飞表示,TicNote是"用AI的AI做AI"的AGI实践产品,标志着公司在软硬结合道路上更进一步。国内版已上线,海外版自2025年4月推出以来获广泛认可。

  • 微星发布AMD首款纯白ITX主板MPG B850I EDGE TI WIFI刀锋 钛

    微星推出全新MPG B850I EDGE TI WIFI刀锋钛主板,采用ITX规格设计,支持AMD锐龙9000系列处理器和AM5平台。主板配备10层服务器级PCB,提供稳定供电和超频性能。搭载5G有线网口和满血版WIFI7技术,实现低延迟高速传输。采用三层散热装甲设计,包括扩展型VRM散热片、M.2冰霜铠甲和主动散热风扇,确保高性能硬件稳定运行。主板首发售价1799元,提供3年质保+1年上门服务。

  • 华为HMS for Car签约Anghami与Nabd,打造面向全球的本地化车机内容生态

    2025华为开发者大会期间,华为终端云服务与中东音乐平台Anghami、阿拉伯新闻平台Nabd签署合作协议,将丰富HMS for Car生态内容。Anghami作为中东最大音乐流媒体平台,将提供5700万首阿拉伯语及国际音乐内容;Nabd作为拥有3200万用户的阿拉伯语新闻平台,将提供个性化新闻服务。此次合作将助力华为为全球车企提供本地化内容解决方案,同时发布HMS for Car MAAN4.0,通过ArkWeb技术提升Web应用体验至原生水平。华为将持续携手生态伙伴,构建更丰富的车载应用生态。

  • 性价比陷阱?视觉导航如何破解“降本即降效”难题

    文章探讨了视觉导航技术在扫地机器人领域的应用现状与发展困境。虽然视觉方案在自动驾驶领域风头正劲,但在机器人领域仍不受待见,主要存在三大缺陷:强光线依赖性、高算力要求和硬件稳定性不足。相比之下,激光导航技术凭借高精度、快响应和高稳定性成为中高端产品的标配。视觉导航虽成本更低,但仅用于低端产品,导致市场对其形成刻板印象。INDEMIND公司通过多年研发,推出纯视觉导航方案"家用机器人AI Kit",采用轻量化技术和智能化算法,在算力要求(仅需4核A53/A55级别芯片)和环境适应性(强光、无光源等特殊光照环境)方面取得突破。同时开发了智能决策引擎、三维语义地图等核心技术,使机器人能在语义层次理解环境信息,实现策略化智能避障、"按需清洁"等智能化功能。

  • OpenAI 说要“誓死”捍卫数亿 ChatGPT 用户的隐私

    OpenAI 强烈反对法院命令保存所有 ChatGPT 日志,包括已删除的聊天记录……

  • CertiK 联合创始人顾荣辉做客纽交所,剖析 Web3.0 安全挑战与未来趋势

    2025年5月21日,CertiK联合创始人顾荣辉教授在纽约证券交易所接受FintechTV专访,深入探讨Web3.0领域的安全问题。访谈聚焦Bybit和Coinbase近期安全事件,分析其暴露的系统性风险,并展望Web3.0安全发展趋势。顾教授指出,2025年第一季度全球区块链安全事件损失达16.7亿美元,其中Bybit的Safe Wallet遭新型攻击尤为突出,凸显Web3.0多层防护的迫切需求。他强调行业需加速构建更韧性的安全机制,呼吁完善监管框架,将网络安全纳入核心范畴。作为新加坡金管局顾问,顾教授建议监管制度需持续迭代,尤其在私钥保护等关键环节提供明确指引。他指出Web3.0行业对数据隐私的重视远超传统金融,推动行业向"用户为中心、安全优先"转型。未来监管框架、网络安全和数据隐私将成为推动Web3.0健康发展的三大支柱。CertiK作为全球最大Web3.0安全公司,持续为行业提供全周期安全产品和服务。

  • 前OpenAI研究员:有时,ChatGPT为了“自救”,会选择牺牲用户

    他对OpenAI最新GPT-4o模型进行的一系列实验。这些实验旨在测试AI是否会偏向“自我保护”,甚至可能以牺牲用户利益为代价……

  • 千元卧室投影仪怎么选?618推荐性价比之选大眼橙C2 Ultra

    文章介绍了卧室投影仪对年轻人的重要性,推荐618期间选购千元级产品。重点推荐大眼橙C2 Ultra投影仪,具备950CVIA流明高亮度、物理1080P分辨率、3000:1对比度,通过SGS低蓝光认证。搭载Amlogic T982芯片和4+32GB内存,支持HDMI2.1接口和10ms低延迟游戏模式。配备智能系统、AI语音助手和360°可调云台支架,618价格亲民,是同价位中性价比突出的选择。

  • 龙霆智能锁发布A5旗舰系列,高端制造的性价比之选

    龙隆智能锁推出全新A5系列产品,主打高端安全与智能体验。旗舰款A5F配备3D人脸识别、3.5英寸高清屏、AI猫眼等功能,0.5秒快速解锁;4200mAh大电池续航4个月,支持超级省电模式;采用C级锁芯和4.5N·m大扭力电机,适配各类门体。系列还包含入门款A5、中端款A5FD和全能款A5FX,满足不同需求。全系搭载德施曼高端技术基因,通过AI指纹识别、多重报警等功能重新定义智能锁品质标准,推动行业向专业化方向发展。