首页 > 传媒 > 关键词  > 正文

腾讯云GooseFS团队与厦门大学合作成果 AC-Cache入选 PPOPP

2025-07-21 19:58 · 稿源: 站长之家用户

近日,腾讯云在存储领域的论文入选并行编程领域顶级会议PPOPP2025。通过设计面向小型对象的、感知访问关联性的内存缓存系统AC-Cache,成功解决小型对象存储场景中的负载不均衡问题,实测显示,该系统可降低80.2%尾部延迟并提升5倍以上访问吞吐量。

据悉,作为并行编程领域的国际顶级学术会议,PPoPP(Principles and Practice of ParallelProgramming)致力于推动理论基础、技术、语言、编译器、运行时系统、工具和实践等并发和并行系统领域的突破性研究,该会议持续聚焦两大前沿议题:优化并行编程生产力,强化异构硬件协同,同时解决超大规模科学计算与企业级负载衍生的新型并行工作负载挑战。

当前高速网络技术持续升级,导致网络带宽与存储带宽性能代差不断扩大,存储访问已成为核心性能瓶颈。在此背景下,腾讯云联合厦门大学提出了AC-Cache,一个基于访问关联性构建的面向小型对象的内存高效缓存系统。

目前,AC-Cache 前沿技术已在在Github - nankeys/ACCache: ACCache PPoPP25上开源,并在腾讯云 GooseFS 产品中得以应用。

腾讯云数据加速器GooseFS(Data Lake Accelerator Goose File System)是搭建在对象存储COS之上的分布式缓存系统,它能够为上层计算应用提供统一的命名空间和访问协议,方便用户在不同的存储系统管理和流转数据。

GooseFS具备性能强劲、稳定易用、生态亲和的三大核心特点。具体而言,它能够基于分布式缓存架构,为用户提供近计算端的高性能数据访问能力,吞吐能力可达Tbps,延时达到亚毫秒级;此外,它还提供了全托管、Master托管、管控面托管三种部署方式供用户选择,集成云原生Prometheus监控体系,还能实时监测系统健康,简化运维流程,提升系统稳定性;更值得一提的是,GooseFS 深度集成了云原生与大数据技术栈,为企业提供开箱即用的数据加速能力,它支持TKECSI,通过CSI播件实现存储卷秒级自动扩缩容,能够满足突发业务负载需求,还支持 EMR集群挂载,并兼容Hadoop/Spark/Hive等组件零改造接入,更深度适配主流AI训练框架,支持与TensorFlow等AI计算框架无缝对接。

随着GooseFS2025年的技术更新,其单链接性能更是达到了Gbps级别,最大化提升了硬件资源的利用效率;此外,还通过元数据分级管理技术,做到支持百万级元数据QPS,能够在高并发、大规模数据访问场景下依然保持高效的元数据访问性能;并进一步实现了元数据的一致性,确保COS与GooseFS之间的元数据能够实时同步,做到无感缓存加速。

如今,传统的对象存储已经难以满足科技等行业对带宽、延迟和 QPS 等高性能计算要求,GooseFS能够加速海量数据分析、机器学习、人工智能等业务访问存储的性能,目前已成功应用在海量数据分析、AIGC、汽车辅助驾驶、具身智能等业务场景中。

在部署了GooseFS后,某手机厂商Deepseek模型分发单链接速度达到了300MBps,整体下载带宽达到200Gbps,较未部署前带宽提升了10倍,并在GPU节点提升1.5倍的情况下,分发时间缩短至原有的三分之一,大幅提升了分发效率;在汽车辅助驾驶方面,某汽车厂商通过部署GooseFS,并将其作为统一数据中台,配合Airflow 调度算法,进行数据预热,加速训练预处理和自动驾驶训练业务,解决了数据孤岛问题,并进一步降低了本地盘成本,实现90%以上的数据命中率在Cache,整体训练速度提高了30%。

随着GooseFS在更多行业中得以应用,AC-Cache研究成果将助力更多企业突破存储访问的性能瓶颈,迈向发展快车道。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 旷世之声QCC Dongle Pro发布|让苹果设备无线畅听LDAC无损音质

    QCC Dongle Pro和QCC Dongle是全球首款获得苹果MFi认证的无损蓝牙发射器,突破性地实现了苹果设备无线无损音质传输。产品基于高通Snapdragon Sound™技术和索尼LDAC高清音频编解码协议,支持aptX、aptX HD、aptX Adaptive、aptX Lossless等多种编码格式。QCC Dongle Pro还独家支持LDAC编码,传输速率高达990kbps。该产品已通过日本VGP大奖认证,7月18日在京东首发售价599元,为苹果生态用户带来更丰富的高品质无线音频体验。

  • 腾讯云自研操作系统TencentOS与中国金融认证中心达成合作,全面支持安全启动

    腾讯云操作系统TencentOS Server V4全面支持安全启动(Secure Boot)功能,通过与微软和中国金融认证中心(CFCA)合作,实现双轨并行的安全启动方案。该系统不仅获得微软签名认证,还基于CFCA国产根证书体系完成适配,构建从固件到操作系统的完整信任链。TencentOS团队严格遵循安全规范,对密钥实施严格保护,确保系统启动各环节安全验证,有效防御底层恶意软件攻击。该方案支持"开箱即用",无需额外配置即可在主流服务器和虚拟化平台运行,大幅提升部署效率与安全防护水平。

  • OPPO要“冻住”SoC!K13 Turbo打造散热套装:液冷、风冷一起上

    OPPO K13 Turbo系列将于7月21日14:30发布,新机最大的特点就是自带风冷,是OPPO首次配备内置风扇。 风扇,位于主摄下方可以快速带走内部热量,在游戏时能够呈现更稳定持久的高帧率表现。 值得注意的是,OPPO甚至还打造了水冷系统,将推出疾风散热超级套装,包括有一款散热手机壳和磁吸散热背夹。

  • 邦彦技术&城银股份达成合作:以邦彦云PC重塑医疗信息化底座

    2025年7月14日,城银股份与邦彦技术签署合作协议,共同推进智慧医疗发展。城银深耕医疗信息化17年,将把邦彦云PC纳入全线智慧医疗解决方案的桌面标准;邦彦承诺投入专项资源,将云PC打造为行业标杆。邦彦云PC结合本地性能与云端管控,解决医疗场景对影像秒开、外设兼容、数据安全三大需求。双方将通过技术、场景、生态协同,推动云PC在智慧医院、养老、公卫等场景落地,重塑医疗信息化基础设施,共建面向未来的数字健康底座。

  • OPPO Find X9系列首发!OPPO与哈苏联合研发下一代影像系统

    OPPO通过公众号宣布,OPPO与哈苏联合研发下一代影像系统,双方继续深化战略合作伙伴关系,打造移动影像的画质新标杆。 官方介绍,目前OPPO与哈苏正在联合开发下一代影像系统,打造移动影像在全焦段解析力、色彩还原精度的新标杆,将为全球用户带来开创性的画质表现,以及独一无二的影像风格。 不出意外,OPPO哈苏联合打造的新一代影像系统将由OPPO Find X9系列首发搭载

  • 苹果19年来首次!今年等不到新款MacBook Pro了

    据报道,苹果似乎正在重新考虑其下一代MacBook Pro和MacBook Air的发布时间。 这两款笔记本电脑原定于2025年推出,搭载全新的M5芯片,然而据知情人士透露,苹果目前正在权衡是否推迟发布,可能会将发布时间延后到2026年。 自2006年以来,苹果每年都会推出MacBook Pro机型,如果苹果真的跳过2025年,这将是19年来首次没有推出MacBook Pro的一年。

  • 苹果开启2025返校季教育优惠:买Mac、iPad送AirPods等

    今日,苹果中国正式拉开了一年一度返校季教育优惠活动的帷幕,该活动将持续至 9 月 30 日,为符合条件的师生及教职员工带来诸多福利。 此次活动参与群体广泛,高校在读生、刚被高校录取的新生、代表子女购买的高校学生家长,以及教师与教职工均可参与其中。 在优惠内容方面,活动期间购买指定款Mac或iPad将有丰厚赠品。具体来看,购买iPad Air、iPad Pro的用户,可获赠A

  • 秘塔AI也终于悄悄上线了DeepResearch。

    测试完以后,我觉得这玩意,还是值得我将近通宵写一篇的。 深度研究,也就是DeepResearch。 我过去写过很多次秘塔AI了,因为我自己的搜索习惯,现在基本就是,大活上ChatGPT用DeepResearch,常识问答直接找豆包,一般的AI搜索就是秘塔AI。 当然很多ChatBot产品都有AI搜索,但是我自己这两年,还是习惯用秘塔AI和Perplexity这样形态的原生AI搜索产品了,这可能就是习惯的力量吧。

  • 国内eSIM回归!OPPO Watch X2系列上线中国移动一号双终端

    一号双终端业务是指用户可以在自己手机号码(主号码)的账户和套餐下,添加手表作为eSIM附属设备(副卡),使手机和手表共用一个号码,共享号码、套餐通话和流量,可分别通话、上网。 如果没有随身携带手机,用户可以通过开通eSIM业务的智能手表进行通话,也不用担心错过重要通话。 这两年国内eSIM业务逐步收紧,很多新的设备已经无法重新开通,现在终于开始重新�

  • SIGMOD评审团评价:源于真实业务的突破!腾讯云TDSQL研究成果入选国际顶会

    腾讯云数据库TDSQL团队在ACM SIGMOD 2025发表论文,提出创新性"热点数据"高并发解决方案。该技术通过动态识别热点数据并采用"组锁模式"优化处理,在腾讯金融支付等业务中实现交易性能提升30%,热点场景TPS提升近10倍。性能测试显示其处理速度超业界先进方案6.5-22倍,获评"真实业务驱动研究的典范"。这是TDSQL今年继VLDB、ICDE后第三次入选国际顶级会议,其核心专利此前刚获中国专利金奖。