首页 > 传媒 > 关键词  > 正文

StarRocks 2024 数据技术峰会圆满收官,Lakehouse引领数据技术新趋势

2024-12-11 10:59 · 稿源: 站长之家用户

12 月 7 日,StarRocks Summit Asia 2024 于北京圆满落幕。本次峰会以"Lakehouse Is All You Need"为主题,汇聚行业佼佼者和技术专家,共同探讨 Data+AI 的创新与行业实践。

技术引领,构筑湖仓新范式

StarRocks TSC Member,镜舟科技 CTO 张友东分享

StarRocks TSC Member,镜舟科技 CTO 张友东以“Lakehouse Is All You Need”为题开场演讲,深入解读 Lakehouse 的演进趋势以及 StarRocks 在 Lakehouse方向的技术深耕与创新。

“StarRocks 社区正以比较罕见的速度发展,” 张友东展示了一组数据:“在过去三年里,我们在 GitHub 上获得超过 9300 颗 star,活跃贡献者超过 400 人,超过 450+ 市值 10 亿美金以上的企业在生产环境使用 StarRocks,各行业对 StarRocks 的认可与期待与日俱增。”

镜舟科技 CTO 张友东致谢 StarRocks 用户及贡献者

他详细介绍了 StarRocks 在多个技术方向上的突破:

StarRocks 通过创新的向量化执行引擎和智能查询优化技术,将分析性能提升至行业领先水平,同时,在 3.X 版本中实现了对数据湖的原生支持,使得企业可以在不迁移数据的情况下进行有效分析。

此外,StarRocks 在半结构化、非结构化数据分析方面取得显著进展。Flat JSON 兼顾半结构化数据分析的灵活性与查询性能,性能提升达到数十倍;文本检索、向量检索使得 RAG 应用构建过程简单有效,更好地支撑 AI 应用场景。

“Lakehouse 是未来所有数据分析的基础”,张友东强调,Lakehouse 是一种新的架构范式,结合数据湖和数据仓库的优势,提供统一的数据存储,并基于一份数据同时支持企业 BI 和 AI 的应用场景,实现 One data,all analytics 的业务价值。

通过与 Apache Iceberg、Apache Paimon、Apache Hive 等开放数据湖的深度集成,StarRocks 正在构建完善的数据湖生态,为用户提供极速统一的湖仓分析体验。

商业突破:以终为始的商业选择

镜舟科技 CEO 孙文现在StarRocks峰会分享

镜舟科技 CEO 孙文现以《镜舟数据库与 Lakehouse:面向全球,挖掘商业增长新潜力》为题,分享了这两年来的商业化心路历程。

他提到 StarRocks 在业务场景覆盖上的突破性进展:“从最初的固定报表分析,到如今的实时数据分析、数据跑批加工、湖仓一体化分析等全场景支持,StarRocks 展现了强大的技术适应性。截至目前,实时数据分析场景已服务 270 多家企业,湖仓分析能力也获得 50 多家企业的实践验证。”

在商业化道路上,镜舟科技坚持“为客户创造更大的业务成功”的理念,付费客户数已突破 120 家,镜舟科技的 ARR(年经常性收入)连续三年翻倍增长,NRR(净留存率)保持在 130%。2024 年新增中信银行、民生银行、广发证券等多家重量级客户,充分证明了镜舟数据库在企业级市场的竞争力。

谈到增长背后的战略,孙文现阐述了一个商业上的转变:即以终为始的商业选择,以构建一家能够长期经营的商业化公司为目标,打造能够满足致胜场景、带来商业化价值的产品。

孙文现也分享了镜舟的奋斗目标:“以商业成功为伴,面向星辰大海,打造一份长久奋斗的事业。”

生态共融,与行业携手共进

Apache Iceberg PMC member 顾宇飞在StarRocks峰会分享

Apache Iceberg PMC member 顾宇飞带来了《The Evolving Landscape of Iceberg REST Catalog》的精彩分享。“开放的生态系统是推动技术创新的关键。”顾宇飞表示,REST Catalog 的演进为数据湖提供了更灵活、更有效的访问机制。StarRocks 对 Iceberg 的原生支持,不仅提升了查询性能,更为企业构建现代化数据架构提供了坚实基础。

阿里云计算平台开源 OLAP 负责人范振(辰繁)在StarRocks峰会分享

“StarRocks 是最适合 Paimon 湖格式的 Lakehouse 开源引擎。”阿里云计算平台开源 OLAP 负责人范振(辰繁)介绍,“在阿里集团的数据湖仓实践分享中,StarRocks 展现了卓越的查询性能和系统稳定性,在与 Paimon 的协同场景中,我们实现了流批一体的数据处理能力,分析性能有 13 倍提升。目前,这一解决方案已在阿里集团内部广泛应用,也正通过阿里云向更多企业客户提供服务。”

他也从云服务商的角度,阐述了对湖仓的理解:“未来的数据架构必将是开放、统一的,StarRocks 在这方面的探索很有前瞻性。选择 StarRocks 作为战略合作伙伴,也是看中其在实时分析领域的技术领先性和商业化潜力。”

应用实践,让价值落地

微众银行大数据工程师,StarRocks 平台负责人林俊锋在StarRocks峰会分享

客户代表、微众银行大数据工程师,StarRocks 平台负责人林俊锋分享了其数字化转型实践。“在用户画像、人群圈选等大数据量分析场景中,StarRocks 展现出卓越性能,查询速率相比原有 Trino 方案提升 235%。”林俊锋介绍,“目前 StarRocks 已支持行内 5 个以上部门的 10 多个应用场景,结合自研的 Exchangis 数据交换平台,实现了跨集群数据互通、灵活的权限管理等特性。”

腾讯音乐专家工程师,业务运维中心总监曹凤龙在StarRocks峰会分享

腾讯音乐集团(TME)专家工程师,业务运维中心总监曹凤龙详细阐述了其数据仓库的演进历程。“从 2018 年的 Druid 到如今的 StarRocks,StarRocks 的存算分离架构为我们带来了显著收益:组件更精简、维护更便捷,数据存储成本降低 50%,同时支持智能的冷热数据管理。”

在具体业务场景中,通过存储桶打散、表结构优化、物化视图等技术手段,大表查询响应时间从 30.97 秒降至 0.08 秒,查询秒级响应率达到 99%。目前,StarRocks 集群支撑着 QQ 音乐、全民 K 歌等多个音乐平台的数据分析需求。

未来可期

全天共 30 余个演讲议题,汇聚了 7 大行业,包括小红书、腾讯游戏、Shopee、爱奇艺、得物、杭银消费金融、理想汽车、唯品会、微信、西南证券等多家标杆企业。这些企业用自身实践说明,StarRocks 正在通过技术创新推动各行业数字化转型,在降本增效的同时,为企业创造新的业务价值。

通过与合作伙伴和用户的深度互动,StarRocks 社区正在构建一个更开放、更繁荣的数据技术生态。随着数字化转型深入推进,StarRocks 将继续发挥技术引领作用,助力更多企业实现数据价值比较大化。

随着峰会落幕,StarRocks 在湖仓技术领域的愿景更加清晰:以开放、创新的技术理念,携手合作伙伴共建现代化数据分析生态,为企业数字化转型提供强有力的支撑。正如张友东在演讲结束时所说:“Lakehouse 不仅是技术演进的方向,更是释放数据价值的关键,Lakehouse is ALL you need,StarRocks will power your lakehouse!”

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 镜舟科技基于 StarRocks 构建湖仓一体架构,支撑某大型电网企业国产化升级

    某大型电网企业联合镜舟科技与腾讯云,基于开源分析型数据库StarRocks及腾讯TBDS大数据平台,构建电力行业国产化湖仓一体架构。该项目实现PB级电力数据统一管理,解决数据链路复杂、资源瓶颈、高并发查询等五大挑战,查询性能提升近8600倍。方案采用分层架构:Flink实时数据处理层、TBDS数据湖存储层、StarRocks分析加速层及可视化应用层,完成全栈国产化适配验证,支持业务平滑迁移。通过统一元数据目录和实时入湖机制,形成完整数据处理闭环,为能源行业核心系统国产化升级提供可复制的技术范本。

  • 创新让生活更美好丨“方泰科闪耀2025北京雅森展,圆满收官引领行业新潮流!”

    2月 24 日,为期四天的 2025 北京雅森展在首都国际会展中心(新国展二期)圆满落幕。作为世界展览联盟(UFI)认证的汽车后市场行业专业展会,本次雅森展吸引了超过 6000 个国外品牌入驻,参与国家超 50 个,涵盖汽车科技、零部件、改装到汽车文化等领域,成为全球汽车后市场行业的年度盛会。方泰科(FUNCTECH)作为鑫亘科技旗下的高端车衣领先品牌,在此次展会上大放异彩

  • 腾讯发布2024年度ESG报告:以前沿技术持续创造社会价值

    4月8日,腾讯正式发布2024年ESG(即“环境、社会及管治”)报告,全方位披露其在ESG各个领域的举措与成果。腾讯ESG的评级进一步提升,标普全球、万得等ESG评级位于行业前列。截至2024年底,腾讯入选了道琼斯可持续发展、明晟、恒生等主流ESG指数。这些成绩印证了腾讯“用户为本,科技向善”的使命愿景在战略执行中的深化。 科技创新正在成为可持续发展的关键驱动力,�

  • 参展即领跑! 2025年TCT亚洲展圆满收官!快人一步锁定9月TCT深圳展,深圳再相聚!

    2025年TCT亚洲展圆满收官!TCT深圳展的布局,将进一步提升TCT对粤港澳大湾区,辐射华南、西南及东南亚地区更高效、优质的服务,助力实现3D打印与增材制造的高速增长机遇。TCT深圳展的布局,将进一步提升TCT对粤港澳大湾区,辐射华南、西南及东南亚地区更高效、优质的服务,助力实现3D打印与增材制造的高速增长机遇。

  • 极光亮相2025亚洲营销技术峰会,以定制化方案破解企业增长难题

    极光亮相2025亚洲营销技术峰会,以定制化方案破解企业增长难题4月10日,领先的客户互动和营销科技服务商,极光,携领先产品GPTBots.ai与EngageLab亮相2025亚洲营销技术峰会。面对企业客户对技术深度适配业务场景的迫切需求,极光通过提供端到端定制化解决方案,成为峰会期间最受关注服务商之一。敏捷服务体系:从需求诊断到方案落地实现及售后支持的快速响应。

  • 创新让生活更美好丨“方泰科亮相2025深圳九州展,圆满收官引行业瞩目!”

    2025深圳九州汽车生态博览会于3月3日-6日在宝安国际会展中心举办。作为亚洲首个覆盖乘用车与商用车全产业链的生态展会,本届展会以"科技·时尚·贸易"为核心,吸引38.3万观众到场,展出1500台车辆及2万件创新展品。方泰科(FUNCTECH)作为鑫荃科技旗下高端汽车漆面保护膜品牌,携TPU隐形车衣、变色车衣等明星产品亮相,凭借抗剐蹭、抗腐蚀等卓越性能及7-10年质保服务获得广泛关注。展会期间,方泰科通过专业讲解和现场演示,与经销商及汽车爱好者深入交流,进一步提升了品牌影响力,为拓展市场奠定基础。

  • 中航未来丨2024级空中乘务专业模拟面试大赛圆满结束

    为提升空中乘务专业学生职业竞争力,打造专业化、规范化的实践教学平台,近日,中航未来丨浙江广厦特举办2024级空中乘务专业模拟面试大赛。通过高度还原航空公司真实招聘流程,帮助学生掌握面试技巧,展示专业风采,为未来职业发展奠定坚实基础。比赛流程1、初试环节(形象展示)选手们 10 分钟一组,每组 10 人,依次入场,先完成标准站姿展示。然后绕场一圈,进行�

  • 北京米扬丽格巫文云院长夏正义院长闪耀2025智美峰会,共探医美前沿新趋势

    4 月12 - 13 日,第六届“智慧医美· 2025 国际医学美容峰会”在郑州·CBD国际会展中心盛大举行。本次峰会汇聚了国内外医美领域的专家,围绕医美行业的前沿技术、临床实践以及产业发展等话题展开深入探讨与交流。北京米扬丽格巫文云院长和夏正义院长受邀参会,在峰会上分享专业见解,展现北京米扬丽格在医美领域的深厚积淀与卓越实力。(巫文云院长、夏正义院长共同参

  • 省级最高荣誉——金册奖!2024年度获奖高速公路项目均由微柏软件提供技术支持

    广东省档案局公布2024年度"重大建设项目档案金册奖"获奖名单,微柏软件提供技术支持的2个高速公路项目获奖。这是微柏连续第五年助力省内高速公路项目获此殊荣,累计已服务24个获奖项目。获奖项目均使用微柏《交通工程质量管理系统》和《交通工程电子档案管理系统》,实现工程档案电子化、标准化管理。该奖项是广东省重大建设项目档案管理最高荣誉,要求项�

  • WWDC2024Siri演示曝内幕:大部分功能仅为概念

    根据TheInformation最新报道,苹果公司在2024年全球开发者大会上展示的iOS18新版Siri功能大多尚未开发完成,甚至连原型都不存在。报道引用一位前苹果员工的说法,称公司内部团队对WWDC演示内容感到"意外和惊讶"。苹果内部对AI发展进度极为不满,促使CEO蒂姆·库克进行高层调整,任命VisionPro负责人MikeRockwell接管Siri语音助手业务,以期加速相关功能开发。