首页 > 传媒 > 关键词  > 正文

StarRocks 2024 数据技术峰会圆满收官,Lakehouse引领数据技术新趋势

2024-12-11 10:59 · 稿源: 站长之家用户

12 月 7 日,StarRocks Summit Asia 2024 于北京圆满落幕。本次峰会以"Lakehouse Is All You Need"为主题,汇聚行业佼佼者和技术专家,共同探讨 Data+AI 的创新与行业实践。

技术引领,构筑湖仓新范式

StarRocks TSC Member,镜舟科技 CTO 张友东分享

StarRocks TSC Member,镜舟科技 CTO 张友东以“Lakehouse Is All You Need”为题开场演讲,深入解读 Lakehouse 的演进趋势以及 StarRocks 在 Lakehouse方向的技术深耕与创新。

“StarRocks 社区正以比较罕见的速度发展,” 张友东展示了一组数据:“在过去三年里,我们在 GitHub 上获得超过 9300 颗 star,活跃贡献者超过 400 人,超过 450+ 市值 10 亿美金以上的企业在生产环境使用 StarRocks,各行业对 StarRocks 的认可与期待与日俱增。”

镜舟科技 CTO 张友东致谢 StarRocks 用户及贡献者

他详细介绍了 StarRocks 在多个技术方向上的突破:

StarRocks 通过创新的向量化执行引擎和智能查询优化技术,将分析性能提升至行业领先水平,同时,在 3.X 版本中实现了对数据湖的原生支持,使得企业可以在不迁移数据的情况下进行有效分析。

此外,StarRocks 在半结构化、非结构化数据分析方面取得显著进展。Flat JSON 兼顾半结构化数据分析的灵活性与查询性能,性能提升达到数十倍;文本检索、向量检索使得 RAG 应用构建过程简单有效,更好地支撑 AI 应用场景。

“Lakehouse 是未来所有数据分析的基础”,张友东强调,Lakehouse 是一种新的架构范式,结合数据湖和数据仓库的优势,提供统一的数据存储,并基于一份数据同时支持企业 BI 和 AI 的应用场景,实现 One data,all analytics 的业务价值。

通过与 Apache Iceberg、Apache Paimon、Apache Hive 等开放数据湖的深度集成,StarRocks 正在构建完善的数据湖生态,为用户提供极速统一的湖仓分析体验。

商业突破:以终为始的商业选择

镜舟科技 CEO 孙文现在StarRocks峰会分享

镜舟科技 CEO 孙文现以《镜舟数据库与 Lakehouse:面向全球,挖掘商业增长新潜力》为题,分享了这两年来的商业化心路历程。

他提到 StarRocks 在业务场景覆盖上的突破性进展:“从最初的固定报表分析,到如今的实时数据分析、数据跑批加工、湖仓一体化分析等全场景支持,StarRocks 展现了强大的技术适应性。截至目前,实时数据分析场景已服务 270 多家企业,湖仓分析能力也获得 50 多家企业的实践验证。”

在商业化道路上,镜舟科技坚持“为客户创造更大的业务成功”的理念,付费客户数已突破 120 家,镜舟科技的 ARR(年经常性收入)连续三年翻倍增长,NRR(净留存率)保持在 130%。2024 年新增中信银行、民生银行、广发证券等多家重量级客户,充分证明了镜舟数据库在企业级市场的竞争力。

谈到增长背后的战略,孙文现阐述了一个商业上的转变:即以终为始的商业选择,以构建一家能够长期经营的商业化公司为目标,打造能够满足致胜场景、带来商业化价值的产品。

孙文现也分享了镜舟的奋斗目标:“以商业成功为伴,面向星辰大海,打造一份长久奋斗的事业。”

生态共融,与行业携手共进

Apache Iceberg PMC member 顾宇飞在StarRocks峰会分享

Apache Iceberg PMC member 顾宇飞带来了《The Evolving Landscape of Iceberg REST Catalog》的精彩分享。“开放的生态系统是推动技术创新的关键。”顾宇飞表示,REST Catalog 的演进为数据湖提供了更灵活、更有效的访问机制。StarRocks 对 Iceberg 的原生支持,不仅提升了查询性能,更为企业构建现代化数据架构提供了坚实基础。

阿里云计算平台开源 OLAP 负责人范振(辰繁)在StarRocks峰会分享

“StarRocks 是最适合 Paimon 湖格式的 Lakehouse 开源引擎。”阿里云计算平台开源 OLAP 负责人范振(辰繁)介绍,“在阿里集团的数据湖仓实践分享中,StarRocks 展现了卓越的查询性能和系统稳定性,在与 Paimon 的协同场景中,我们实现了流批一体的数据处理能力,分析性能有 13 倍提升。目前,这一解决方案已在阿里集团内部广泛应用,也正通过阿里云向更多企业客户提供服务。”

他也从云服务商的角度,阐述了对湖仓的理解:“未来的数据架构必将是开放、统一的,StarRocks 在这方面的探索很有前瞻性。选择 StarRocks 作为战略合作伙伴,也是看中其在实时分析领域的技术领先性和商业化潜力。”

应用实践,让价值落地

微众银行大数据工程师,StarRocks 平台负责人林俊锋在StarRocks峰会分享

客户代表、微众银行大数据工程师,StarRocks 平台负责人林俊锋分享了其数字化转型实践。“在用户画像、人群圈选等大数据量分析场景中,StarRocks 展现出卓越性能,查询速率相比原有 Trino 方案提升 235%。”林俊锋介绍,“目前 StarRocks 已支持行内 5 个以上部门的 10 多个应用场景,结合自研的 Exchangis 数据交换平台,实现了跨集群数据互通、灵活的权限管理等特性。”

腾讯音乐专家工程师,业务运维中心总监曹凤龙在StarRocks峰会分享

腾讯音乐集团(TME)专家工程师,业务运维中心总监曹凤龙详细阐述了其数据仓库的演进历程。“从 2018 年的 Druid 到如今的 StarRocks,StarRocks 的存算分离架构为我们带来了显著收益:组件更精简、维护更便捷,数据存储成本降低 50%,同时支持智能的冷热数据管理。”

在具体业务场景中,通过存储桶打散、表结构优化、物化视图等技术手段,大表查询响应时间从 30.97 秒降至 0.08 秒,查询秒级响应率达到 99%。目前,StarRocks 集群支撑着 QQ 音乐、全民 K 歌等多个音乐平台的数据分析需求。

未来可期

全天共 30 余个演讲议题,汇聚了 7 大行业,包括小红书、腾讯游戏、Shopee、爱奇艺、得物、杭银消费金融、理想汽车、唯品会、微信、西南证券等多家标杆企业。这些企业用自身实践说明,StarRocks 正在通过技术创新推动各行业数字化转型,在降本增效的同时,为企业创造新的业务价值。

通过与合作伙伴和用户的深度互动,StarRocks 社区正在构建一个更开放、更繁荣的数据技术生态。随着数字化转型深入推进,StarRocks 将继续发挥技术引领作用,助力更多企业实现数据价值比较大化。

随着峰会落幕,StarRocks 在湖仓技术领域的愿景更加清晰:以开放、创新的技术理念,携手合作伙伴共建现代化数据分析生态,为企业数字化转型提供强有力的支撑。正如张友东在演讲结束时所说:“Lakehouse 不仅是技术演进的方向,更是释放数据价值的关键,Lakehouse is ALL you need,StarRocks will power your lakehouse!”

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 2024 首届村舞赛事总决赛圆满收官

    12月29日,由新文娱俱乐部主办,新亲年文化传媒有限公司承办的首届村舞大赛总决赛在成都圆满举办,来自四川省各市县的20个舞队参与角逐,更有国际级评审团为舞队进行现场专业指导。首届“村舞”大赛于2024年9月面向全国发布,并在川渝地区开设海选、初赛、复赛等环节。作为村舞系列的承办单位,我们在赛事过程中秉承这一指导方针,办好蕴含时代要求的优质赛事;办

  • 探秘2024:解锁中国年轻人的新趋势与喜好

    从集体追捧“秋天的第一杯奶茶”,到遍访全国热门景点进行“特种兵式打卡”,2024年的众多消费热潮皆由年轻人点燃。不夸张的说,当下年轻人的消费倾向,直接决定了很多品牌未来多年的营销预算分配,或是地方文旅此后几年的发展。只有深刻理解年轻人的喜好和趋势,品牌才能更精准地定位产品,满足年轻消费者的需求,从在竞争激烈的市场中占据优势。

  • 博物馆里掀起学习热,猿辅导“2024博物馆新知计划”开创教育新趋势

    随着科技的迅速发展,教育的形式和内容也在不断地革新。猿辅导作为国内领先的在线教育平台,始终以创新为驱动力,致力于为广大学生提供更好的学习资源和学习体验。在 2024 年,猿辅导推出了“博物馆新知计划”,旨在通过丰富的博物馆资源,让学生在学习中发掘文化底蕴,提升综合素质。这一计划不仅是个体学习的革新,更是教育生态的一次重要尝试。自成立以来,�

  • 微星龙盾局成都站燃情收官2024年度盛宴圆满落幕

    12 月 29 日,天府之城成都东郊记忆园区迎来了微星 2024 龙盾局活动的最后一站。作为微星年度龙盾局活动的最终战,本次活动不仅是一场粉丝嘉年华,更为微星 2024 年百花齐放的系列装备发布画上了一个圆满的句号。龙盾局,作为微星精心打造的硬件爱好者盛会,不仅是一场展示微星全系硬件产品璀璨光芒的舞台,对于微星的粉丝和用户来说,更是一次难得的深度交流与体验�

  • 金仓数据库四项成果入选2024星河案例

    12月18日-19日,由中国通信标准化协会主办的“2024数据资产管理大会”在京召开。为促进数据产业优秀成果推广,会上隆重公布了2024年大数据“星河”案例入围名单,电科金仓携手湖南移动、西京医院、新疆电信、河南移动联合申报的四个实践案例全部入围,分别荣获数据库专项典型案例和潜力案例,成为本届入围案例数量最多的数据库厂商,充分彰显出电科金仓的科技实力�

  • 心无畏,勇向前!2024电魂娱乐星赛季荣耀收官

    2024年12月15日,由电魂网络主办的2024电魂娱乐星赛季于郑州市体育馆落下帷幕。本届星赛季为期四天,共设《梦三国2》MPL职业战队邀请赛、《梦三国2》MPL全明星表演赛和第六届军团出征全服争霸赛三个项目。乐歌创作者系列E5-N升降桌,陪你热血酣战,创作出更好的自己。

  • 2024首届CCF中国数据大会在海南召开,趣链科技受邀参与

    12月28日—30日,由中国计算机学会主办的2024首届CCF中国数据大会在海南琼海博鳌亚洲论坛国际会议中心顺利举办。12月28日,由CCF区块链专业委员会、杭州趣链科技有限公司、海南大学共同承办的“智链全球价值革新”区块链与跨境数据流通专题论坛召开。趣链科技将深度夯实自主可控的核心技术基础,持续落地“区块链”创新应用,积极拓展全球数据流通市场,以数智赋能发展新质生产力,为谱写中国式现代化新篇章贡献力量。

  • 2025 Shokz Day·新声态圆满收官,共探开放式声学新未来

    1月8日,韶音在深圳举行了“2025ShokzDay·新声态”,并邀请了来自全国各个行业的头部媒体及合作伙伴们齐聚一堂,共同见证韶音的最新技术创新、产品发布和未来的发展规划。Shokz韶音中国区CEO杨云、产品经理毛辛男、声学工程师张磊、结构工程师李永坚等出席会议。作为开放式耳机和专业运动耳机赛道的开创者和引领者,韶音始终专注原创科技创新,打造坚实的产品硬实力,实现“让伟大的科技创新走进千家万户,融入人们的生活日常里”的初心,追求高质量、高科技、有技术壁垒的良性发展,成为代表中国新质生产力的核心典范,让中国品牌领航世界。

  • 小赢科技荣获2024金融峰会品牌建设大奖

    在2024年度金融行业的璀璨舞台上,小赢卡贷所属的小赢科技凭借其在品牌建设、金融科技创新及服务实体经济方面的卓越表现,于12月10日荣耀加冕,荣获由《中国经营报》举办的“深化改革金融向‘实’”——2024卓越竞争力金融峰会颁发的“卓越竞争力品牌建设金融机构奖”。这一殊荣不仅是对小赢科技在金融科技领域深耕细作、持续创新的肯定,更是对其在推动金融与实体经济深度融合、助力社会经济高质量发展方面所做贡献的高度认可。在未来的日子里,让我们共同期待小赢科技在金融科技领域创造更多的辉煌成就!

  • 巅峰时刻,「第6届天池全球数据库大赛」圆满收官

    12月29日,由阿里云和英特尔主办的“第6届天池全球数据库大赛——PolarDBTPC-C性能优化挑战赛”在武汉圆满落下帷幕。历经近3个月的层层选拔、高手过招,10支队伍从全球3500多支参赛战队中脱颖出,成功晋级大赛决赛圈。相信在大赛的促进下,将有更多技术爱好者积极参与到数据库的创新和实践中,领略“技术之美”。

热文

  • 3 天
  • 7天