首页 > 传媒 > 关键词  > 正文

StarRocks 2024 数据技术峰会圆满收官,Lakehouse引领数据技术新趋势

2024-12-11 10:59 · 稿源: 站长之家用户

12 月 7 日,StarRocks Summit Asia 2024 于北京圆满落幕。本次峰会以"Lakehouse Is All You Need"为主题,汇聚行业佼佼者和技术专家,共同探讨 Data+AI 的创新与行业实践。

技术引领,构筑湖仓新范式

StarRocks TSC Member,镜舟科技 CTO 张友东分享

StarRocks TSC Member,镜舟科技 CTO 张友东以“Lakehouse Is All You Need”为题开场演讲,深入解读 Lakehouse 的演进趋势以及 StarRocks 在 Lakehouse方向的技术深耕与创新。

“StarRocks 社区正以比较罕见的速度发展,” 张友东展示了一组数据:“在过去三年里,我们在 GitHub 上获得超过 9300 颗 star,活跃贡献者超过 400 人,超过 450+ 市值 10 亿美金以上的企业在生产环境使用 StarRocks,各行业对 StarRocks 的认可与期待与日俱增。”

镜舟科技 CTO 张友东致谢 StarRocks 用户及贡献者

他详细介绍了 StarRocks 在多个技术方向上的突破:

StarRocks 通过创新的向量化执行引擎和智能查询优化技术,将分析性能提升至行业领先水平,同时,在 3.X 版本中实现了对数据湖的原生支持,使得企业可以在不迁移数据的情况下进行有效分析。

此外,StarRocks 在半结构化、非结构化数据分析方面取得显著进展。Flat JSON 兼顾半结构化数据分析的灵活性与查询性能,性能提升达到数十倍;文本检索、向量检索使得 RAG 应用构建过程简单有效,更好地支撑 AI 应用场景。

“Lakehouse 是未来所有数据分析的基础”,张友东强调,Lakehouse 是一种新的架构范式,结合数据湖和数据仓库的优势,提供统一的数据存储,并基于一份数据同时支持企业 BI 和 AI 的应用场景,实现 One data,all analytics 的业务价值。

通过与 Apache Iceberg、Apache Paimon、Apache Hive 等开放数据湖的深度集成,StarRocks 正在构建完善的数据湖生态,为用户提供极速统一的湖仓分析体验。

商业突破:以终为始的商业选择

镜舟科技 CEO 孙文现在StarRocks峰会分享

镜舟科技 CEO 孙文现以《镜舟数据库与 Lakehouse:面向全球,挖掘商业增长新潜力》为题,分享了这两年来的商业化心路历程。

他提到 StarRocks 在业务场景覆盖上的突破性进展:“从最初的固定报表分析,到如今的实时数据分析、数据跑批加工、湖仓一体化分析等全场景支持,StarRocks 展现了强大的技术适应性。截至目前,实时数据分析场景已服务 270 多家企业,湖仓分析能力也获得 50 多家企业的实践验证。”

在商业化道路上,镜舟科技坚持“为客户创造更大的业务成功”的理念,付费客户数已突破 120 家,镜舟科技的 ARR(年经常性收入)连续三年翻倍增长,NRR(净留存率)保持在 130%。2024 年新增中信银行、民生银行、广发证券等多家重量级客户,充分证明了镜舟数据库在企业级市场的竞争力。

谈到增长背后的战略,孙文现阐述了一个商业上的转变:即以终为始的商业选择,以构建一家能够长期经营的商业化公司为目标,打造能够满足致胜场景、带来商业化价值的产品。

孙文现也分享了镜舟的奋斗目标:“以商业成功为伴,面向星辰大海,打造一份长久奋斗的事业。”

生态共融,与行业携手共进

Apache Iceberg PMC member 顾宇飞在StarRocks峰会分享

Apache Iceberg PMC member 顾宇飞带来了《The Evolving Landscape of Iceberg REST Catalog》的精彩分享。“开放的生态系统是推动技术创新的关键。”顾宇飞表示,REST Catalog 的演进为数据湖提供了更灵活、更有效的访问机制。StarRocks 对 Iceberg 的原生支持,不仅提升了查询性能,更为企业构建现代化数据架构提供了坚实基础。

阿里云计算平台开源 OLAP 负责人范振(辰繁)在StarRocks峰会分享

“StarRocks 是最适合 Paimon 湖格式的 Lakehouse 开源引擎。”阿里云计算平台开源 OLAP 负责人范振(辰繁)介绍,“在阿里集团的数据湖仓实践分享中,StarRocks 展现了卓越的查询性能和系统稳定性,在与 Paimon 的协同场景中,我们实现了流批一体的数据处理能力,分析性能有 13 倍提升。目前,这一解决方案已在阿里集团内部广泛应用,也正通过阿里云向更多企业客户提供服务。”

他也从云服务商的角度,阐述了对湖仓的理解:“未来的数据架构必将是开放、统一的,StarRocks 在这方面的探索很有前瞻性。选择 StarRocks 作为战略合作伙伴,也是看中其在实时分析领域的技术领先性和商业化潜力。”

应用实践,让价值落地

微众银行大数据工程师,StarRocks 平台负责人林俊锋在StarRocks峰会分享

客户代表、微众银行大数据工程师,StarRocks 平台负责人林俊锋分享了其数字化转型实践。“在用户画像、人群圈选等大数据量分析场景中,StarRocks 展现出卓越性能,查询速率相比原有 Trino 方案提升 235%。”林俊锋介绍,“目前 StarRocks 已支持行内 5 个以上部门的 10 多个应用场景,结合自研的 Exchangis 数据交换平台,实现了跨集群数据互通、灵活的权限管理等特性。”

腾讯音乐专家工程师,业务运维中心总监曹凤龙在StarRocks峰会分享

腾讯音乐集团(TME)专家工程师,业务运维中心总监曹凤龙详细阐述了其数据仓库的演进历程。“从 2018 年的 Druid 到如今的 StarRocks,StarRocks 的存算分离架构为我们带来了显著收益:组件更精简、维护更便捷,数据存储成本降低 50%,同时支持智能的冷热数据管理。”

在具体业务场景中,通过存储桶打散、表结构优化、物化视图等技术手段,大表查询响应时间从 30.97 秒降至 0.08 秒,查询秒级响应率达到 99%。目前,StarRocks 集群支撑着 QQ 音乐、全民 K 歌等多个音乐平台的数据分析需求。

未来可期

全天共 30 余个演讲议题,汇聚了 7 大行业,包括小红书、腾讯游戏、Shopee、爱奇艺、得物、杭银消费金融、理想汽车、唯品会、微信、西南证券等多家标杆企业。这些企业用自身实践说明,StarRocks 正在通过技术创新推动各行业数字化转型,在降本增效的同时,为企业创造新的业务价值。

通过与合作伙伴和用户的深度互动,StarRocks 社区正在构建一个更开放、更繁荣的数据技术生态。随着数字化转型深入推进,StarRocks 将继续发挥技术引领作用,助力更多企业实现数据价值比较大化。

随着峰会落幕,StarRocks 在湖仓技术领域的愿景更加清晰:以开放、创新的技术理念,携手合作伙伴共建现代化数据分析生态,为企业数字化转型提供强有力的支撑。正如张友东在演讲结束时所说:“Lakehouse 不仅是技术演进的方向,更是释放数据价值的关键,Lakehouse is ALL you need,StarRocks will power your lakehouse!”

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • StarRocks 优化实践:揭秘毫秒级实时分析的三大核心技术

    StarRocks是一款高性能实时分析数据库,通过三大核心技术解决海量数据分析难题:1)向量化执行引擎,采用批处理方式减少CPU开销,支持SIMD指令集加速计算;2)CBO优化器,基于统计信息智能选择最优执行计划,支持复杂查询改写和物化视图优化;3)列式存储结构,结合稀疏索引和Bitmap索引提升I/O效率。其企业级产品镜舟数据库在此基础上增强多租户隔离、RBAC权限控制等特性

  • 一心同德·华夏共辉 | 精英AI 2025深圳峰会圆满收官

    2025年5月20日,"一心同德·华夏共辉"精英AI深圳峰会在鹏城盛大召开。峰会聚焦人工智能与实体经济的深度融合,展示了精英AI商业服务集团在技术创新、生态布局及人才培养等领域的核心成果。创始人黄智中重申集团"引领、创造、同生、共荣"的价值观,强调企业发展与国家战略同频共振。峰会发布未来三年战略规划,明确以AI工具开发、产业孵化为重点,加速推进开放平台战略。CTO许维城发布精英AI+Plus2.0工具,展现算法突破与商业赋能能力。峰会期间,精英AI与全国百家电视联盟达成战略合作,启动"全域传播生态计划",构建智能传播体系。多位高管围绕市场拓展、客户服务及生态合作展开深度分享,为行业发展锚定方向。

  • 载誉启新程|TCL光伏科技SNEC 2025圆满收官,感恩同行

    TCL光伏科技在SNEC2025展会上以"碳索新境+智领未来"为主题,展示了五大创新成果:1)推出商用"特能"系列产品矩阵,为不同场景定制绿色能源方案;2)发布户用"整村汇流"模式,实现从单户到规模化落地闭环;3)针对东南亚市场推出"一站式户用能源方案",欧洲市场开发"光储充"综合方案;4)以AI技术赋能光伏电站全生命周期管理;5)创新电碳业务打通绿电生产-交易-普惠开发全链路。展会期间斩获APVIA亚洲光伏奖等三大权威奖项,吸引数万观众参观,达成超百项合作意向。通过线上线下联动传播,单平台观看量超2万人次,充分展现其在光伏领域的技术创新实力与全球化布局。

  • 中航未来丨2024级空中乘务专业·职业形象比赛圆满举行

    近日,中航未来&滁州城市职业学院·管理与信息学院,“ 2024 级空中乘务专业职业形象活动比赛”,成功举办。此次活动以“精技砺能 仪展芳华”为主题。参加比赛的 24 级空乘专业学生,经过严格考核, 8 名学子凭借卓越的职业素养与专业技能脱颖而出。空乘职业形象比赛聚焦空乘职业形象的核心要素,从妆容、发型、仪容仪表到服装搭配,全方位考核学生的专业素养。男生

  • 小寻 2025 智能穿戴新品发布会圆满收官:品牌焕新发力青少年与成人市场

    5月17日,小寻品牌在上海举办2025智能穿戴新品发布会,宣布启动运动手表产品线,从儿童市场拓展至青少年及成人领域。作为小米生态链企业,小寻10年来累计销售超2400万台儿童电话手表,现依托"技术+场景"双轮驱动战略,推出覆盖运动、健康、学习等多场景的智能穿戴产品。发布会现场展示了专为学生定制的Sport 6C手表,配备15种运动模式和健康监测功能。小寻通过精准划分Lite、A、C三大产品系列,满足不同人群需求,并与百家合作伙伴共同探索智能穿戴产业新生态。

  • 融合共生,智见未来 歌尔光学举办第九届2025年VR&AR显示光学技术峰会

    5月23日,第九届VR&AR显示光学技术峰会在青岛召开,主题为"融合共生,智见未来"。歌尔光学主办,汇聚Meta、PICO等产业链上下游企业及高校专家,探讨VR/AR关键技术及发展趋势。会议聚焦Pancake折叠光路、Micro-OLED等主流方案,分享光学显示领域最新突破。数据显示2025年全球XR头显出货量将增长6%,其中AR眼镜增幅达42%。歌尔光学展示多项创新成果,包括单光机双目AR显示模

  • 携手同行,续写华章!itc保伦股份2024年度供应商表彰大会在总部圆满召开!

    ITC保伦股份2024年度供应商表彰大会在总部隆重召开,来自全国60余家供应商代表齐聚一堂。大会表彰了过去一年与公司紧密合作、共同发展的优秀供应商,设立"2024年优秀合作伙伴奖"和"2024年优秀服务支持奖"两大奖项,27家企业入选。公司副总裁阮胜林强调,ITC的发展离不开供应商伙伴的支持,2025年公司将迎来多项关键节点,希望与供应商携手提升品质管控,打

  • 携手共筑 AI 增长新生态,伊顿 2025 智算数据中心大客户峰会大湾区站圆满举行

    5月28日,伊顿关键电源在深圳成功举办"2025年大湾区智算数据中心大客户峰会"。活动以"共筑增长,携手共赢"为主题,吸引了来自头部互联网企业、设计院、总包单位及咨询机构等近百位行业代表参与。会议聚焦数据中心五大趋势:预制化模块化加速项目交付、绿色技术深度渗透、AI智能运维普及、高密算力需求激增及行业生态协作。伊顿展示了9395XR兆瓦级UPS、93PR紧耦合单柜版UPS、Power Cube电力模块系统等创新产品组合,并分享了"One Eaton"一体化解决方案。亚太区供应链总监Cindy Wang出席活动,强调伊顿全球布局与本地制造的协同优势。会后嘉宾实地参观了伊顿深圳BA1工厂,深入了解其从设计到服务的全流程质量管理体系。

  • 超擎数智协办的2025 NVIDIA 创业企业展示——澳门站“首秀”圆满收官!

    5月22日,2025 NVIDIA创业企业展示活动在澳门永利皇宫成功举办。活动聚焦AI智能体、物理AI和机器人等前沿技术,展示NVIDIA Omniverse、NIM等最新技术应用。超擎数智作为协办单位全程参与,其总经理唐春峰出席活动并担任路演评委。活动期间还启动了第三届NVIDIA DPU中国黑客松竞赛,旨在挖掘BlueField DPU在AI等领域的潜力。37家会员企业将在BEYOND EXPO展示创新成果。NVIDIA专家探讨了物理AI推动数字化转型的趋势,强调计算、存储和网络是AI基础设施的关键。活动为创业生态搭建了交流平台,促进AI技术商业化落地。

  • 《快手2024企业社会责任报告》发布,数字技术创新社会公益新模式

    快手发布《2024企业社会责任报告》,聚焦"信任连接+价值普惠"理念,系统梳理了平台在助力用户创收、激发产业活力、共建美好社会等方面的实践成果。报告显示,快手通过"幸福大讲堂"等普惠型培训项目覆盖超100万人次,帮助乡村主播、女性等群体掌握数字技能;"非遗学堂"支持20名困境非遗传承人实现技艺传承与增收;"启智未来学堂"让70万青少年接触前沿科技。在乡村振兴方面,全年促成乡村电商订单28亿,日均发出助农包裹94.8万个,培育乡村直播电商新业态。平台还构建未成年人数字防护体系,通过AI技术实施内容分级过滤。快手将持续创新数字公益模式,推动技术普惠与社会价值共创。