StarRocks Summit Asia 2024落幕,Lakehouse引领数据技术新趋势

发布时间:2025-05-08 19:04


12月7日,StarRocksSummitAsia2024于北京圆满落幕。本次峰会以"LakehouseIsAllYouNeed"为主题,汇聚行业领袖和技术专家,共同探讨Data+AI的创新与行业实践。

技术引领,构筑湖仓新范式

StarRocksTSCMember,镜舟科技CTO张友东

StarRocksTSCMember,镜舟科技CTO张友东以“LakehouseIsAllYouNeed”为题开场演讲,深入解读Lakehouse的演进趋势以及StarRocks在Lakehouse方向的技术深耕与创新。

“StarRocks社区正以前所未有的速度发展,”张友东展示了一组数据:“在过去三年里,我们在GitHub上获得超过9300颗star,活跃贡献者超过400人,超过450+市值10亿美金以上的企业在生产环境使用StarRocks,各行业对StarRocks的认可与期待与日俱增。”

StarRocks用户及贡献者致谢

他详细介绍了StarRocks在多个技术方向上的突破:

StarRocks通过创新的向量化执行引擎和智能查询优化技术,将分析性能提升至行业领先水平,同时,在3.X版本中实现了对数据湖的原生支持,使得企业可以在不迁移数据的情况下进行高效分析。

此外,StarRocks在半结构化、非结构化数据分析方面取得显著进展。FlatJSON兼顾半结构化数据分析的灵活性与查询性能,性能提升达到数十倍;文本检索、向量检索使得RAG应用构建过程简单高效,更好地支撑AI应用场景。

“Lakehouse是未来所有数据分析的基础”,张友东强调,Lakehouse是一种新的架构范式,结合数据湖和数据仓库的优势,提供统一的数据存储,并基于一份数据同时支持企业BI和AI的应用场景,实现Onedata,allanalytics的业务价值。

通过与ApacheIceberg、ApachePaimon、ApacheHive等开放数据湖的深度集成,StarRocks正在构建完善的数据湖生态,为用户提供极速统一的湖仓分析体验。

商业突破:以终为始的商业选择

镜舟科技CEO孙文现

镜舟科技CEO孙文现以《镜舟数据库与Lakehouse:面向全球,挖掘商业增长新潜力》为题,分享了这两年来的商业化心路历程。

他提到StarRocks在业务场景覆盖上的突破性进展:“从最初的固定报表分析,到如今的实时数据分析、数据跑批加工、湖仓一体化分析等全场景支持,StarRocks展现了强大的技术适应性。截至目前,实时数据分析场景已服务270多家企业,湖仓分析能力也获得50多家企业的实践验证。”

在商业化道路上,镜舟科技坚持“为客户创造更大的业务成功”的理念,付费客户数已突破120家,镜舟科技的ARR(年经常性收入)连续三年翻倍增长,NRR(净留存率)保持在130%。2024年新增中信银行、民生银行、广发证券等多家重量级客户,充分证明了镜舟数据库在企业级市场的竞争力。

谈到增长背后的战略,孙文现阐述了一个商业上的转变:即以终为始的商业选择,以构建一家能够长期经营的商业化公司为目标,打造能够满足致胜场景、带来商业化价值的产品。

孙文现也分享了镜舟的奋斗目标:“以商业成功为伴,面向星辰大海,打造一份长久奋斗的事业。”

生态共融,与行业携手共进

ApacheIcebergPMCmember顾宇飞

ApacheIcebergPMCmember顾宇飞带来了《TheEvolvingLandscapeofIcebergRESTCatalog》的精彩分享。“开放的生态系统是推动技术创新的关键。”顾宇飞表示,RESTCatalog的演进为数据湖提供了更灵活、更高效的访问机制。StarRocks对Iceberg的原生支持,不仅提升了查询性能,更为企业构建现代化数据架构提供了坚实基础。

阿里云计算平台开源OLAP负责人范振(辰繁)

“StarRocks是最适合Paimon湖格式的Lakehouse开源引擎。”阿里云计算平台开源OLAP负责人范振(辰繁)介绍,“在阿里集团的数据湖仓实践分享中,StarRocks展现了卓越的查询性能和系统稳定性,在与Paimon的协同场景中,我们实现了流批一体的数据处理能力,分析性能有13倍提升。目前,这一解决方案已在阿里集团内部广泛应用,也正通过阿里云向更多企业客户提供服务。”

他也从云服务商的角度,阐述了对湖仓的理解:“未来的数据架构必将是开放、统一的,StarRocks在这方面的探索很有前瞻性。选择StarRocks作为战略合作伙伴,也是看中其在实时分析领域的技术领先性和商业化潜力。”

应用实践,让价值落地

微众银行大数据工程师,StarRocks平台负责人林俊锋

客户代表、微众银行大数据工程师,StarRocks平台负责人林俊锋分享了其数字化转型实践。“在用户画像、人群圈选等大数据量分析场景中,StarRocks展现出卓越性能,查询速率相比原有Trino方案提升235%。”林俊锋介绍,“目前StarRocks已支持行内5个以上部门的10多个应用场景,结合自研的Exchangis数据交换平台,实现了跨集群数据互通、灵活的权限管理等特性。”

腾讯音乐专家工程师,业务运维中心总监曹凤龙

腾讯音乐集团(TME)专家工程师,业务运维中心总监曹凤龙详细阐述了其数据仓库的演进历程。“从2018年的Druid到如今的StarRocks,StarRocks的存算分离架构为我们带来了显著收益:组件更精简、维护更便捷,数据存储成本降低50%,同时支持智能的冷热数据管理。”

在具体业务场景中,通过存储桶打散、表结构优化、物化视图等技术手段,大表查询响应时间从30.97秒降至0.08秒,查询秒级响应率达到99%。目前,StarRocks集群支撑着QQ音乐、全民K歌等多个音乐平台的数据分析需求。

未来可期

全天共30余个演讲议题,汇聚了7大行业,包括小红书、腾讯游戏、Shopee、爱奇艺、得物、杭银消费金融、理想汽车、唯品会、微信、西南证券等多家标杆企业。这些企业用自身实践说明,StarRocks正在通过技术创新推动各行业数字化转型,在降本增效的同时,为企业创造新的业务价值。

通过与合作伙伴和用户的深度互动,StarRocks社区正在构建一个更开放、更繁荣的数据技术生态。随着数字化转型深入推进,StarRocks将继续发挥技术引领作用,助力更多企业实现数据价值最大化。

随着峰会落幕,StarRocks在湖仓技术领域的愿景更加清晰:以开放、创新的技术理念,携手合作伙伴共建现代化数据分析生态,为企业数字化转型提供强有力的支撑。正如张友东在演讲结束时所说:“Lakehouse不仅是技术演进的方向,更是释放数据价值的关键,LakehouseisALLyouneed,StarRockswillpoweryourlakehouse!”

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

网址:StarRocks Summit Asia 2024落幕,Lakehouse引领数据技术新趋势 https://mxgxt.com/news/view/1063159

相关内容

StarRocks 2024 数据技术峰会圆满收官,Lakehouse引领数据技术新趋势
StarRocks Summit 2023 技术交流峰会圆满落幕
StarRocks数据集成
StarRocks数据质量管理
让数据分析极速统一!StarRocks和阿里云一起干了件大事
如何利用 StarRocks 加速 Iceberg 数据湖的查询效率
StarRocks 跨集群数据迁移:SDM 帮你一键搞定!
如何配置StarRocks输出组件用于向数据源写入数据
TikTok科技趋势:平台如何引领数字社交革命?
镜舟科技:一家分布式数据库厂商的开源商业化实践之路

随便看看