快手开源向量化引擎 Auron 正式加入 Apache 孵化器

快手开源并捐赠的向量化执行引擎auron项目(原名blaze)近日正式入驻全球最大开源组织——apache软件基金会(asf),进入其孵化器体系,成为apache旗下孵化项目。

加入Apache软件基金会的孵化计划,是基于我们对开放生态的深度认同,以及对项目长远发展的战略考量。当前,Auron已在多个企业中实现落地应用,充分验证了其技术价值与实用性。然而,一个开源项目的持久生命力,不仅取决于技术的先进性,更依赖于开放的社区治理、多元化的贡献者生态以及透明的决策流程。我们始终坚信,开源的核心精神在于“共享”与“共创”。接下来,我们将严格遵循Apache的治理模式,推动代码、文档和社区运作的全面公开透明,吸引全球开发者参与共建。同时,Auron也将积极与Apache生态中的其他大数据项目(如Spark、Flink、Celeborn等)协同发展,形成技术互补,共同推进大数据计算领域的持续创新。

Auron是一套基于向量化技术构建的Native执行引擎,通过充分发挥原生代码性能与SIMD指令集的并行计算能力,显著降低资源消耗,提升查询执行效率。

快手开源向量化引擎 Auron 正式加入 Apache 孵化器

其主要特性包括:

原生高性能执行:采用Rust语言开发,规避JVM带来的内存与调度开销,实现更优的运行性能;向量化计算引擎:基于Apache Arrow列式内存格式设计,深度利用SIMD指令加速批量数据处理;可扩展插件化架构:默认与Apache Spark无缝对接,同时具备良好的扩展性,未来可支持更多计算框架;生产级优化能力:集成多级内存管理机制、高效Shuffle格式优化及自适应执行策略,并已在大规模生产环境中稳定运行。

在标准TPC-DS测试中,Auron相较传统Spark引擎实现了2倍以上的性能提升:

快手开源向量化引擎 Auron 正式加入 Apache 孵化器

卡奥斯智能交互引擎 卡奥斯智能交互引擎

聚焦工业领域的AI搜索引擎工具

卡奥斯智能交互引擎 36 查看详情 卡奥斯智能交互引擎

Auron 的发展历程与当前状态

2022年1月,快手大数据团队正式启动Blaze项目并对外开源。2023年9月,该项目在TPC-H和TPC-DS等权威基准测试中展现出显著性能优势。与此同时,团队围绕实际生产需求进行了大量稳定性与性能调优工作,并在快手内部实现全面部署。目前,Blaze每日支撑数十万任务运行,处理EB级数据量,表现出卓越的稳定性与效率,每年为公司节省数千万元的服务器投入。

在社区建设方面,快手自2024年1月起正式启动开源社区运营。自开源以来,Blaze已累计发布10余个版本,吸引了来自滴滴、携程、汽车之家、58同城、OPPO等多个行业企业的广泛采用。

2025年8月,Blaze正式进入Apache孵化器,并更名为 Auron(发音:[ˈɔːrɑːn]),名称灵感源自“Aura”(能量场),象征其为大数据处理带来的强劲动力与高效能。未来,Auron社区将持续演进,计划拓展对Flink引擎的支持,构建数据湖集成方案,并探索与GPU、DPU等新型硬件的深度融合。

以上就是快手开源向量化引擎 Auron 正式加入 Apache 孵化器的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/253715.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月4日 06:30:45
下一篇 2025年11月4日 06:32:23

相关推荐

发表回复

登录后才能评论
关注微信