Apache 软件基金会宣布 Apache InLong 为顶级项目
Apache 软件基金会是 350 多个开源项目和计划的全志愿开发人员、管理者和孵化器,今天宣布 Apache InLong 为顶级项目。项目名称具有重要意义。InLong “应龙”是中国神话中引水入海的神兽,被视为 InLong 系统上报数据流的隐喻。
海量数据一站式集成框架
InLong 已广泛应用于各个行业,包括广告、支付、社交、游戏、人工智能等。Apache InLong 项目原名为 TubeMQ,专注于高性能、低成本的消息队列服务。
为进一步释放TubeMQ周边生态能力,社区将项目升级为InLong。它集成了收集、聚合、存储和排序数据处理的整个过程。它简单、灵活、稳定、可靠。特点包括:
- 易用性: Apache InLong 是一个基于 SaaS 的服务平台。用户可以根据主题发布和订阅数据,方便快捷地进行数据的上报、传输和分发。
- 稳定性和可靠性: Apache InLong 源自在线生产环境。为100万亿级数据流提供高性能处理能力,为1000亿级数据流提供高可靠服务。
- 综合特性: Apache InLong 支持多种数据访问方式,可与不同类型的消息队列(MQ)集成。它还提供实时数据提取、转换和加载 (ETL) 以及基于规则的排序功能。Apache InLong 还允许用户插入特性以扩展系统功能。
- 服务集成: Apache InLong 提供统一的系统监控和告警服务。它提供了细粒度的指标来促进数据可视化。用户可以在统一的数据度量平台查看队列的运行状态和基于主题的数据统计。用户还可以根据自己的业务需求配置告警服务,以便用户在发生错误时得到告警。
- 可扩展性: Apache InLong 采用可插拔架构,允许您根据特定协议将模块插入系统。用户可以根据业务需求更换组件和添加功能。
此外,该项目最近发布了 v1.2.0-incubating,Apache InLong 的第十二个版本。改进包括:
- 重构InLong Sort模块,支持Transform,如String Split、Data Filter、Regular Join等。
- 添加 8+ 数据节点,包括 MongoDB、SqlServer、Greenplum、Oracle DB 等。
- 优化 Iceberg、ClickHouse、Hive 等数据节点的初始化流程。
- 支持 MySQL 从指定偏移量收集 Binlog。
- 支持不同类型消息队列的插件扩展。
- 支持管理多个集群和数据节点。
The post Apache 软件基金会宣布 Apache InLong 为顶级项目 first appeared on Linux迷.
共有 0 条评论