当前位置: 首页 > news >正文

Apache SeaTunnel 9 月动态:多模块修复 + 新功能上线,社区贡献成果亮眼

各位热爱 Apache SeaTunnel 的小伙伴们,社区 9 月份月报来啦!

本月,社区 21 位贡献者共同参与了 Apache SeaTunnel 的修复与功能升级,助力数据同步能力提升。

  • 核心亮点总结
  1. 核心功能持续丰富:新增正则提取转换、多模态嵌入、向量降维等Transform-V2能力;支持HDFS文件多表源读取、Databend CDC模式接收,拓展数据处理场景。
  2. 多模块问题修复:完成UI细节与包优化、Excel/DB2/Hive等连接器异常修复、Zeta引擎命令失效及资源泄漏修复,保障系统稳定运行。
  3. 性能与兼容性优化:优化ClickHouse批量并行读取性能,改进Zeta引擎作业指标处理;升级maxwell_json等格式,支持合并数据更新前后状态。
  4. 文档与生态完善:更新官网部署文档、修复连接器配置项错误,同步推进2.3.12版本文档迭代,提升用户使用体验。

月度Merge Star

感谢以下小伙伴上个月为 Apache SeaTunnel 做的精彩贡献(排名不分先后):
weekly_combined_avatars_2025-10-21

@Hisoka-X,@LeonYoah,@dyp12,@chl-wxp,@CosmosNi,@mikulc,@dybyte,@liucongjy,@hantmac,@gbyangg,@Adamyuanyuan,@zhangshenghang,@lm-ylj,@xiaochen-zhou,@corgy-w,@hengke,@loupipalien,@JeremyXin,@hawk9821,@joonseolee,@wtybxqm

apache/seatunnel仓库

修复

  • [Fix][UI]优化细节和收尾部件 @hawk9821
  • [Fix][UI]优化UI包 @hawk9821
  • [Fix][Connector-V2]解决特殊Excel的阅读问题 @corgy-w
  • [Fix][Doc]修复 file_filter_modified_startfile_filter_modified_end 的格式 @Hisoka-X
  • [Fix][doc]根据官方文档修复 ./mvnw install 错误 @Adamyuanyuan
  • [Fix][Zeta]修复 JobStateEventTest 以使用 await 条件进行 accessCounter 断言 @dybyte
  • [Fix][Zeta]修复 isPhysicalDAGInfo 中的拼写错误 @dybyte
  • [Fix][Flink]删除重复代码 @zhangshenghang
  • [Fix][Zeta]修复 seatunnel.sh -j 命令无法使用的问题 @lm-ylj
  • [Fix][connector-hive]修复 file_name_expression 在 Hive sink 中未生效的问题。 @Adamyuanyuan
  • [Fix][Connectors-v2]修复 connector-http 的单元测试 @hawk9821
  • [Fix][Connector-xugu]修复 xugu 连接器中的几个错误 @LeonYoah
  • [Fix][Zeta]处理 BaseService 中的 null startTimestamp 以修复不稳定的 MysqlCDCWithBinlogDeleteIT 测试 @dybyte
  • [Fix][POM]修复转换 UDF 依赖版本 @Hisoka-X
  • [Fix][Core]修复使用复杂配置时占位符无法传递参数的问题 @LeonYoah
  • [Fix][engine-server]清理 BaseServletTest 单元测试日志目录 @liucongjy
  • [Fix][Zeta]修复 pendingJobMasterMap 资源泄漏 @hawk9821
  • [Fix][Connector-V2]修复 db2 表小写错误 @chl-wxp

优化

  • [Improve][CI]将 kafka-connector-it 的超时时间从 120 分钟增加到 140 分钟 @dybyte
  • [Improve][Connector-V2]MongodbSinkFactory 实现 TableSinkFactory @chl-wxp
  • [Improve]将快照版本更新为 2.3.13 @Hisoka-X
  • [Feature][File]添加 markdown 解析器文档 @joonseolee
  • [Improve][Zeta]通过分区支持改进作业指标处理 @dybyte
  • [Feature][Transform-V2]支持正则提取转换 @xiaochen-zhou
  • [Feature][Connectors-v2]清理 Paimon 接收器的临时文件 @hawk9821
  • [Feature][Connector-V2]支持HDFS文件多表源读取 @JeremyXin
  • [Feature][Format]改进 maxwell_json、canal_json、debezium_json 格式支持合并 update_before 和 update_after @dyp12
  • [Feature][Zeta]支持检查点的最小暂停配置 @xiaochen-zhou
  • [Improve][Connector-Clickhouse]通过使用最后一个批次的行排序值方法,而不是使用 LIMIT OFFSET 来改进 CK 的批量并行读取。 @JeremyXin
  • [Feature][Transform-V2]支持SQL转换中的AT TIME ZONE语句 @Hisoka-X
  • [Feature][Transform V2]添加向量降维Transform @CosmosNi
  • [Feature][File]为RAG支持添加Markdown解析器 #9714 @joonseolee
  • [Feature][Engine]对数据源信息存储和管理的支持 @wtybxqm
  • [Feature][Transform-V2]支持多模态嵌入 @xiaochen-zhou
  • [Feature][Connector-V2]支持Databend接收连接器的CDC模式 @hantmac

其他

  • [Docs][Connector-V2][S3File]修复连接器 s3file 的选项名称(access_secret -> secret_key) @loupipalien
  • [Chore]修复拼写错误:coolumn ---> column @xiaochen-zhou

apache/seatunnel-website仓库

其他

  • 更新 docker.md @hengke
  • [Release][2.3.12]更新Seatunnel网站文档 @Hisoka-X
  • 更新 hybrid-cluster-deployment.md @gbyangg
  • 更新 docker.md @mikulc
http://www.jsqmd.com/news/25410/

相关文章:

  • ssh 连接服务失败
  • 2025年新疆旅游公司权威推荐榜单:阿勒泰旅游/新疆旅游线路/喀纳斯旅游服务商精选
  • Git常用命令的详细指南
  • 2025 年伸缩门厂家最新推荐榜:技术实力与市场口碑深度解析,高性能与可靠性兼具的优质品牌指南
  • 支持私有化本地部署|域名证书管理系统白皮书 - ops
  • 2025 年杀虫公司最新推荐榜,技术实力与市场口碑深度解析
  • 现在的微小型企业都压工资了吗
  • 2025 年快速卷帘门厂家最新推荐榜,技术实力与市场口碑深度解析,优选智能定制与高效供货优质企业
  • 2025 年电动门厂家最新推荐榜,深度剖析企业技术实力、服务水平与市场口碑
  • react0.14+jquery固定表头表格
  • 2025年新疆租车公司权威推荐榜单:新疆自驾游租车/新疆乌鲁木齐租车/新疆租皮卡车源头服务商精选
  • 芜湖,千兆网络下载速率只有10MB秒,过的什么苦日子
  • 从“能用”到“好用”:兰亭妙微谈小程序设计的5个高转化秘诀
  • 2025 年固定式探伤室,大型辐射防护探伤室,移动式探伤室厂家最新推荐,产能、专利、环保三维数据透视
  • 2025 年辐射防护探伤室,工业射线探伤室,焊接工艺探伤室厂家最新推荐,资质、案例、售后三维透视与选购指南!
  • 2025年比较好的低温压榨粮油厂家推荐及采购指南
  • 2025 年工业探伤室,组合式探伤室,X 射线探伤室,γ 射线探伤室厂家最新推荐,实力品牌深度解析采购无忧之选!
  • 数据驱动的DevOps:如何通过一体化平台破解研发协同效率瓶颈?
  • 2025 年集成式污水处理设备,养殖污水处理设备,重金属污水处理设备,絮凝沉淀污水处理设备厂家最新推荐,资质、案例、性能三维数据透视
  • 2025年口碑好的钢木课桌椅厂家实力及用户口碑排行榜
  • 2025 年 VOC 废气污水处理设备,粪便污水处理设备,锅炉脱硫脱硝污水处理设备厂家最新推荐,产能、专利、环保三维数据透视!
  • 2025年比较好的机械重型纸箱厂家最新权威实力榜
  • 2025 年除尘污水处理设备,一体化污水处理设备,智能化污水处理设备厂家最新推荐,产能、专利、环保三维数据透视
  • 2025年广州沥青施工公司权威推荐:沥青路面修补施工/沥青施工/沥青路面摊铺/彩色沥青施工源头施工企业精选
  • 半结构化数据表头解析vlm方案
  • 2025年靠谱的新中式全品类五金厂家实力及用户口碑排行榜
  • 2025年质量好的超薄型防火涂料厂家最新权威实力榜
  • 2025年评价高的DPA漆雾空气过滤器厂家最新用户好评榜
  • 2025 年聚氨酯砂浆地坪厂家最新推荐榜,技术实力与市场口碑深度解析的优质品牌筛选
  • 2025年知名的景区冰雕厂家最新推荐权威榜