当前位置:首页 > 数据库 > 正文内容

11月 | Apache SeaTunnel月度发展总结

邻居的猫1个月前 (12-09)数据库1398

各位酷爱 Apache SeaTunnel 的小伙伴们,社区10月份月报更新啦!这儿将记载 SeaTunnel 社区每月的重要更新,欢迎重视!

月度Merge之星

感谢以下小伙伴 11 月份为 Apache SeaTunnel 所做的精彩奉献(排名不分先后):

file

用户名 用户名 用户名 用户名 用户名
jwitq eyys CosmosNi boandai hailin0
arshadmohammad XuyiK XenosK Hisoka-X wengys
Carl-Zhou-CN zhdech davidzollo hawk9821 lm-ylj
shashwatsai corgy-w sunxiaojian zhangshenghang BilwaST
liunaijie a110q YOMO-Lee dailai

apache/seatunnel库房

fix

  • [Fix][Doc]批改备份计数装备 @corgy-w
  • [Fix][Doc]批改了无法访问的链接 @corgy-w
  • [hotfix][gbase]批改gbase驱动链接 @zhangshenghang
  • [fix]批改获取作业目标时呈现的NPE问题 @liunaijie
  • [Hotfix][Transforms-v2]动态编译插件兼容性批改 @hawk9821
  • [Fix][CI]耗时的模块优化 @hawk9821
  • [Hotfix][Docs]批改FAQ文档中的过错 @davidzollo
  • [hotfix][connector-v2][hive]批改Hive3端到端依靠项 @zhangshenghang
  • [Bug][connectors-v2]批改 MongoDB BSON 转化反常 @hawk9821
  • [Fix][API]批改列长度不能过长的问题 @Hisoka-X
  • [Fix][CI]批改方案测验被撤销的功用 @Hisoka-X
  • [Hotfix][E2E]批改OracleCDCIT编译过错 @hailin0
  • [Fix][Connecotr-V2]批改 ClickHouse Sink 不支撑复合主键的问题 @eyys
  • [Fix][Doc]批改 Redis 中文文档中 key 描绘过错 @lm-ylj
  • [Hotfix][Zeta]批改hadoop-aws和hive-exec中guava的依靠抵触 @dailai
  • [Fix][Zeta]移除重复的 LIFECYCLE_WRITER_CLOSE 事情 @Hisoka-X
  • [Fix][Zeta]批改作业客户端即便作业已完结也会打印过错音讯的问题 @Hisoka-X
  • [Fix][Doc]批改 Klaviyo 文档中的 404 链接问题 @YOMO-Lee
  • [Fix][Zeta]批改在康复一个管道时再次运用资源以用于另一个管道的问题 @zhangshenghang
  • [Bug][Connector-v2]MongoDB CDC 设置 SeatunnelRow 的 tableId @hawk9821
  • [Fix][Kafka]在Kafka流形式下,无法读取增量数据。 关于Apache SeaTunnel的特定批改和功用,请坚持原样:- Fix in kafka streaming mode cannot read incremental data @Carl-Zhou-CN

improve

  • [Improve][Connector-V2]保存数据时,假如形式保存形式创建了新表,则履行数据保存操作。 @zhangshenghang

  • [Improve]删去未运用的代码 @hailin0

  • [Improve][Connector-V2]在多表Sink过错时增加表信息。 @Hisoka-X

  • [improve][connector-v2][kafka-connector]增加Kafka Kerberos认证的端到端代码 @zhangshenghang

  • [Improve][Jdbc]改善DDL写验证 @hailin0

  • [Improve][Connector-V2]增加表启用CDC的预查看 @Hisoka-X

  • [Improve][Connector-V2]削减Iceberg加载表的恳求数量 @Hisoka-X

  • [Improve][Kafka]支撑自定义主题以兼容 Debezium 格局 @hailin0

  • [Improve][doc]增加文档称号查看 @zhangshenghang

  • [Improve][dist]增加暗影查看规矩 @hawk9821

  • [Improve][Jdbc]重构DDL更改 @hailin0

  • [Feature][Jdbc]增加Jdbc默许方言以支撑一切没有方言的JDBC系列数据库。 @sunxiaojian

  • [Improve][Excel]支撑读取空字符串并主动类型转化 @hailin0

  • [Feature][File]支撑文本文件读取的装备为空格局 @hailin0

  • [Feature][E2E][Kerberos]端到端支撑Kerberos @zhangshenghang

  • [Improve][API]一致tables_configs和table_list @hawk9821

  • [Improve]答应SeaTunnelRowType转化为Column时可认为null @hailin0

  • [Feature][Iceberg]支撑为 sink savemode 自定义删去 SQL @hailin0

  • [Improve][Doc]在客户端装备JVM选项方法修正 @Hisoka-X

  • [Improve][Connector-V2]批改 SqlServer cdc 内存走漏 @Hisoka-X

  • [Improve][E2E]改善Druid端到端事例 @hawk9821

  • [Improve][Zeta]批改了与CI期间日志删去相关的问题。 @corgy-w

  • [Feature][Core]将 result_table_name/source_table_name 重命名为 plugin_input/plugin_output @hailin0

  • [Improve][Transform]优化转化结构 @corgy-w

  • [Improve][Zeta]移除默许的JVM内存选项 @Hisoka-X

  • [Improve][POM]将maven-shade-plugin的版别升级到3.4.1 @dailai

  • [Improve]改善 AlterTableSchemaEventHandler @hailin0

  • [Feature][Connector-v2]支撑Paimon连接器的S3文件体系 @dailai

  • [Feature][E2E]增加端到端测验事例时刻剖析 @hawk9821

  • [Feature][Connectors]本地文件支撑读取.gz文件。 @zhdech

  • [Improve][Connector-V2]改善 MySQL-JDBC 中的列刺进后的形式演化 @jw-itq

  • [Feature][Transform]SQL转化支撑数组和切割函数。 @CosmosNi

  • [Feature][E2E]增加Hive3端到端测验事例 @zhangshenghang

  • [Feature][RestAPI]支撑运用 SeaTunnel 风格的 HOCON 格局装备提交作业。 @CosmosNi

  • [Improve][CI]优化继续集成的时刻本钱 @Hisoka-X

  • [Improve][Connector-V2]RocketMQ Sink 增加音讯标签装备 @wengys

  • [Feature] [Connector-Redis]Redis连接器支撑删去数据。 @lm-ylj

  • [Feature][Zeta]在作业提交到master时增加jar途径预查看。 @zhangshenghang

  • [Feature][transform]转化支撑爆破 @CosmosNi

  • [Feature][Connector-v2]支撑Oracle连接器的形式演化 @dailai

  • [Feature][Transform-v2]增加元数据转化功用 @hawk9821

  • [Feature][Connector-V2]Jdbc 分块拆分增加快照拆排列装备 #7794 @XenosK

  • [Feature][Zeta]支撑定时删去日志 @corgy-w

  • [Improve][Transform]主动运用 JSONPath 转化符号列长度 @hailin0

  • [Feature][Transform-V2]支撑多表转化 @Hisoka-X

  • [Feature][Core]支撑zeta的cdc使命DDL康复功用 @hailin0

others

  • [doc][connector][hive]增加Hive中文文档 @zhangshenghang
  • [Doc][Format]增加protobuf文档 @zhangshenghang

apache/seatunnel-website库房

improve

  • [Improve]将公告栏更改为增加星号 @Hisoka-X

others

  • 批改关于.md中的翻译过错 @XuyiK
  • 更新 jdbc-mysql.md @a110q

apache/seatunnel-web库房

fix

  • [Bug] [Seatunnel-web]未找到装备设置键 'where_c…ondition' 的装备。 @arshadmohammad
  • [Addendum][Bug] [Seatunnel-web]当条件列未在SE中运用时呈现过错 @BilwaST
  • [Bug] [Seatunnel-web]当条件列未在SE...中运用时呈现过错 @BilwaST
  • [Bug][Seatunnel-web]批改Oracle JDBC获取表字段的问题 @shashwatsai

本文由 白鲸开源 供给发布支撑!

扫描二维码推送至手机访问。

版权声明:本文由51Blog发布,如需转载请注明出处。

本文链接:https://www.51blog.vip/?id=524

标签: 大数据
分享给朋友:

“11月 | Apache SeaTunnel月度发展总结” 的相关文章

大数据bi,大数据BI在现代企业中的应用与价值

大数据bi,大数据BI在现代企业中的应用与价值

大数据BI(商业智能)是指利用大数据技术对海量数据进行处理、分析和挖掘,从而为企业提供决策支持的一种方法。它结合了大数据处理技术和商业智能分析工具,通过对大量数据进行深入挖掘和分析,为企业提供有价值的信息和洞察,帮助企业在竞争激烈的市场中做出更加明智的决策。大数据BI的关键特点包括:1. 数据规模:...

spark大数据分析,大数据时代的利器

spark大数据分析,大数据时代的利器

Apache Spark 是一个开源的大数据处理框架,它提供了一个快速、通用和易于使用的大数据处理平台。Spark 支持多种数据源,包括 Hadoop、Hive、Cassandra、HBase、Tachyon 等,并且提供了多种语言 API,包括 Scala、Java、Python 和 R。以下是...

docker安装oracle, 准备工作

docker安装oracle, 准备工作

安装Oracle数据库到Docker容器中是一个相对复杂的过程,因为Oracle数据库本身对硬件和内存有较高的要求。以下是使用Docker安装Oracle数据库的一般步骤:1. 获取Oracle官方镜像: 你可以从Oracle官方的Docker Hub页面获取Oracle数据库的Docker镜...

网贷大数据查询,了解个人信用状况的利器

网贷大数据查询,了解个人信用状况的利器

查询网贷大数据的方法有多种,以下是几种常见的途径:1. 征信机构查询: 可以通过中国人民银行征信中心查询个人信用报告,了解自己的信用状况和网贷记录。2. 互联网平台查询: 一些第三方信用报告服务网站如“容易查”等,可以提供网贷大数据查询服务,包括信用评分、网贷黑名单、网贷申请记录等。3....

oracle rac是什么,什么是Oracle RAC?

oracle rac是什么,什么是Oracle RAC?

Oracle RAC(Real Application Clusters)是一种Oracle数据库集群解决方案,它允许多个数据库实例运行在同一组物理服务器上,同时访问同一组共享磁盘。这种架构提高了数据库的可用性和可扩展性,因为它可以提供高可用性、负载均衡和故障转移功能。在Oracle RAC环境中,...

mysql备份的几种方式,MySQL备份的几种方式

mysql备份的几种方式,MySQL备份的几种方式

MySQL 数据库的备份是确保数据安全的重要措施,它可以在数据丢失或损坏时提供恢复的手段。以下是几种常见的 MySQL 备份方式:1. 物理备份: 冷备份(Cold Backup):在数据库停止运行时进行备份。这种备份方式简单,但会影响数据库的可用性。 热备份(Hot Backup):在...