Apache SeaTunnel 社区 3 月月报

这篇具有很好参考价值的文章主要介绍了Apache SeaTunnel 社区 3 月月报。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

各位热爱 SeaTunnel 的小伙伴们,SeaTunnel 社区 3 月月报来啦!这里将记录 SeaTunnel 社区每个月的重要更新,并评选出月度之星,欢迎关注。

SeaTunnel 月度 Merge Stars

感谢以下小伙伴 3 月为 Apache SeaTunnel 做的精彩贡献(排名不分先后):

@Carl-Zhou-CN,@ilsl1007,@loveyang1990,@dailai,@liugddx,@CheneyYin,@litiliu,@ShaunWuu,@hailin0,@rewerma,@wineternity,@lihjChina,@luohoufu,@lightzhao,@liunaijie,@zhilinli123,@Hisoka-X,@xiaochen-zhou,@LeonYoah,@mosence,@Ivan-gfan,@dzygoon,@JueLance

apache/seatunnel

fix

  • [Bugfix][TDengine]修复因多次调用提交任务API导致驱动丢失的问题。#6581 #6595 @ilsl1007
  • [Fix][Connector-V2]修复了Doris/StarRocks创建表的SQL解析错误。 @Hisoka-X
  • [Fix][Doc]修复了StarrocksSink文档中的排版错误 @Hisoka-X
  • [Fix][Connector-V2]修复Doris流加载未读取任何数据时Sink无法关闭的问题 @Hisoka-X
  • [bugfix][zeta] Fixed the problem that the [jvm_options]配置文件G1GC没有生效 @LeonYoah
  • [Fix][SQLTransform]修复SQL转换中的尺度失真问题 @dailai
  • [BugFix][Spark-translation]类型转换错误 @Carl-Zhou-CN
  • [Fix][Connector-V2]修复连接器支持SPI,但不提供无参构造函数。 @Hisoka-X
  • [Fix][StarRocks]修复上游catalogtable表路径只包含表名部分时的空指针异常(NPE) @liunaijie
  • [Bug]修复SQLTransform中的常量减去错误 @rewerma
  • [Fix][Zeta]优化Hazelcast本地模式连接 @liunaijie
  • [Fix][Zeta]在使用缓存模式时,修复线程类加载器被设置为null的问题。 @Hisoka-X
  • [Bug] [zeta]修复提交任务时出现的空指针异常 @liugddx
  • [Hotfix]修复Spark示例 @hailin0
  • [bugfix] [Zeta]修复通过REST API提交任务时类加载器未能释放的问题 @liugddx
  • [BUG][Zeta]任务名称:显示错误#6470 @loveyang1990
  • [Hotfix]解决编译错误 @hailin0
  • [Hotfix][Doc][Chinese]修复与Apache SeaTunnel配置日志相关参数的无效链接 @CheneyYin
  • [Fix][FakeSource]修复模板中的随机选取问题,不包括最新值 @liunaijie
  • [Hotfix][Zeta]解决当表结构变更时出现的死锁问题 @hailin0
  • [Fix][Connector-V2]修复Doris源选择字段丢失主键信息的问题 @Hisoka-X

improve

  • [Improve][Test]当代码合并到dev分支时,运行所有测试 @Hisoka-X
  • [Improve][Test]使类加载器缓存测试更加稳定 @Hisoka-X
  • [Improve][JDBC]优化了获取JDBC字段类型的代码风格 @zhilinli123
  • [Improve][RestAPI]当任务完成后,返回已完成的工作信息。 @liunaijie
  • [Improve][Connector-V2]添加Elasticsearch类型转换器 @Hisoka-X
  • [Improve][Test]为Zeta本地模式添加测试用例 @liunaijie
  • [Feature][Paimon]支持指定Paimon表的写入属性、分区键和主键 @dailai
  • [Improve][Connector-V2]支持通过schema配置读取orc格式,并进行类型转换 @Hisoka-X
  • [Improve][Jdbc]支持定制的大小写敏感配置对于dameng。 @hailin0
  • [Improve][Connector-V2]支持StarRocks上的TableSourceFactory @xiaochen-zhou
  • [Improve]优化多表写入SinkWriter的准备提交性能 @Hisoka-X
  • [Feature][Connectors-V2][File]支持为文件源/ sink分配编码 @ShaunWuu
  • [Improve][Transform]支持SQL转换,包括内嵌结构查询。 @liunaijie
  • [Improve]StarRocksSourceReader 使用现有的客户端 @xiaochen-zhou
  • [Doc][Improve]修复 Kubernetes 的 Dockerfile @litiliu
  • [Improve][CDC-Connector]修复CDC选项规则。 @lightzhao
  • [Feature][Connector-V2]支持Paimon的多表Sink功能#5652 @dailai
  • [Doc][Improve]支持中文翻译/seatunnel-engine/rest-api.md、local-mode.md、cluster-mode.md和checkpoint-storage.md。 @dzygoon
  • [Feature][connector-jdbc]支持基于PostgreSQL的数据库,使用Copy语句加速数据写入。 @mosence
  • [Doc][Improve]支持中文提交目录 @wineternity
  • [Improve][RestAPI]调用getJobInfoById API时,始终返回jobId。 @liunaijie
  • [Feature][Core]支持作业的事件监听器 @hailin0
  • [Doc][Improve]为start-v2/locally/quick-start-seatunnel-engine.md和start-v2/locally/deployment.md添加中文支持。 @dzygoon
  • [Improve][Jdbc]在Oracle中使用varchar2数据类型存储字符串。 @hailin0
  • [Improve]添加进程详细信息的SaveMode日志 @Hisoka-X
  • [Doc][Improve]支持中文 @JueLance
  • [Feature]支持Doris DateTimeV2类型的纳秒级精度。 @Hisoka-X
  • [Improve]为ReadonlyConfig::toConfig方法添加过时注解。 @Hisoka-X
  • [Feature][Connector-V2]为各种文件连接器添加对XML文件类型的 support。 @Ivan-gfan
  • [Improve][Connector-V2]支持INFINI易搜索 @luohoufu

others

  • [Imprve]修正拼写错误 @xiaochen-zhou
  • [ [Chore]修正 "file" 的拼写错误 ]( https://github.com/apache/seatunnel/pull/6606 " [Chore]修正 "file" 的拼写错误 ") @Hisoka-X
  • [Doc]更新REST API文档 @liunaijie
  • [Chore]删除log4j1.x中未使用的配置项。 @hailin0
  • [Docs]更新Apache SeaTunnel的SQL UDF文档 @liunaijie
  • [Docs]更新Apache SeaTunnel的文档 @liunaijie
  • 在 IntelliJ IDEA 中显示项目图标 @liunaijie
  • 为transform-v2/*添加中文支持 @lihjChina

本文由 白鲸开源 提供发布支持!文章来源地址https://www.toymoban.com/news/detail-847927.html

到了这里,关于Apache SeaTunnel 社区 3 月月报的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • apache seatunnel web 安装部署

    apache-seatunnel-2.3.3-bin.tar.gz apache-seatunnel-web-1.0.0-bin.tar.gz download_datasource.sh 解压文件

    2024年01月18日
    浏览(52)
  • apache seatunnel支持hive jdbc

    上传hive jdbc包HiveJDBC42.jar到seatunel lib安装目录 原因是cloudera 实现了add batch方法 创建seatunnel任务文件mysql2hivejdbc.conf

    2024年02月06日
    浏览(25)
  • 海豚调度任务类型Apache SeaTunnel部署指南

    Apache DolphinScheduler已支持Apache SeaTunnel任务类型,本文介绍了SeaTunnel任务类型如何创建,任务参数,以及任务样例。 SeaTunnel 任务类型,用于创建并执行 SeaTunnel 类型任务。worker 执行该任务的时候,会通过 start-seatunnel-spark.sh 、 start-seatunnel-flink.sh 和 seatunnel.sh 命令解析 config 文件

    2024年04月08日
    浏览(36)
  • Apache Seatunnel本地源码构建编译运行调试

    Apache Seatunnel本地源码构建编译运行调试   本文使用的是windows10-64位专业版的电脑,需要安装环境如下   jdk=1.8 - 64 位的jdk、   使用的是idea自带的maven,最好是安装一个方便源码编译构建,使用idea自带的maven无法执行mvnw,但是可以复制mvnw后面的在idea的maven中的run mave

    2024年01月16日
    浏览(25)
  • 【安装部署】Apache SeaTunnel 和 Web快速安装详解

    由于作者目前接触当前最新版本为2.3.4 但是官方提供的web版本未1.0.0,不兼容2.3.4,因此这里仍然使用2.3.3版本。 可以自定义兼容处理,官方提供了文档:https://mp.weixin.qq.com/s/Al1VmBoOKu2P02sBOTB6DQ 因为大部分用户使用SeaTunnel Web都是基于SeaTunnel-2.3.3 版本做的适配,而最新发布的Sea

    2024年04月16日
    浏览(34)
  • Apache SeaTunnel 及 Web 功能部署指南(小白版)

    在大数据处理领域,Apache SeaTunnel 已成为一款备受青睐的开源数据集成平台,它不仅可以基于Apache Spark和Flink,而且还有社区单独开发专属数据集成的Zeta引擎,提供了强大的数据处理能力。随着SeaTunnel Web的推出,用户界面(UI)操作变得更加友好,项目部署和管理更加便捷。 本

    2024年03月09日
    浏览(44)
  • 解读重要功能特性:新手入门 Apache SeaTunnel CDC

    点亮 ⭐️ Star · 照亮开源之路 https://github.com/apache/incubator-seatunnel 为什么说 CDC 是SeaTunnel平台中的一个重要功能特性?今天这篇文章跟大家分享一下 CDC 是什么?目前市面上的 CDC 工具现有的痛点有哪些?SeaTunnel面对这些痛点设计的架构目标是什么?另外包括社区的展望和目前

    2024年02月09日
    浏览(48)
  • 教程 | 使用 Apache SeaTunnel 同步本地文件到阿里云 OSS

    一直以来,大数据量一直是爆炸性增长,每天几十 TB 的数据增量已经非常常见,但云存储相对来说还是不便宜的。众多云上的大数据用户特别希望可以非常简单快速的将文件移动到更实惠的 S3、OSS 上进行保存,这篇文章就来介绍如何使用 SeaTunnel 来进行到 OSS 的数据同步。

    2024年02月08日
    浏览(36)
  • 使用 Apache SeaTunnel 实现 Kafka Source 解析复杂Json 案例

    版本说明: SeaTunnel:apache-seatunnel-2.3.2-SNAPHOT 引擎说明: Flink:1.16.2 Zeta:官方自带 近些时间,我们正好接手一个数据集成项目,数据上游方是给我们投递到Kafka,我们一开始的技术选型是SpringBoot+Flink对上游数据进行加工处理(下文简称:方案一),由于测试不到位,后来到

    2024年02月17日
    浏览(26)
  • Apache DolphinScheduler 3.1.8 版本发布,修复 SeaTunnel 相关 Bug

    近日,Apache DolphinScheduler 发布了 3.1.8 版本。此版本主要基于 3.1.7 版本进行了 bug 修复,共计修复 16 个 bug, 1 个 doc, 2 个 chore。 其中修复了以下几个较为重要的问题: 修复在构建 SeaTunnel 任务节点的参数时错误的判断条件 修复 SeaTunnel 任务运行模式默认为运行,无法选择空值的

    2024年02月13日
    浏览(33)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包