Release Release v3.7.1 · qlangtech/DataX

Abstract

TIS的v3.7.1版本终于要与大家见面了，v3.7.1着重在以下几方面进行了功能加强和升级。

TIS与Apache Zeppelin无缝整合

Apache Zeppelin 是一款让交互式数据分析变得可行的基于网页的开源框架。Zeppelin提供了数据分析、数据可视化等功能。经过与TIS无缝整合之后，用户可以在TIS中方便观测各数据源
中数据的状态。TIS中安装及使用Zeppelin说明
重新整理TIS中离线调度功能

目前TIS中支持的离线调度引擎为Spark，Hive，AliyunODPS，用户可以一站式地在TIS中抽取数据，并且通过离线分析引擎进行T+1数据分析操作
，详细请查看
支持用户在数据库系统中采用分表策略

生产环境中使用分表策略是DBA经常使用的应对海量数保存的一种方法，在本版本中以优雅的方式支持物理分表合并导入目标数据端，
详细请查看
添加Kafka Sink Connector插件

添加Kafka Sink Connector插件，支持canal和debezium两种格式，datavane/tis#179, 另外修改了flink的flink-json模块
在消息体中添加了source表名和生成记录的时间戳 qlangtech/flink@9844b37

[bug]After the ftp synchronization doris task is successfully created, an error message is displayed if you click the Generate script#211
[bug]ftp file data synchronization doris error#207
通过插件池安装tis-hive-plugin失败#200
希望能提供一下mysql-SR没有主键不能建立实时通道的问题，辛苦了。#198
3.7 mysql 实时任务到 es有bug ,任务编译不了#194
[Oracle->Doris] Chunjun Source 实时同步异常#192
[mysql->doris]JdbcInputFormat.getMaxValueFromDb Faild And Instantiation classLoader of Source Flink-CDC-MySQL Faild#184
mysql synchronize clickhouse#182
mysql -> elastic 增量同步增量脚本生成出错#178
MySQL -> Doris 实现增量通道分区表增量通道出错#176
mysql->doris BIGINT(20) UNSIGNED 类型映射失败#175
oracle-> starRocks 增量实时脚本生成有误#173
当源表有选取部分列同步，开启flink 增量同步会出错#170
Flink Server side JM TM启动 classloader 初始化并发异常#169
Mysql Writer datasource selection faild#106