Skip to content

[Roadma] Release 1.16.0 #1547

Description

@FlechazoW

预计迭代周期:2个月(3月10号 - 5月10号):

功能迭代

文档

  1. 插件文档:因为我们的插件文档落后很多,所以需要把内部的一些插件文档重新更新到官网上;
  2. 基础使用文档:包括打包、编译、提交、基础使用、调试等内容;
  3. 自定义插件文档:包括脏数据插件、数据源插件、指标插件等;
  4. [Doc][ftp] ftp connector use demo and doc #1509
  5. 文档增加博客模块;

功能

  1. 使用新的source/sink api 重构 connector v2,并抽象一层 connector base;
  2. [Feature]chunjun支持流式文件传输的读写插件(文件传输功能) #1514
  3. [Feature][metricc] support metrics write external system #1505
  4. 升级高版本之后,cdc 支持到 2.x 版本;下游DDL还原待定;
  5. 全量 + 增量一体化验证;

新增插件

  1. phoenix 4 / 5 插件;
  2. tdengine 插件;
  3. iceberg 支持ddl/dml 还原iceberg;

BUG 修复

  1. 当使用sql脚本交换任务,从mysql或者其他关系型数据库到iceberg进行交换任务时,不支持设置任务模式,比如覆盖或者追加。 #1499
  2. [Bug] [hdfs] 字段分割符不生效问题,比如分割符\t  #1586
  3. [Bug] [hdfs] java.lang.NoSuchMethodException: com.dtstack.chunjun.connector.hdfs.source.HdfsPathFilter.<init>()  #1583
  4. [Bug] [jdbc-base] 间隔轮训数据条数量可能出现错误 #1581
  5. [Bug] [sybase] sybase not support sysname type #1579
  6. [Bug] [SqlserverCdc] SqlserverCdc job has been using an unavailable connection #1577
  7. [Bug] [sybase] sybase support double precision type #1575
  8. [Bug] [startrock] feNodes parameter verification problem  #1571
  9. [Bug] [sqlserver] if write column is not have identity column, not execute SET IDENTITY_INSERT %s ON #1568
  10. [Bug] [ftp] Data missing when synchronizing data from source to ftp #1567
  11. [Bug] [doris] 写入的数据中包含逗号时单条会变成多条记录 #1589

CI/CD

  1. 保证github ci/cd 流程完整;
  2. 完善单测内容,对新增的内容尽量提供单测;
  3. 增强 e2e 模块;

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type
    No fields configured for issues without a type.

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions