产品动态
动态名称 | 动态描述 | 发布时间 | 相关文档 |
增强 Flink UI 安全管控 | Flink UI 支持白名单配置访问 | 2023-04-17 | |
ClickHouse Connector 优化 | 优化由于多流 join 产生较多数据变化数据 Sink 造成 ClickHouse 压力的问题 | 2023-04-17 | |
配置作业日志级别优化 | 支持批量配置作业的日志级别 | 2023-04-17 | |
数据库连接 JDBC 优化 | 修复 Oracle JDBC 联合主键的语句拼接错误问题 | 2023-04-17 | |
监控指标能力优化 | 支持 Kafka 作业延迟指标展示和告警配置 | 2023-04-17 | |
文件系统 FileSystem 优化 | 新增支持 Raw 格式 Sink 到 FileSystem 时能支持 Snappy 等压缩格式的功能 | 2023-04-17 |
动态名称 | 动态描述 | 发布时间 | 相关文档 |
依赖管理优化 | 优化依赖删除逻辑，依赖版本删除逻辑 | 2023-03-17 | |
支持新版本Iceberg Connector | 支持新版本 Iceberg Connector | 2023-03-17 | |
作业启动提示优化 | 作业启动前会检查子网 IP 是否充足，配置的并行度如果剩余 IP 数量不够会提示 | 2023-03-17 | |
支持SQL版本对比功能 | 支持用户对不同版本的 SQL 作业进行 SQL 代码和配置的对比 | 2023-03-03 | |
Redis Connector 优化 | 提升了 Redis 维表查询性能，在查询空结果较多的场景下，性能成倍的提升；支持 Flink 1.14 版本SQL作业使用 Redis Connector | 2023-03-03 | |
新增支持 Starrocks Connector | 新增支持 Starrocks Connector 基于开源的 starrocks-connector-for-apache-flink v1.2.4 实现，支持通过 Flink 读写 StarRocks。（Flink 1.13｜1.14） | 2023-03-03 | |
MySQL CDC 优化 | MySQL-CDC 忽略非 DDL 字段变更数据流 | 2023-03-03 | |
MongoDB CDC 升级版本 | 支持 MongoDB CDC 新版本使用 | 2023-03-03 | |
购买集群优化 | 非超管用户通过点击立即购买创建集群 | 2023-03-03 | - |
增加异常作业展示/集群空闲 CU 展示 | 作业管理增加绑定集群 CU 概览，展示的都是绑定此工作空间的集群统计的信息，包括绑定的集群总数， CU 总数和空闲 CU 数；作业概览中新增指标告警作业总数和时间告警作业总数展示并支持点击快速筛选 | 2023-03-03 | |
库表引用功能优化 | 支持编辑 DDL，不用重复创建，用户可以编辑除 connector 之外的 with 参数，通过查看 DDL 页面增加变更记录按钮，点击变更记录可以跳转到变更记录页面，查看 DDL 的修改记录，方便回溯 | 2023-03-03 |
动态名称 | 动态描述 | 发布时间 | 相关文档 |
作业批量删除优化 | 优化作业批量删除展示逻辑，不会再默认将只含无法删除作业的文件夹勾选 | 2023-02-09 | |
新增 SQL Server CDC Connector | 新增 SQL Server CDC Connector，SQLServer CDC 只支持作为源表，允许从 SQLServer 数据库读取全量数据和增量数据（Flink 1.14） | 2023-02-09 | |
支持 Doris Catalog | 引入 CDW Doris Catalog 来避免手工注册 Doris 表，提高作业开发的效率且保证 Schema 映射的正确性 | 2023-02-09 | |
Doris Sink 支持事务 | 支持写入 Doris 端到端 Exactly-Once ，保障事务性 | 2023-02-09 | |
Hadoop-shaded 包升级 | 社区的 flink-hadoop-shaded 包由于版本过低（2.7.5），出现兼容性问题，升级到最新版本 2.8.3 | 2023-02-09 | - |
KonaJDK 版本升级 | KonaJDK 版本升级避免死锁 | 2023-02-09 | - |
MySQL CDC优化 | 优化 MySQL-CDC String 字符串 Key 数据分布不均问题，字符串主键 Chunk 划分均匀，作业不再 OOM MySQL-CDC 链接复用支持 Kudu Sink ，采用新的 Flink Sink API 重构 Kudu Connector 优化 MySQL-CDC 用于 TDSQL GTID 问题导致作业失败问题 | 2023-02-09 | |
优化 Ingress 清理问题 | 优化 Ingress 清理失效规则和添加正常作业的规则 | 2023-02-09 | - |
事件告警优化 | 增加作业停止的事件类型操作配置告警的选项，跳转事件总线进行配置 | 2023-02-09 | |
创建作业副本优化 | 创建作业副本后副本可以携带手动创建的 Savepoint ，便于作业快速迁移及恢复 | 2023-02-09 | |
变量管理优化 | 目前变量名称支持 100 个字符 | 2023-02-09 | |
支持作业定时自动扩缩容 | 支持作业定时自动扩缩容，通过设置调优的起止时间、调优行为和扩缩容比例来完成指定的扩缩容操作 | 2023-02-09 | |
快照管理优化 | 目前作业默认保留最近的5个 Checkpoint ，保留的 Checkpoint 的数量可以在高级参数中配置关键字来设定保留多少份 Checkpoint | 2023-02-09 |
动态名称 | 动态描述 | 发布时间 | 相关文档 |
JDBC Sink 优化 | 支持通过配置参数来控制是否忽略 Delete 操作 | 2023-01-16 | |
云数据仓库 PostgreSQL 优化 | 云数据仓库 PostgreSQL（flink-connector-cdw-postgre）支持2.0版本 | 2023-01-16 | |
Kafka Connector 问题优化 | Kafka Connector 库表订阅不准确问题修复 | 2023-01-16 | |
COS Connector 优化 | COS Connector META-INF Shade 错误 bug 修复；支持 Flink 1.14 版本 SQL 作业使用 COS Connector | 2023-01-16 | |
修复 TopN 等算子问题 | 修复 Flink 的 TopN 等算子遇到 now() 等函数时，可能出现状态不匹配而报错的问题 | 2023-01-16 | - |
动态名称 | 动态描述 | 发布时间 | 相关文档 |
MySQL-CDC 监控指标优化 | 新增“数据在外部系统的滞留时间”、“数据在外部系统和 Source 中的滞留时间”、“作业反压最大百分比”和“数据倾斜程度”4个监控指标 | 2022-12-16 | |
整库同步 SQL 支持 Hive 自动建表 | 整库同步 SQL 支持在 Hive 中自动创建缺失的表 | 2022-12-16 | |
整库同步支持抽取元数据字段 | 整库同步支持抽取元数据字段，例如库名、表名、时间戳等 | 2022-12-16 | |
ClickHouse 新增支持数据类型 | ClickHouse 支持 Map/Array/Row 数据类型 | 2022-12-16 | |
支持数据湖计算 DLC | 支持写入数据湖计算 DLC 托管的原生表（Flink 1.14） | 2022-12-16 | |
支持消息队列 Pulsar | Pulsar SQL connector 允许您使用简单的 SQL 查询或 Flink Table API 从 Pulsar topic 查询数据或将数据写入 Pulsar（Flink 1.13｜1.14） | 2022-12-16 | |
MySQL-CDC 支持元数据字段优化 | MMySQL-CDC 支持访问元数据字段，例如 Pos/File/Gtid | 2022-12-16 | |
MySQL-CDC 联合主键 chunk 划分优化 | MySQL-CDC 联合主键场景下，支持手动选择指定列作为划分键 | 2022-12-16 | |
Redis connector 支持 Zadd 动态 key | Redis Connector 支持 Zadd 模式下采用动态字段作为 key | 2022-12-16 | |
Filesystem connector 优化 | Filesystem connector 支持 compress 算法 | 2022-12-16 |
动态名称 | 动态描述 | 发布时间 | 相关文档 |
MySQL-CDC 性能优化 | 优化了 MySQL-CDC 增量阶段性能 | 2022-09-16 | 数据库 MySQL CDC |
COS Connector 版本升级 | 升级了 COS Connector 版本 | 2022-09-16 | |
支持自定义角色权限 | 支持自定义角色权限 | 2022-09-05 | |
Doris 性能优化 | 优化了 Doris 的写入性能 | 2022-09-05 | |
支持 Kafka Source 复用和整库同步 | 支持 Kafka Source 复用和整库同步（单 Topic 多 Schema） | 2022-09-05 | |
自定义作业日志级别 | 配置采集作业运行日志支持自定义作业日志级别 查看作业日志信息支持自定义作业日志级别 | 2022-09-05 |
文档反馈