版本发布历史
系统需求

关于 YMatrix

快速上手

标准集群部署

数据建模

连接到数据库

数据写入

数据迁移

数据查询

运维监控

性能调优

故障诊断

参考指南

SQL 参考

常见问题（FAQ）

场景应用

版本发布历史

6.6.1 发布介绍

发布时间：2025-11-17

增强与改进

  • split 分区增加了 trigger function 清理和报错时需手动清理的提示
  • mars3 新增了一个事务可见性检查优化
  • 标量顺序扫描增加了 RowRemoveFilter 信息
  • 优化了向量化执行引擎中大量 by-reference 负载列时向量化排序性能 (#ID01L8)
  • Cylinder 在执行 apm 任务前，增加了自动创建 dblink 扩展的功能

缺陷修复

  • 修复了使用 psql \dPt+ 命令找不到 pg_size_pretty() 函数的问题 (#ID5VDC)
  • 修复了 mxv 在关闭 vwindow GUC 后再次启动集群后打开 GUC 触发 crash 的问题 (#ID5SG0)
  • 修复了创建 mxnumeric 扩展后，pgvector 插入 numeric[] 报错的问题 (#ID07BA)
  • 修复了 master 分支随机查询测试，开启向量化且关闭并行时结果查询不正确的问题 (#ID6H3P)
  • 修复了 vscan 在应用 RowRemoveFilter 时出现异常的问题
  • 修复了 Domino 流计算引擎在结果变动时，clock_timestamp() 等 volatile 函数结果未及时刷新的问题 (#ID4DIE)
  • 修复了 Domino 中 decoder 泄漏 memcxt 的问题（#ID63W4）
  • 修复了 pxf 在 CREATE FOREIGN TABLE 所在事务内，relcache 中该表的 cdbpolicy 出现错误的问题 (#ID5I91)
  • 修复了 mxrule 同时存在rewrite 和forbid rule 时，rewrite 不生效的问题 (#ID6OZ2)
  • 修复了向量化排序算子 VSort 在 explain analyze 输出中显示信息不准确的问题 (#ICZFKC)
  • 修复了向量化执行引擎在执行 topk 排序时可能出现的内存超用问题，
  • 修复了 Domino 流计算引擎在逻辑解码时看不到最新提交的事务的问题 (#ID6CF8)

6.6.0 发布介绍

发布时间：2025-11-10

增强与改进

  • mars3 支持了 default-brin
  • 优化了 mars3 single 模式下的 xlog 大小
  • mars3 支持了并发 alter table split partition，split 的同时支持并发的读和写（暂时不支持 aoco 表，stream 流表，且父表带有 trigger 的情况）
  • 新增了修改 master/standby 端口的工具 mxchangeport(文档)（#IBAONY）
  • mxv 优化了归并算法的数据平铺操作, 可提升 vsort, vmergeappend, vmotion 的性能 (#ID0MF6)
  • mxv 优化了 vmotion 对 interconnect 接口的访问性能 (#ID0S2W)
  • mxv 优化了 vhashagg 在多分组键时的性能表现 (#ID0SFE)
  • mxv 优化了 partition 很小时的 VWindowAgg 性能(#ID1M6B)
  • mxv 优化了 vhashagg 在大内存配额时的性能表现 (#ID1ZW6)

缺陷修复

  • 修复了 C locale + ORCA，中文别名会显示 unknown 的问题（ID1JUF）
  • 修复了 COALESCE 函数适配的问题 (#ID3VVM)
  • 修复了 vhashagg 在输入粒度较大时自身内存超用的问题 (#ID400D)
  • 修复了 mxnumeric 类型作为分组键时，处理分组时 null 值访问的问题 (#ID4X56)
  • 修复了 leftjoin push down limit 处理删除过列的表时报错的问题 (#ID56S4)
  • 修复了 agg push down 处理删除过列的表时报错的问题 (#ID56S4)
  • 修复了 domino decoder 在 failover 到 standby 之后报错 "requested TLog segment ... has already been removed "的问题 (#ID3339)
  • 修复了没有为 domino 正确保留 row version 的问题 (#ID2PC8)
  • 修复了 decoder recovery 恢复 tlog 时报错 "invalid magic number" 的问题，并确保 decoder recovery 可靠触发(#ICWFMD)
  • 修复了 DROP STREAM 时可能出现 "replication slot is active" 的问题(#ICYE5T)
  • 修复了 autoexplain 不能打印 domino plan 的问题(#IC7FOW)
  • 修复了 mars3 autoprobe 报错的问题
  • 修复了 mars3 compactjob 在 pickrun 时 crash 的问题
  • 修复了 mars3 列存数据 xlog 不再压缩、压缩效果不明显时，增加额外的 cpu 开销的问题
  • mars3 支持了线程插入（目前只在 prefer_load_mode = normal/bulk 时且数据量超过 rowstore 大小时有效)
  • 修复 mxui 内存超用的问题（#ID42DK, #ICCBXV）
  • 修复 mxarchive 增量备份恢复后，mx_gp_syncrep_count 值为 1 导致数据库建表操作卡住 (#ID30A1)
  • 修复了分布在单个节点的表，不允许修改分布键类型的问题 (#ID2XXU)

6.5.1 发布介绍

发布时间：2025-10-10

增强与改进

  • 支持了集群内所有机器自动时间同步
  • TDE 支持了 rotate master key（#ICTTER）
  • 新增检查集群内所有机器的数据库软件版本是否一致的命令行工具（#IB49DN）
  • 为计算 shared_buffers、max_connections 和 gp_vmem_protect_limit 的逻辑添加了日志 （#ICUPGA）
  • 优化了内容等宽的指针类型数据的反序列化操作 (#ID0E4M)
  • 优化了 vmotion 与 OFFSET 从句配合使用时的接收性能（#ID0E2Y）
  • 优化了 vmotion 因发送粒度过小导致的性能下降问题（#ID0QC3）
  • 优化了 VSort 内存超量使用问题及返回结果的粒度控制（ICW0NR）
  • 优化了 vhashjoin 返回结果的粒度控制（#ICGFXG）
  • 优化了带有比较大的 in list 时，orca plan 耗时过长的问题（#ICO42C）
  • orca 实现了对 mxnumeric 类型的比较及结果行数预估的适配（#IC8L9M）
  • executor 通过 hash 算法优化 SAOP，并完成 orca 适配（#ICYAND）
  • sf 支持了 mxnumeric 类型的 InFilter（#ICYAMX）
  • InFilter 支持了 not in（#ICYRU1）
  • 向量化 fallback DatumInFilter 使用 hash 优化（#ICYRTW）
  • 优化复制表生成并行扫描路径（Parallel Scan Path）的逻辑，避免不必要的数据移动

缺陷修复

  • 修复了在部署数据库或者扩容时，计算 shared_buffers 存在逻辑错误的问题（#ICUPGA）
  • 修复了 contentcache 中自定义 allocator 在内存分配时错误使用 memory context 的问题
  • 修复了 vhashjoin 在关联键存在函数时可能导致内存泄漏的问题 (#ID0328)
  • 修复了 vhashagg 在大内存配额时处理时效率下降的问题 (#ICMKY7)
  • 修复了 vhashjoin 的内存驻留分区可能过度使用内存的问题 (#ID066O)
  • 修复了 fallback 表达式在处理 mxnumeric 精度推导时 crash 的问题 (#ID09FX)
  • 修复了错误复用布尔表达式导致 crash 的问题 (#ID0C7S)
  • 修复了 stddev 和 variance 错误使用 fallback 路径的问题（#ICX7Y4）
  • 修复了使用 CREATE TABLE AS 创建表时，若指定的 segment_set 不存在未报错的问题（#ICSWWP）
  • 修复了 Direct Dispatch 分发到错误节点导致结果错误的问题（#ICXLOS）
  • 修复了构造 CScalarAggFunc 时传入的 function name 来自临时的 MemoryPool 导致重复释放的问题（#ICWHIQ）
  • 修复了 equal function 是非 strict 时，DatumInFilter 结果错误的问题（#ICYAND）
  • 修复了 VMergeAppend 没有正确处理 visibits 导致结果错误的问题(#ICW7Z8)
  • 修复了执行 SQL 脚本过程中 create table xx (LIKE INCLUDING INDEXES INCLUDING DEFAULTS) 语句导致数据库崩溃的问题
  • 修复了 6.5.0 随机查询有query查询结果不正确的问题 (#ICWH3V)
  • 修复了 mars3 index 代价估计过小的问题
  • 修复了 cte 并行 path rows计算的问题
  • 修复了 reload mars3_default_storage_options 时 crash 的问题
  • 修复了 mars3 的非空表可以修改 distribute key的问题
  • 修复了 mars3 计算表大小未考虑元数据的问题
  • 修复了 mars3 在 Nestloop+IndexScan 的结果错误的问题 （#ICXM61）
  • 修复了 mars3 的compact worker waitlock 不退出的问题 （#ICWI5X）
  • 修复了复制表有可能产生 motion 的问题
  • 修复了 mars3 alter tablespace 内存过大的问题

6.5.0 发布介绍

发布时间：2025-09-01

新版本特性

  • MatrixUI 新增数据库启停可视化功能(文档)
  • YMatrix 新增透明数据加密（TDE），支持本地文件系统和 KMS 系统管理两种方式(文档)
  • 新增 mxnumeric 扩展，实现了 pg numeric 类型的高性能替代品 (#IC5W77)
  • 将默认部署的 collate 从 en_US.UTF-8 改为 C
  • pg_basebackup 将 page checksum 检查默认关闭

增强与改进

  • OpenSSL 支持使用 MemoryContext 管理 openssl 依赖库使用的内存
  • Domino 流计算增加了 DROP STREAM ... CASCADE 语句，支持通过该语法级联删除多个流
  • Domino 流计算增加了双流 LEFT JOIN
  • 移除了 mars3 中非必要的计算 page checksum 的代码
  • planner 支持了满足特定条件时通过把 left join 的 limit 下推提升性能 (#ICR5W4)
  • default on update 支持了 statement_timestamp() 函数 (#ICSXCO)
  • 优化了 mxvector 数据处理粒度 (#IBN0UL)
  • 实现了 mxvector 的原生 bpchar 支持 (#ICMK1N)
  • mxvector 支持了 dynamic index / indexonly / bitmap scan (#ICMAKJ)
  • 新增了 GUC default_null_ordering, 用来控制 null 值的默认比较行为 (#ICLK31)
  • mxnumeric: 优化了 AvgState 序列化能力 (#ICPARV)
  • mars3 支持了 btree inorder scan
  • mars3 支持了增量 analyzedb 与增量 mxbackup
  • mars3 放松了unique mode 创建 btree 索引时的顺序限制
  • mars3 支持了 unique mode 场景下的 delete 操作
  • mars3 新增提供 mars3.default_storage_options, mars3.default_btree_options 两个GUC，用于指定默认的 mars3 存储参数

缺陷修复

  • 修复了安装环境有非 0022 umask 时，安装的文件目录权限设置可能出错的问题
  • 修复了数据库 segement 频繁切换，segment 节点出现 crash 的问题(#ICQV1B)
  • 修复了 resgroup 在 bgworker 中执行时会 crash 的问题 (#ICW7GR)
  • 修复了 ERROR: cannot execute squelched plan node of type: 115 的问题 (#ICUBOK)
  • 修复了 sql 执行超 30min 不结束的问题(#ICPA1L)
  • 修复了执行 sql 脚本过程中 create table xx (LIKE INCLUDING INDEXES INCLUDING DEFAULTS) 语句 crash 的问题 (# ICVSU9)
  • mxvector 修复了 VMergeAppend 没有正确处理 visibits 导致结果错误的问题 (#ICW7Z8)
  • planner 修复了 alter table 带约束时报错的问题
  • mars3 修复了 alter table set tablespace 时内存申请报错的问题
  • mars3 修复了 AOCO 表 alter column 导致数据出错的问题
  • mars3 修复了 auto freeze 报文件不存在错误的问题
  • mars3 修复了物化视图刷新报错的问题
  • mars3 修复了分区表父表的 mars3 btree 不一致的问题

6.4.5 发布介绍

发布时间：2025-11-20

缺陷修复

  • 修复了 leftjoin push down limit 处理删除过列的表时报错的问题 (#ID56S4)
  • 修复了 agg push down 处理删除过列的表时报错的问题 (#ID56S4)
  • 修复了 mxrule 同时存在 rewrite 和forbid rule 时，rewrite 不生效的问题 (#ID6OZ2)
  • 修复了 pxf 在 CREATE FOREIGN TABLE 所在事务内，relcache 中该表的 cdbpolicy 出现错误的问题 (#ID5I91)
  • 修复了 Domino 中 decoder 泄漏 memcxt 的问题（#ID63W4）
  • 修复了 Domino 流计算引擎在逻辑解码时看不到最新提交的事务的问题 (#ID6CF8)

6.4.4 发布介绍

发布时间：2025-11-10

增强与改进

  • 降低了 domino worker 退出时的日志级别（原来是 FATAL: terminating connection due to administrator command）(#ICWTKQ)

缺陷修复

  • 修复了 mars3 autoprobe 的 tablespace 报错的问题
  • 修复了 mars3 crash 后可能会出现 segmentfile 丢失的问题
  • 修复了 domino decoder 在 failover 到 standby 之后报错 "requested TLog segment ... has already been removed" 的问题 (#ID3339)
  • 修复了没有为 domino 正确保留 row version 的问题 (#ID2PC8)
  • 修复了 decoder recovery 恢复 tlog 时报错 "invalid magic number" 的问题，并确保 decoder recovery 可靠触发(#ICWFMD)
  • 修复了 DROP STREAM 时可能出现 "replication slot is active" 的问题(#ICYE5T)
  • 修复了 REFRESH STREAM 时应当以最新解码进度作为流进度的问题(#ICW8Y2)
  • 修复了 REPLACE STREAM 同时执行的流有可能拿到旧 plan 的问题(#ICZ1WU)
  • 修复了 domino_join_v2 在进度无法推进时用错快照的问题(#ICVI4S)
  • 修复了 autoexplain 不能打印 domino plan 的问题(#IC7FOW)
  • 修复了 mars3 在 compactjob pickrun 时候 crash 的问题

6.4.3 发布介绍

发布时间：2025-10-10

增强与改进

  • 为计算 shared_buffers、max_connections 和 gp_vmem_protect_limit 的逻辑添加了日志（#ICUPGA）
  • 优化复制表生成并行扫描路径（Parallel Scan Path）的逻辑，避免不必要的数据移动

缺陷修复

  • 修复了在部署数据库或者扩容时，计算 shared_buffers 存在逻辑错误的问题（#ICUPGA）
  • 修复了 mxarchive 计算 master 分片数据库大小的逻辑（#ICVW2F）
  • 修复了 contentcache 中使用的自定义 allocator 分配内存时错误使用的 memory context 的问题
  • 修复了 vhashjoin 在关联键存在函数时可能导致内存泄漏的问题 (#ID0328)
  • 修复了错误复用布尔表达式导致 crash 的问题 (#ID0C7S)
  • 修复 cte 并行路径 rows 计算的问题
  • 修复了复制表有可能产生 motion 的问题
  • 修复了 mars3 的非空表可以修改 distribute key的问题
  • 修复了 mars3 计算表大小未考虑元数据的问题
  • 修复了 mars3 在 Nestloop+IndexScan 的结果错误的问题（#ICXM61）
  • 修复了 mars3 的 compact worker waitlock 不退出的问题（#ICWI5X）
  • 修复了 mars3 alter tablespace 内存过大的问题

6.4.2 发布介绍

发布日期：2025-09-01

增强与改进

  • 移除了 mars3 中非必要的计算 page checksum 的代码

缺陷修复

  • 修复了安装环境有非 0022 umask 时，安装的文件目录权限设置可能出错的问题
  • 修复了移除 standby 时可能会发生 NPE 的问题
  • 修复了 ERROR: cannot execute squelched plan node of type: 115 的问题 (#ICUBOK)
  • 修复了 mars3 btree 在分区表父表 am 类型不一致的问题
  • 修复了 AOCO 表 alter column 之后数据错乱的问题

6.4.1 发布介绍

发布日期：2025-08-01

增强与改进

  • License：新部署集群的免费使用期限从 3天 延长到 14 天
  • mxinitstandby：加入删除当前 standby 的功能 (文档)
  • 从本版本开始，数据库升级后会自动升级 matrixmgr 扩展，无需再手动升级
  • Domino：改善了调度模块引起的流延迟的情况
  • 新增 orca 支持 mars3 索引
  • 支持了两阶段 distinct 操作
  • 加固了 relcache 内存安全使用
  • 集群初始化默认关闭 autofreeze
  • 增强了 mars3 的 analyze 逻辑，采用基于行的采样
  • 新增了 mars3 在分区表上的 drop index 的功能 (#ICGEOH)

缺陷修复

  • MXUI ：修复了磁盘监控中对 LVM 设备显示的问题
  • MXUI ：修复了磁盘监控中符号连接判断导致的显示问题
  • Domino：修复了数据库被 DROP 后，错误的再次启动 Decoder 的问题
  • 内核：修复了 Segment 上 ALTER TABLE DISABLE TRIGGER 没有正确 RECURSE 到子表的问题
  • Planner: 修复了 utility / fastdd 模式下，QE 上行数预估不准确的问题
  • Planner: 修复了 ERROR: could not find pathkey item to sort 的问题
  • Planner: 修复了 DQA type 识别错误导致结果错误的问题
  • 修复了 simple fetch 消息阻塞的问题，避免了连接池因阻塞而不工作 (#ICNTMQ)
  • 修复了 analyze 在某些情况下很慢的问题
  • 修复了 mars3 物化视图使用报错和数据丢失的问题
  • 修复了不能同时 create index 的问题
  • 修复了 freeze 的时候会执行异步的 tableclean 的问题
  • 修复了并发环境中 unique 约束未生效的问题
  • 修复了 mars3 表在 checkpoint 的时候文件找不到的问题 (#ICLXV5)
  • 修复了 mars3 并发删除更新的可见性问题 (#ICI0E4)
  • 修复了 mars3 的 zstd 上下文压缩导致的 oom 问题 (#ICFRIE)
  • 修复了 attach 一个 mars3 子表报错约束不满足的问题 (#ICG260)
  • 修复了 attach 一个 mars3 子表时索引重复创建的问题
  • 修复了 gapfill 中结果错误的问题

6.4.0 发布介绍

发布日期：2025-06-26

新版本特性

  • License 管理功能全新升级
  • 新增支持 Centos9 操作系统
  • 新增支持 Cgroup V2
  • Resource Group 新增支持 IO_LIMIT 功能
  • MatrixUI 新增磁盘空间监控，包括 dashboard 热力图、4 个磁盘告警、拓扑页面显示 Util
  • MatrixUI 支持显示 QE 上的查询阻塞关系 (#ICF0TL)
  • 默认使用 Domino v2 流计算创建流（文档）
  • 增量在线备份支持在集群发生 failover/recover 时正常恢复（文档）
  • 新增 mx_eager_memory_release 开关，积极降低空闲进程的内存占用（默认关闭） (#ICH4Y9)
  • 支持通过 ALTER TABLE ... SET TABLESPACE 语句迁移 mars3 表数据
  • 支持了复制表的并行扫描（默认关闭）(#IC5J6V)
  • 默认打开了对系统表和非系统表的 auto-vacuum 功能
  • golang 及工具链升级至 1.24 版本

增强与改进

  • 确定了 Domino v2 的 TLog 格式，实现 buffered 读写，显著提升磁盘 IO 性能
  • 改造 mxstop 为流式执行并输出进度信息。
  • 增量在线备份支持了部分 tablespace 功能 (文档)
  • mars3 支持了 roi 索引
  • mars3 支持了自动转换 btree/brin 到 mars3_btree/mars3_brin 索引
  • mars3 的默认 relfile version 调整为 v1
  • mars3 分区表支持了 drop index (#ICGEOH)
  • mars3 支持了共享 zstd context 以进一步提高压缩效率 (#ICFRIE)
  • orca 中禁用了 mars3 表上的 dynamic bitmap scan
  • 支持了修改 primary key 时索引类型为 mars3_btree 的情况
  • mxrule 支持了根据 distincts 个数判断是否投影的能力

缺陷修复

  • 修复了 ORCA 优化器下查询字段值为 null 时 except 语句无法准确生效的问题 (#ICC3P7)
  • 修复了打开 auto_explain 时 explain analyze 向量化子计划报错的问题（#ICAUAG）
  • 修复了分区表 roi 索引迁移至新的表空间后查询报错的问题（#ICCMG7）
  • 解决了 Delete 全表后 analyze 过慢的问题
  • 修复了 compact 时 rowstore desired level 获取错误的问题
  • 修复了 session state pin count 维护的问题
  • 修复了 attach mars3 时约束检查报错的问题 (#ICG260)
  • 修复了 attach mars3 index 时重复 create index 的问题
  • 修复了非 unique mode 表的 freeze 问题
  • 解决了 mars3.force_allocate 在极端案例中 run 分配不出来的问题

6.3.0 发布介绍

发布日期：2025-04-18

新功能发布

  • 支持 mxaddmirrors 非平衡部署方案 （文档）
  • 支持图形化页面的 addmirror 功能（文档）
  • 支持增量冷备份和恢复功能（文档）
  • mxstate 系列增强，增加 -s 、-p -H 等参数（#IBDK0D）
  • mxstart 新增进度可视化功能，增加了 -C 和 -P 参数（#IBGYMU）
  • 库内流升级至 v2 版本（截止到 failover 部分，默认仍然 v1）
  • mxui 中 MatrixGate 列表集成了删除任务功能
  • Matrixshift 迁移 DDL 新增支持 USING、WITH、ECODING 属性
  • 支持递归给分区表创建扩展统计信息
  • 支持应用 ndistinct 扩展统计信息预估复合条件/索引的结果集数据量的能力（#IBORMW）

增强与改进

  • 在系统 OOM 时，replication 服务不会首先 OOM 崩溃（#IBLJ14）
  • 升级 ETCD 到 3.5.x 并通过疲劳测试验证
  • Golang toolchain 升级到 1.23.7
  • 升级 go-common-libs & matrixapis，清理 CVE
  • mxbox 重构数据库连接层
  • pgvector 升级至 v0.8.0 (#IBY4RH)

缺陷修复

  • 修复并发下，mars3 runpick 丢失 run 的问题
  • 修复 mars3 中 singlesegment 时和分布式事务相关可见性的问题
  • 修复 mars3 的 compactjob 导致 level2 堆积的问题（#IBNDHS）
  • 修复 mars3btree 的元数据缓存错误导致丢数据的问题
  • 修复通过 mxctl gate job --remove 接口结束 Kafka 任务，可能造成 mxgate force quit 的问题（#IBWTUQ）
  • 修复 addmirror 的自定义模式下，增加的 mirror 节点在 gp_segment_configuration 里的 address 与 hostname 不一致的问题（#IBZOEL）
  • 修复 mxrecover -r reblance 时，replication 报错 read pid file failed, err pid file has 7 lines, expect 8, 导致 QE 一直重启的问题（#IC0SVB）
  • 修复 mx_default_segment_set 设置为一个不存在的 segment set 时，打开 mx_get_common_segmentids_with_default 会触发 crash 的问题 (#IBPYOI)
  • 修复向量化使用 mx_digest_ws 优化 crash 的问题 (#IBQZOC)
  • 修复可能生成重复过滤条件导致预估不准的问题 (#IBPYA4)
  • 修复向量化 VAgg Sum(int64) 结果错误的问题 (#IBTZUY)
  • 优化 revert shallow-copy ，避免 Node 部分拷贝 (#IBN258)
  • 修复生成执行计划错误 ERROR: could not find pathkey item to sort 的问题（#IBSE48）
  • 修复 Motion 压缩功能在 OOM 情况下出现空指针访问 crash 的问题（#IBTESJ）
  • 修复 MxRule 重复条件推导的问题（#IBNWJ0）

6.2.4 发布介绍

发布日期：2025-03-03

增强与改进

  1. 优化器
    • 优化了 ROI 逻辑，当从 ROI 找不到对应的分区时放弃优化时不生成dummy plan (#IBOER)
  2. 工具
    • 优化了 mxstart 启动节点之前 probing all segments 的成功率 (#IBOPCG)

错误修复

  1. 存储引擎
    • 修复了 MARS3 定长优化出现小概率错误的问题 (#IBMR40)
    • 修复了 MARS3 bitmapscan 存在的迭代器问题 (#IBOE1Q)
  2. 执行引擎
    • 修复了 VHashJoin Spill 场景下可能会出现 Table 越界访问的问题 (#IBNSF8)
    • 修复了 VWindow 从 batchstore 读取数据时，触发 crash 或者报错的问题 (#IBONDT)
    • 修复了在流 snapbuild 文件找不到的情况下会导致 mirror crash 的问题 (#IBONUY)
  3. 服务管理
    • 修复了 SOA 服务的 cmux 连接泄露的问题 (#IBOOX0)
    • 修复了 addmirror 空白机导致 plan 错误的问题 (#IBOYWS)

6.2.3 发布介绍

发布日期：2025-02-24

增强与改进

  1. mxbox
    • 优化了 etcd 中关于集群状态的冗余信息，减轻对 etcd 服务的写入和更新压力，增强集群稳定性(#IBFELE)
    • 扩充了 mxbox client deployer get-cluster-service 命令行工具的功能，除了可以显示当前活跃的 cluster/shard 服务地址，也可以显示待机中的非活跃高可用服务的信息。同时增加一个必选参数 --service-name，取值为 cluster 或 shard (#IBDQ6W)
    • 将 SOA 服务发现的信息缓存在 deployer 服务中，其他服务通过访问 deployer 的 API 接口来获取服务发现结果，降低了对 etcd 直接访问的压力，改善了大规模集群下的操作稳定性 (#IBGJJ8)
    • 高可用服务进程 cluster/shard/replication/deployer 会更积极地释放物理内存到操作系统，降低内存占用 (#6e9e4636)
    • 当 mxstart/mxstop 操作时，如果集群规模很大，现在会分批执行 shard/replication 的启动，以避免所有服务并发启动对 etcd 形成瞬时的超高负载，增强了操作稳定性 (#IBI16W)
    • 当某个 shard 下的 primary/mirror 都发生宕机时，现在会让 gp_segment_configuration 中保留最后一个 primary 角色的节点的状态为 UP，以确保数据库重启时能够仍然能启动成功 (#IBJ58D)
    • mxrecover 工具增加了 -s 选项，可以指定要恢复的 shard (#IBJLRN)
    • mxstate 工具增加了 -e 选项，用于输出处于非正常状态下的 segment 信息 (#IBK5EM)
  2. 灾难恢复
    • 在 subscriber 进程的配置文件里删除了 restore_point_creation_interval_minute，增加了 restore_point_creation_interval （必选）参数，用户可以自行配置同步间隔 (#2cd254aa)
    • mxaddmirrors plan 现在支持对非平衡部署的集群生成 mirror 节点分布。建议对非平衡部署的集群使用自定义分布时，应经由人工审核并调整为最合理的 mirror 布置方案后使用 (#IBFUEX)
    • 改变了 mxaddmirror 自定义配置的使用方式。用户需要先 mxaddmirrors init，然后再 mxaddmirrors config --init-file <path_to_file> 来生成 config 模版。现在即使对于非平衡部署的集群，按照新的使用方式，也可以生成合理的配置方案 (#IBFUDC)
    • 对于非平衡部署的集群，mxinitstandby 允许将 standby 添加到一台没有部署 segment 节点的空白物理机上(#IBIU96)
    • 对于非平衡部署的集群，mxaddmirror 允许在自定义配置方式下，将 mirror 添加到一台没有部署 segment 节点的空白物理机上 (#IBKSYA)

错误修复

  1. MatrixShift
    • 修复了源数据库中的 PRIMARY KEY 经过 mxshift 的 DDL 迁移功能后，被变成 UNIQUE INDEX + NOT NULL 约束的问题 (#IBFVS3)
    • 修复了迁移 UDF 的定义时，如果函数同时存在入参和出参，生成的 DDL 语句中参数位置错配的问题 (#IBIN2R)
  2. MatrixGate
    • 修复了使用 mxgate set --auto-tune = false 关闭 auto-tune 功能时，不能使被 auto-tune 停止的并发 slot 再次恢复工作的问题 (#IBKGPH)
  3. mxbox
    • 修复了 replication 服务在启动/停止 postgres 实例时，有可能残留 defunct 僵尸进程的问题 (#IBICKJ)
  4. 灾难恢复
    • 修复了源端数据库发生 failover 时，有可能会使 DR 同步卡住的问题 (#IBKM33)

6.2.2 发布介绍

发布日期：2025-01-10

增强与改进

  1. MatrixShift
    • 如果配置文件没有指定任何迁移动作，只打开 verify 功能时，对一个非 mxshift 迁移过来的数据库新增报错提示 (#IBFVMM)
    • 当配置文件的 scope 段落里，存在重复的表或者父表和某些子表同时出现在 table-list 中时，新增自动去除重复的表且报出 warn 警告的能力 (#72ffcea)
  2. MatrixGate
    • mxgate 到 segment 节点之间的数据传输调整为默认不启用压缩，以节省更多的内存资源。原默认值为启用压缩 (#IBD0PW)
    • transfer 模式下，允许 mirror 节点为 Down 状态时迁移数据 (#IBCQPB)
  3. mxbox
    • 当 mxrecover 在跳过某些 shard 时，新增跳过原因输出 (#IB4NJD)
    • 用 mxrecover 对集群进行 rebalance 操作时，可通过添加 CHECKPOINT 缩短该操作带来的数据库停机时间，同时可通过增加 --skip-checkpoint 参数跳过此行为 (#IBCVOL)
    • 用 mxrecover 对集群进行 rebalance 操作时，改进了该命令在控制台的输出内容格式 (#IBCVOS)
    • mxrecover 增加 --prepare-timeout 参数。在 mxrecover 启动时，可通过 etcd 采集集群状态信息的超时情况, 默认为 1 分钟 (#IBCVOS)
  4. mxctl
    • 当安装部署时，mxctl setup collect 命令会检查 localhost 是否可以被解析为一个本地 loopback 地址，如果不能则报错 (#IBDM77)

错误修复

  1. MatrixShift
    • 修复了迁移没有任何字段的表时会报错的问题 (#IBFVQP)
    • 修复了当迁移 DDL 时，如果创建的函数里，被引用的表或其他数据库对象已经不存在，会导致创建函数报错的问题 (#d51821f)
  2. MatrixUI
    • 修复了自助巡检功能报告版本号不正确的问题 (#IBD0YZ)
  3. mxbox
    • 修复了 DR 从 segment 读取 WAL 时可能会出现卡住的问题 (#216abca3)
    • 修复了加入非平衡部署后 vmem protect limit 计算的逻辑问题 (#1b30eb0c)
    • 修复了系统启用 mxmgr 的监控功能，mxdeletesystem 时没有删除监控相关的服务进程的问题 (#IBB9SM)
    • 修复了 mxdeletesystem 时，如果物理机集群内的某些主机上没有 segment，会导致该主机上的一些服务（shard 和 cluster）残留的问题 (#63c34070)
    • 修复了用 mxrecover -r 同时恢复 master 和 data shard 时，有小概率超时的问题 (#IBD71J)
    • 修复了 replication 服务停止 postgres 实例时，有概率会出现 NotFound 错误的问题 (#IBD8H7)
  4. 高可用
    • 修复了当主节点 (Primary) 发生网络分区问题， Mirror 被晋升为 Primary 后，原 Primary 恢复正常带来双 Primary 时，错误地保留了原 Primary 的问题（应该杀死原 Primary 保留被晋升的 Mirror）(#IBE2HF)
    • 修复了当 mxstart 启动一个 primary 时，若此 primary 已经正常运行，导致错误地打断启动过程的问题(#986b5588)
    • 修复了当 mxstop 停止一个 primary 时，若此 primary 已经停止，导致错误地打断停止过程的问题(#986b5588)
    • 修复了当数据库发生意外停机并恢复后，小概率造成自动分区卡住不工作的问题 (#IBDSBY)

6.2.1 发布介绍

发布日期：2024-12-20

增强与改进

  1. mxbox
    • mxstart 的默认超时时间从1分钟增加到5分钟。仍然支持用户用 -t 参数自定义超时时间。（#9ab2957c）
    • 支持用户自定义 postmaster 进程启动时的环境变量。（#39575ad3）
    • 当集群出现 double failure 时，允许通过重启数据库启动最近的 primary 节点，而不是启动失败。（#ab0b920a）
    • 提升了 supervisor 服务和 etcd 进程的 max open files 数，解决了在超大规模集群下 etcd 服务频发 too many open files 错误的问题。（#6ca5293dcd0）
    • 新部署集群时，在 supervisor 的服务配置里删除了 etcd 服务的 --enable-pprof 参数，使得 etcd 的服务更稳定，cpu 占比更低。（#ae00e5a）

错误修复

  1. mxbox
    • 修复了集群部署时，当一台机器有多个数据节点时，自动配置的 gp_vmem_protect_limit 默认值计算过大的问题。（#5253cbbb）
    • 修复了当 replication 服务对 postmaster 进行 probe 时，postmaster 刚好意外崩溃，有几率导致 replication 服务 hang 住的错误。(#ab77de4e)

6.2.0 发布介绍

发布日期：2024-12-09

增强与改进

  1. MatrixUI
    • 安装部署或者扩容新机器时，会主动检查 /etc/ssh/sshd_config 中是否含有 AllowUsers/AllowGroups/DenyUsers/DenyGroups 等可能会导致安装过程中集群内主机 ssh 互信操作失败的配置项目，并给出具体的错误信息和修改提示 (#IB80HF)
  2. MatrixShift
    • 对配置文件引入更严格的检查，错误的配置项会在 mxshift 启动时报错并提示。例如 disable-connector = true 应该写在 [scope] 段落中，但错误的写在其他段落中，mxshift 启动时会报错并提醒 (#IB5002)
  3. mxbox
    • moveseg / initstandby 工具可以检测 --add 子命令添加的主机是否已经在物理机集群里，并给出错误信息 (#5e39499c)
    • 主机重启或首次运行 YMatrix 集群时，能够自动创建资源组 cgroup 依赖的相关路径 (#IB5G9O)

错误修复

  1. MatrixUI
    • 修复了查询负载页面中，calls_end 值 sum 之后为 0 导致查询报错的问题 (#IAMZI0)
    • 修复了集群拓扑发生变化时，MXUI 未能重新部署 mxui collector 指标采集进程的问题 (#IB8BTF)
  2. MatrixGate
    • 修复了个别环境下，YMatrix 集群重启后，mxgate 无法继续从 kafka 消费到数据的问题 (#IB6HEL)
  3. MatrixShift
    • 修复了 DDL 迁移时，ALTER MATERIALIZED VIEW 语法错误问题，支持 GP6 的 MATERIALIZED VIEW 语法迁移 (#3ba9664)
  4. mxbox
    • 修复了缓存导致 shard 状态不更新的问题 (#d5844a19)
    • 修复了当 etcd compaction 会导致元信息的当前版本被淘汰的问题 (#6c5c7c5e)
    • 修复了当网络分区异常恢复后，处于异常状态的 primary 节点无法被及时停止的问题 (#695d45fe)

6.1.1 发布介绍

发布日期：2024-11-19

增强与改进

  1. MatrixGate
    • mxgate 优化：支持将 segments 连接超时作为可配置的 GUC (#IB25VC)
  2. MatrixShift
    • mxshift 优化：/tmp 没有权限时使用 data dir (#IB0UY1)
  3. mxbox
    • 支持自定义非平衡部署 (#IAVBH5, #IAVCE2, #IAVFBE, #IAVDNP)
  4. MatrixUI（文档）
    • 支持自定义非平衡部署的 UI (#IAVXM5)

6.1.0 发布介绍

发布日期：2024-10-31

增强与改进

  1. MatrixShift

    • mxshift 优化：从 gp6 数据迁移能够跳过 external table（#IB0IUE）
    • mxshift 优化：compresstype 从 zlib 自动映射为 zstd 时，compresslevel 强制置为 1（#IB0GA9）

  2. 灾难恢复

    • 删除了 subscriber 配置文件中无用的配置项 slot
    • 调整了日志中的内容

错误修复

  1. MatrixShift
    • 修复创建 type 为 "COLLATABLE" 字段类型时报错的问题

6.0.0 发布介绍

发布日期：2024-10-11

新特性发布

  1. 新增流计算功能（文档)
    • 支持扩维计算，聚集计算，多级流计算，双流关联计算等（文档)
    • 支持多种配置和管理能力（文档)

2. 流批一体架构

  • 数据库融合流处理和批处理优势，支持实时数据和历史数据的并行处理。
  1. 新增灾难恢复集群（文档）
    • 支持跨数据中心的数据传输与同步
    • 支持灾难恢复集群的运行状态监控。
    • 支持手动将备份集群切换为服务集群，可将应用全部切换至此集群进行业务正常运行。
    • 此灾难恢复集群的容灾指标如下：
      • RPO（Recovery Point Objective，恢复点目标）
        用户可以指定一个相对合适的值以便在不影响源集群性能的情况下将此目标设置到分钟级。
      • RTO（Recovery Time Objective，恢复时间目标）
        支持数据库热备实现，RTO 可达秒级～分钟级。

性能增强

  1. TP 性能增强

    • 新增支持 Blocksize 8K，可配置数据块（block）为 8KB，大幅提升小数据量事务处理性能。

  2. MARS3 存储引擎增强

    • 新增支持 unique key，upsert，row-level lock 能力。

  3. 向量化引擎增强

    • 新增支持 Window Function 向量化。

已知问题

  1. 分区较多时，查询会触发数据库 OOM。

  2. 在 KILL QUERY 的场景下，recovering 过程可能会出现 crash 问题。

下一篇 →
系统需求