本文分享自华为云社区《GaussDB(DWS)华为云数仓使用实践–预算有限,资源冗余?华为云数仓集群缩容帮你解决烦劳》,作者: OneToOne。

一、为什么要做缩容?

在使用GaussDB(DWS)数仓时,在业务不同的时段,对数仓的计算资源大小有不同的需求。在业务繁忙、流量高峰的时候需要对DWS集群节点扩容,增强业务负载能力,业务峰值过去,则需要减少数据库节点,释放计算资源,降低成本压力。

缩容提供了当用户需要的计算或者存储资源冗余超出业务需求时,尽可能不影响用户业务情况下缩减集群数据仓库节点的能力。

二、缩容使用条件和约束?

  • 集群状态为Normal,不能是只读,且无其他正在运行的任务信息。
  • 缩容集群仅8.1.1.300及以上版本支持,包周期计费模式的集群仅8.2.1及以上版本支持。
  • 集群按照环的方式配置,比如4个或5个主机组成一个环,这些主机上的DN主节点、备节点和从节点都部署在这些节点里,那么这些节点组成一个集群环 ,缩容的最小单元是一个集群环,集群至少有2个环才能支持缩容,缩容按照集群环从后往前缩容节点。
  • 缩容节点不能包含GTM组件,CM Server组件,CN组件。
  • 集群租户账号不能处于只读,冻结,受限状态。
  • 集群非逻辑集群模式。包周期集群不能处于已过期进入宽限期。
  • 缩容不支持回滚,支持重入。缩容数据重分布失败,不影响业务,用户可选择合适的时间尽快完成重分布,否则会导致数据长期分布不均匀。
  • 缩容前,需要保证对应数据库下的data_redis为重分布预留schema,不允许用户操作该schema和其内部表。因为在重分布过程中,会使用到data_redis并且重分布结束后会删除该schema,如果存在用户表,则可能会出现数据误删。
  • 缩容后的节点必须有足够的存储空间存放整个集群的数据,否则缩容无法正常。执行缩容前,需对集群剩余容量进行检查,条件满足后可进行缩容。
    • 所有节点已使用物理磁盘空间均小于80%。
    • 所有用户和角色的使用量均小于配额的80%。
    • 总数据量缩容后的空间预估要小于80%。

系统后台会自动检查用户用户集群是否满足上述条件,如果不满足,则缩容按钮置灰,用户无法操作。

三、华为云GaussDB(DWS)缩容使用简介?

1.DWS集群缩容流程

cke_141.png

2.如何进行集群缩容

a.点击集群列表右侧的详情,选择“节点变更”->“缩容”

cke_142.png

b.进入缩容详情页面,选择“缩容节点数量”,点击“下一步:确认”

cke_143.png

c.展示缩容详情,确认后点击“提交”

cke_144.png

d.提交后,开始缩容

cke_145.png

e.集群任务信息缩容中

cke_146.png

3.缩容异常处理

当用户在缩容的执行失败的时候,需要联系技术人员解决,可以在DWS集群管理页面选择重试缩容。

点击关注,第一时间了解华为云新鲜技术~     

Logo

为开发者提供学习成长、分享交流、生态实践、资源工具等服务,帮助开发者快速成长。

更多推荐