高危操作一览-九游平台

集群

通过kube-apiserver一次性查询大量数据。例如一次性发起大量list请求，或单个list请求查询大量数据。

控制节点内存负载过高，影响系统稳定性。

停止大批量查询行为。

如果需要增强集群抗过载能力，您可以变更集群规格至更大的规模，详情请参见。

控制节点

修改集群控制节点安全组

可能导致控制节点无法使用

参照新建集群的安全组进行修复，放通安全组。详情请参见。

节点到期或被销毁

该控制节点不可用

不可恢复。

重装操作系统

控制节点组件被删除

不可恢复。

自行升级控制节点或者etcd组件版本

可能导致集群无法使用

回退到原始版本。

删除或格式化节点/etc/kubernetes等核心目录数据

该控制节点不可用

不可恢复。

更改节点ip

该控制节点不可用

改回原ip。

自行修改核心组件（etcd、kube-apiserver、docker等）参数

可能导致控制节点不可用

按照推荐配置参数恢复，详情请参见。

自行更换控制节点或etcd证书

可能导致集群不可用

不可恢复。

node节点

修改集群node节点安全组

可能导致节点无法使用

参照新建集群的安全组进行修复，放通安全组。详情请参见。

修改节点dns配置（/etc/resolv.conf）

导致内部域名无法正常访问，可能出现插件异常、节点重置升级等基本功能异常

参考新建节点中的dns配置还原。

节点被删除

该节点不可用

不可恢复。

重装操作系统

节点组件被删除，节点不可用

重置节点，具体请参见。

升级内核或容器平台依赖组件（如openvswitch/ipvlan/docker/containerd）

可能导致节点无法使用或网络异常

euleros 2.2恢复方式请参见

非euleros 2.2您可以重置节点，具体请参见。

更改节点ip

节点不可用

改回原ip。

自行修改核心组件（kubelet、kube-proxy等）参数

可能导致节点不可用、修改安全相关配置导致组件不安全等

按照推荐配置参数恢复，详情请参见。

修改操作系统配置

可能导致节点不可用

尝试还原配置项或重置节点，具体请参见。

删除或修改/opt/cloud/cce、/var/paas目录，删除数据盘

节点不可用

重置节点，具体请参见。

修改节点内目录权限、容器目录权限等。涉及的目录如下：

/usr/lib/systemd/system/kubelet.service
/usr/lib/systemd/system/containerd-monit.service
/usr/lib/systemd/system/docker-monit.service
/opt/cloud/cce
/var/paas
/var/paas/script
/var/paas/sys/log
/var/paas/kubernetes
/var/script/docker
/var/script/kubelet
/etc/containerd
/etc/rc.local
/etc/sudoers.d/sudoerspaas
/etc/sysconfig/docker
/etc/docker/daemon.json
/var/lib/docker

权限异常

不建议修改，请自行恢复。

对节点进行磁盘格式化或分区，包括系统盘、docker盘和kubelet盘

可能导致节点不可用

重置节点，具体请参见。

在节点上安装自己的其他软件

导致安装在节点上的kubernetes组件异常，节点状态变成不可用，无法部署工作负载到此节点

卸载已安装软件，尝试恢复或重置节点，具体请参见。

修改networkmanager的配置

节点不可用

重置节点，具体请参见。

删除节点上的cce-pause等系统镜像

导致无法正常创建容器，且无法拉取系统镜像

请从其他正常节点复制该镜像恢复

在ecs侧对节点池下的节点进行规格变更

节点的规格与节点池定义的规格不一致，导致在弹性扩缩容时出现非预期现象（多扩或者少扩）

重新将节点规格变更为节点池下定义的规格，或者删除该节点重新扩容。

修改内核参数net.ipv4.ip_forward=0

网络不通

修改内核参数为 net.ipv4.ip_forward=1

修改内核参数net.ipv4.tcp_tw_recycle=1

导致nat异常

修改内核参数 net.ipv4.tcp_tw_recycle=0

修改内核参数net.ipv4.tcp_tw_reuse=1

导致网络异常

修改内核参数 net.ipv4.tcp_tw_reuse=0

节点安全组配置未放通容器cidr的53端口udp

集群内dns无法正常工作

参照的安全组进行修复，放通安全组。

详情请参见。

删除default-network的network-attachment-definitions的crd资源

容器网络不通，集群删除失败等

误删除该资源需要使用正确的配置重新创建default-network资源。

启动iptables防火墙

cce默认不开启iptables防火墙，开启后可能造成网络不通

关闭iptables防火墙，并检查/etc/sysconfig/iptables和/etc/sysconfig/ip6tables中配置的规则。

将负载设置为特权容器，并直接操作主机的硬件设备，误操作节点系统文件等。

例如将启动命令配置为/usr/sbin/init，在容器内使用systemctl，影响节点/lib路径下的系统文件。

此操作可能会导致节点所有挂载点被卸载，导致节点异常，并且会影响节点上的pod正常运行及存储插件功能。

禁止移除节点/lib路径下的挂载点，通过重置节点恢复，具体请参见。

禁止通过elb的控制台删除已绑定cce集群的elb实例

导致service/ingress访问不通。

不建议删除。

通过elb的控制台停用已绑定cce集群的elb实例

导致service/ingress访问不通。

不建议停用，请自行恢复。

通过elb的控制台修改elb的ipv4私有ip

• 基于ipv4私有ip进行私网流量转发功能会出现中断
• service/ingress的yaml中status字段下的ip变化

不建议修改，请自行恢复。

通过elb的控制台解绑elb的ipv4公网ip

解绑公网ip后，该弹性负载均衡器变更为私网类型，无法进行公网流量转发。

请自行恢复。

通过elb的控制台在cce管理的elb创建自定义的监听器

若elb是创建service/ingress时自动创建的，在service/ingress删除时无法删除elb的自定义监听器，会导致无法自动删除elb。

通过service/ingress自动创建监听器，否则需要手动删除elb。

通过elb的控制台删除cce自动创建的监听器

• 导致service/ingress访问不通。
• 在集群升级等需要重启控制节点的场景，所做修改会被cce侧重置。

重新创建或更新service/ingress。

通过elb的控制台修改cce创建的监听器名称、访问控制、超时时间、描述等基本配置

如果监听器被删除，在集群升级等需要重启控制节点的场景，所做修改会被cce侧重置。

不建议修改，请自行恢复。

通过elb的控制台修改cce创建的监听器后端服务器组，添加、删除后端服务器

• 导致service/ingress访问不通。
• 在集群升级等需要重启控制节点的场景，所做修改会被cce侧重置：
  • 用户删除的后端服务器会恢复
  • 用户添加的后端服务器会被移除

重新创建或更新service/ingress。

通过elb的控制台更换cce创建的监听器后端服务器组

• 导致service/ingress访问不通。
• 在集群升级等需要重启控制节点的场景，后端服务器组中的后端服务器会被cce侧重置。

重新创建或更新service/ingress。

通过elb的控制台修改cce创建的监听器转发策略，添加、删除转发规则

• 导致service/ingress访问不通。
• 如果该转发规则由ingress添加，在集群升级等需要重启控制节点的场景，所做修改会被cce侧重置。

不建议修改，请自行恢复。

通过elb的控制台修改cce管理的elb证书

在集群升级等需要重启控制节点的场景，后端服务器组中的后端服务器会被cce侧重置。

通过ingress的yaml来自动管理证书。

删除宿主机/tmp/ccs-log-collector/pos目录

日志重复采集

无

删除宿主机/tmp/ccs-log-collector/buffer目录

日志丢失

无

云原生监控插件配置中设置的采集分片数量超过推荐值（建议每50个节点配置一个采集分片）

增加采集分片数会消耗更多的资源，容易导致集群控制节点内存负载过高，影响系统稳定性。

修改云原生监控插件的采集分片数，调整为推荐值。

控制台手动解除挂载evs

pod写入出现io error故障

删除节点上mount目录，重新调度pod

pod里面的文件记录了文件的采集位置

节点上umount磁盘挂载路径

pod写入本地磁盘

重新mount对应目录到pod中

buffer里面是待消费的日志缓存文件

节点上直接操作evs

pod写入本地磁盘

无

无

创建pv时带有未在文档中声明的参数

例如，创建pv时，yaml文件中涉及status、spec.claimref以及annotation.everest.io/set-disk-metadata等参数，可能造成pv异常

此操作可能会绕过创建pv的某些标准流程，从而导致pv状态不符预期（功能不可用或被异常删除）

在pv被异常删除前，可以修改对应pv的yaml文件，手动删除相关参数

无

后台修改插件相关资源

插件异常或引入其他非预期问题

通过插件配置页面或开放的插件管理api进行操作