kubectl get namespace

prom            Terminating   45h

  

namespace 出现Terminating 状态,一直删不掉

解决:

1:导出namespace的json文件
[root@master ~]# kubectl get namespace prom -o json > prom.json
2:修改json文件
{
    "apiVersion": "v1",
    "kind": "Namespace",
    "metadata": {
        "annotations": {
            "kubectl.kubernetes.io/last-applied-configuration": "{\"apiVersion\":\"v1\",\"kind\":\"Namespace\",\"metadata\":{\"annotations\":{},\"name\":\"prom\"}}\n"
        },
        "creationTimestamp": "2019-01-29T04:01:48Z",
        "deletionTimestamp": "2019-01-30T07:09:57Z",
        "name": "prom",
        "resourceVersion": "2427154",
        "selfLink": "/api/v1/namespaces/prom",
        "uid": "99b33767-237a-11e9-b2d9-000c297e6ade"
    },
    "spec": {
        "finalizers": [
        ]
    },
    "status": {
        "phase": "Terminating"
    }
}

  

删除上面finalizers里的kubernetes

3:开个代理

[root@master ~]#  kubectl proxy --port=8001
Starting to serve on 127.0.0.1:8001

  

4:执行json文件

[root@master ~]# curl -k -H "Content-Type: application/json" -X PUT --data-binary @prom.json http://127.0.0.1:8001/api/v1/namespaces/prom/finalize

  

如果上面执行没删掉,出现code:409 ,则把上面json文件内的 "resourceVersion": "2427154", 这一行删掉,重新执行4

同一个yaml文件内两个subPath无法挂载到同一个pvc的问题

网上大多数给的参考是每个subPath都写了一个volumeMounts,而研发同学也没注意,就在同一个containers下的name下也写了两个volumeMounts,导致第一个volumeMounts挂载的时候总是挂载不上。

解决:

        volumeMounts:
          - name: log-data
            mountPath: /home
            subPath: testa
          - name: log-data
            mountPath: /usr/src/html
            subPath: testb

  

运行一段时间后 pod出现 Evicted 状态

删除

kubectl get pods -n kube-system | grep Evicted | awk '{print $1}'  | xargs kubectl delete pod -n kube-syste

节点资源耗尽  NodeHasSufficientMemory

如何清理Docker占用的磁盘空间?

查看使用情况

docker system df
docker system prune

基于K8S的CI过程出现 jenkins一直转圈圈,jenkins-slave不创建

测试k8s和jenkins是否处于连通状态

配置方式

我之前是写的https://kubernetes.default,当时测试是没问题的,后来CI阶段的时候出现了上述问题

解决就是不用域名了,直接改ip

使用 # kubectl cluster-info可以查看 apiserver的地址和端口,最终测试通过

jenkins的地址就不要改了,改了发现build的时候还是转圈圈,虽然能拉下slave出来,查看slave的pod日志,发现连接64的50000端口去了,应该连接jenkins-pod的50000,于是jenkins改成域名的

最终配置如下

helm install时出现错误“Error: error installing: the server could not find the requested resource”

解决办法:大致就是helm版本不兼容 Kubernetes 1.16.0 的 apiVersion

https://www.chenshaowen.com/blog/summary-of-installation-problems-for-kubernetes-1.6.0.html

https://feisky.gitbooks.io/kubernetes/apps/helm.html

k8s集群在RBAC分级授权时发生误操作,应该是证书被覆盖,kubectl命令无法使用了,按照网上替换证书的方式操作不管用

保利点解决:kubeadmin reset -f  重置集群 重新加入,然后各类服务重新创建

kubeadm reset -f

kubeadm join 172.16.10.241:6443 --token olfmpz.2w1mzqjzhv5w0xlr --discovery-token-ca-cert-hash sha256:2cbfe9767b7cc83b03986238d6a409fa444948b34bfee920aa267cc18878305e

k8s系列---故障的更多相关文章

  1. Docker & k8s 系列二:本机k8s环境搭建

    本篇将会讲解k8s是什么?本机k8s环境搭建,部署一个pod并演示几个kubectl命令,k8s dashboard安装. k8s是什么 k8s是kubernetes的简写,它是一个全新的基于容器技术 ...

  2. Docker & k8s 系列一:快速上手docker

    Docker & k8s 系列一:快速上手docker 本篇文章将会讲解:docker是什么?docker的安装,创建一个docker镜像,运行我们创建的docker镜像,发布自己的docke ...

  3. Docker & k8s 系列三:在k8s中部署单个服务实例

    本章将会讲解: pod的概念,以及如何向k8s中部署一个单体应用实例. 在上面的篇幅中,我们了解了docker,并制作.运行了docker镜像,然后将镜像发布至中央仓库了.然后又搭建了本机的k8s环境 ...

  4. k8s系列---Worker节点扩容

    其他有关内容 安装:参考https://www.cnblogs.com/dribs/p/9082458.html 集群故障重置:参考https://www.cnblogs.com/dribs/p/10 ...

  5. k8s系列---EFK日志系统

    文章拷于:http://blog.itpub.net/28916011/viewspace-2216748/   用于自己备份记录错误 一个完整的k8s集群,应该包含如下六大部分:kube-dns.i ...

  6. k8s系列文章第五篇(docker-compose)

    更多精彩内容,猛搓这里 目录 一.Docker Compose 1.前言 2.官方介绍 1.Compose 中有两个重要的概念 2.三步骤 3.Compose是Docker官方的开源项目,需要安装! ...

  7. K8S系列第九篇(持久化存储,emptyDir、hostPath、PV/PVC)

    更多k8s内容,请关注威信公众好:新猿技术生态圈 一.数据持久化 Pod是由容器组成的,而容器宕机或停止之后,数据就随之丢了,那么这也就意味着我们在做Kubernetes集群的时候就不得不考虑存储的问 ...

  8. 一次“不负责任”的 K8s 网络故障排查经验分享

    作者 | 骆冰利 来源 | Erda 公众号 ​ 某天晚上,客户碰到了这样的问题:K8s 集群一直扩容失败,所有节点都无法正常加入集群.在经过多番折腾无解后,客户将问题反馈到我们这里,希望得到技术支持 ...

  9. k8s系列~mgr的应用

    一  简介:今天咱们大体介绍下 这两者是如何联系的二  概念解析     pod:说下我的理解    1 pod通过yaml文件来封装docker本身+启动形式    2 pod可以运行多个docke ...

随机推荐

  1. Node: 使用nrm管理npm源

    一.简介 npm是一款非常好用的包管理工具,在前端开发中很多时候都会使用npm安装其他包文件.但是,npm安装某些包时有时会安装地很慢,这是因为npm管理的源中有些是国外的,包下载的时候需要花费很多时 ...

  2. SpringSecurity 初始化流程源码

    SpringSecurity 初始化流程源码 本篇主要讲解 SpringSecurity初始化流程的源码部分,包括核心的 springSecurityFilterChain 是如何创建的,以及在介绍哪 ...

  3. Replacing the deprecated Java JPEG classes for Java 7

    [src: https://blog.idrsolutions.com/2012/05/replacing-the-deprecated-java-jpeg-classes-for-java-7/] ...

  4. web网页设计五种布局

    1.大框套小框布局   2.通栏布局   3.导航栏在主视觉下方的布局  4.左中右布局  5.环绕式布局

  5. git 多人协同开发

    一.允许他人操作程序(两种方式) 1.添加合作者 2.创建组织 二.分支 每个开发者创建一个属于他们的dev分支 三.合并规则 1.一起合并(代码会出现冲突) 2.尽量缩短合并的周期

  6. 使用 LinkedBlockingQueue 实现简易版线程池

    前一阵子在做联系人的导入功能,使用POI组件解析Excel文件后获取到联系人列表,校验之后批量导入.单从技术层面来说,导入操作通常情况下是一个比较耗时的操作,而且如果联系人达到几万.几十万级别,必须拆 ...

  7. [bzoj4815] [洛谷P3700] [Cqoi2017] 小Q的表格

    Description 小Q是个程序员. 作为一个年轻的程序员,小Q总是被老C欺负,老C经常把一些麻烦的任务交给小Q来处理. 每当小Q不知道如何解决时,就只好向你求助.为了完成任务,小Q需要列一个表格 ...

  8. 「 Android开发 」开启第一个App应用

    每天进步一丢丢,连接梦与想 无论什么时候,永远不要以为自己知道一切   -巴普洛夫 最近玩了下Android,但遇到了一些坑,浪费了很多的时间,在此记录一下,你若是遇到了就知道怎么解决了 PS:建议使 ...

  9. 发现 一个业务管理系统 解决了 orm 和 前端框架 剩下的 是 业务逻辑 了 。 哈

    解决了 orm 和 前端框架 剩下的 是 业务逻辑 了 . 哈 还有 各种 aop 组件 呢 . 大家 high 来 准备 用 fluent data  和 mysql 写一个 wcf 的 接口呢. ...

  10. JVM: JVM 内存划分

    概述 如果在大学里学过或者在工作中使用过 C 或者 C++ 的读者一定会发现这两门语言的内存管理机制与 Java 的不同.在使用 C 或者 C++ 编程时,程序员需要手动的去管理和维护内存,就是说需要 ...