一  介绍job资源

  

    1.1   前面介绍的RC,RS,DS等等,管控的pod都是需要长期持久的运行的应用,但是尝试考虑另外一种场景,在微服务的场景下,有些pod的作用就是需要

  执行完一些命令之后正常退出,这时候上面的资源都无法利用,kubernets提供了一种解决方案,job,job的作用就是保障管理的pod能够在集群的节点上正

  常运行,当出现异常的时候(异常退出或者节点被下线的情况的时候),需要将任务进行重新调度至集群其他节点。

二 定义job资源

    2.1   一个简单的job资源的定义yml文件如下所示

apiVersion: batch/v1
kind: Job
metadata:
name: ex-job
spec:
template:
metadata:
labels:
app: ex-job
spec:
restartPolicy: OnFailure
containers:
- name: main
image: luksa/batch-job

  

三 创建Job资源

  3.1 k create -f exporter.yml    

[root@node01 Chapter04]# k create -f exporter.yml --validate=false
job.batch/ex-job created

[root@node01 Chapter04]# k get po
NAME READY STATUS RESTARTS AGE
ex-job-tjs8l 1/1 Running 0 109s

[root@node01 Chapter04]# k get po
NAME READY STATUS RESTARTS AGE
ex-job-tjs8l 0/1 Completed 0 2m32s

  可以看到大约过了2分组该Job顺利的完成它的任务之后,状态也变成了Completed

  3.2 完成后的job仍然支持查看pod的日志等操作

[root@node01 Chapter04]# k logs ex-job-tjs8l
Wed Dec 23 09:28:43 UTC 2020 Batch job starting
Wed Dec 23 09:30:43 UTC 2020 Finished succesfully

四 创建多pod的Job资源

  4.1  定义多pod的job资源并且串行的去执行一些列pod

apiVersion: batch/v1
kind: Job
metadata:
name: ex-multi-job
spec:
completions: 5
template:
metadata:
labels:
app: ex-job
spec:
restartPolicy: OnFailure
containers:
- name: main
image: luksa/batch-job

  在2.1的基础上添加了一个参数,kubernets会依次串行的创建的pod,当前面一个pod创建完成,并以正常的方式退出,集群就会继续创建第二个,这次依次进行创建,当有pod运行失败的

时候,集群也会重新创建,所以,集群创建的pod数量会大于等于5个

  4.2 结果如下

[root@node01 Chapter04]# k get po
NAME READY STATUS RESTARTS AGE
ex-multi-job-gjpvs 0/1 Completed 0 11m
ex-multi-job-kgpfk 0/1 Completed 0 9m14s
ex-multi-job-m29nq 0/1 Completed 0 7m8s
ex-multi-job-rhwn5 0/1 Completed 0 2m55s
ex-multi-job-rrf5g 0/1 Completed 0 5m2s

 

 4.3 创建一个并行的job的定义

apiVersion: batch/v1
kind: Job
metadata:
name: ex-multi-job
spec:
completions: 5
parallelism: 2
template:
metadata:
labels:
app: ex-job
spec:
restartPolicy: OnFailure
containers:
- name: main
image: luksa/batch-job

  4.4  显示的结果如下所示

[root@node01 Chapter04]# k get po
NAME READY STATUS RESTARTS AGE
ex-multi-job-6dzpl 1/1 Running 0 109s
ex-multi-job-kffd6 1/1 Running 0 109s [root@node01 Chapter04]# k get po
NAME READY STATUS RESTARTS AGE
ex-multi-job-6dzpl 0/1 Completed 0 2m55s
ex-multi-job-b9t4w 1/1 Running 0 48s
ex-multi-job-g7trs 1/1 Running 0 50s
ex-multi-job-kffd6 0/1 Completed 0 2m55s

可以看到加入 parallelism: 2这个参数后,job会每2个一起创建

  4.5 即使在运行的时候,你依然可以使用命令来改变pod的每次创建的数量

  kubectl scale job ex-multi-job --replicas 3

  4.6 限制job pod的完成任务运行时间

    如果一个pod完成任务的时间过长,或者由于代码等原因导致pod直接卡住,无法完成又该怎么办

  可以通过在pod中配置activeDeadlineSecond属性,可以限制job的运行时间

  4.7 job的最后一个用法,cronjob,创建定时执行的pod,类似于linux里面的定时任务   

apiVersion: batch/v1beta1
kind: CronJob
metadata:
name: ex-cronjob
spec:
schedule: "0,15,30,45 * * * *"
#当计划的时间超过15s之后仍然未成功创建pod则显示此次失败
startingDeadlineSeconds: 15
jobTemplate:
spec:
template:
metadata:
labels:
app: ex-cronjob
spec:
restartPolicy: OnFailure
containers:
- name: main
image: luksa/batch-job

  会创建一个每小时的15/30/45都会创建pod,并且当15s过后还未成功拉起pod,则系统判定该次创建失败

  

  

kubernets之job资源的更多相关文章

  1. kubernets之statefulset资源

    一  了解Statefulset 1.1  对比statefulset与RS以及RC的区别以及相同点 Statefulset是有状态的,而RC以及RS等是没有状态的 Statefulset是有序的,拥 ...

  2. kubernets之Deployment资源

    一  声明式的升级应用 1.1  回顾一下kubernets集群里面部署一个应用的形态应该是什么样子的,通过一副简单的图来描述一下 通过RC或者RS里面的模板创建了三个pod,之后通过一个servci ...

  3. kubernets之secret资源

    一  对于一些保密度比较高的文件,k8s又是如何存储的呢? 针对那些保密度比较高的配置文件,例如证书以及一些认证配置不能直接存储在configmap中,而是需要存储在另外一种资源中,需要对存储在里面的 ...

  4. kubernets之Ingress资源

    一  Ingress集中式的kubernets服务转发控制器 1.1  认识Ingress的工作原理 注意:图片来源于kubernets in action一书,如若觉得侵权,请第一时间联系博主进行删 ...

  5. kubernets之服务资源

    一  服务集群内部或者客户端与pod的通信桥梁   kubernets集群的内部pod访问为啥不能使用传统的IP:PORT的形式? pod是短暂的,它们会随时启动或者关闭,原因可能是pod所在的节点下 ...

  6. kubernets之计算资源

    一  为pod分配cpu,内存以及其他的资源 1.1  创建一个pod,同时为这个pod分配内存以及cpu的资源请求量 apiVersion: v1 kind: Pod metadata: name: ...

  7. kubernetes 基本概念和资源对象汇总

    kubernetes 基本概念和知识点脑图 基本概念 kubernetes 中的绝大部分概念都抽象成kubernets管理的资源对象,主要有以下类别: Master : Master节点是kubern ...

  8. kubernets之pod的标签的使用

    一 对于kubernets里面的资源标记完成之后的使用 1 node节点标签的应用(将资源调度到特定的节点上) #kubia-gpu.ymlapiVersion: v1 kind: Pod metad ...

  9. 使用 C# 开发 Kubernetes 组件,获取集群资源信息

    写什么呢 前段时间使用 C# 写了个项目,使用 Kubernetes API Server,获取信息以及监控 Kubernetes 资源,然后结合 Neting 做 API 网关. 体验地址 http ...

随机推荐

  1. CTF练习三 —— 命令注入&命令执行绕过

    这个题是第四届强网杯也就是2020.8.22号开始的那场一道简单的命令注入题,再这之前我并没有学习过命令注之类的知识,,,看到题之后先搜在学,,误打误撞解了出来,过段时间wp就会放出来,所以这里就不对 ...

  2. Python编程基础:循环结构

    一.为什么要用循环 现在有一个任务,要求你输出一百遍"好好学习,天天向上!",想一想,你会怎么做? (一)老老实实的笨方法 print("第1遍写:好好学习,天天向上!& ...

  3. 悉数 Python 函数传参的语法糖

    TIOBE排行榜是程序开发语言的流行使用程度的有效指标,对世界范围内开发语言的走势具有重要参考意义.随着数据挖掘.机器学习和人工智能相关概念的风行,Python一举收获2018年年度语言,这也是Pyt ...

  4. 编译nginx增加fair模块

    安装必要的软件 ubuntu里是 apt install wget gcc make zlib1g-dev libpcre3-dev 去官网下载最新稳定版的nginx源码 git clone 源码 g ...

  5. 使用 transmittable-thread-local 组件解决 ThreadLocal 父子线程数据传递问题

    在某个项目中,需要使用mybatis-plus多租户功能以便数据隔离,前端将租户id传到后端,后端通过拦截器将该租户id设置到ThreadLocal以便后续使用,代码大体上如下所示: ThreadLo ...

  6. java中给多个微信好友自动发信息

    package weixin; import java.awt.*; import java.awt.datatransfer.Clipboard; import java.awt.datatrans ...

  7. 仅4步,就可通过SQL进行分布式死锁的检测与消除

    摘要:本文主要介绍在 GaussDB(DWS) 中,如何通过 SQL 语句,对分布式死锁进行检测和恢复. 分布式数仓应用场景中,我们经常遇到数据库系统 hang 住的问题,所谓 hang 是指虽然数据 ...

  8. JavaDailyReports10_16

    今天学习安装配置了JavaWeb的资源环境, 明天开始学习HTML!

  9. LInux学习笔记之常用命令

    以下命令主要是平时用到的命令,对于一些经常用到的,就收集资料,归纳一下. 指令目录: 1.yum命令: 2.wget命令: 3.tar命令: 4../configure,make,make insta ...

  10. SpringSecurity配置文件

    @EnableWebSecurity public class seccurityConfig extends WebSecurityConfigurerAdapter { @Override pro ...