jx是云原生CICD,devops的一个最佳实践之一,目前在快速的发展成熟中。最近调研了JX,这里为第4篇,介绍如何加入jx构建和部署。

builder镜像下载慢

先在一台机器上下载好,然后放到本地仓库,到jenkins的setting里,修改镜像地址

nodejs安装慢

    1. 配置使用私服
    1. 构建cnpm镜像

1 FROM jenkinsxio/builder-nodejs:0.1.215
2 MAINTAINER jadepeng <jqpeng@iflytek.com>
3
4 RUN npm install -g cnpm --registry=https://registry.npm.taobao.org
5 RUN cnpm install -g antd axios babel-plugin-import mobx mobx-react mobx-react-devtools nprogress react react-app-rewire-less react-app-rewired react-dom react-router-dom react-scrip ts history path
6

构建后,在jenkins里设置一个k8s pod template

在jenkinsfile里就可以使用cnpm加速了

pipeline {
agent {
// 使用cnpm加速
label "jenkins-cnpm"
}
... steps {
container('nodejs') {
sh "cnpm install && npm run build"
}
}

加速maven:

maven配置文件

maven的配置文件通过secret jenkins-maven-settings配置,maven pod创建时,会将jenkins-maven-settings挂载到/root/.m2/,要自定义配置文件,执行:

  # 删除老配置
kubectl delete secret jenkins-maven-settings
# 修改配置文件,然后创建新的jenkins-maven-settings
kubectl create secret generic jenkins-maven-settings --from-file=./jenkinsx -n incubation

每次build都会从maven仓库下载jar包,为了避免重复下载,可以挂载一个pvc持久化maven本地仓库。

挂载共享cephfs-mavenrepos-pvc 到 /root/.mvnrepository

cat <<EOF | kubectl apply -f -
apiVersion: v1
kind: PersistentVolume
metadata:
name: cephfs-mavenrepos-pv
labels:
name: cephfs-mavenrepos-pv
spec:
capacity:
storage: 500Gi
accessModes:
- ReadWriteMany
cephfs:
monitors:
- 192.168.86.156:6789
path: /mavenrepos
user: admin
secretRef:
name: ceph-secret
namespace: kube-system
readOnly: false
persistentVolumeReclaimPolicy: Retain
EOF cat <<EOF | kubectl apply -f -
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: cephfs-mavenrepos-pvc
namespace: incubation
spec:
accessModes:
- ReadWriteMany
storageClassName: ""
resources:
requests:
storage: 5Gi
selector:
matchLabels:
name: cephfs-mavenrepos-pv
EOF

创建好后,到jenkins系统配置里配置挂载信息。

nexus

添加 npm proxy

name: cnjs

address: http://r.cnpmjs.org

RUN npm i --registry=http://nexus/researchnpm/

maven镜像可以添加一个阿里、csdn等proxy,加到 maven-group

chartmuseum.jenkins-x.io访问慢

chartmuseum.jenkins-x.io 经常访问不了,可以搭建私有charts服务,新增一个ingress,域名使用chartmuseum.jenkins-x.io。

{
"kind": "Ingress",
"apiVersion": "extensions/v1beta1",
"spec": {
"rules": [
{
"host": "chartmuseum.jenkins-x.io",
"http": {
"paths": [
{
"path": "/",
"backend": {
"serviceName": "jenkinsx-charts-service",
"servicePort": 80
}
}
]
}
}
]
}

最核心的是,让构建容器里可以访问到这个:

  • 先修改hosts

    k8s-vip chartmuseum.jenkins-x.io

k8s-vip 要替换成K8S集群的虚拟ip或者masterip

  • 修改coredns,通过hosts插件挂载服务器的hosts文件

63 Corefile: |
64 .:53 {
65 errors
66 health
67 hosts /etc/server-hosts {
68 fallthrough
69 }
70 kubernetes cluster.local. in-addr.arpa ip6.arpa {
71 pods insecure
72 upstream
73 fallthrough in-addr.arpa ip6.arpa
74 }
75 prometheus :9153
76 proxy . 192.168.75.14
77 cache 30
78 log
79 loop
80 reload
81 loadbalance
82 } 165 volumes:
166 - name: config-volume
167 configMap:
168 name: coredns
169 items:
170 - key: Corefile
171 path: Corefile
172 - name: server-hosts
173 hostPath:
174 path: /etc/hosts

jenkins-x 部署慢

  1. 将exposecontroller手动导入上传到jenkins-x-chartmuseum,然后修改env的requirement.yaml,
 alias: expose
name: exposecontroller
repository: http://jenkins-x-chartmuseum:8080
version: 2.3.82
- alias: cleanup
name: exposecontroller
repository: http://jenkins-x-chartmuseum:8080
version: 2.3.82
  1. 修改jenkinsfile
  • 减少stage
  • helm init --client-only
  • 部署不适用jx step,直接使用helm命令部署
pipeline {
options {
disableConcurrentBuilds()
}
agent {
label "jenkins-maven"
}
environment {
DEPLOY_NAMESPACE = "cog"
}
stages {
stage('Update Environment') {
when {
branch 'master'
}
steps {
container('maven') {
dir('env') {
sh 'helm init --client-only --stable-repo-url http://charts.iflyresearch.com/ && helm repo add release http://jenkins-x-chartmuseum:8080 && helm dependency build . && helm upgrade $DEPLOY_NAMESPACE . --install --namespace $DEPLOY_NAMESPACE'
}
}
}
}
}
}

作者:Jadepeng

出处:jqpeng的技术记事本--http://www.cnblogs.com/xiaoqi

您的支持是对博主最大的鼓励,感谢您的认真阅读。

本文版权归作者所有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。

jenkins X实践系列(4) —— jenkins X 构建提速的更多相关文章

  1. 「持续集成实践系列 」Jenkins 2.x 构建CI自动化流水线常见技巧

    在上一篇文章中,我们介绍了Jenkins 2.x实现流水线的两种语法,以及在实际工作中该如何选择脚本式语法或声明式语法.原文可查阅:「持续集成实践系列」Jenkins 2.x 搭建CI需要掌握的硬核要 ...

  2. jenkins X实践系列(1) —— 背景知识

    本文介绍jenkins X(以下简称jx)相关的背景技术. jenkins X 简介 Jenkins X 是一个高度集成化的CI/CD平台,基于Jenkins和Kubernetes实现,旨在解决微服务 ...

  3. 「持续集成实践系列」Jenkins 2.x 搭建CI需要掌握的硬核要点

    1. 前言 随着互联网软件行业快速发展,为了抢占市场先机,企业不得不持续提高软件的交付效率.特别是现在国内越来越多企业已经在逐步引入DevOps研发模式的变迁,在这些背景催促之下,对于企业研发团队所需 ...

  4. jenkins X实践系列(2) —— 基于jx的DevOps实践

    jx是云原生CICD,devops的一个最佳实践之一,目前在快速的发展成熟中.最近调研了JX,这里为第2篇,使用已经安装好的jx来实践CICD,旨在让大家了解基于jx的DevOps是如何运转的,感兴趣 ...

  5. jenkins X实践系列(3) —— jenkins X 安装拾遗

    jx是云原生CICD,devops的一个最佳实践之一,目前在快速的发展成熟中.最近调研了JX,这里为第3篇,介绍下如何安装jenkins x. 前置条件 安装K8S 安装ceph集群(jx需要stor ...

  6. Jenkins持续集成企业实战系列之Jenkins手动构建-----04

    注:原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 .作者信息和本声明.否则将追究法律责任.    最初接触Jenkins也是由于公司需求,根据公司需求Java代码项目升级的.(公司是 ...

  7. Jenkins系列之-—06 Ant构建

    一.Ant 简介&构建环境 Apache Ant 是由 Java 语言开发的工具 构建ant环境: 1). 安装jdk,设置JAVA_HOME ,PATH ,CLASS_PATH 2). 下载 ...

  8. DEVOPS技术实践_04:Jenkins参数化构建

    一.参数化构建 1.1 各个参数的信息 凭据参数存储一个用户的账号密码信息,等等,运用最多的是选项参数 1.2 使用选项参数 构建已经变成参数化构建 1.3 获取这个值,修改Jenkinsfile文件 ...

  9. DEVOPS技术实践_03:Jenkins自动构建

    一.提交代码自动构建 当开发人员在gitlab提交代码后,会自动触发jenkin构建 点击项目---->点击diy_maven-TEST----->点击配置--->构建触发器---- ...

随机推荐

  1. (转!)Pyinstaller 打包发布经验总结

    原文地址 https://blog.csdn.net/weixin_42052836/article/details/82315118 具体的实现图待本人实现后贴上 原 Pyinstaller 打包发 ...

  2. MySQL MyISAM引擎转换为InnoDB操作记录

    进入mysql命令行模式: # mysql -uroot -ppwd 1.查看mysql提供什么存储引擎: mysql> show engines; 2.查看mysql当前提供的默认存储引擎: ...

  3. springboot:扩展类型转换器

    需求:提交一个字符串到后端的java.sql.Time类型,就报错了: Failed to convert property value of type [java.lang.String] to r ...

  4. javacv:调取本地摄像头,抓取人脸,保存为图片

    MAVEN: <dependency> <groupId>org.bytedeco</groupId> <artifactId>javacv-platf ...

  5. 重新配置ocr voting

    由于存储空间不足,下线的数据库需要把存储空间腾出来,关闭集群资源,主机工程师收回lun需要(包括ocr 和 voting data 磁盘组),新的应用需要上线需要新的数据库,新的hitach存储到位需 ...

  6. Sq lServer触发器的使用

    创建表: CREATE TABLE [dbo].[GeneralRule]( [ID] [int] NOT NULL, ) NULL, [DeleteFlag] [int] NOT NULL ) CR ...

  7. UniversalImageLoader(异步加载大量图片)

    UniversalImageLoader是用于加载图片的一个开源项目,UniversalImageLoader是实现异步加载大量图片的源码和例子,包括缓存.硬盘缓存.容错机制等技术.在其项目介绍中是这 ...

  8. tcp和udp协议的聊天 和udp协议的时间同步机制-----编码

    tcp协议聊天 服务端:: 客户端 udp协议的聊天 ############ udp协议 ########### 服务器 import socket sk = socket.socket(type ...

  9. 【原创】运维基础之OpenResty

    openresty 1.15.8.1 官方:https://openresty.org/en/ 一 简介 OpenResty® is a dynamic web platform based on N ...

  10. 6)django-示例(fbv)

    FBV(function base view),即一个url对应views.py一个函数 示例演示如下 1)FBV如何使用 2)渲染页面,并返回字典数据 3)字典数据页面如何访问 1)url.py f ...