go proxy athens 部署到k8s

之前将项目的代码迁移到了新的git,然后利用公司内部k8s结和gitlab进行ci/cd,但是由于编译时每次都需要重头开始build镜像,每次go mod都会去下载第三方包很耗费时间。在网上找了一些资料发现athens正好满足我的需求,就把这个服务给部署到和gitlab-runner一起了,这样就可以完美解决了下载慢的问题。毕竟局域网内下载还是很快的。

一、athens简介

Athens 是一个开源项目,旨在为 Go 模块(Go modules)创建首个代理服务器。将联合 Athens 社区继续致力于改善模块体验,重点是确保 Go 模块与所有代理服务器能无缝协作,并努力建立一个联合的、组织多样化的代理网络 。

项目官方网址: https://github.com/gomods/athens

文档地址: https://docs.gomods.io/

二、部署

1、创建 PersistentVolume

创建pv.yaml的文件如下:

  1. apiVersion: v1
  2. kind: PersistentVolumeClaim
  3. metadata:
  4. name: pvc
  5. namespace: prj-name # 修改为您自己的命名空间
  6. labels:
  7. app: gomod-athens
  8. spec:
  9. storageClassName: sc-rbd-hb06 #storageClass这个必须写明, 否则创建不出对应的pv
  10. volumeMode: Block # k8s 1.9 版本支持的,总共两种,Filesystem,Block。默认Filesystem,我司内部平台仅支持Block,所以这样写,具体可以自己修改
  11. accessModes:
  12. - ReadWriteOnce # 这里可以有3种模式挂载到节点上,ReadWriteMany多点读写,ReadWriteOnce单点读写,ReadOnlyMany 多点只读, 目前只支持ReadWriteOnce和ReadOnlyMany
  13. resources:
  14. requests:
  15. storage: 10Gi # 存储空间大小,这里不能超过配额限制100G

执行:

  1. [root@linux]$ kubectl apply -f pv.yaml
  2. [root@linux]$ kubectl get pv -n project_name

2、创建service

service.yml

  1. apiVersion: v1
  2. kind: Service
  3. metadata:
  4. name: athens-proxy
  5. namespace: project_name # 根据自己的修改
  6. spec:
  7. ports:
  8. - port: 80
  9. targetPort: 3000
  10. selector:
  11. app: gomod-athens # 要和deployment中的对应一样
  12. type: ClusterIP

执行:

  1. [root@linux]$ kubectl apply -f service.yml
  2. [root@linux]$ kubectl get svc -n project_name
  3. NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
  4. athens-proxy ClusterIP 2002:ac1f:91c5:1::2eed <none> 80/TCP 157m

3、创建deployment

athens.yml

  1. apiVersion: apps/v1
  2. kind: Deployment
  3. metadata:
  4. name: gomod-athens-deploy
  5. namespace: project_name #根据自己的修改
  6. spec:
  7. selector:
  8. matchLabels:
  9. app: gomod-athens
  10. replicas: 1
  11. template:
  12. metadata:
  13. labels:
  14. app: gomod-athens # 要和service中的对应一样
  15. spec:
  16. containers:
  17. - name: athens
  18. image: gomods/athens:latest #使用官方最新镜像
  19. ports:
  20. - containerPort: 3000
  21. env:
  22. - name: ATHENS_DISK_STORAGE_ROOT
  23. value: /var/lib/athens
  24. - name: ATHENS_STORAGE_TYPE
  25. value: disk
  26. volumeMounts:
  27. - name: gomodcache
  28. mountPath: /var/lib/athens
  29. readOnly: false
  30. imagePullSecrets:
  31. - name: abcdhub # 拉取镜像的secret key
  32. volumes:
  33. - name: gomodcache
  34. persistentVolumeClaim:
  35. claimName: pvc #第一步创建的PersistentVolume 名字
  36. readOnly: false

执行:

  1. [root@linux]$ kubectl apply -f athens.yml
  2. [root@linux]$ kubectl get pod -n project_name
  3. NAME READY STATUS RESTARTS AGE
  4. gomod-athens-deploy-d9d7978bb-7sbww 1/1 Running 0 159m

curl http://<service-name>.<namespace>.svc.<cluster-domain>:80 测试服务正常工作,正常的话会返回"Welcome to The Athens Proxy"

4、ci/cd中使用

我是按照下面这样使用的,配置proxy,然后将公司内部的代码库排除在外

利用域名进行访问, Kubernetes Service 的域名格式如下:

<service-name>.<namespace>.svc.<cluster-domain>

export GOPROXY= http://<service-name>.<namespace>.svc.<cluster-domain>:80

export GOPRIVATE=gitlab.mycompany.com

5、踩坑记录

由于一开始不太清楚怎么部署,所以service 的metadata中的 name字段填了athens,这个就是一个坑,后续步骤一直报

  1. time="2019-12-09T07:04:13Z" level=info msg="Exporter not specified. Traces won't be exported"
  2. 2019-12-09 07:04:13.539829 I | Starting application at port tcp://[2002:ac1f:91c5:1::b5fe]:80
  3. 2019-12-09 07:04:13.539852 I | listen tcp: address tcp://[2002:ac1f:91c5:1::b5fe]:80: too many colons in address

到github上面查看issue还真发现有人遇到了和我一样的问题:too many colons in address,

然后按照上面的方法: https://github.com/gomods/athens/issues/1038 来就完美解决了。

go proxy athens 部署到k8s的更多相关文章

  1. Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列之部署master/node节点组件(四)

    0.前言 整体架构目录:ASP.NET Core分布式项目实战-目录 k8s架构目录:Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列目录 1.部署master组件 ...

  2. eShopOnContainers 知多少[10]:部署到 K8S | AKS

    1. 引言 断断续续,感觉这个系列又要半途而废了.趁着假期,赶紧再更一篇,介绍下如何将eShopOnContainers部署到K8S上,进而实现大家常说的微服务上云. 2. 先了解下 Helm 读过我 ...

  3. Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列目录

    0.目录 整体架构目录:ASP.NET Core分布式项目实战-目录 k8s架构目录:Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列目录 一.感谢 在此感谢.net ...

  4. K8S+GitLab-自动化分布式部署ASP.NET Core(三) 更新镜像版本并部署到K8S上

    一.介绍 前一篇,介绍了ASP.NET Core部署到K8S上,下面介绍我们在发布新一版本中怎么通过Gitlab CI自动给镜像打版本并部署到K8S上. 二.我们通过GitLab CI/CD 变量 不 ...

  5. Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列之集群部署环境规划(一)

    0.前言 整体架构目录:ASP.NET Core分布式项目实战-目录 k8s架构目录:Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列目录 一.环境规划 软件 版本 ...

  6. Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列之自签TLS证书及Etcd集群部署(二)

    0.前言 整体架构目录:ASP.NET Core分布式项目实战-目录 k8s架构目录:Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列目录 一.服务器设置 1.把每一 ...

  7. Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列之flanneld网络介绍及部署(三)

    0.前言 整体架构目录:ASP.NET Core分布式项目实战-目录 k8s架构目录:Kubernetes(k8s)集群部署(k8s企业级Docker容器集群管理)系列目录 一.flanneld介绍 ...

  8. 【故障公告】部署在 k8s 上的博客后台昨天与今天在访问高峰多次出现 502

    非常抱歉,从昨天上午开始,部署在 k8s 集群上的博客后台(基于 .NET Core 3.1 + Angular 8.2 实现)出现奇怪问题,一到访问高峰就多次出现 502 ,有时能自动恢复,有时需要 ...

  9. 开发阶段,将SpringBoot应用快速部署到K8S

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

随机推荐

  1. 前端与算法 leetcode 48. 旋转图像

    目录 # 前端与算法 leetcode 48. 旋转图像 题目描述 概要 提示 解析 解法一:转置加翻转 解法二:在单次循环中旋转 4 个矩形 算法 传入测试用例的运行结果 执行结果 GitHub仓库 ...

  2. IDEA升级,提示"Connection Error Failed to prepare an update"

    问题来源: 之前修改了IDEA的默认配置文件路径,然后升级新版本时就无法升级,提示"Failed to prepare an update Temp directory inside ins ...

  3. Windows下编译最新版ChezScheme

    据说ChezScheme是最快的神级编译器,一秒钟几百万行,王垠说的2秒内编译自身绝不是夸张(看这里<揭秘Chez Scheme>,Scheme中文社区).ChezScheme由美国印第安 ...

  4. Flutter之环境配置与项目搭建

    Flutter之环境配置与项目搭建 一,介绍 1.1,Dart Dart 是一种 易于学习. 易于扩展.并且可以部署到 任何地方 的 应用 编程 语言.并且同时借鉴了Java和JavaScript.D ...

  5. nyoj 457-大小写互换

    457-大小写互换 内存限制:64MB 时间限制:1000ms 特判: No 通过数:18 提交数:21 难度:0 题目描述:       现在给出了一个只包含大小写字母的字符串,不含空格和换行,要求 ...

  6. 11.13的C++##不想写结构,更不爱指针

    //2019.11.13 卑微的Loving-Q瞎写的程序 报错请更改VS中的SDL检查// 我要去嗨了,在线卑微 1 #include<iostream> #include<std ...

  7. 一 linuk系统简介

    开源软件 使用的自由,绝大多数开源软件免费 研究的自由,可以获得软件源代码 散播及改良的自由,可以自由传播 改良甚至销售 linuk应用领域 基于linuk的企业服务器 扫描踩点网站www.netcr ...

  8. 天啦!竟然从来没有人讲过 SpringBoot 支持配置如此平滑的迁移

    SpringBoot 是原生支持配置迁移的,但是官方文档没有看到这方面描述,在源码中才看到此模块,spring-boot-properties-migrator,幸亏我没有跳过.看到这篇文章的各位,可 ...

  9. Android官方提供的支持不同屏幕大小的全部方法(转)

    转载请注明出处:http://blog.csdn.net/guolin_blog/article/details/8830286 原文地址为:http://developer.android.com/ ...

  10. Android中的设计模式

    一.设计模式的分类 总体来说23种设计模式分为三大类: 创建型模式,共五种:工厂方法模式.抽象工厂模式.单例模式.建造者模式.原型模式. 结构型模式,共七种:适配器模式.装饰器模式.代理模式.外观模式 ...