前言 去年看武sir代码发布的视频无意中听到了蓝鲸平台但是一直没深究,前一段时间公司要搞一个代码发布平台,但是需求变化很多一直找不到一个很好的参考 模板,直到试用了一下蓝鲸作业平台发现“一切皆作业”的思想非常好,比如一个简单变更发布: 1. 对 web 组(3 台机器)停服务 在三台机器上执行(/home/tomcat/bin/shutdown.sh) 2.对web组(3台机器)更新版本文件 在三台机器执行(scp xxx yyy),有些公司可能是rsync同步.(git pull)客户端拉取.…

首先,安装python支持的mongodb库pip install pymongo from pymongo import MongoClient client = MongoClient('localhost',27017)#获取所有数据库 dblist = client.list_database_names() print("数据库列表:",dblist) choosedb = client['olddream']#获取选定数据库的所有集合 collections = choos…

搭建基于python +opencv+Beautifulsoup+Neurolab机器学习平台 By 子敬叔叔 最近在学习麦好的<机器学习实践指南案例应用解析第二版>,在安装学习环境的时候遇到一些问题,特此写个博客,希望可以帮助到有需要的人,同时也希望像我一样在摸索的人不要走太多的弯路,程序员应该多花时间在学习上,不应该把时间都浪费在折腾环境上面. 下载安装winpython 第一步,我们通过搜索引擎搜索到winPython,一般通过这个网站就可以下载,https://sourceforge.…

➠更多技术干货请戳:听云博客 时至今日,接触kubernetes也有一段时间了,而我们的大部分业务也已经稳定地运行在不同规模的kubernetes集群上,不得不说,无论是从应用部署.迭代,还是从资源调度管理等方面都有其难以言喻的优势,但是随着业务的不断增长,以及服务的多元化,容器的体量与管理的难度也随之增长. 浅述Kubernetes集群日常管理维护中的一些痛点: 1.较为庞大的集群规模及容器数量维护管理. 我们公司的业务场景属于典型的多业务线并行.同时为了便于分类管理,避免端口冲突和资源合理利…

背景: 自动化测试行业内,个人觉得主力语言是python.java.这里讨论下基于python自动化框架设计与case开发,用过python的都知道它的好处,但是根据实际项目需要有了很多迎面而来的困难--主机迁移.第三方软件包与python版本.环境杂乱.外界影响等.这些问题都是很糟糕的,给开发人员带来了很大困扰,导致无法实现自动化测试的作用最大化. 解决方案 基于以上背景我们有了两个解决方案:(这里讨论一下解决方案不涉及具体框架设计) 1.基于docker容器化自动化平台.docker可以实现…

简介 airflow 是一个使用python语言编写的data pipeline调度和监控工作流的平台.Airflow被Airbnb内部用来创建.监控和调整数据管道.任何工作流都可以在这个使用Python来编写的平台上运行. Airflow是一种允许工作流开发人员轻松创建.维护和周期性地调度运行工作流(即有向无环图或成为DAGs)的工具.在Airbnb中,这些工作流包括了如数据存储.增长分析.Email发送.A/B测试等等这些跨越多部门的用例. 这个平台拥有和 Hive.Presto.MySQL…

一.需求 由于公司各个部门对业务数据的需求,比如进行数据分析.报表展示等等,且公司没有相应的系统.数据仓库满足这些需求,最原始的办法就是把数据提取出来生成excel表发给各个部门,这个功能已经由脚本转成了平台,交给了DBA使用,而有些数据分析部门,则需要运维把生产库的数据同步到他们自己的库,并且需要对数据进行脱敏,比如客户的身份证号.手机号等等,且数据来源分散在不同的机器,不同的数据库实例里,这样就无法使用MySQL的多源复制,只能用写脚本通过SQL语句实现,随着业务的发展,导致堆积到运维部门的…

Jenkins简介 Jenkins是Java编写的非常流行的持续集成(CI)服务,起源于Hudson项目.所以Jenkins和Hudson功能相似. Jenkins支持各种版本的控制工具,如CVS.SVN.Git.Mercurial.Perforce和ClearCase,而且可以执行用Apache Ant或Java Maven构建的项目.同时,它也可以利用一些插件.Shell脚本和Windows批处理命令来构建其他平台的项目. Jenkins除了构建软件功能外,还可以用于搭建自动化测试环境,比如…

基于python的互联网软件测试开发(自动化测试)-全集合 1   关键字 为了便于搜索引擎收录本文,特别将本文的关键字给强调一下: python,互联网,自动化测试,测试开发,接口测试,服务测试,api测试,分层测试,分层自动化..etc 2   本文目的 对近几年自己对互联网领域的测试开发的一些见解以及一些学习资料进行整理和分享,希望能够给有志于此领域的人一些入门的指导. 同时能够将 Google 这样的大的互联网公司的软件开发模式向中国地区进行一些推广吧. 笔者的观点具有比较强的倾向性:人…

蓝鲸CMDB 蓝鲸配置平台(蓝鲸CMDB)是一个基于运维场景设计的企业配置管理服务.主要功能: 1. 拓扑化的主机管理:主机基础属性.主机快照数据.主机归属关系管理 2. 组织架构管理:可扩展的基于业务的组织架构管理 3. 模型管理:既能管理业务.集群.主机等内置模型,也能自定义模型 4. 进程管理:基于模块的主机进程管理 5. 事件注册与推送:提供基于回调方式的事件注册与推送 6. 通用权限管理:灵活的基于用户组的权限管理 7. 操作审计:用户操作行为的审计与回溯 官网地址:http://bk…