之前试用了azkaban一小段时间,虽然上手快速方便,但是功能还是太简单,不够灵活. Airflow使用代码来管理任务,这样应该是最灵活的,决定试一下. 我是python零基础,在使用airflow的过程中可谓吃尽了苦头..好歹最后实现所有要求,两三周的时间没有白费 看完这篇文章,可以达到如下目标: 安装airflow 如何修改界面右上角显示的时间到当前时区 如何添加任务 调试任务python代码 如何启动spark任务 如何限定任务同时执行的个数 如何手动触发任务时传入参数 如何在airflo

Centos下安装配置LAMP(Linux+Apache+MySQL+PHP)   关于LAMP的各种知识,还请大家自行百度谷歌,在这里就不详细的介绍了,今天主要是介绍一下在Centos下安装,搭建一个web服务器的过程. 首先说下我的主机和网络环境:主机系统是win7,在win7下安装了虚拟机,Centos在虚拟机中.虚拟机的联网方式是NAT,主机网络是校园网,需要账号认证才能上网.  www.cit.cn    在Centos下安装软件有两种方式,第一种是使用yum命令,自动安装软件,安装的

Linux下安装配置MySQL+Apache+PHP+WordPress的详细笔记 Linux下配LMAP环境,花了我好几天的时间.之前没有配置过,网上的安装资料比较混乱,加上我用的版本问题,安装过程中出现了一些错误,经过好几次安装,翻了好多资料,最后找出问题的所在,才把环境搭建好,对于高手来说,这或许不算什么,但对于一个刚入门的新人,却是不一样了,这篇文章记录着我的一些笔记,希望对于那些刚刚入门的人们有所帮助,仅作为参考. 安装首先我们得获得MySQL,Apache,PHP,WordPress

  阿里云服务器centos下安装配置svn服务器 1.安装svn服务器端yum install subversion      从镜像下载安装svn服务器端中间会提示是否ok,输入y,确认安装成功提示:.....complete!依次执行如下命令:cd /usr/local/              //进入目录,准备创建svn目录mkdir svnRepo                   //创建一个svn目录chmod -R 777 svnRepo            //修改目录

cacti简介 随着公司规模扩大,服务器也日渐增多,对服务器集群的网络流量和服务器性能实时监测显得愈发重要.开源阵营中常用有MRTG(MultiRouter Traffic Grapher)--基于SNMP的网络流量统计分析工具.它通过SNMP协议从设备得到并记录网卡信息,并将流量负载以图形的方式显示出来,系统负载小,使用方便.不过,由于MRTG存在诸多缺点,其作者Tobias Oetiker在1999年就已经开始开发另一套开源软件RRDTool来代替MRTG.,但是RRDTool的主要作用是数

今天刚把项目做完,需要马上部署到新到的测试服务器上,于是乎,要在服务器上安装环境,由于好久在linux上部署了,手有些生,比较费劲装完,现在把重要步骤贴出,供自己以后参照.1.首先要看看有没有已经安装好的MySQL,以免产生冲突# rpm -qa | grep MySQL2.卸载冲突的版本# rpm -e MySQL-version //要先后卸载客服端和服务器端 3.安装MySQL客服端和服务器端# rpm -ivh MySQL-server-community-5.1.48-1.rhel5.

---恢复内容开始--- 1.一般情况下安装上centos后,会有vi,没有vim(以后可能会有吧) 如果不确定自己有没有vim,使用命令 rpm -qa|grep vim 查看,如果有的话,会显示三个包 如果没有vim 使用命令 yum -y install vim* 下载就好 2.配置vim 配置vim是为了让我们的vim看起来和使用起来更舒服些 使用命令 cd ~ touch .vimrc vim .vimrc 进入 .vimrc里面进行配置 1)显示行号 5) 即设置语法检测,当编辑C或

一.Redis介绍 Redis是当前比较热门的NOSQL系统之一,它是一个key-value存储系统.和Memcache类似,但很大程度补偿了Memcache的不足,它支持存储的value类型相对更多,包括string.list.set.zset和hash.这些数据类型都支持push/pop.add/remove及取交集并集和差集及更丰富的操作.在此基础上,Redis支持各种不同方式的排序.和Memcache一样,Redis数据都是缓存在计算机内存中,不同的是,Memcache只能将数据缓存到内

0 环境介绍 VMWARE12下安装的CENTOS7虚拟机.宿主机为WIN7. 1 离线安装 费了九牛二虎之力,下载各种依赖,还是有问题,转向在线安装. 2 在线安装 虚拟机采用默认的配置: 其次,网络其其他方式也为默认:自动方式. 使用命令: yum -y install samba samba-client samba-common 自动安装成功: 3 查看相关包 安装完samba后,查看相关包: [root@localhost bin]# rpm -qa|grep samba samba-

Linux版本:Centos 7RabbitMQ依赖erlang所以需要先安装erlang以及他需要的环境 安装erlang http://www.erlang.org/downloads 拿最新的版本 拼装命令 到/usr目录下执行(个人喜好) 下载安装包wget http://erlang.org/download/otp_src_21.2.tar.gz 解压安装包tar -xvzf otp_src_21.2.tar.gz 改个名字 mv otp_src_21.2 otp_src 安装erl

感谢大佬:https://www.howtoing.com/how-to-install-wordpress-with-nginx-on-centos-6-2 WordPress是一个免费和开源网站和博客工具,使用PHP和MySQL. 它创建于2003年,并扩展到管理所有新创建的网站的22%,并拥有超过20,000个插件来定制其功能. 在使用wordpress之前,您需要在您的VPS上安装LEMP. 如果你没有Linux的,Nginx的,MySQL和PHP的服务器上的,你可以找到的教程设置它在这

前言 这里我用的系统是centos 6.2, 在服务器上的准备工作(服务器IP为10.0.2.8 ): 1.安装 openssh服务器与客户端工具 $ sudo yum install openssh-server openssh-client 2.创建个人公钥和私钥(用于后面的git服务的管理员管理) 在默认用户的主目录路径下,运行以下命令,按照提示创建公钥和私钥 $ ssh-keygen -t rsa 默认生成2048位,如果需要提高安全级别,也可以通过下面的命令创建公钥和私钥 ssh-ke

一.安装 yum install subversion测试是否安装成功 /usr/bin/svnserve --version如提示以下内容,说明已安装成功 svnserve,版本 1.6.11 (r934486)编译于 May 14 2012,05:36:26 版权所有 (C) 2000-2009 CollabNet.Subversion 是开放源代码软件,请参阅 http://subversion.tigris.org/ 站点.此产品包含由 CollabNet(http://www.Coll

首先更新系统 yum -y update 1.安装Mongodb 编辑Mongodb安装源 vim /etc/yum.repos.d/mongodb-org-3.6.repo 编辑内容如下: [mongodb-org-3.6] name=MongoDB Repository baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/3.6/x86_64/ gpgcheck= enabled= gpgkey=https:

1:安装NFS (1)安装 yum install nfs-utils rpcbind (2)启动rpcbind服务 systemctl restart rpcbind.service 查看服务状态 systemctl status rpcbind.service 查看rpc lsof -i :111 netstat -lntup|grep rpcbind (3)启动NFS服务 systemctl start nfs.service 查看状态 systemctl status nfs.servi

1:安装mkdir -p /app/mongodb tar zxvf mongodb-linux-x86_64-rhel62-3.4.6.tgz vi .bash_profile PATH=$PATH:$HOME/binPATH=$PATH:/app/mongodb/mongodb-linux-x86_64-rhel62-3.4.5/binexport PATH --让配置文件生效source .bash_profile --在/app/mongodb目录下创建mongo.confdbpath=

在Centos6.9上安装Mongodb时候,遇到"No package mongodb-org available"这个报错. 经过查询后,在Centos6.9上需要针对Mongodb针对独立安装,按照如下教程,可以把Mongodb安装成功. 首先更新系统 yum -y update 1.安装Mongodb 编辑Mongodb安装源 vim /etc/yum.repos.d/mongodb-org-3.6.repo 编辑内容如下: [mongodb-org-3.6] name=Mon

下载maven安装包 wget http://mirrors.tuna.tsinghua.edu.cn/apache/maven/maven-3/3.3.9/binaries/apache-maven-3.3.9-bin.tar.gz 解压安装包 tar -xvf apache-maven-3.3.9-bin.tar.gz 删除多余安装包 重命名 rm -rf apache-maven-3.3.9-bin.tar.gz mv apache-maven-3.3.9/ maven-3.3 配置mav

经常需要在linux环境下部署项目或安装Mysql数据库,由于记性不好,每次都是求助度娘,每次搜到的步骤都不一样,所以每次都在尝试.冒险:于是乎,把安装的重要步骤贴出,供自己以后参照. 1.首先要看看有没有已经安装好的MySQL,以免产生冲突 # rpm -qa | grep MySQL 2.卸载冲突的版本 # rpm -e MySQL-version //要先后卸载客服端和服务器端 3.安装MySQL客服端和服务器端 # rpm -ivh MySQL-server-community-5.1.

下载yum源的安装包 yum localinstall https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm 安装 yum install mysql-community-server 启动服务 service mysqld start 查看状态 service mysqld status 查看初始密码 grep 'temporary password' /var/log/mysqld.log 转自 童年的回忆,感谢

安装环境:CentOS-6.4   安装方式:源码编译安装  软件:cmake-2.8.5.tar.gz 下载地址暂时不提供,去百度搜一下准有 安装前提 系统中已经安装了gcc. ncurses-devel [root@admin /]# yum install gcc-c++ [root@admin /]# yum yum -y install ncurses-devel 安装cmake 将cmake-cmake-2.8.5.tar.gz文件上传到/usr/local中执行以下操作: [roo