1.require : java环境,hadoop,hive ,mysql2.下载解压sqoop13.设置环境变量 export SQOOP_HOME=/data/spark/bin/sqoop export PATH=$PATH:$SQOOP_HOME/bin 4.添加mysql连接类 cp mysql-connector-java.jar $SQOOP_HOME/lib/ 5.测试 sqoop import --connect jdbc:mysql://{host}/{db} --usern…

TFS文件系统搭建笔记 参考地址: https://github.com/alibaba/tfs/blob/master/INSTALL.md https://github.com/alibaba/tfs/blob/master/DEPLOY.md http://tfs.taobao.org/ http://code.taobao.org/p/tfs/wiki/get/ http://csrd.aliapp.com/ 软件下载地址(源码): TFS:https://github.com/alib…

基于腾讯Centos7云服务器搭建SVN版本控制库 最近在和小伙伴组队参加一个关于人工智能的比赛,无奈不知道怎么处理好每个人的代码托管问题,于是找到了晚上免费svn托管服务器的服务,但是所给的免费空间实在太小了.本来我们在学校的实验室搭建了一个本地的服务器,但是只能是内网登陆,考虑到一个小伙伴会在78月左右就出国留学,不是内网无法登陆,而且那台主机将用来搭建集群.此时想到了我之前申请的腾讯云服务器,遂在腾讯云上基于centos7搭建了SVN.具体过程如下,如有不对,请大家指正!本人在CSDN上有…

CentOS7.5 下搭建SFTP Linux 创建用户组 groupadd sftp 创建用户test useradd -G sftp -s /sbin/nologin test -s 禁止用户ssh登录 -G 加入sftp用户组 创建密码 passwd test 修改配置文件 sshd_config sudo vim /etc/ssh/sshd_config 将下面这行注释 #Subsystem sftp /usr/libexec/openssh/sftp-server 然后在末行加入: M…

转载请注明出处,本文地址:http://www.cnblogs.com/ajiangg/p/6552855.html 以下是CentOS6.8下MySQL MHA架构搭建笔记 IP资源规划: 192.168.206.139 master 192.168.206.140 slave01(备用master) 192.168.206.141 slave02 192.168.206.142 manager 192.168.206.145 VIP 一.准备工作: 1.关闭Selinux [root@loc…

最近在倒腾Kubernetes的一些东西,这次需要用到Jenkins来实现自动化构建.来讲一讲搭建的整个过程. Jenkins是什么 Jenkins提供了软件开发的持续集成服务.它运行在Servlet容器中(例如Apache Tomcat).它支持软件配置管理(SCM)工具(包括AccuRev SCM.CVS.Subversion.Git.Perforce.Clearcase和RTC),可以执行基于Apache Ant和Apache Maven的项目,以及任意的Shell脚本和Windows批处…

一.CentOS7集群搭建 1.1 准备3台centos7的虚拟机 IP及主机名规划如下: 192.168.123.110 spark1192.168.123.111 spark2192.168.123.112 spark3 1.2 修改IP地址 [root@bigdata ~]# vi /etc/sysconfig/network-scripts/ifcfg-ens33 1.3 修改主机映射 [root@bigdata ~]# vi /etc/hosts 1.4 修改主机名 三台机器分别把主机…

centos7.3给搭建SVN服务器 1 安装svnserver yum install subversion 2 查看版本 svnserve --version 3 创建版本库 3.1 运行以下命令创建目录 mkdir /var/svn 3.2 依次运行以下命令创建版本库 cd /var/svn svnadmin create /var/svn/svnrepos 3.3 依次运行以下命令查看自动生成的版本库文件 cd svnrepos ls Subversion目录说明: db目录:所有版本控…

Centos7 安装 Python 的笔记 注意:系统自带的Python2.7不要改动,最好也不要出错,不然yum之类的工具可能会出错. 安装Python3.7.0 TensorFlow对Python3.7.0的环境不是很适应. TensorFlow最低版本Python >= 3 .5,Anaconda> = 4.2 依赖包: yum -y groupinstall "Development tools" yum -y install zlib-devel bzip2-de…

CentOS7和OpenStack的笔记(一) 最近搞CentOS7系统和OpenStack框架,整了近一个星期,系统装了好几次,框架搭了又从搭.虽然最后的实例没能启动成功,但是在这专研的一个星期里,也算是有了很多的心得体会,在此记下,方便以后查看. 一.CentOS7 1.主机名修改 hostnamectl set-hostname MyHostname 2.修改网卡名 在顺利的条件下改网卡名很简单: 在/etc/sysconfig/network-scripts/目录下,查看是否有网卡接口文…