前言 在我刚开始接触分布式集群的时候,是自己在几台虚拟机中手动安装的 Hadoop 和 Spark ,所以当时对 Hadoop 的配置有个简单的印象 ,但是后面发现了 Cloudera 和 Ambari 之后(两个分布式集群自动管理工具),就再没有手动安装过.这就导致我用了很久的 Accumulo 却从未手动安装过,使用 Cloudera 安装导致我根本没有关心 Accumulo 是怎么从无到有冒出来的,只是简单了解了安装的大概过程,并学会了如何使用它. 今天不同,当我再次安装 Cloudera…

>20161011 :数据导入研究    0.sqoop报warning,需要安装accumulo:    1.下载Microsoft sql server jdbc, 使用ie下载,将42版jar包放入sqoop的lib下,注意所有自动安装的hadoop相关软件被置于/usr/hdp目录下    2.sqoop list-databases --connect jdbc:sqlserver://172.4.25.98 --username sa --password sa12345    3.…

系统安装 CentOS部署 新建虚拟电脑 类型:Linux 版本:Red Hat(64-bit) 创建虚拟硬盘 [x] 动态分配(磁盘占用较小) [ ] 固定大小(使用起来较快) 安装设置(设置root用户和个人用户) 本地化:日期和时间:亚洲/上海:键盘:汉语:语言支持:简体中文 软件:安装源:本地介质:软件选择:GNOME桌面 系统:安装位置:自动分区:KDUMP:已启用:网络和主机名:已连接 重启系统 安装增强功能(鼠标无缝平移,粘贴复制文本) 数据源 SSH无密码登录 CentOS 默认…

点击返回架构师成长之路 架构师成长之路2.2-PXE+Kickstart安装部署 系统测试环境: 实验环境:VMware Workstation 12 系统平台:CentOS Linux release 7.5.1804 (Core) 网络模式:NAT模式(共享主机的IP地址)        DHCP / TFTP IP:192.168.80.128        HTTP / FTP / NFS IP:192.168.80.128  1.关闭selinux和firewalld 一定要关闭,否则…

点击架构师成长之路 架构师成长之路5.1-Saltstack安装及入门 (安装.配置.启动) 配置管理工具: Pupper:1. 采用ruby编程语言:2. 安装环境相对较复杂:3.不支持远程执行,需要FUNC工具配置才可以 Ansible:1.采用python编程语言:2.被红帽收购:3.轻量级:4.基于模块工作的,本身没有批量部署的能力,真正批量部署的是ansible所运行的模块. Saltstack:采用python编程语言,同时提供Rest API方便二次开发以及和其它平台进行集成(目前…

一.注册GitHub账号 进入GitHub官方网站,输入用户名.邮箱地址及密码,点击“Sign up for GitHub”. 选择免费的,不要问我为什么,除非有钱任性选择付费版 验证邮箱地址并激活GitHub 二.创建仓库 注册完并登录GitHub后选择创建“New repository”(创建新的仓库) 填写仓库名.说明以及选择是否公开 完成创建后就是这个样子的 三.安装Git客户端 运行Git客户端安装包,选择“Next” 继续“Next” 选择安装路径,继续“Next” 选择安装的组件…

以下是通过Mac版Parallels安装CentOS虚拟机的教程: 1.在Parallels向导中选择"下载CentOS",点击"继续":  2.点击"下载":   3.安装包下载完后,自动解压并安装,接着会启动系统,首次登录需要设置登录密码:  4.输入刚设定的密码,安装Parallel工具:  安装完后根据提示,重启一次系统. 5.在欢迎页面选择语言为"汉语":  选择输入法:  6.开始使用CentOS L…

1.使用终端: CentOS左上角:应用程序>收藏>终端  2.使用root权限安装软件: 输入:sudo -i 输入密码(上篇安装linux虚拟机时设定的登录密码,也是超级管理员密码).  现在已切换为root账户了,以后安装软件时都是用root账户. 3.更新yum linux下建议用yum安装软件,简单方便. 第一次运行yum安装软件前,建议更新yum:   4.yum安装火狐浏览器 命令:yum -y install firefox   …

[内容指引] 安装yum-cron; 修改配置:nano: 手工启动服务: 将服务设置为开机自动启动. 为保证linux系统的安全性以及稳定性,可以使用yum-cron服务自动更新: 1.安装yum-cron 命令: yum install yum-cron -y   2. 使用nano修改yum-cron的配置 yum-cron配置的存放路径是:/etc/yum/yum-cron.conf 修改配置时推荐使用"nano",而不是"vi"."nano&…

[内容指引] 安装Java环境: 查看JDK版本: 安装Apache(httpd); 安装Tomcat: 设置服务开机启动. 1.安装Java环境 指令: yum intall java-1.8.0* -y 注意:"-y"放最后,如果放中间,可能不被识别.   2.查看java版本 指令: java -version  3.安装Apache(httpd) 指令: yum install httpd -y   注意 httpd配置文件的路径为:/etc/httpd/conf/h…