大数据搭建各个子项目时配置文件技巧(适合CentOS和Ubuntu系统)(博主推荐)
不多说,直接上干货!
很多同行,也许都知道,对于我们大数据搭建而言,目前主流,分为Apache 和 Cloudera 和 Ambari。
后两者我不多说,是公司必备和大多数高校科研环境所必须的!
分别,详情见我如下的博客
Cloudera安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐)
我这里,对于初学者而言。一般是用Apahce和CDH这两个版本的hadoop、spark来练手和入门 。
Xmanager Enterprise *安装步骤
Notepad++软件的下载与安装步骤
我这里,暂时,带大家来认识和运用Xshell,其他的几个,后续我贴出博客。
第一种方法:直接vim 进入,去修改(一个一个手敲)
第二种方法:在notepad++排版好,然后,进行复制到
第三种:先用sz命令下载到本地,再写好,上传
第四种:我最喜欢的,也是最推荐大家去学会的(博主推荐!)
我们知道 WinSCP 可实现对虚拟机上文件的查看和修改,以及主机和虚拟机文件之间文件的发送和接受,但 WinSCP 并非做文件编辑的趁手的工具。我们可用 XShell 取代其文件传递的功能,可用Notepad++的NPPFTP插件实现对虚拟机上文件的专业编辑。
1、 notepad++的“插件”菜单,鼠标悬停在“NppFTP”项上,在出来的下级菜单中选中“ShowNppFTP Window”
2、 在notepad++右侧会出现一个窗口,此时此窗口工具栏上按钮都是灰色的,点击工具栏上的”>>”按钮,鼠标悬停在弹出来菜单中的“settings”菜单项上
3、在弹出来的自己菜单中选择“Profile Setting”,出现“Profile Setting”对话框
4、 在对话框最左下角点击“Add New”
5、在弹出对话框中输入这个ftp配置文件(profile)的名称,点击确定,建立好新配置文件的名称
6、然后在左侧点击刚才建立的配置文件,然后右侧框都由灰色变成可写入状态;在“hostname”中填入ftp主机(ip地址或者域名),“Username”和“Password”中填入ftp用户名和密码,然后直接点击对话框最下方的“close”即可完成配置
7、 此时回到notepad++的主页面,看右侧NppFTP的工具栏第一按钮已经成为蓝色,点击之后选择刚才编辑的ftp配置文件,就开始连接到ftp服务器上了。
8、浏览ftp服务器文件操作和一般ftp文件无区别,遇到要编辑的文件直接双击打开,NppFTP会自动下载下来打开,编辑完毕之后按Ctrl+S保存即可自动上传到服务器上。
我正所以,带大家先做一遍失败的,才深刻体会到,为什么要有下面的步骤,以及插件的安装!(要重视起来)
(1)NppFTP:NppFTP(Npp:Notepad Plus Plus)
(2)Notepad ++:Download Notepad++ 6.9 以上 (这个版本一定要是6.9以上,否则出现后面我所陈述的兼容问题)
这里,搭建下载NppFTP插件的时候,根据自己的系统而定, 我的系统是64位。但是NotePad++是32位。(得要下载32位的NppFTP插件)
https://github.com/ashkulz/NppFTP/releases/tag/v0.26.9
为 Notepad ++ 安装和配置插件
将 NppFTP(Npp:Notepad Plus Plus)中的文件,解压,拷贝 bin 目录下的全部文件(主要是 .dll 文件)到Notepad++安装目录下(默认为C:\Program Files\Notepad+
)(我的是在D:\SoftWare\Notepad++)的 Plugins 目录中,然后重启 Notepad++,插件安装成功。
在 Notepad++ 的菜单栏,就会看到【插件】菜单新增的 NppFTP 按钮,如下所示:
接下来,重新启动它,
这里,很简单,解决办法,就是在线升级即可。别再那么傻逼,卸载掉之后,再来重装。
解决办法:默认有弹窗提示升级的 或者 也可以手动点击帮助->升级notepad++
接下来,就是再次安装,这里不多赘述,请移步
Notepad++软件的下载与安装步骤
只是,把Localization补上。多个功能方便自己!
其实,新版本的Notepad ++ 团队,已经将这个插件以及其他常用的插件都集成开发啦!
插件主页:NppFTP@SourceForge (新版本的notepad++已经集成了这个插件)
以下是,我的Notepad++7.3.3的32位版本软件 + NppFTP的32插件安装好后的界面展示
出现如下的拒绝情况,很正常。是因为
第一步:如果服务器(这里指的是bigdatamaster)上没有装vsftpd,很简单。
[hadoop@bigdatamaster ~]$ su root
Password:
[root@bigdatamaster hadoop]# yum -y install vsftpd(这是CentOS系统)
或者
sudo apt-get install vsftpd (这是ubuntu系统)
第二步:然后需要配置下文件
vi /etc/vsftpd/vsftpd.conf (CentOS系统)
或者
sudo vim /etc/vsftpd/vsftpd.conf(这是ubuntu系统)
第三步:配置
write_enable = YES
ascii_upload_enable = YES
ascii_download_enable = YES
anonymous_enable=YES
chroot_local_user=YES
这里我使用的是匿名登录(保存默认)。
第四步:启动vsftpd服务
Starting vsftpd for vsftpd: [FAILED]问题的解决
[root@bigdatamaster etc]# service vsftpd start
Starting vsftpd for vsftpd: [ OK ]
[root@bigdatamaster etc]#
或者
sudo service vsftpd restart(ubuntu系统下)
第五步:成功
bigdataslave1和bigdataslave2不多赘述。
送给大家的话:对于这样的小技巧,别先麻烦,弄好一次,后面节约时间翻倍。而且复制粘贴和快捷键各种灵活运用!
有时候,需要用22端口,和 SETP搭配使用。
同时,大家可以关注我的个人博客:
http://www.cnblogs.com/zlslch/ 和 http://www.cnblogs.com/lchzls/ http://www.cnblogs.com/sunnyDream/
详情请见:http://www.cnblogs.com/zlslch/p/7473861.html
人生苦短,我愿分享。本公众号将秉持活到老学到老学习无休止的交流分享开源精神,汇聚于互联网和个人学习工作的精华干货知识,一切来于互联网,反馈回互联网。
目前研究领域:大数据、机器学习、深度学习、人工智能、数据挖掘、数据分析。 语言涉及:Java、Scala、Python、Shell、Linux等 。同时还涉及平常所使用的手机、电脑和互联网上的使用技巧、问题和实用软件。 只要你一直关注和呆在群里,每天必须有收获
对应本平台的讨论和答疑QQ群:大数据和人工智能躺过的坑(总群)(161156071)
大数据搭建各个子项目时配置文件技巧(适合CentOS和Ubuntu系统)(博主推荐)的更多相关文章
- Eclipse的企业开发时常用快捷键使用、优化配置(博主推荐)
不多说,直接上干货! 一.简介 eclipse可谓是Java开发界的神器,基本占据了大部分的Java开发市场,而且其官方还对其他语言提供支持,如C++,Ruby,JavaScript等等.为什么使用它 ...
- CentOS和Ubuntu系统下安装vsftp(助推大数据部署搭建)
不多说,直接上干货! 同时,声明,我这里安装的vsftp,仅仅只为我的大数据着想,关于网上的复杂安装,那是服务和运维那块.我不多牵扯,也不多赘述. 一.CentOS系统里安装vsftp 第一步:使用y ...
- CDH版本大数据集群下搭建Hue(hadoop-2.6.0-cdh5.5.4.gz + hue-3.9.0-cdh5.5.4.tar.gz)(博主推荐)
不多说,直接上干货! 我的集群机器情况是 bigdatamaster(192.168.80.10).bigdataslave1(192.168.80.11)和bigdataslave2(192.168 ...
- 如何在IDEA里给大数据项目导入该项目的相关源码(博主推荐)(类似eclipse里同一个workspace下单个子项目存在)(图文详解)
不多说,直接上干货! 如果在一个界面里,可以是单个项目 注意:本文是以gradle项目的方式来做的! 如何在IDEA里正确导入从Github上下载的Gradle项目(含相关源码)(博主推荐)(图文详解 ...
- 基于CentOS6.5下snort+barnyard2+base的入侵检测系统的搭建(图文详解)(博主推荐)
为什么,要写这篇论文? 是因为,目前科研的我,正值研三,致力于网络安全.大数据.机器学习研究领域! 论文方向的需要,同时不局限于真实物理环境机器实验室的攻防环境.也不局限于真实物理机器环境实验室的大数 ...
- 基于Windows7下snort+apache+php 7 + acid(或者base) + adodb + jpgraph的入侵检测系统的搭建(图文详解)(博主推荐)
为什么,要写这篇论文? 是因为,目前科研的我,正值研三,致力于网络安全.大数据.机器学习.人工智能.区域链研究领域! 论文方向的需要,同时不局限于真实物理环境机器实验室的攻防环境.也不局限于真实物理机 ...
- 再谈spark部署搭建和企业级项目接轨的入门经验(博主推荐)
进入我这篇博客的博友们,相信你们具备有一定的spark学习基础和实践了. 先给大家来梳理下.spark的运行模式和常用的standalone.yarn部署.这里不多赘述,自行点击去扩展. 1.Spar ...
- POI3.8解决导出大数据量excel文件时内存溢出的问题
POI3.8的SXSSF包是XSSF的一个扩展版本,支持流处理,在生成大数据量的电子表格且堆空间有限时使用.SXSSF通过限制内存中可访问的记录行数来实现其低内存利用,当达到限定值时,新一行数据的加入 ...
- tomcat优化---大数据量提交tomcat时,tomcat无法接收导致页面无反应
关于tomcat的一个优化问题: 有时候保存大数据量的数据时.tomcat不优化的话,页面会没反应.tomcat后台并不报错,仅仅是提示以下内容: 警告: More than the maximum ...
随机推荐
- Java Annotation Processors
Table Of Contents 1. Introduction 2. When to Use Annotation Processors 3. Annotation Processing Unde ...
- 18-11-1 Scrum Meeting 4
1.会议照片 2.每人的工作 昨天完成的工作 完成测验页面,完善表单验证 完成制定计划,修改计划 关联单词数据,英语单词数据准备 今日计划工作 英文单词的图片准备 完善测验功能 3.项目燃尽图 前端页 ...
- AT指令框架的实现
AT指令概述 AT指令是应用于终端设备与PC应用之间的连接与通信的指令.AT 即Attention.每个AT命令行中只能包含一条AT指令:对于AT指令的发送,除AT两个字符外,最多可以接收1056个字 ...
- @componentscan注解的用法和作用
刚刚开始学习spring boot,在application中忘记加上@componentscan,倒置web请求一直没有都是404,@componentscan的作用如下: @ComponentSc ...
- Hibernate继承映射(@Inheritance)
继承映射在 Annotation 中使用 @Inheritance 注解,并且需要使用 strategy 属性指定继承策略,继承策略有 SINGLE_TABLE.TABLE_PER_CLASS 和 J ...
- Vue前端数据采集 埋点 追踪用户系列行为
什么是埋点? 综合 vue埋点 埋点分析,是网站分析的一种常用的数据采集方法.数据埋点分为初级.中级.高级三种方式.数据埋点是一种良好的私有化部署数据采集方式. 埋点技术如何采集数据,有何优缺 ...
- 「SDOI2008」洞穴勘测
题目链接 戳我 \(Solution\) \(LCT\)裸题 \(Connect\)操作,执行\(link(u,v)\) \(Destroy\)操作,执行\(cut(u,v)\) \(Query\)操 ...
- cnVCL的安装
cnVCL是cnpack组件中的不可视组件库,里面包含很多有用的组件,网址:http://www.cnpack.org/showdetail.php?id=739&lang=zh-cn 安装步 ...
- Python 各种编码相互转化 (目前只有Unicode utf-8)
f='\u53eb\u6211' print f print(f.decode('unicode-escape'))
- 3分钟解决MySQL 1032 主从错误(转)
转自 https://blog.51cto.com/suifu/1845457 3分钟解决MySQL 1032主从错误 Part1:写在最前 1032错误----现在生产库中好多数据,在从库误删了, ...