1:练习spark的时候,操作大概如我读取hdfs上面的文件,然后spark懒加载以后,我读取详细信息出现如下所示的错误,错误虽然不大,我感觉有必要记录一下,因为错误的起因是对命令的不熟悉造成的,错误如下所示: scala> text.collect java.net.ConnectException: Call From slaver1/ failed on connection exception: java.net.ConnectException: Connection refused;…

1.虽然,不是大错,还说要贴一下,由于我运行run-example streaming.NetworkWordCount localhost 9999的测试案例,出现的错误,第一感觉就是Spark没有启动导致的: // :: ERROR SparkContext: Error initializing SparkContext. java.net.ConnectException: Call From slaver1/ failed on connection exception: java.n…

1:安装好hive,准备启动的时候出现下面的错误(由于hive是基于Hadoop的,所以必须先将你的集群启动起来,我就是没有启动集群,直接启动hive导致的错误): [root@master bin]# ./hive Logging initialized -bin/lib/hive-common-.jar!/hive-log4j.properties Exception failed on connection exception: java.net.ConnectException: Con…

场景:  预发环境中,同事已经搭建了一套hadoop集群,由于版本与所需不符,所以需要替换版本 问题描述: 在配置文件都准确的情况下,启动hadoop,出现以下报错: 启动之前初始化:   初始化目录跟配置文件目录不一致 hdfs  namenode -format [root@hdoop2 hadoop-2.8.5]# hadoop dfs -ls /DEPRECATED: Use of this script to execute hdfs command is deprecated.Ins…

先看解决方案,再看唠嗑,唠嗑可以忽略. 解决方案: 使用start yarn.sh启动yarn就可以了. 唠嗑: 今天学习Spark基于Yarn部署.然后总以为Yarn是让Spark启动的,提交程序的时候Yarn就会启动~!于是乎我就只开启了Spark程序,没开启Yarn,然后执行提交 ./spark-submit --class org.apache.spark.examples.JavaSparkPi \ --master yarn \ --deploy-mode cluster \ --d…

hadoop集群搭建了ha,初次启动正常,最近几天启动时偶尔发现,namenode1节点启动后一段时间(大约10几秒-半分钟左右),namenode1上namenode进程停掉,查看日志: -- ::, INFO org.apache.hadoop.ipc.Client: Retrying connect to server: slave1/. Already tried , sleepTime= MILLISECONDS) -- ::, WARN org.apache.hadoop.hdfs.…

192.168.11.12:8485: Call From hu-hadoop1/192.168.11.11 to hu-hadoop2:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused at org.apache.hadoop.hdfs.…

hadoop 启动时namenode和datanode可以启动,使用jps命令也可以看到进程,但是在浏览器中输入master:50070却没有显示datanode 查看datanode的log日志: -- ::, INFO org.apache.hadoop.ipc.Client: Retrying connect to server: master/. Already tried  , sleepTime= SECONDS) -- ::, INFO org.apache.hadoop.ipc.…

Bad connection to FS. command aborted. exception: Call to chaoren/192.168.80.100:9000 failed on connection exception: java.net.ConnectException: Connection refused 错误解决方法: 1.先将/usr/local/hadoop/tmp/dfs文件夹整个删除掉(cd /usr/local/hadoop/tmp rm -rf dfs) 2.再…

// :: FATAL namenode.NameNode: Failed to start namenode. org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to check successful responses: : false exceptions thrown: : No Route to Host failed on socket timeout exception: java.net.NoRouteT…

ssh那些都已经搞了,跑一个书上的例子出现了Connection Refused异常,如下: 12/04/09 01:00:54 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. Already tried 0 time(s).12/04/09 01:00:56 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:8020. A…

使用bootstrap本机调试时,应该使用本地服务器地址访问,如http://192.168.19.112/rjshop/,否则360浏览器会出现不兼容的情况…

Call to localhost/127.0.0.1:9000 failed on connection exception:java.net.ConnectException的解决方案 作者:凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 在启动hadoop时,出现了如下错误: Call From java.net.UnknownHostException: ubuntu-larntin: ubuntu-larntin to localhost:90…

任务一直报错 现象比较奇怪,部分任务可以正常跑,部分问题报错 报错信息如下: Ended Job = job_1527476268558_132947 with exception 'java.io.IOException(java.net.ConnectException: Call From xxx/xxx to xxx:10020 failed on connection exception: java.net.ConnectException: 拒绝连接; For more detail…

通过SQLyog连接linux中的MySQL报错问题:SQL Error (1130): Host '192.168.6.128' is not allowed to connect to this MySQL server说明你所连接的用户账户没有远程连接的权限,只能在本机localhost登录需要更改 mysql 数据库里的 user表里的 host字段 把localhost改称%下面是我设置的远程连接步骤,请参考: 1.登录MySQL  mysql -uroot -proot2.进入数据库…

您访问的域名 192.168.110.128 没有对应的公司. in /usr/local/nginx/html/zentaopms/module/common/model.php on line 82, last called by /usr/local/nginx/html/zentaopms/module/common/model.php on line 28 through function setCompany. in  /usr/local/nginx/html/zentaopms/…

1,问题描述 (1)在安装配置好 Kubernetes 后,正常情况下服务器关机重启,kubelet 也会自动启动的.但最近配置的一台服务器重启后,输入命令 kubectl get nodes 查看节点报如下错误: The connection to the server 192.168.60.128:6443 was refused - did you specify the right host or port? (2)输入 systemctl status kubelet 命令查看 kub…

Mysql远程连接报错:SQL Error (1130): Host '192.168.0.18' is not allowed to connect to this MySQL server     通过SQLyog连接linux中的MySQL报错问题: SQL Error (1130): Host '192.168.0.18' is not allowed to connect to this MySQL server 说明你所连接的用户账户没有远程连接的权限,只能在本机localhost登…

该日记写于2016年11月28日.在用Xshell5连接ubuntu虚拟OS时一直连接不上.出现这种情况的原因可能很多,有像百度上面说的没有关闭linux的防火墙,没有启动linux的ssh服务.但这些方法都依次试过,还是无法连接.最后找到了连接办法如下. 解决办法: 如果虚拟机的网络连接为NAT连接,则会出现ping ip可以ping通,但是Xshell就是连接不到虚拟的linux系统.vmware虚拟机的虚拟网络设置必须为桥接方式.具体的更改方式为: 在vmware界面的虚拟系统上右键,选择…

场景: eclipse链接不上阿里云hadoop解决: 将hadoop的配置文件中的ip改为内网IP即可…

host里边添加的ip地址与当前的ip地址(ifconfig可以查看)不一致,修改当前ip地址就可以了.…

有时候刚装完虚拟机发现xshell连接失败,或者使用ftp连接失败.(博主用的是unbuntu,其他linux系统可能在命令上稍有差别,但方法是一样的. xshell连接失败: ftp连接失败: 首先运行下面两条命令 sudo apt-get update: 这个命令,会访问源列表里的每个网址,并读取软件列表,然后保存在本地电脑. sudo apt-get upgrade: 这个命令,会把本地已安装的软件,与刚下载的软件列表里对应软件进行对比,如果发现已安装的软件版本太低, 如果这两条命令之后还…

原因:虚拟机上没有安装或者没有启动ssh 解决: 1.安装sshserver sudo apt-get install openssh-server 2.启动ssh服务 sudo service ssh status 补充: (1)启动,停止和重启openssh-server的命令如下: /etc/init.d/ssh start /etc/init.d/ssh stop /etc/init.d/ssh restart (2)设置开机自启动 打开/etc/rc.local文件,在exit 0前面…

异常截图:…

首先计算子网掩码: 将256/4=64,主机块大小64 2的6次方=64 根据主机数量计算出掩码的最后一个字节为11000000,用十进制表示掩码为255.255.255.192 由于IP地址结尾全为0为网络地址:全为1为广播地址.两者都是不允许用作主机IP地址的. 因此,4个子网分为: 1> 192.168.25.1 -- 192.168.25.622> 192.168.25.65 -- 192.168.25.1263> 192.168.25.129 -- 192.168.25.190…

DisallowedHost at / Invalid HTTP_HOST header: '192.168.55.10:8000'. You may need to add '192.168.55.10' to ALLOWED_HOSTS. Request Method: GET Request URL: http://192.168.55.10:8000/ Django Version: 2.1.8 Exception Type: DisallowedHost Exception Value…

因为ip未授权,在navicat中执行 grant all privileges on *.* to 'root'@'192.168.1.119' identified by 'root' with grant option; 即可 'root'@'192.168.1.119'    用户名@ip root:是密码 参考:https://blog.csdn.net/nicajonh/article/details/52311402…

1:启动Spark Shell,spark-shell是Spark自带的交互式Shell程序,方便用户进行交互式编程,用户可以在该命令行下用scala编写spark程序. 启动Spark Shell,出现的错误如下所示: [root@master spark--bin-hadoop2.]# bin/spark-shell --master spark://master:7077 --executor-memory 512M --total-executor-cores 2 // :: WARN…

java.sql.SQLException: Could not establish connection to 192.168.8.111:10000/default: java.net.ConnectException: Connection refused: connect at org.apache.hadoop.hive.jdbc.HiveConnection.<init>(HiveConnection.java:117) 需要启动:hive --service hiveserver…

[root@linuxmain hadoop]# bin/hadoop jar hdfs3.jar com.dragon.test.CopyToHDFS Java HotSpot(TM) Client VM warning: You have loaded library /usr/hadoop/lib/native/libhadoop.so.1.0.0 which might have disabled stack guard. The VM will try to fix the stack…