用 CentOS 做 API 接口服务器供其他终端调用时,并发量高会报错:java.io.IOException: Too many open files. 其原因是在 Linux 下默认的Socket最大连接数为 1024(可以通过 ulimit -n 查看). 于是开始修改Linux的配置文件来增加连接数: 1.在/etc/rc.local 后增加一行 ulimit -SHn 2.在/etc/profile 后增加一行 ulimit -SHn 3.在/etc/security/limits.…
网上很多关于解决这个问题的博客,没有提到需要查看JAVA进程的limits参数设置 命令 : cat /proc/进程PID/limits   有时就会发现该进程的 open files还是1024默认值.   单纯ulimit查看系统的参数是不行的.   备忘…
1.描述: 每日一样,例行打开hadoop集群的cloudera manager的管理界面.发现出现了多个bad health的服务.那么出现的这个问题就是查看该服务运行的日志,对应的该服务当中,会包含相应的角色,其中,查看日志的时候可以看每一个角色的运行日志.通过查看日志,发现HBase出现了java.io.IOException: Too many open files错误的问题. 2.问题的解决方法: 通过百度,发现很多人遇到了我同样的问题.通过借鉴.解决的方法如下: (1) 使用ps -…
try {    randomAccessFile = new RandomAccessFile(file, "rw");    lock = randomAccessFile.getChannel().tryLock();} catch (IOException e) {    e.printStackTrace();}出现如下异常:Caused by: java.io.IOException: No locks available    at sun.nio.ch.FileChan…
原因: 操作系统的中打开文件的最大句柄数受限所致,常常发生在很多个并发用户访问服务器的时候.因为为了执行每个用户的应用服务器都要加载很多文件(new一个socket就需要一个文件句柄),这就会导致打开文件的句柄的缺乏. 解决: 尽量把类打成jar包,因为一个jar包只消耗一个文件句柄,如果不打包,一个类就消耗一个文件句柄. java的垃圾回收不能关闭网络连接打开的文件句柄,如果没有执行close()(例如:java.net.Socket.close())则文件句柄将一直存在,而不能被关闭.你也可…
http://marsvaadin.iteye.com/blog/1698924 mina性能测试 http://hi.baidu.com/rendong/item/bb5d2b0e4563c76dd55a1105 MINA 并发数 性能测 http://blog.csdn.net/huaye2007/article/details/7752044 Performance Test Framework (PTF)是压力测试框架 http://elf8848.iteye.com/blog/1741…
今天公司技术支持的童鞋报告一个客户的服务不工作了,紧急求助,于是远程登陆上服务器排查问题. 查看采集数据的tomcat日志,习惯性的先翻到日志的最后去查看有没有异常的打印,果然发现了好几种异常信息,但是最多还是这个: 24-Nov-2016 09:54:21.116 SEVERE [http-nio-8081-Acceptor-0] org.apache.tomcat.util.net.NioEndpoint$Acceptor.run Socket accept failed java.io.I…
1.问题出现 昨晚项目在上线的时候因为推广的原因,新增的大量请求.在八点的时候. org.apache.catalina.connector.ClientAbortException: java.io.IOException: Broken pipe at org.apache.catalina.connector.OutputBuffer.realWriteBytes(OutputBuffer.java:356) ~[tomcat-embed-core-8.5.31.jar!/:8.5.31]…
linux系统中执行java程序的时候,如果打开文件超过了限制,就会报错: java.io.IOException: error=24, Too many open files 解决办法: 首先查看java程序的进程究竟打开了多少文件 这个java程序以tomcat为例 ps -ef | grep tomcat 获取到TomcatPid 再通过: lsof -p TomcatPid | wc -l 获取到打开的全部文件数 得到文件数后,再查看系统的限制是多少 ulimit -a .... ope…
问题背景: 笔者所在的项目组最近把生产环境Tomcat迁移到Linux,算是顺利运行了一段时间,最近一个低概率密度的(too many open files)问题导致服务假死并停止响应客户端客户端请求. 进入服务器查看日志,发现tomcat凌晨6-7点的日志丢失,查看进程端口仍旧开放. root@# lsof -i: COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME java root 0t0 TCP *: (LISTEN) 从存档的日志找到一…
Windows系统中的IDEA链接Linux里面的Hadoop的api时出现的问题 提示:ERROR util.Shell: Failed to locate the winutils binary in the hadoop binary path java.io.IOException 虽然程序任然能够正常的运行,但是Run页面不停的提示错误信息也是够烦的. 问题原因:在windows环境下没有配置hadoop环境的原因. 解决方法如下(以hadoop-2.6.5版本为例):1.将在linu…
问题现象和http://hi.baidu.com/cara_cloud/item/193a3ee327546d395a2d64be描述的一样,就是在eclipse的console栏中一直显示java.io.IOException: 您的主机中的软件中止了一个已建立错误.具体如下. [2013-09-02 17:24:14 - ddmlib] 您的主机中的软件中止了一个已建立的连接. java.io.IOException: 您的主机中的软件中止了一个已建立的连接. at sun.nio.ch.S…
一.外部环境: 系统环境:Windows 8 磁盘分区:只有C盘 开发环境:IntelliJ IDEA Community Edition 2016.1.3(64) 执行代码:rdd.saveAsTextFile(this.resultPath); 二.错误信息: 错误提示1: 16/09/05 11:32:41 ERROR Executor: Exception in task 0.0 in stage 1.0 (TID 1)java.io.IOException: Cannot run pr…
(注意: 本人用的版本为hadoop2.2.0, 旧的版本和此版本的解决方法不同) 异常为: 9 (storage id DS-2102177634-172.16.102.203-50010-1384415799536) service to cluster1/172.16.102.201:9000 java.io.IOException: Incompatible clusterIDs in /home/grid/hadoop-2.2.0-src/hadoop-dist/target/hado…
今天做客户端想服务端提交信息的时候,报出了如标题所显示的方法 方法以及参数如下: 输入的参数为:http://192.168.1.173:8080/Api/petinfo/petinfo?flag=adopt&json=[{"pettype":"100","petname":"ge"}] public static InputStream getInputStreamFromUrl(String urlstr){ tr…
Jmeter运行的时候出现的重定向超过n次的问题: When trying to test a Silverlight application, I get the below error. Has anybody experienced this before and advise me? Many thanks, Koen Thread Name: Thread Group 1-1Sample Start: 2009-05-11 17:48:41 BSTLoad time: 55Latenc…
解决:java.io.IOException: No FileSystem for scheme: hdfs 开发项目初期,写完代码开始放到服务器上开始测试的时候,报出这样的一个错,不知道怎么处理了,尝试了重新配置HDFS的Configuration,也不行,无奈之下,只好查看源代码,分析错误是从哪里里报出来的. 首先把hadoop-common-2.6.0-cdh5.7.0这个jar包解压,按照报错的类,找到对应的方法,使用反编译工具打开FileSystem这个类,查看里面的源代码实现,首先看…
搭建了一个ssm项目,启动报错Error parsing SQL Mapper Configuration. Cause: java.io.IOException: Could not find resource com/cqupt/paging/dao/User.xml 我看了一下路径没错,名字也没有写错 网上找了一下资料解决了,记录一下 我用maven管理,在target下并没有将User.xml,出错原因就是maven编译时没有将xml文件放进去,所以才会找不到User.xml文件 解决方…
ERROR: Can't get master address from ZooKeeper; znode data == null   一定注意这只是问题的第一层表象,真的问题是: File /hbase/.tmp/hbase.version could only be replicated to 0 nodes instead of minReplica 网上很多都是叫用两种方式解决 stop/start  重启hbase 格式化 hdfs namenode -format,不能随随便便就格…
jmeter—PerfMon Metrics Collector(附java.io.IOException: Agent is unreachable via TCP错误解决办法 转自https://www.cnblogs.com/jescs/p/7026437.html 添加服务器监控PerfMon Metrics Collector(安装方法见上篇) jmeter添加jp@gc - PerfMon Metrics Collector 以我本地虚拟机为例 上传ServerAgent-2.2.1…
1.出现这个bug的大体逻辑代码如下: private static void findMovieId() throws Exception { File resultFile = new File("C:\\2016.txt"); OutputStreamWriter outputStreamWriter = new OutputStreamWriter(new FileOutputStream(resultFile)); BufferedWriter bufferWriter =…
在HttpClient请求的时候,返回结果解析时出现java.io.IOException: Attempted read from closed stream. 异常,解决 原因是EntityUtils.toString(HttpEntity)方法被使用了多次.所以每个方法内只能使用一次.…
sql是:select count(distinct col) from db.table; 排查过程中遇到过几个不同的报错: 1. beeline -u jdbc:hive2://0.0.0.0:10000 -e "select count(distinct col) from db.table;" INFO : Kill Command = /usr/lib/hadoop/bin/hadoop job -kill job_1494385775332_0822 ERROR : End…
在HttpClient请求的时候,返回结果解析时出现java.io.IOException: Attempted read from closed stream. 异常,解决 原因是EntityUtils.toString(HttpEntity)方法被使用了多次.所以每个方法内只能使用一次.…
首先,说明,我kafk的server.properties是 kafka的server.properties配置文件参考示范(图文详解)(多种方式) 问题详情 然后,我启动时,出现如下 [hadoop@master kafka_2.-0.9.0.1]$ nohup bin/kafka-server-start.sh config/server.properties & [] [hadoop@master kafka_2.-0.9.0.1]$ nohup: ignoring input and a…
问题 前一阵子公司项目做了一次压力测试, 中间出现了一个问题: 在50多个并发的时候会出现 java.io.IOException: 打开的文件过多 这个异常. 但是在没有并发的时候是不会出现这个问题的. 这个问题的出现使得项目压力测试没有办法进行下去, 所以必须要尽快解决掉. 尝试查找原因1 首先我们这次的压力测试只是测试项目的首页, 这个页面仅仅是一个商品的列表. 没有在代码中写任何读取文件的操作, 商品的数量也不是很多, 只有10多款商品. 在自己开发用的电脑上也没有出现过这种问题. 所以…
这个问题我也是无意间碰到的,之前一直是使用单机的ActiveMQ,所以也没这个问题,但是做集群时碰到这个问题,问题是这样子出现的: 首先,我准备了三台虚拟机,然后使用 Replicated LevelDB 的方式配置集群,配置如下: <persistenceAdapter> <!--<kahaDB directory="${activemq.data}/kahadb"/>--> <replicatedLevelDB directory=&quo…
错误信息: 015-12-24 10:57:26,527 INFO  [main] mortbay.log: jetty-6.1.26.cloudera.4 2015-12-24 10:57:26,553 WARN  [main] mortbay.log: tmpdir java.io.IOException: Permission denied at java.io.UnixFileSystem.createFileExclusively(Native Method) at java.io.F…
14/03/26 23:03:55 ERROR tool.BaseSqoopTool: Got error creating database manager: java.io.IOException: No manager for connect string: jdbc:mysq://c6h2:3306/log at org.apache.sqoop.ConnFactory.getManager(ConnFactory.java:185)        at org.apache.sqoop…
今天在centos上搭建jmeter监控服务,服务正常启动,我点击run,就在一切看起来很美好的时候,报错了,ERROR: java.io.IOException: Agent is unreachable via TCP 报错原因: 1.查看端口是否占用: netstat -lnp|grep 5000 ss -ant 很明显有防火请,不允许外部机器访问这个端口,找运维让他开端口 2.端口被占用, 如果1.执行后,这个端口允许外部机器访问,端口被占用了,那就换个端口启动服务就好啦 解决方案:换个…