http://rdc.taobao.com/team/jm/archives/1753#nav 共整理三部分,第一部分Solr常规处理,第二部分针对性性处理,前者比较通用,后者有局限性.务必根据具体应用特性,具体调节参数,对比性能.第三部分solr查询相关的 具体应用需要全面去把控,各个因素一起起作用. 第一部分<Solr常规的调优> E文连接 http://wiki.apache.org/solr/SolrPerformanceFactors Schema Design Considerat…

JAVA性能监控与调优参考文档链接 jdk8工具集 https://docs.oracle.com/javase/8/docs/technotes/tools/unix/index.htmlTroubleshootinghttps://docs.oracle.com/javase/8/docs/technotes/guides/troubleshoot/jpshttps://docs.oracle.com/javase/8/docs/technotes/tools/unix/jps.htmlji…

1.Tuning Spark 文档 原文:http://spark.apache.org/docs/latest/tuning.html 翻译参考:https://www.cnblogs.com/lhfcws/p/6297337.html 2.Cloudera 上关于 Spark 调优的有关博客 How-to: Tune Your Apache Spark Jobs (Part 1) http://blog.cloudera.com/blog/2015/03/how-to-tune-your-a…

对于新部署的机器,需要做一些基本的调优操作,以更改一些默认配置带来的性能问题 1 修改打开文件数 root@mysql:/data/tools/db# vim /etc/security/limits.conf * soft nofile 65535 * soft nproc 65535 * hard nofile 65535 * hard nproc 65535 root@mysql:/data/tools/db# cd /etc/security/limits.d/ root@mysql:/…

1.weblogic内存的调优 2.weblogic性能调优 各个方面比较全内容较多 3.记录一次weblogic 11g压力测试性能调优过程 经调优后,具体java启动参数如下: /app/weblogic/jrockit-jdk1.6.0_22-R28.1.1-4.0.1/bin/java -jrockit 使用jrockit -Xms4096m 最小堆 建议与最大堆设置成一致: -Xmx4096m 最大堆 -Xns1024m 新生代的空间大小,建议1/4最大堆大小 -Dweblogic.P…

net.ipv4.tcp_syn_retries = 1 net.ipv4.tcp_synack_retries = 1 net.ipv4.tcp_keepalive_time = 600 net.ipv4.tcp_keepalive_probes = 3 net.ipv4.tcp_keepalive_intvl =15 net.ipv4.tcp_retries2 = 5 net.ipv4.tcp_fin_timeout = 2 net.ipv4.tcp_max_tw_buckets = 360…

1 内存     适当选用适合大小的内存,保证谷峰负载时,有足够的内存使用 2 使用ab测试apache性能 ab -n 1000 -c 10 http://www.test.com 使用ab的缺点:不能更真实的模仿用户的操作. 3 调节保持连接的设定 KeepAlive On #在单一连接时进行多个请求 MaxKeepAliveRequests 200 #单一连接时间可以允许多少个保持连接的请求 KeepAliveTimeout 15 #在没有接受其他请求时,会持续开启特定连接的时间 调整合适…

之前一位童鞋发的: 5版邮件,在用户量很大的情况下,如果做了分布式,如果在后端mysql上执行:   mysql> show global status like 'Thread%';   Threads_cached      0 Threads_connected  793      Threads_created    2397086    Threads_running    260       看到 Threads_created 的值特别大,Threads_cached为0,而且此时…

hadoop集群性能低下的常见原因 (一)硬件环境 1.CPU/内存不足,或未充分利用 2.网络原因 3.磁盘原因 (二)map任务原因 1.输入文件中小文件过多,导致多次启动和停止JVM进程.可以设置JVM重用. 2.数据倾斜:大文件且不可分割,导致处理这些文件的map需要很长时间. 3.数据本地化效果差. (三)reduce任务的原因 1.reduce任务数量过大或过小 2.数据倾斜:一部分key的记录数量太大,导致某些reduce执行过慢 3.缓慢的shuffle和排序 (四)hadoop…

Hive 的简单使用及调优参考文档   HIVE的使用 命令行界面 使用一下命令查看hive的命令行页面, hive --help --service cli 简化命令为hive –h 会输出下面的这些东西 -d,--define <key=value> Variable subsitution to apply to hive commands. e.g. -d A=B or --define A=B --database <databasename> Specify the d…