今天同事要对测试环境进行降级(测试高于生产所以要求降级),自己不经常搞运维,但是无奈测试环境没运维管理只能自己上了. 流程和遇到问题按数字表示. 1.重装CM(clouder manager)这个过程还是比较容易的,机器选择升级就好了,记得别点安装JDK(多个版本JDK会影响集群JDK!!!),记得备份库,我就是不小心把原始库覆盖了把集群搞没了,CM的节点结构是主节点一个server创建数据库,agent节点为子节点,所以启动一个server节点时候会检测没这个库会去进行插入(库的创建要自己动手…

今天给服务器重装系统碰到的问题,记录一下 当时是按正常的操作:到了装系统选盘的时候是找不到盘符的,加载了raid驱动,然后顺利找到盘符,然后格式化了以前的C盘, 结果无法选中格式化后的C盘,无法下一步,提示说什么,当前是gpt分区的要什么mbr分区 然后按下面的操作就好了(我只操作到 convert mbr 就 exit 了) 按[shift+F10]调出 diskpart 命令提示符,然后依次输入diskpart (调出磁盘管理工具)list disk (列出所有盘符)select disk…

如图 我使用的是sqlserver2012登录的,select @@version 查询出来的却是2008 ,而且附加不了2012的数据库. 在网上搜到解决方法:1确认是否安装了2012(废话没安装是不能启动的),2确认2012的服务有没有启动 3.选择2012的服务器: 这种情况主要发生在多数据库的情况下.sqlserver2012比sqlserver2008r2稳定多了,而且也可以重装修复.谨以此作为记录,方便日后查看.…

一直使用浏览器记录密码的方式登陆wordpress,直到有一天重装系统,而浏览器的记录又没有备份,结果怎么也想不起当初所设定的密码了…… -_-||| 遂google了一番,发现了直接修改数据库重设密码的方法. 方法一:通过邮件取回 前提是你的主机空间支持发送邮件,这样你就可以点击WordPress登录页面的“忘记密码?”按操作即可找到. 我尝试了用邮件密码找回的方式,却发现一直报mail() 函数不支持,说明我的空间不支持邮件发送功能,@_@ 方法二:修改数据库重置密码wordpress的密码…

全盘格式化,重装了Ubuntu和Windows,记录一下重新配置Ubuntu过程. //build-essential sudo apt-get install build-essential sudo apt-get install vim //input method sougou <span style="color:#33FF33;">sudo apt-get remove ibus</span> //去掉 sudo add-apt-repository…

近来重装了一下wamp,索性记录一下,wamp安装完后,我的常用配置.首先,肯定要修改默认的空密码:其次,便要配置虚拟站点,因为当项目多的时候,每个项目分配成一个站点,对于开发来说,很方便管理.其实网上已有很多这方面的文章,但大部分说的都不够详细,有的只能在www目录内,所以借着这次重装wamp的机会整理一下笔记,分享一下,已留后用 ! 修改wamp空密码 启动wamp后,左键点击wamp图标->MySQL->MySQL控制台,然后会提示让输入密码,安装完后,密码是空的,所以直接回车便可进入M…

版权声明:本文为博主原创文章,欢迎转载,并请注明出处.联系方式:460356155@qq.com ubuntu 16.04用了1年多了,18.04版已经发布也半年了,与时俱进,重装Linux系统,这里主要记录下gpu加速pytorch 1.0.0版本的安装. 一.工具安装 sudo apt-get install gcc sudo apt-get install g++ sudo apt-get install make 二.禁用nouveau sudo gvim /etc/modprobe.d…

20165235 2017-2018-2<Java程序设计>课程总结 每周作业链接汇总 预备作业一 预备作业二 预备作业三 第一周学习总结 第二周学习总结 第三周学习总结 第四周学习总结 第五周学习总结 第六周学习总结 第七周学习总结 第八周学习总结 第九周学习总结 自认为写得最好一篇博客是?为什么? 我觉得写的最好的博客是实验二和第九章学习总结.在实验二的博客中对实验的过程写的比较清楚,在第九章博客中对遇到的问题描述的比较清楚. 作业中阅读量最高的一篇博客是?谈谈经验 阅读量最大的就是实验二…

windows环境搭建 # 下载 python[python 开发环境] http://python.org/getit/ # 下载 setuptools [python 的基础包工具]setuptools 是 python 的基础包工具,可以帮助我们轻松的下载,构建,安装,升级,卸载 python的软件包. http://pypi.python.org/pypi/setuptools # 下载 pip [python 的安装包管理工具]pip 是python软件包的安装和管理工具, 有了这个工…

进入命令行模式,#chroot /mnt/sysimage :切换根目录#grub2-install /dev/sda :安装grub2到第一硬盘#grub2-mkconfig -o /boot/grub2/grub.cfg :更新配置文件#exit :退出chroot#reboot 在做双系统时,如果先安装centos,再安装win,启动时不会有任何问题,但是如果顺序反过来或者双系统做好后又重装了win,MBR都会被重写,这样原来的GRUB或LILO就会不见了,或者由于某些原因使得原来的GRU…

Elasticsearch 的坑爹事 本文记录一次Elasticsearch mapping field修改过程 团队使用Elasticsearch做日志的分类检索分析服务,使用了类似如下的_mapping { "settings" : { "number_of_shards" : 20 }, "mappings" : { "client" : { "properties" : { "ip&quo…

最近比较空了,闲的手痒,将自己的笔记本进行了重装,之前每次重装都没有记录,这次将本次重装过程记录下来,以便下次参考 1 首先不用说了WIN7旗舰版装好,驱动装好 2 开启Administrator用户,并设置密码,然后删除装系统的时候设置的用户名,关闭系统还原功能,其他节省C盘等设置按照个人需求修改,网络上很多文章 3 启用系统自带软件 IIS,.NETFramwork3.5等 4 安装常用软件,比如输入法,浏览器,emeditor,Q等常用软件 5 安装.NET Framwork4.0,4.5…

原文 NSIS:在注册表中记录安装路径以便重装或升级时读取 在NSIS中,这个功能是非常有用的,可以避免用户把程序安装到多个位置的尴尬. 第1步:在“安装目录选择页面”前面加入以下代码: 1 !define MUI_PAGE_CUSTOMFUNCTION_show Pageshow 第2步:读取注册表中关于安装路径的键值,如果没有,就使用默认路径. 1 InstallDirRegKey HKCU “Software\eBook Workshop” “” 第3步:在主区段中把安装路径写入注册表.…

因为之前电脑配置过虚拟机连接主机的过程,所以没有太在意,换电脑了之后配了两天结果没有配置成功; 首先配置静态ip: 1,编辑第一个文件/etc/sysconfig/network-scripts/ifcfg-ens33 2,编辑第二个文件 3,编辑第三个文件vi /etc/resolv.conf 遇到了这么几个问题: 1,使用NAT模式连接主机虚拟机能ping通主机,主机无法ping同虚拟机 2,使用桥接模式连接时,主机能ping同虚拟机,但是虚拟机无法ping同主机 以上两个问题可以通过以下手…

CDH大数据集群修复记录 1)cm web打不开,查看监听7180端口产生了很多进程,于是kill进程:重启cloudera-cmf-server服务,几秒钟就挂了,查看cloudera-scm-server运行日志是由于mysql服务挂了. 2)查看mysql错误日志,mysql是默认安装在/根分区下的,由于根分区空间不足,无法启动mysql:清理了一些垃圾,重启mysql成功了:重启cloudera-cmf-server成功,但是各个组件出现了很多配置问题:于是重启所有组件,不能重启,究其原…

CDH大数据平台实施经验总结2016(转载) 2016年负责实施了一个生产环境的大数据平台,用的CDH平台+docker容器的方式,过了快半年了,现在把总结发出来. 1. 平台规划注意事项 1.1 业务数据全部存储在datanode上面,所以datanode的存储空间必须足够大,且每个datanode的存储空间尽量保持一致. 1.2 管理节点/namenode对存储空间要求不高,主要存储各计算节点datanode的元数据信息,以3个datanode为例,每个datanode存储2T的数据,nam…

简单的记录一下这次遇到的问题及解决办法. 使用的windows 10 企业版一直不能更新成功,各种办法都试过了,都是失败然后回退. 这次直接下载了1709的映像进行升级安装的,因为我的是双系统,升级安装的时候居然也不能成功. 系统并不是EFI启动的,所以是直接将MBR引导记录重建了,重建之后在msconfig中可以看到引导页下有了win10的启动项.之后进行升级安装就没有问题了. 再记录一下应用商店重装的问题,这个在知乎上找到来了答案. 误删 Win10 应用商店应该如何恢复? - 范泽栋的回答…

Elasticsearch 的坑爹事 本文记录一次Elasticsearch mapping field修改过程 团队使用Elasticsearch做日志的分类检索分析服务,使用了类似如下的_mapping 1 2 3 4 5 6 7 8 9 10 11 12 13 14 {     "settings" : {         "number_of_shards" : 20     },     "mappings" : {       &qu…

刚想学学kafka,登录与服务器看看把,谁知ssh特别慢,很奇怪,我以为是我网速问题,断了wifi,换了网线,通过iterm想要ssh root@x.x.x.x,但是上不去? 就tm的很奇怪了,登录腾讯云的webshell吧,登录上去之后,..... ld-linux的进程,cs用户,占了我100%的cpu,真是哔了*** 注意了 我的解决办法: pkill -9 ld-linux 先杀死矿机进程 然后删除 cs用户 userdel -f cs 然后想要找到矿机病毒文件 find / -name…

最近解决的bug长得都很别致啊,记录一下 一 :天气插件引用报403 项目里有一个天气插件引用一直报403 后来确定原因是headers里缺少referer源,无法访问资源的服务器,再后来又发现项目引得是electron-fetch,是精简版的fetch,不支持设置referer 天坑啊,也不允许换fetch 后来在报错里又加了http请求,设置了referer,但是新的坑又出来了,取到的css在浏览器里是乱码,最后经过了一顿调试,发现首先,请求头里除了referer什么也不能加,然后响应头里要…

主节点安装cloudera manager 准备工作:下载CM和mysql连接驱动包: CM各版本下载地址:http://archive.cloudera.com/cm5/cm/5/ 从里面选择:http://archive.cloudera.com/cm5/cm/5/cloudera-manager-centos7-cm5.14.0_x86_64.tar.gz 下载即可. Mysql JDBC下载地址:http://download.softagency.net/MySQL/Downloads…

1.安装操作系统,保证联网环境,本文以CentOS 6.8为操作系统(略) 2.wget下载安装包(以5.3.3为例) #mkdir /usr/cdh ---新建cm安装目录 #cd /usr/cdh ---切换目录 #wget 获取下载链接文件到本地服务器 #wget http://archive.cloudera.com/cm5/cm/5/cloudera-manager-el6-cm5.3.3_x86_64.tar.gz #wget http://archive.cloudera.com/…

1.无法加载最新的supervisord 解决方案:ps -ef | grep supervisord     kill -9 pid 2.cloudera-scm-agent dead but pid file exists 解决方案:ps -ef | grep cloudera-scm-agent,然后kill掉cloudera-scm-agent.pid,并删除/opt/cloudera-manager/cm-xxx/run/cloudera-scm-agent下的cloudera-scm…

①csd包:http://archive.cloudera.com/spark2/csd/    下载SPARK2_ON_YARN-2.2.0.cloudera1.jar ②parcel包:http://archive.cloudera.com/spark2/parcels/2.2.0.cloudera1/ 下载 SPARK2-2.2.0.cloudera1-1.cdh5.12.0.p0.142354-el6.parcel SPARK2-2.2.0.cloudera1-1.cdh5.12.0.p…

1.登录(浏览器输入ip地址:7180,登录用户名和登录密码即可) 2.CM主界面(各个组件,监控图表,绿色代表运行正常.黄色代表运行不良,需要关注根据实际情况调整,红色代表故障,需要排查问题) 3.点击左边的HDFS进入HDFS管理主页 4.查看HDFS运行实例 5.查看配置-服务范围-高级(根据实际情况进行调整) 6.查看配置-DataNode Default Group-资源管理(可根据实际情况调整) 7.查看配置-NameNode Default Group-资源管理(可根据实际情况进行…

默认hive on spark是禁用的,需要在Cloudera Manager中启用.1.登录CM界面,打开hive服务.2.单击 配置标签,查找enable hive on spark属性.3.勾选Enbale Hive on Spark(Unsupported),并保存更改.4.查找Spark on YARN 服务,并勾选保存.5.保存后,重新部署下客户端使其生效. 在Spark上配置Hive 最低要求角色: 配置器(也由群集管理员 提供,完全管理员)要配置Hive在Spark上运行,请执行…

原文:http://www.cnblogs.com/Creator/p/3722408.html 本文记录一次Elasticsearch mapping field修改过程 团队使用Elasticsearch做日志的分类检索分析服务,使用了类似如下的_mapping 1 2 3 4 5 6 7 8 9 10 11 12 13 14 {     "settings" : {         "number_of_shards" : 20     },     &quo…

参考链接:http://bbs.xiaomi.cn/t-14321262,主要是miui论坛和小米社区的一位同学的教程,. 这位同学是针对12.5和13.3的版本做的教程,15.6和之前的版本有一小点不一样.(主要是boot mode设置的地方) 首先,讲一下自己在安装过程中遇到的坑: 不要使用U启动的U盘启动制作启动,这个制作工具只能把U盘隔成FAT格式,不能格成NTFS格式,win10一般都是超过4G大小的.小米的笔记本USB接口最多就两个,而且进入winPE系统后,触摸板是不能使用的,需要…

Lenovo G50-70 BCM43142网卡,Win10原版镜像. 主板调成EFI启动. 制作Win10启动盘,打开UltraISO,文件,打开,选中Win10镜像,启动,写入硬盘映像,格式化,写入. 按左边电源边的小按钮,选择Boot Menu,选择EFI USB Device,进入Win10安装界面,一路下一步,直到分区. Shift+Fn+F10调出命令行,Diskpart启动分区管理工具,List Disk列出磁盘,Select disk n选中磁盘(n是磁盘号,我这里是0),Cle…

最近需要用DC做一些事,然后需要转库,中午偷个闲,特来记录一下中间的一些坎坷. 1.首先是要转库.我们只有.lib文件的格式,所以需要把.lib文件转换成.db格式.然后坑来了!!!DC2015及以后的版本中,Library Compiler(下称LC)是独立出来的!!!于是乎,我下了个LC2016.12的的,安装了,把.lib转成.db了. 2.接下来是在DC中读入.db,然后...坑又来了!!!LC版本太高,DC(DC版本是2015的)不认这个.db!!!也就是说,LC的版本不能高于DC的版…