最近开始接触elasticserach数据库,于是想在虚拟机上装一个练练手,装的时候可是费了好多时间,百度了许多教程,但是教程太多太乱,怕自己容易忘,所以记录一下,但是我主要记录是装好的es数据库如何开启,至于其他就给大家推荐一下我看的教程. 首先肯定是安装es数据库了,elasticsearch6.1.1单例初体验(虚拟机下安装).另外这篇博客介绍了一些安装开启报错的解决办法,我当时就是根据这个教程成功安装开启了es数据库的,过程是十分艰辛啊. 当时装完之后想学习如何使用es数据库,懒得看官方

1.内部脚本("script" : "ctx._source" 是内部定义好的获取_source数据的方式,不用改变)POST /index/type/id/_update{ "script" : "ctx._source.field=any_result"} 2.外部脚本定义一个外部脚本,名称为aa.groovy,脚本内容为ctx._source.num+=new_numPOST /test_index/test_type/

#!/bin/bash file_name="/sdzw/es5/conf/es.config" #安装目录 install_dir="/es5/esinstall" #es数据目录 es_dir="/data/es5data" network_host=`cat ${file_name} | grep network_host` network_host=${network_host#*=} #节点名 node_name="\&quo

#!/bin/bash interval= cpu_num=`-] -c` start_idle=() start_total=() cpu_rate=() cpu_rate_file=./`hostname`_cpu_rate.csv if [ -f ${cpu_rate_file} ]; then mv ${cpu_rate_file} ${cpu_rate_file}.`date +%m_%d-%H_%M_%S`.bak fi ;i<${cpu_num};i++)) { echo -n &qu

#/bin/bash #指定日期(3个月前) DATA=`date -d "3 month ago" +%Y.%m.%d` #当前日期 time=`date` #删除3个月前的日志 curl -XDELETE http://127.0.0.1:9200/*-${DATA} if [ $? -eq 0 ];then echo $time"-->del $DATA log success.." >> /data/elk/logs/es-index-cl

#!/usr/bin/bash #安装常用软件,首先必须自行调整好网卡配置文件,保证可以上网,否则,下列优化会失败 yum -y install wget vim lrzsz bash-completion dos2unix telnet tree net-tools namp sl nc psmisc ntpdate sysstat #替换yum源,安装epel源 wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.c

#_*_ coding:utf8 _*_ from pysphere import VIServer import ssl import re import sys import os import yaml config_name = 'config.yaml' config_file = os.path.join(os.path.dirname(os.path.abspath(__file__)), config_name) config = yaml.load(file(config_fi

Ning KuangWSSC WS ARD高级项目经理 您是否曾经因为忘记 Azure VM 密码或 SSH密钥而导致无法访问 VM?VMAccess扩展程序使您可以重置密码.SSH密钥或 SSH配置,以便重新获得访问权限. 此扩展程序针对 Linux VM.对于 Windows VM,请单击此处获取详细信息. 如果这是您第一次使用 VM 扩展程序,您可以查阅此处获取背景信息. 先决条件 微软 Azure Linux 代理 2.0.5 或更高版本.请注意,大多数 Azure 虚拟机 Linu

原来在桌面上一直使用virtualbox虚拟机管理程序(VMM)构建虚拟机安装不同的操作系统,现在 研究linux下的KVM,能否将已经建立的virtualBox虚拟客户机(guest)转换为KVM虚拟机呢?经过查找 资料,还真可以.下面说明一下步骤: 1.将virtualbox虚拟机的虚拟磁盘文件(VDI)转换成raw格式的文件 此步骤使用virtualbox的命令行工具vboxmanage,这个工具对于通过编制脚本生成虚拟机很有帮助, 其提供的功能比virtualbox图形配置提供的功能要强

背景:非托管磁盘虚拟机"hlmcen69n1",附加了一块100GB的数据磁盘.由于arm非托管磁盘机器无法通过Portal界面直接"Capture",故只能通过命令行的方式进行捕获并还原,以下是通过Powershell命令进行的操作 1.在虚拟机内部执行一般化的操作[Linux机器:waagent -deprovision; Windows机器:sysprep],本文以Linux机器为例进行说明 Linux机器: Windows机器: 2.在Portal界面关闭该

es定期删除数据 1.定期删除索引 使用sentinl报警后,会产生大量如下索引,虽然不占空间,但时间久了也不好,故写个脚本定期删除 脚本如下: 1 #!/bin/bash 2 #只保留5天内的日志索引 3 LAST_DATA=`date -d "-5 days" "+%Y.%m.%d"` 4 #删除上个月份所有的索引 5 curl -XDELETE 'http://10.139.xx.xx:9200/*-'${LAST_DATA}'' 再在设置一个定时策略即可 1

一.集群规划 搭建一个集群我们需要考虑如下几个问题: 1. 我们需要多大规模的集群? 2. 集群中的节点角色如何分配? 3. 如何避免脑裂问题? 4. 索引应该设置多少个分片? 5. 分片应该设置几个副本? 下面我们就来分析和回答这几个问题 1.我们需要多大规模的集群? 需要从以下两个方面考虑: 1.1 当前的数据量有多大?数据增长情况如何?1.2 你的机器配置如何?cpu.多大内存.多大硬盘容量? 推算的依据: ES JVM heap 最大可以设置32G . 30G heap 大概能处理的数据

body, table{font-family: 微软雅黑; font-size: 13.5pt} table{border-collapse: collapse; border: solid gray; border-width: 2px 0 2px 0;} th{border: 1px solid gray; padding: 4px; background-color: #DDD;} td{border: 1px solid gray; padding: 4px;} tr:nth-chil

1.复制5份es,版本要相同,且各个节点上jdk版本也要相同,否则会报数据同步格式不一致  invalid internal transport message format. 2.配置elasticsearch.yml,主要修改以下方面: cluster.name: my-application    #集群名,各个节点要一致 node.name: node-01         #节点名 path.data: /data1/elk/elasticsearch/data   #数据存储位置 p

OpenStack是一个旨在为公共及私有云的建设与管理提供软件的开源项目. 它的社区拥有超过130家企业及1350位开发人员,这些机构与个人都将OpenStack作为基础设施即服务(IaaS)资源的通用前端.OpenStack项目的首要任务是简化云的部署过程并为其带来良好的可扩展性.做为云计算IAAS层事实标准.OpenStack广泛的应用与各行各业.到眼下为止OpenStack社区并没有一个完整的虚拟机HA解决方式. 起初社区觉得虚拟机的HA不是云平台层次的特性,不应该在云平台层面来实现,虚拟

重新设置mapping 添加新的字段. 设置es允许脚本执行:elasticsearch.yml script.inline: true 然后执行脚本 POST linewell_assets_mgt_es/lw_devices/_update_by_query?conflicts=proceed { "script":{ "lang":"painless", "inline":"if (ctx._source.up

使用python的py2exe模块可以很容易地帮助我们将python脚本生成可执行的exe程序.这样我们就可以让脚本脱离虚拟机的束缚,从而独立运行. 首先安装py2exe分解步骤如下:(pip和easy_install安装要么失败,要么使用的时候提示找不到模块)1.从官网下载安装包,https://sourceforge.net/projects/py2exe/files/py2exe/0.6.9/2.选择系统位数,下载后双击py2exe-0.6.9.win64-py2.7.amd64,下一步.

默认ES不允许使用root用户运行,如果使用root会报如下图的错误: ,通常建议创建elsearch用户并使用该用户运行ES.但如果必须使用root用户时,按如下设置即可: 1.启动是使用如下命令 bin/elasticsearch -Des.insecure.allow.root=true 2.修改ES启动脚本 vim bin/elasticsearch(添加ES_JAVA_OPTS="-Des.insecure.allow.root=true")

今儿在azure里装php5.5.4,发现原先php5.4.php5.3中的zend guard laoder以及php5.2中的Zend Optimizer均不能再用,一直很喜欢用的eaccelerator也悲剧了,编译的时候直接提示错误. 没办法,翻看php5.5.4的安装目录,发现php的安装目录下的扩展库目录有个opcached.so:咦,这个文件是搞毛线的?看名字带cached,难道是个缓存系统?google了下,果不其然,这个是php5.5默认提供的php脚本缓存扩展,编译php5.

去年双十一换的新电脑,华硕vivo4000的,配置的不算很好,4k的屏幕:3840×2160, 940M的显卡, core i7的CPU, 8G的内存,硬盘是1T的机械硬盘,除了硬盘基本感觉还可以吧.系统是win10 home版本的,有点不爽,后来自己重新分配硬盘分区后,安装了我最爱的manjaro linux,几乎天天更新.linux下使用比window10爽的不是一点.哈哈.好了,开始切入正体了: (1)core i7支持vt技术了,网上很多教程是window下安装HAXM驱动,后来到int

--virsh console virt_name -- virsh nodeinfo                     # 查看kvm节点(服务器)信息 --virsh list [--all] # 列出虚拟机 --virsh net-list [--all]  # 查看虚拟网络 --virsh dominfo virt_name  # 查看指定虚拟机信息 --virsh domiflist virt_name # 查看虚拟机网卡 --virsh start | reboot | shu