ELK之elasticsearch6安装认证模块search guard
参考:https://www.cnblogs.com/marility/p/9392645.html
1,安装环境及软件版本
程序 | 版本 | 安装方式 |
elasticsearch | 6.3.1 | rpm |
kibana | 6.3.1 | rpm |
java | 1.8.0 | tar |
2,search guard安装
2.1在elasticsearch安装
- cd /usr/share/elasticsearch/bin/
- ./elasticsearch-plugin install com.floragunn:search-guard-6:6.3.1-24.0
安装的版本查看
查看
进行demo模式安装
- cd /usr/share/elasticsearch/plugins/search-guard-6/tools
- bash install_demo_configuration.sh
安说明输入3个y确认
重启elasticsearch
- systemctl restart elasticsearch
web访问测试安装是否成功
- https://172.16.20.12:9200/_searchguard/authinfo
注意是https而不是http
输入默认用户名和密码admin
打印admin的json格式则代表安装成功
此时打开kibana出现输入用户名密码提示但是无法输入
2.2在kibana安装
首先停止kibana
- systemctl stop kibana
PS:如果不停止kibana直接安装,启动会报错 报错日志 /var/log/meaasge
如果启动报错了,可以删除kibana插件重新安装
- ./kibana-plugin remove searchguard
- cd /usr/share/kibana/bin/
- ./kibana-plugin install https://search.maven.org/remotecontent?filepath=com/floragunn/search-guard-kibana-plugin/6.3.1-14-beta-1/search-guard-kibana-plugin-6.3.1-14-beta-1.zip
需要安装版本查看
修改kibana配置文件 /etc/kibana/kibana.yml
- server.port: 5601
- server.host: "172.16.20.12"
- #server.host: "0.0.0.0"
- server.name: "test-es-kibana"
- elasticsearch.url: "https://172.16.20.12:9200"
- kibana.index: ".kibana"
- elasticsearch.username: "kibanaserver"
- elasticsearch.password: "kibanaserver"
- elasticsearch.ssl.verificationMode: none
- elasticsearch.requestHeadersWhitelist: [ "Authorization", "sgtenant" ]
- xpack.monitoring.enabled: false
- xpack.graph.enabled: false
- xpack.ml.enabled: false
- xpack.watcher.enabled: false
- xpack.security.enabled: false
PS:elasticsearch配置为https
启动kibana通过5601端口访问,输入用户名和密码均为admin
左侧菜单栏出现search guard代表安装成功
PS:版本6.5.4配置kibana后启动报错
- Browserslist: caniuse-lite is outdated. Please run next command `npm update caniuse-lite browserslis
原因为node版本低4版本,升级为8版本重启kibana即可
添加只读用户guest
使用用户guest登录只能读无法编辑
配置logstash输入至elasticsearch
- /etc/logstash/conf.d/logstash.conf
- input {
- stdin{}
- }
- output {
- elasticsearch {
- hosts => [ "172.16.20.12:9200" ]
- ssl => true
- ssl_certificate_verification => false
- user => admin
- password => admin
- index => "logstash_%{+YYYY.MM.dd}"
- }
- stdout {
- codec => rubydebug
- }
- }
PS:测试标准输出至elasticsearch并输出至屏幕
需要增加这两个配置 否则启动报错
- ssl => true
- ssl_certificate_verification => false
启动
- /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/logstash.conf
以上为自动生成证书,下面使用在线生成证书安装search guard
在线生成证书,https://search-guard.com/tls-certificate-generator/
登录刚刚输入的邮箱下载证书,上传至服务器的文件夹/tmp解压缩并把解压后的所有文件放置在文件夹/etc/elsaticsearch/key
- cd /tmp
- rz
- tar -xf search-guard-certificates-8d1c8141-5f8b-4932-b7e2-a7109c400330.tar.gz.tar
- cd /tmp/search-guard-certificates
- mv * /etc/elasticsearch/key/
证书文件目录结构如下
- [root@prd-elk-logstash-02 key]# tree
- .
- ├── chain-ca.pem
- ├── client-certificates
- │ ├── CN=demouser.all.pem
- │ ├── CN=demouser.crtfull.pem
- │ ├── CN=demouser.crt.pem
- │ ├── CN=demouser.csr
- │ ├── CN=demouser.key.pem
- │ ├── CN=demouser.key.pkcs12
- │ ├── CN=demouser-keystore.jks
- │ ├── CN=demouser-keystore.p12
- │ ├── CN=demouser-signed.pem
- │ ├── CN=sgadmin.all.pem
- │ ├── CN=sgadmin.crtfull.pem
- │ ├── CN=sgadmin.crt.pem
- │ ├── CN=sgadmin.csr
- │ ├── CN=sgadmin.key.pem
- │ ├── CN=sgadmin.key.pkcs12
- │ ├── CN=sgadmin-keystore.jks
- │ ├── CN=sgadmin-keystore.p12
- │ └── CN=sgadmin-signed.pem
- ├── node-certificates
- │ ├── CN=IP-172.16.90.24.crtfull.pem
- │ ├── CN=IP-172.16.90.24.csr
- │ ├── CN=IP-172.16.90.24.key.pem
- │ ├── CN=IP-172.16.90.24.key.pkcs12
- │ ├── CN=IP-172.16.90.24-keystore.jks
- │ ├── CN=IP-172.16.90.24-keystore.p12
- │ └── CN=IP-172.16.90.24-signed.pem
- ├── README.txt
- ├── root-ca
- │ ├── root-ca.crt
- │ ├── root-ca.key
- │ └── root-ca.pem
- ├── root-ca.pem
- ├── signing-ca
- │ ├── signing-ca.crt
- │ ├── signing-ca.key
- │ └── signing-ca.pem
- ├── truststore.jks
- └── truststore.p12
- 4 directories, 36 files
安装elsticsearch 插件
- cd /usr/share/elasticsearch/bin/
- ./elasticsearch-plugin install com.floragunn:search-guard-6:6.5.4-24.2
以上为在线下载安装,也可以下载好文件使用以下命令安装
- /usr/share/elasticsearch/bin/elasticsearch-plugin install file:///nas/nas/softs/elk/6.6.2/search-guard-6-6.6.2-24.2.zip
安装版本查看
配置elasticsearch支持search gurad
配置文件/etc/elasticsearch/elasticsearch.yml
- cluster.name: hopesz-es
- node.name: prd-elk-logstash-02
- path.data: /data/es-data
- path.logs: /var/log/elasticsearch
- bootstrap.memory_lock: false
- network.host: 0.0.0.0
- http.port: 9200
- #集群个节点IP地址,也可以使用els、els.shuaiguoxia.com等名称,需要各节点能够解析
- #discovery.zen.ping.unicast.hosts: ["172.16.90.24", "172.16.30.55"]
- #集群节点数
- #discovery.zen.minimum_master_nodes: 2
- http.cors.enabled: true
- http.cors.allow-origin: "*"
- #search guard配置开始
- #证书可以在key目录下找到
- searchguard.ssl.transport.pemcert_filepath: key/node-certificates/CN=IP-172.16.90.24.crtfull.pem
- searchguard.ssl.transport.pemkey_filepath: key/node-certificates/CN=IP-172.16.90.24.key.pem
- #密码可以在key下README.txt找到
- searchguard.ssl.transport.pemkey_password: 5ea2206b9b1e041bf052
- searchguard.ssl.transport.pemtrustedcas_filepath: key/chain-ca.pem
- searchguard.ssl.transport.enforce_hostname_verification: false
- searchguard.ssl.http.enabled: true
- searchguard.ssl.http.pemcert_filepath: key/node-certificates/CN=IP-172.16.90.24.crtfull.pem
- searchguard.ssl.http.pemkey_filepath: key/node-certificates/CN=IP-172.16.90.24.key.pem
- searchguard.ssl.http.pemkey_password: 5ea2206b9b1e041bf052
- searchguard.ssl.http.pemtrustedcas_filepath: key/chain-ca.pem
- searchguard.authcz.admin_dn:
- - CN=sgadmin
- searchguard.audit.type: internal_elasticsearch
- searchguard.enable_snapshot_restore_privilege: true
- searchguard.check_snapshot_restore_write_privileges: true
- searchguard.restapi.roles_enabled: ["sg_all_access"]
- cluster.routing.allocation.disk.threshold_enabled: false
- node.max_local_storage_nodes: 3
- xpack.security.enabled: false
- #search guard配置结束
重启elasticsearch报错
首先检查文件是否存在,如存在则设置权限组为elasticsearch
- chown -R elasticsearch.elasticsearch key/
启动报错
原因:有志气demo安装的证书需要删除 路径为/etc/elasticsearch
- rm -rf kirk-key.pem
- rm -rf kirk.pem
- rm -rf esnode.pem
- rm -rf esnode-key.pem
- rm -rf root-ca.pem
验证是否安装成功,web页面访问输入用户名密码admin admin
- https://172.16.90.24:9200/_searchguard/authinfo
设置权限因子
权限因子密码也可以在README.txt找到
- cd /etc/elasticsearch/key/
- cp root-ca.pem client-certificates/CN\=sgadmin.key.pem client-certificates/CN\=sgadmin.crtfull.pem /usr/share/elasticsearch/plugins/search-guard-6/tools/
- cd /usr/share/elasticsearch/plugins/search-guard-6/tools/
- ./sgadmin.sh -cacert root-ca.pem -cert CN=sgadmin.crtfull.pem -key CN=sgadmin.key.pem -keypass a756a037271c299fe817 -nhnv -icl -cd ../sgconfig/ -nhnv -icl -cd ../sgconfig/
执行如果报错
修改elaticsearch.yml
- network.host: 0.0.0.0
初始化搜索保护配置
- cd /etc/elasticsearch/key/
- cp truststore.jks /usr/share/elasticsearch/plugins/search-guard-6/tools/
- cp client-certificates/CN\=sgadmin-keystore.jks /usr/share/elasticsearch/plugins/search-guard-6/tools/
- cd /usr/share/elasticsearch/plugins/search-guard-6/tools/
- ./sgadmin.sh -ts truststore.jks -tspass e0c2b67ecfc6dad6bc42 -ks CN=sgadmin-keystore.jks -kspass 4abdecb00e4d4891761a -nhnv -icl -cd ../sgconfig/
安装kibana控件(需要先停止kibana)
- cd /usr/share/kibana/bin/
- ./kibana-plugin install https://search.maven.org/remotecontent?filepath=com/floragunn/search-guard-kibana-plugin/6.5.4-18/search-guard-kibana-plugin-6.5.4-18.zip
安装版本查看
修改kibana配置文件
- server.port: 5601
- server.host: "172.16.90.24"
- server.name: "prd-elk-logstash-02"
- #配置为https
- elasticsearch.url: "https://172.16.90.24:9200"
- kibana.index: ".kibana"
- elasticsearch.username: "kibanaserver"
- elasticsearch.password: "kibanaserver"
- elasticsearch.ssl.verificationMode: none
- elasticsearch.requestHeadersWhitelist: [ "Authorization", "sgtenant" ]
- xpack.monitoring.enabled: false
- xpack.graph.enabled: false
- xpack.ml.enabled: false
- xpack.watcher.enabled: false
- xpack.security.enabled: false
启动kibana web页面访问需要输入用户名密码admim即可
配置logstash访问,不同于demo安装的配置需要在logstash配置文件配置如下配置output
- output{
- if "nginx-prod-log" in [type] {
- elasticsearch{
- hosts => ["172.16.90.24:9200"]
- index => "nginx-prod-log-%{+YYYY.MM}"
- ssl => true
- ssl_certificate_verification => true
- truststore => "/etc/elasticsearch/key/truststore.jks"
- truststore_password => "cad3511c129704894bfc"
- user => "admin"
- password => "admin"
- }
- #stdout{
- # codec => rubydebug
- #}
- }
增加以下配置
PS:truststore密码同样在README.txt可以找到
truststore密码需要引号 用户名和密码也需要加引号 否则无法启动logstash
用户名和密码没有加引号报错信息为 ConfigurationError
ELK之elasticsearch6安装认证模块search guard的更多相关文章
- ELK之安装了search guard认证后安装elasticsearch-head
安装searc guard参考https://www.cnblogs.com/minseo/p/10576126.html 安装elasticsearch-head参考 https://www.cnb ...
- Elasticsearch 5.0 安装 Search Guard 5 插件 (五)
一.Search Guard 简介 Search Guard 是 Elasticsearch 的安全插件.它为后端系统(如LDAP或Kerberos)提供身份验证和授权,并向Elasticsearc ...
- Elasticsearch 5.0 安装 Search Guard 5 插件
一.Search Guard 简介 Search Guard 是 Elasticsearch 的安全插件.它为后端系统(如LDAP或Kerberos)提供身份验证和授权,并向Elasticsearc ...
- elasticsearch安装与使用(5)-- search guard安装与配置
一.安装search guard插件必须要安装两部分: ①search-guard-xx ②search-guard-ssl (XX指的是与elasticsearch引擎对应的版本) github地址 ...
- (转) Elasticsearch 5.0 安装 Search Guard 5 插件
一.Search Guard 简介 Search Guard 是 Elasticsearch 的安全插件.它为后端系统(如LDAP或Kerberos)提供身份验证和授权,并向Elasticsearc ...
- elasticsearch 6.x 安装search guard
前言 es之前版本一直无用户验证功能,不过官方有提供一x-pack,但是问题是付费.在es的6.3.2版本中,已经集成了x-pack,虽然es团队已经对x-pack开源,但是在该版本中如果需要使用到安 ...
- ELK-6.5.3学习笔记–elk基础环境安装
本文预计阅读时间 13 分钟 文章目录[隐藏] 1,准备工作. 2,安装elasticsearch. 3,安装logstash. 4,安装kibana 以往都是纸上谈兵,毕竟事情也都由部门其他小伙伴承 ...
- Linux操作系统 可插拔认证模块PAM(3)
六.Linux 操作系统安全登陆设计 自己编写PAM 模块并编译成动态链接库so 文件,将其添加进/etc/pam.d/login 文件中实现命令行安全登陆设计,将其添加进/etc/pam.d/lig ...
- 【python】用setup安装自定义模块和包
python解释器查找module进行加载的时候,查找的目录是存放在sys.path变量中的,sys.path变量中包含文件的当前目录.如果你想使用一个存放在其他目录的脚本,或者是其他系统的脚本,你可 ...
随机推荐
- 原创:vsphere概念深入系列一:关于vsphere虚拟交换机的端口的数量限制。
总结出来的概念: vm上有多少个虚拟网卡就被分配了多少个vPort.vswitch缺省情况下有8个vmk端口(vport)保留给vmkernel使用.但是当vport不够的时候也可以被使用. 默认第一 ...
- openjudge noi 鸡尾酒疗法
题目链接:http://noi.openjudge.cn/ch0105/18/ 总时间限制: 1000ms 内存限制: 65536kB 描述 鸡尾酒疗法,原指“高效抗逆转录病毒治疗”(HAART),由 ...
- js 引擎 和 html 渲染引擎
- unix缓冲
目的:尽量减少read,write调用的次数. 标准IO提供3种IO: 1.全缓冲.在填满IO缓冲区后才进行实际的IO操作. 2.行缓冲.当输入和输出遇到换行符时,执行IO操作.(设计终端) 3.不带 ...
- 【Android】解析Paint类中MaskFilter的使用
目录结构: contents structure [+] EmbossMaskFilter BlurMaskFilter MaskFilter可以用来指定画笔的边缘效果.如果引用开启硬件加速的话,那么 ...
- 记一次数据库参数compatible降级[转]
转:http://dbzone.iteye.com/blog/1042455 众所周知,Oracle参数compatible 主要用于启用Oracle针对某一版本的新特性.但此参数设置时,只能往上调, ...
- linux select函数详解
linux select函数详解 在Linux中,我们可以使用select函数实现I/O端口的复用,传递给 select函数的参数会告诉内核: •我们所关心的文件描述符 •对每个描述符,我们所关心的状 ...
- Socket网络编程--小小网盘程序(4)
在这一小节中实现了文件的下载,具体的思路是根据用户的uid和用户提供的文件名filename联合两张表,取得md5唯一标识符,然后操作这个标识符对应的文件发送给客户端. 实现下载的小小网盘程序 cli ...
- 【Tomcat】面向初级 Web 开发人员的 Tomcat
Apache Tomcat 应用服务器不再是高级 Web 系统开发人员的专用领域.在本教程中,Sing Li 将向初级 Web 开发人员展示如何利用他们当前的 Java™ 开发技能,使用 Tomcat ...
- json-server 详解
JSON-Server 是一个 Node 模块,运行 Express 服务器,你可以指定一个 json 文件作为 api 的数据源. 安装json-server npm install -g json ...