废话不多说,直接来硬的!我在使用的时候使用的是mysql数据库。

一、ElasticSearch概念和使用场景

1.当我们需要搜索海量数据的时候,就可能会用到。以下使用的场景有哪些呢?

  1. 搜索海量数据
  2. 分布式(单点、或多节点使用)
  3. 全文检索
  4. 实时快速
  5. Restful

2.默认端口9200和9300,安装后默认试用双端口下面说区别:

  • 9200 端口是ES节点与外部通讯使用的端口。它是http协议的RESTful接口(各种CRUD操作都是走的该端口,如查询:http://localhost:9200/testes/_search)。
  • 9300端口是ES节点之间通讯使用的端口。它是tcp通讯端口,集群间和TCPclient都走的它。(java程序中使用ES时,在配置文件中要配置该端口)

3.安装方式elastic官网下载,解压文件夹,点击bin文件夹中的elasticsearch.bat文件

4.中文分词插件

  • standard
  • simple
  • whitespace:
  • lauguage
  • ik(全拼:elasticsearch-analysis-ik,重点说这个,主要是分词效果比较好)

ik分词器下载地址:https://github.com/medcl/elasticsearch-analysis-ik/tags   版本对应es版本,下载后在解压目录下创建plugins文件夹解压放置 如:D:\elasticsearch\elasticsearch-6.3.2\plugins

二、数据同步工具logstash(elastic官网工具)

简单的说就是利用logstash把数据从mysql同步到es,然后根据业务场景直接从es中查询数据。

开源中间件常见哪些:阿里的mysql-binlog / siddontang / go-mysql-elasticsearch,下面重点说logstash。

  • logstash

1.解决哪些问题?

数据同步(全量,增量)

全量:第一次建立后全量同步到es
          增量:新增、修改老数据、删除老数据

2.下载地址:elastic官网(对应版本)

3.配置方式

1.把mysql-connector-java.jar文件放进根目录下

2.在安装目录下config文件夹中添加mysql.conf文件。配置如下:

  1. 1 input{
  2. 2 jdbc {
  3. 3 jdbc_driver_library => "D:\\logstash-6.3.2\\logstash-6.3.2\\mysql-connector-java-5.1.8.jar"
  4. 4 jdbc_driver_class => "com.mysql.jdbc.Driver"
  5. 5 jdbc_connection_string => "jdbc:mysql://127.0.0.1:3306/testes" //此处的testes为创建的索引名称
  6. 6 jdbc_user => "testes" //mysql username
  7. 7 jdbc_password => "testes" //mysql密码
  8. 8 schedule => "* * * * *"
  9. 9 clean_run => true
  10. 10 statement => "select * from t_blog where update_time > :sql_last_value and update_time < now() order by update_time desc" //此处的sql为同步的sql
  11. 11 }
  12. 12 }
  13. 13
  14. 14 output {
  15. 15 elasticsearch {
  16. 16 hosts => ["127.0.0.1:9200"]
  17. 17 index => "testes" //索引名称
  18. 18 document_id => "%{id}" //此处不用替换,id默认指的就是表中的id
  19. 19 }
  20. 20 #stdout {
  21. 21 #codec => json_lines
  22. 22 #}
  23. 23 }

3.在安装目录下bin文件夹下执行cmd命令:

  1. logstash -f ../config/mysql.conf

三、kibana工具(elastic官网工具)

用途查询数据,以及数据可视化分析。(同样也可用postman)

下载地址:elastic官网

使用方法:直接解压,执行目录下bin文件夹kibana.bat文件。默认端口为5601,直接在浏览器输入:localhost:5601

四、检验是否成功

1.首先执行elasticSearch.bat文件,然后执行logstash和kibana.

2.在kibana页面执行

POST /testes/_search
 { 
 }

既成功!!!

ElasticSearch--一、使用场景以及对应软件配置安装的更多相关文章

  1. ElasticSearch入坑指南之概述及安装

    ---恢复内容开始--- ElasticSearch入坑指南之概述及安装 了解ElasticSearch ElasticSearch(简称ES)基于Lucene的分布式全文检索引擎.使用ES可以实现近 ...

  2. elastic-search单机部署以及中文分词IKAnalyzer安装

    前提条件 elasticsearch使用版本5.6.3,需要jdk版本1.8,低于该版本不能使用 下载 https://artifacts.elastic.co/downloads/elasticse ...

  3. ELK 架构之 Elasticsearch、Kibana、Logstash 和 Filebeat 安装配置汇总(6.2.4 版本)

    相关文章: ELK 架构之 Elasticsearch 和 Kibana 安装配置 ELK 架构之 Logstash 和 Filebeat 安装配置 ELK 架构之 Logstash 和 Filebe ...

  4. ElasticSearch入门 第一篇:Windows下安装ElasticSearch

    这是ElasticSearch 2.4 版本系列的第一篇: ElasticSearch入门 第一篇:Windows下安装ElasticSearch ElasticSearch入门 第二篇:集群配置 E ...

  5. Elasticsearch 在 windows 和 ubuntu 下详细安装过程

    1. 前言 作为一名 .NET 平台开发者,选择开发框架时总会面临更多的局限性,不过对于搜索这种刚需服务来说,开源框架可供选择的余地还是比较大的.笔者之前用的是 Lucene.net ,现在深感其使用 ...

  6. Elasticsearch.Net搜索引擎初使用【客户端安装】

    下载windows客户端 官方文档地址:https://www.elastic.co/guide/en/elasticsearch/client/net-api/6.x/introduction.ht ...

  7. 原创 | 手摸手带您学会 Elasticsearch 单机、集群、插件安装(图文教程)

    欢迎关注笔者的公众号: 小哈学Java, 每日推送 Java 领域干货文章,关注即免费无套路附送 100G 海量学习.面试资源哟!! 个人网站: https://www.exception.site/ ...

  8. elasticsearch + kibana + x-pack + logstash_集群部署安装

    elasticsearch 部分总体描述: 1.elasticsearch 的概念及特点.概念:elasticsearch 是一个基于 lucene 的搜索服务器.lucene 是全文搜索的一个框架. ...

  9. 七个生产案例告诉你BATJ为何选择ElasticSearch!应用场景和优势!

    本文来源于公众号[胖滚猪学编程],转载请注明出处. 从今天开始,想和你一起死磕ElasticSearch,学习分布式搜索引擎,跟着胖滚猪就对了! 既然是ES的第一课,那么最重要的是让你爱上它!不想说那 ...

随机推荐

  1. 第15.20节 PyQt(Python+Qt)入门学习:QColumnView的作用及开发中对应Model的使用

    老猿Python博文目录 专栏:使用PyQt开发图形界面Python应用 老猿Python博客地址 一.概述 在Qt Designer的Item Views(Model-based)部件中,Colum ...

  2. 理解 tf.reduce_sum(),以及tensorflow的维axis

    易错点:注意带上参数axis,否则的话,默认对全部元素求和,返回一个数值int 参考:https://www.jianshu.com/p/30b40b504bae tf.reduce_sum( inp ...

  3. Scrum 冲刺 第一篇

    Scrum 冲刺 第一篇 每个成员认领的任务 人员 任务 周立 后台登录注册模块 邓富荣 后台首页模块 钟俊豪 博客圈模块 黄清山 个人界面模块 郑焕 首页以及博客圈界面 黄梓浩 个人界面以及登录注册 ...

  4. Day5 【Scrum 冲刺博客】

    每日会议总结 昨天已完成的工作 方晓莹(PIPIYing) 搭建与后台对接的代理服务器 对接个人中心接口 方子茵(Laa-L):暂无 黄芯悦(Sheaxx) 完善投诉反馈页面 完善车位管理页面 舒雯钰 ...

  5. 【APIO2019】路灯(ODT & (树套树 | CDQ分治))

    Description 一条 \(n\) 条边,\(n+1\) 个点的链,边有黑有白.若结点 \(a\) 可以到达 \(b\),需要满足 \(a\to b\) 的路径上的边不能有黑的.现给出 \(0\ ...

  6. 算法——最长上升子序列(DP和二分)

    给定一个无序的整数数组,找到其中最长上升子序列的长度. 输入: [10,9,2,5,3,7,101,18] 输出: 4 纯DP 解体思路:利用动态规划的方法,从一个方向遍历数组,每次获取以该位置为子序 ...

  7. JAVA死锁的检测流程

    步骤一. 查询检测的进程 1.首先查看系统资源占用信息,TOP看一下 发现正在运行的JAVA项目CPU占用率很高,百分之360左右了,那么问题一定出在这个程序中 2 .也可以通过名称查询进程pid 步 ...

  8. html标签学习2

    input 系列 <form enctype="multipart/form-data"> <input type="text" name=& ...

  9. CentOS 7.6安装MariaDB10.4.8超详细教程

    MariaDB数据库管理系统是MySQL的一个分支,主要由开源社区在维护,采用GPL授权许可 MariaDB的目的是完全兼容MySQL,包括API和命令行,使之能轻松成为MySQL的代替品. Cent ...

  10. Python 学习笔记 之 随着学习不断更新的Python特性搜集

    大小写敏感 缩进敏感--tab和空格不要混用,最好使用4个空格进行缩进.可使用vim配置缩进字符为4个空格 编写py文件时注意文件的编码,UTF-8 without BOM, 并且记得声明coding