ES 19 - Elasticsearch的检索语法(_search API的使用)

目录 1 Search API的基本用法 1.1 查询所有数据 1.2 响应信息说明 1.3 timeout超时机制 1.4 查询多索引和多类型中的数据 2 URI Search的用法 2.1 GET请求携带参数查询 2.2 URI Search的参数列表 2.3 URI Search用法示例 2.4 不指定field时的搜索原理 1 Search API的基本用法 1.1 查询所有数据 GET _search 1.2 响应信息说明 { "took" : 346, // 整个检索消耗的…

ElasticSearch（十五) _search api 分页搜索及deep paging性能问题

1.分页搜索语法: size,from GET /_search?size=10 GET /_search?size=10&from=0 GET /_search?size=10&from=20 GET /index/type/_search { "query": { "match_all": {} }, "from": 1, "size": 1 } 实际操作: 查看共有5条数据: GET /test_ind…

ElasticSearch（十四) _search api search timeout 机制

语法:timeout=10ms,timeout=1s,timeout=1m GET /_search?timeout=10m timeout:默认无timeout,latency平衡completeness,手动指定timeout,timeout查询执行机制…

ES 21 - Elasticsearch的高级检索语法 (包括term、prefix、wildcard、fuzzy、boost等)

目录 1 term query - 索引词检索 1.1 term query - 不分词检索 1.2 terms query - in检索 2 prefix query - 前缀检索 3 wildcard query - 通配符检索 4 regexp query - 正则检索 5 fuzzy query - 纠错检索 6 boost评分权重 - 控制文档的优先级别 7 dis_max的用法 - best fields策略 7.1 dis_max的提出 7.2 使用示例 8 exist query…

ES 13 - Elasticsearch的元字段 (_index、_type、_source、_routing等)

目录 1 标识元字段 1.1 _index - 文档所属的索引 1.2 _uid - 包含_type和_id的复合字段 1.3 _type - 文档的类型 1.4 _id - 文档的id 2 文档来源元字段 2.1 _source - 文档原始JSON内容 2.1.1 关闭_source功能 2.1.2 查询时指定返回字段 2.2 _size - _source字段占用的字节数 3 索引元字段 3.1 _all - 文档所有字段的值 3.2 _field_names - 文档所有非空字段名 4…

ES 07 - Elasticsearch查询文档的六种方法

目录 1 Query String Search(查询串检索) 2 Query DSL(ES特定语法检索) 3 Query Filter(过滤检索) 4 Full Text Search(全文检索) 5 Phrase Search(短语检索) 6 Highlight Search(高亮检索) 1 Query String Search(查询串检索) 这种方法通过HTTP请求的Query String携带查询参数, 因此得名. 适用于临时性的查询请求, 比如在终端检查基础信息: # 检索name中…

【原创】大数据基础之ElasticSearch（2）常用API整理

Fortunately, Elasticsearch provides a very comprehensive and powerful REST API that you can use to interact with your cluster. Among the few things that can be done with the API are as follows: Check your cluster, node, and index health, status, and…

ES 32 - Elasticsearch 数据建模的探索与实践

目录 1 什么是数据建模? 2 如何对 ES 中的数据进行建模 2.1 字段类型的建模方案 2.2 检索.聚合及排序的建模方案 2.3 额外存储的建模方案 3 ES 数据建模实例演示 3.1 动态创建映射关系 3.2 手动创建映射关系 3.3 新增需求 - 添加大字段 3.4 解决大字段带来的性能问题 3.5 mapping中字段的常用参数 3.6 mapping 设置小结 4 ES 数据建模最佳实践 4.1 如何处理关联关系 4.2 避免太多的字段 4.3 避免正则查询 4.4 避免空值引起的…

ElasticSearch进阶检索

ElasticSearch进阶检索入门检索中讲了如何导入elastic提供的样本测试数据,下面我们用这些数据进一步检索一.SearchAPI ES 支持两种基本方式检索 : 1.一种是通过使用 REST request URI 发送搜索参数(uri+检索参数) GET bank/_search 检索 bank 下所有信息,包括 type 和 docs GET bank/_search?q=*&sort=account_number:asc 请求参数方式检索 2.另一种是通过使用 RE…

ElasticSearch之安装及基本操作API

ElasticSearch 是目前非常流行的搜索引擎,对海量数据搜索是非常友好,并且在高并发场景下,也能发挥出稳定,快速特点.也是大数据和索搜服务的开发人员所极力追捧的中间件.虽然 ElasticSearch 深受大家的喜爱,但是它的迭代速度之快,所以在相关社区老是有听说到学不动了的话语,也正是这种不断完善,才能拥有现在的社区活跃.我使用 ElasticSearch 时,从 5.x 到 6.x 版本,再到现在接触到 7.x 版本.从版本升级中,也看到了 ElasticSearch 对主流技术变化…

Linux（centos）安装es（elasticsearch）

前提条件--需要安装jdk环境,不同版本的es所对应的jdk版本要求不同,es6的使用jdk1.8可以 1.下载elasticsearch压缩包下载地址:https://www.elastic.co/cn/downloads/past-releases/elasticsearch-6-6-0,点击下载 2.上传到centos上,我们这里上传到 /usr/web/elasticsearch 文件夹下,并解压文件 tar -zxvf elasticsearch-6.6.0.tar.gz 3.进入解…

Elasticsearch Kibana查询语法

Elasticsearch Kibana查询语法 2018年06月03日 23:52:30 wangpei1949 阅读数:3992 Elasticsearch Kibana Discover的搜索框中,使用的是Lucene Query Syntax.经常使用,在这里梳理并总结. 测试数据创建索引设置mapping #创建索引 PUT user_web_info #设置mapping PUT user_web_info/_mapping/user { "properties":…

Elasticsearch原理学习--为什么Elasticsearch/Lucene检索可以比MySQL快?

转载于:http://vlambda.com/wz_wvS2uI5VRn.html 同样都可以对数据构建索引并通过索引查询数据,为什么Lucene或基于Lucene的Elasticsearch会比关系型数据库如MySQL搜索性能更优?两者有什么区别?各自选型的依据是什么?它们各自又有什么优势? 本文针对于以上问题,基于个人理解及参考网上相关资料,给出说明.由于个人技术能力有限,若文章中有任何不妥之处,还望各位看官指正. 本文将从以下各模块进行阐述: 什么是索引 MySQL索引是如何实现的 Luc…

可以执行全文搜索的原因 Elasticsearch full-text search Kibana RESTful API with JSON over HTTP elasticsearch_action es 模糊查询

https://www.elastic.co/guide/en/elasticsearch/guide/current/getting-started.html Elasticsearch is a real-time distributed search and analytics engine. It allows you to explore your data at a speed and at a scale never before possible. It is used for…

es之路由：进一步提高Elasticsearch的检索效率（适用大规模数据集）

1:一条数据是如何落地到对应的shard上的当索引一个文档的时候,文档会被存储到一个主分片中. Elasticsearch 如何知道一个文档应该存放到哪个分片中呢? 首先这肯定不会是随机的,否则将来要获取文档的时候我们就不知道从何处寻找了.实际上,这个过程是根据下面这个算法决定的: shard = hash(routing) % number_of_primary_shards routing 是一个可变值,默认是文档的 _id ,也可以设置成一个自定义的值. routing 通过 hash…

ES 27 - Elasticsearch脚本的使用实践

目录 1 关于脚本 2 脚本使用的最佳实践 2.1 创建脚本并存储 2.2 脚本的缓存 2.3 Script Field - 脚本字段本文以 ES 6.6.0 版本为例进行演示. 1 关于脚本 ES提供了脚本支持 -- 可以通过Groovy外置脚本(已过时).内置painless脚本实现各种复杂操作. -- painless有轻便之意, 使用时直接在语法中调用即可, 无需外置, 也就是不支持通过外部文件存储painless脚本并调用的方法. // 向ES中插入一条数据: PUT employe…

ES（ElasticSearch）文档的表现形式以及增删改查

1. ES中的文档 ES是面向文档(document oriented)的,这意味着它可以存储整个对象或文档(document).然而它不仅仅是存储,还会索引(index)每个文档的内容使之可以被搜索.在ES中,你可以对文档(而非成行成列的数据)进行索引.搜索.排序.过滤. ES使用Javascript对象符号(JavaScript Object Notation),也就是JSON,作为文档序列化格式.JSON现在已经被大多语言所支持,而且已经成为NoSQL领域的标准格式. _index:索引库…

分布式搜索elasticsearch 文献检索索引入门

1.首先,例如,下面的数据被提交给ES该指数 {"number":32768,"singer":"杨坤","size":"5109132","song":"今夜二十岁","tag":"中国好声音","timelen":319} {"number":32769,"singer&qu…

ES 15 - Elasticsearch中的数据类型 (text、keyword、date、geo等)

目录 1 核心数据类型 1.1 字符串类型 - string(不再支持) 1.1.1 文本类型 - text 1.1.2 关键字类型 - keyword 1.2 数字类型 - 8种 1.3 日期类型 - date 1.4 布尔类型 - boolean 1.5 二进制型 - binary 1.6 范围类型 - range 2 复杂数据类型 2.1 数组类型 - array 2.2 对象类型 - object 2.3 嵌套类型 - nested 2.3.1 对象数组是如何存储的 2.3.2 用nes…

Elasticsearch 2.3.3 JAVA api说明文档

原文地址:https://www.blog-china.cn/template\documentHtml\1484101683485.html 翻译作者:@青山常在人不老加入翻译:cdcnsuper@blog-china.cn 版权所有:@码上中国博客(https://blog-china.cn) 1 前言本节介绍elasticsearch提供的Java API.所有elasticsearch操作都使用Client对象执行.所有操作在本质上是完全异步的(接收到但是未必是马上返回数据).另外…

ElasticSearch 5.0.1 java API操作

今天来说下使用ES 5.0.1的API来进行编码. 开始之前,简单说下5.0.1跟之前的几个变化.之前的ES自身是不支持delete-by-query的,也就是通过查询来删除,可以达到批量的效果,是因为刷新的原因,应该够近实时的特性相关.一直是以一个插件的形式存在,到5.0.1时,倒腾了半天,还是官方文档说,已经废掉了这个插件,放到ES Core中来了.这是一个变化,另外,初始化ES client的方式也变化了,这个要吐槽一下,从1.7到2.X,初始化方式改了一遍,从2.X到5.X又变了,让人有…

搭建ElasticSearch+MongoDB检索系统

ElasticSearch是一个基于Lucene的搜索服务器.它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口.Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎.设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便. 以上是百度百科对ES的介绍.本文主要记述在linux环境下安装Elasticsearch及基本的可视化工具sense,并使用ES索引MongoDB中的数据,使我们可以直接通过…

ES 10 - Elasticsearch的索引别名和索引模板

目录 1 索引模板概述 1.1 什么是索引模板 1.2 索引模板中的内容 1.3 索引模板的用途 2 创建索引模板 3 查看索引模板 4 删除索引模板 5 模板的使用建议 5.1 一个index中不能有多个type 5.2 设置_source = false 5.3 设置_all = false 5.4 设置dynamic = strict 5.5 使用keyword类型 1 索引模板概述 1.1 什么是索引模板索引模板: 就是把已经创建好的某个索引的参数设置(settings)和索引映射(m…

ES 01 - Elasticsearch入门 + 基础概念学习

目录 1 Elasticsearch概述 1.1 Elasticsearch是什么 1.2 Elasticsearch的优点 1.3 Elasticsearch的相关产品 1.4 Elasticsearch的使用场景 2 Elasticsearch的功能概述 2.1 分布式的搜索引擎和数据分析引擎 2.2 全文检索结构化检索数据分析 2.3 海量数据的近实时处理 3 Elasticsearch的核心概念 3.1 term(索引词) 3.2 text(文本) 3.3 analysis(分析)…

elasticsearch 拼音检索能力研究

gitchennan/elasticsearch-analysis-lc-pinyin 配置参数少,功能满足需求. 对应版本 elasticsearch2.3.2 对应 elasticsearch-analysis-lc-pinyin 分支 2.4.2.1 或者 tag 2.2.2.1 创建一个类型 elasticsearch-analysis-lc-pinyin 的 README 是根据 elasticsearch5.0 编写的,给出的创建一个类型的语法如下 curl -XPOST http:…