Java操作ES
一、ES基本概念
1. 节点:Elastic是一个分布式数据库,每个数据库实例是一个节点Node,一台服务器上可以有多个Node,可以多台服务器协同工作
2. 集群:一组节点Node构成一个集群Cluster
3. 文档:存储数据的基本单元称为文档Document,使用json表示
4. 索引:索引Index是一类文档的集合,ES会索引所有字段,经过处理后写入一个反向索引
5. 类型:一个索引的逻辑分区叫类型Type
6. 分词器:把text类型的数据进行分词,分词后按照分词建立索引,可以按照分词进行查询;默认分词器为ik,可以设置为中文分词器ik_max_word
二、跟普通数据库mysql在数据结构上的区别
mysql:库->表->行->字段
ES:索引->类型->文档->字段
三、数据类型
1.ES在5.*版本之后,把string字段设置为了过时字段,引入text,keyword字段
2.text会自动分词,keyword不分词,因为全部字段分词,会浪费空间
3.如果不在mapping中定义字段类型,java的String类型会自动映射成text & keyword两种
4.如果ES中已经有数据,不支持修改字段类型
a.可以删除原来索引,重新建立
b.新建一个索引,把老数据迁移到新索引上面
c.如果数据比较多或者比较重要,可以新增一个字段
三、增删改查API
1.新增或者更新,/index/type/id已存在就会更新
put /index/type/id
{
"field1":"value1",
"field2":"value2"
}
2.删除
delete /index/type/id
3.查询
term:精确匹配一个字段
match:模糊查询或者分词查询一个字段
wildcard:使用通配符进行查询
四、Java操作ES的方式,建议使用rest方式
1.TransportClient,通过TCP方式访问ES,只支持java,以后可能废除,不建议使用
a.引入依赖
<dependency>
<groupId>org.elasticsearch.client</groupId>
<artifactId>transport</artifactId>
<version>6.7.1</version>
</dependency>
b.创建client
// 设置集群的名字
Settings settings = Settings.builder().put("cluster.name", clusterName)
.put("client.transport.sniff", false)
.put("request.headers.Authorization", basicAuthHeaderValue(userName, password))
.build();
// 创建集群client并添加集群节点地址
PreBuiltTransportClient c = new PreBuiltTransportClient(settings);
c.addTransportAddress(new TransportAddress(InetAddress.getByName(host), Integer.parseInt(port)));
c.使用client增删改查
2.JestClient
a.引入依赖
<dependency>
<groupId>io.searchbox</groupId>
<artifactId>jest</artifactId>
</dependency>
b.创建client
https://blog.csdn.net/weixin_42685328/article/details/111408562
c.使用client增删改查
3.RestClient,通过HTTP方式访问ES,没有语言限制,和transport不能同时使用
low-level-client
https://blog.csdn.net/weixin_33831673/article/details/91447794
4.RestHighLevelClient,推荐使用
a.引入jar包
<dependency>
<groupId>org.elasticsearch.client</groupId>
<artifactId>elasticsearch-rest-high-level-client</artifactId>
<version>6.7.1</version>
</dependency>
b.创建client
@Configuration
public class EsConfig {
private static final int HTTP_PORT = 9200;
private static final String IP = "aaa";
private static final String SecurityUser = "aaa";
private static final String SecurityPassword = "aaa"; private static CredentialsProvider init() {
CredentialsProvider credentialsProvider = new BasicCredentialsProvider();
credentialsProvider.setCredentials(AuthScope.ANY,
new UsernamePasswordCredentials(SecurityUser, SecurityPassword));
return credentialsProvider;
} @Bean
public RestClientBuilder restClientBuilder() {
//配置权限验证
RestClientBuilder restClientBuilder = RestClient.builder( new HttpHost(IP, HTTP_PORT, "http"))
.setHttpClientConfigCallback(httpClientBuilder ->
httpClientBuilder.setDefaultCredentialsProvider(init()));
return restClientBuilder;
} @Bean(name = "highLevelClient")
public RestHighLevelClient highLevelClient(@Autowired RestClientBuilder restClientBuilder) {
return new RestHighLevelClient(restClientBuilder);
} }
c.写数据
IndexRequest request = new IndexRequest();
request.index(index).type(type).source(JSON.toJSONString(object), XContentType.JSON);
bulkRequest.add(request);
// 保存数据到ES
BulkResponse bulkResponse = highLevelClient.bulk(bulkRequest, RequestOptions.DEFAULT);
d.读数据 BoolQueryBuilder的should/must,对应mysql的or/and
SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder();
// 分页参数
searchSourceBuilder.from(1);
searchSourceBuilder.size(10);
searchSourceBuilder.sort("_id", SortOrder.DESC); BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery()
// 精确匹配
.must(QueryBuilders.termQuery("field1","value1")
// 关键字模糊+分词匹配
.must(QueryBuilders.multiMatchQuery("keyword","field1","field2","field3","field4","field5")); searchSourceBuilder.query(boolQueryBuilder); SearchRequest searchRequest = new SearchRequest();
searchRequest.source(searchSourceBuilder);
SearchResponse searchResponse = highLevelClient.search(searchRequest, RequestOptions.DEFAULT);
if (Objects.nonNull(searchResponse)) {
total = searchResponse.getHits().totalHits;
SearchHits searchHits = searchResponse.getHits();
for (int i = 0; i < searchHits.getHits().length; i++) {
String str = searchHits.getHits()[i].getSourceAsString();
}
}
e.删除数据
DeleteRequest deleteRequest = new DeleteRequest();
deleteRequest.index(index).type(type).id(id); try {
highLevelClient.delete(deleteRequest, RequestOptions.DEFAULT);
} catch (Exception ex) {
log.error("删除ES中的数据异常", ex);
}
5.Spring-data-elasticsearch
https://blog.csdn.net/qq_44657532/article/details/123622136
6.bboss框架
https://esdoc.bbossgroups.com/#/quickstart
参考:
https://www.cnblogs.com/javallh/p/13790486.html
https://www.cnblogs.com/dreamroute/p/8484457.html
https://www.cnblogs.com/zwt1990/p/7737747.html
http://www.ruanyifeng.com/blog/2017/08/elasticsearch.html
https://www.cnblogs.com/yixinjishu/p/11057933.html
https://blog.csdn.net/qq_41937849/article/details/87368585
Java操作ES的更多相关文章
- Elasticsearch笔记五之java操作es
Java操作es集群步骤1:配置集群对象信息:2:创建客户端:3:查看集群信息 1:集群名称 默认集群名为elasticsearch,如果集群名称和指定的不一致则在使用节点资源时会报错. 2:嗅探功能 ...
- 2 - 基于ELK的ElasticSearch 7.8.x技术整理 - java操作篇 - 更新完毕
3.java操作ES篇 3.1.摸索java链接ES的流程 自行创建一个maven项目 3.1.1.依赖管理 点击查看代码 <properties> <ES-version>7 ...
- java操作ElasticSearch(es)进行增删查改操作
有时间是要了解一下ES这个东西的~ ---------------------------------------------------------------------------------- ...
- Es学习第十一课,使用java操作elasticsearch
前面十节课我们已经把ES的基本概念和使用讲的差不多了,现在我们就用基于java来实际开发一个操作ES的小项目,带大家来一起练练手. 1.我们用IDEA创建一个maven项目 项目结构如上图所示,然后我 ...
- 使用java操作elasticsearch之与es简历连接
Elasticsearch 的 Java 客户端非常强大:它可以建立一个嵌入式实例并在必要时运行管理任务. 运行一个 Java 应用程序和 Elasticsearch 时,有两种操作模式可供使用.该应 ...
- java操作elasticsearch实现组合桶聚合
1.terms分组查询 //分组聚合 @Test public void test40() throws UnknownHostException{ //1.指定es集群 cluster.name 是 ...
- java操作elasticsearch实现query String
1.CommonTersQuery: 指定字段进行模糊查询 //commonTermsQuery @Test public void test35() throws UnknownHostExcept ...
- java操作elasticsearch实现聚合查询
1.max 最大值 //max 求最大值 @Test public void test30() throws UnknownHostException{ //1.指定es集群 cluster.name ...
- java操作elasticsearch实现前缀查询、wildcard、fuzzy模糊查询、ids查询
1.前缀查询(prefix) //prefix前缀查询 @Test public void test15() throws UnknownHostException { //1.指定es集群 clus ...
- java操作elasticsearch实现条件查询(match、multiMatch、term、terms、reange)
1.条件match query查询 //条件查询match query @Test public void test10() throws UnknownHostException { //1.指定e ...
随机推荐
- VSCode 国内镜像下载地址
https://vscode.cdn.azure.cn/stable/,比如: https://vscode.cdn.azure.cn/stable/e4503b30fc78200f846c62cf8 ...
- 02#Web 实战:实现树形控件
前言 这是一篇个人练习 Web 前端各种常见的控件.组件的实战系列文章.本篇文章将介绍个人通过 JQuery + 无序列表 + CSS 动画完成一个简易的树形控件. 最终实现的效果是: 这样结构比较复 ...
- Abp返回时间格式化
private void ConfigureDateTime() { Configure<MvcNewtonsoftJsonOptions>(options => { options ...
- rn用Modal实现Drawer
PS:本文仅说明Modal可以用来做Drawer,并不介绍Modal的用法. 今天在开发的时候,想要使用Drawer. RN原生不自带Drawer,react-native-drawer又有bug(没 ...
- null和undefine的区别
null和undefine都是基本数据类型,两种类型都只有一个值. 区别: 1.undefined表示已经声明未定义,null表示的是一个空对象(null并不是空对象,js的typeof会将null判 ...
- Android MVP框架 详细代码
android mvp的好处,网上一搜一大堆,相对于一开始普通的在activity中处理所有的不管是网络请求还是页面渲染,最大的好处是简洁了,废话不多说,看代码 这里网络请求使用了两种,一种是自己封装 ...
- [后端-python实战总结]-chapter1-python基础01
1.1 week 1 > 密码秘文: import getpass username = input('username:') passwd = getpass.getpass('passwd: ...
- rtl8188eu 关闭power save
RTL8188eu 关闭power saving 当PC端没有和设备交换数据时,rtl8188eu会进入节能模式,很影响调试开发. 关闭方法:找到驱动代码include/autoconf.h 发现要禁 ...
- Filters in ASP.NET Core(Net6之过滤器)
Filters in ASP.NET Core 如果觉得样式不好:跳转即可 (md文件复制过来有些样式会不一样) 原文地址:https://lifengying.site/archives/net6% ...
- RabbitMQ的使用介绍
一.RabbitMQ是什么 RabbitMQ是一种常用的消息中间件,是基于AMQP协议,采用erlang语言开发的面向消息服务的中间件,是一个独立的系统应用程序,可以管理服务器计算资源和网络通信.一般 ...