java优雅的使用elasticsearch api
本文给出一种优雅的拼装elasticsearch查询的方式,可能会使得使用elasticsearch的方式变得优雅起来,使得代码结构很清晰易读。
建立elasticsearch连接部分请参看另一篇博客:http://www.cnblogs.com/kangoroo/p/7127003.html
1、ESDao -- 类似DB中的dao层
封装了增删改查ES的各种方法
package com.dqa.sentinel.client.es; import com.xiaoju.dqa.sentinel.client.es.entity.ESDocument;
import com.xiaoju.dqa.sentinel.client.es.entity.SearchDocument;
import org.elasticsearch.action.delete.DeleteResponse;
import org.elasticsearch.index.query.*;
import org.elasticsearch.search.SearchHits;
import org.elasticsearch.search.SearchHit;
import org.elasticsearch.action.get.GetResponse;
import org.elasticsearch.action.get.MultiGetItemResponse;
import org.elasticsearch.action.get.MultiGetRequestBuilder;
import org.elasticsearch.action.get.MultiGetResponse;
import org.elasticsearch.action.index.IndexResponse;
import org.elasticsearch.action.search.SearchRequestBuilder;
import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.action.update.UpdateRequest;
import org.elasticsearch.action.update.UpdateResponse;
import org.elasticsearch.search.builder.SearchSourceBuilder;
import org.elasticsearch.search.sort.SortOrder;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Component; import java.nio.charset.Charset;
import java.util.Collection;
import java.util.List;
import java.util.Map; import static org.elasticsearch.index.query.QueryBuilders.termQuery;
import static org.elasticsearch.index.query.QueryBuilders.termsQuery; @Component
public class ESDao { @Autowired
private ESClient esClient; public void createCache(ESDocument doc) throws Exception {
IndexResponse response = esCache.getClient().prepareIndex(doc.getIndexName(), doc.getTypeName(), doc.getId())
.setSource(doc.getSource().getBytes(Charset.forName("UTF-8"))).setRefresh(true).get();
if (!response.isCreated()) {
throw new Exception();
}
} public Map<String, Object> get(ESDocument doc) throws Exception {
try {
GetResponse response = esClient.getClient().prepareGet(doc.getIndexName(), doc.getTypeName(), doc.getId()).get();
return response.getSourceAsMap();
} catch (Exception ex) {
throw new Exception();
}
} public void create(ESDocument doc) throws Exception {
IndexResponse response = esClient.getClient().prepareIndex(doc.getIndexName(), doc.getTypeName(), doc.getId())
.setSource(doc.getSource().getBytes(Charset.forName("UTF-8"))).setRefresh(true).get();
if (!response.isCreated()) {
throw new Exception();
}
} public void mutiGet(List<ESDocument> docList) throws Exception {
MultiGetRequestBuilder multiGetRequestBuilder = esClient.getClient().prepareMultiGet(); for (ESDocument doc : docList) {
multiGetRequestBuilder.add(doc.getIndexName(), doc.getTypeName(), doc.getId());
}
MultiGetResponse multiGetItemResponses = multiGetRequestBuilder.get(); for (MultiGetItemResponse itemResponse : multiGetItemResponses) {
GetResponse response = itemResponse.getResponse();
if (response.isExists()) {
String json = response.getSourceAsString();
System.out.println(json);
}
}
} public void update(ESDocument doc) throws Exception {
try {
UpdateRequest request = new UpdateRequest().index(doc.getIndexName())
.type(doc.getTypeName()).id(doc.getId())
.doc(doc.getSource().getBytes(Charset.forName("UTF-8"))).refresh(true);
UpdateResponse response = esClient.getClient().update(request).get();
long docVersion = response.getVersion();
if (!response.isCreated()) {
throw new Exception();
}
} catch (Exception e) {
throw new Exception();
}
} public void deleteById(ESDocument doc) throws Exception{
try {
DeleteResponse response = esClient.getClient().prepareDelete(doc.getIndexName(),
doc.getTypeName(), doc.getId())
.execute()
.actionGet();
long docVersion = response.getVersion();
if (!response.isFound()) {
throw new Exception();
}
} catch (Exception e) {
throw new Exception();
} } public SearchHit[] searchClient(SearchDocument searchDocument) {
BoolQueryBuilder query = QueryBuilders.boolQuery();
// term
for (Map<String, String> termMap : searchDocument.getTermList()) {
TermQueryBuilder termQueryBuilder = termQuery(termMap.get("field"), termMap.get("value"));
query.must(termQueryBuilder);
}
// terms
for (Map<String, Object> termsMap : searchDocument.getTermsList()) {
if (termsMap.size() != 0) {
TermsQueryBuilder termsQueryBuilder = termsQuery(termsMap.get("field").toString(), (Collection<?>) termsMap.get("terms"));
query.must(termsQueryBuilder);
}
}
// range
for (Map rangeMap : searchDocument.getRangeList()) {
RangeQueryBuilder rangeQueryBuilder = QueryBuilders.rangeQuery(rangeMap.get("field").toString()).from(rangeMap.get("from")).to(rangeMap.get("to")).includeLower(true).includeUpper(false);
query.must(rangeQueryBuilder);
}
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(query);
SearchRequestBuilder searchRequestBuilder = esClient.getClient()
.prepareSearch(searchDocument.getIndexName()).setTypes(searchDocument.getTypeName());
SearchResponse response = searchRequestBuilder
.setQuery(query)
.setFrom(0).setSize(10000)
.setExplain(true).execute().actionGet();
SearchHits hits = response.getHits();
return hits.getHits();
}
2、查询字段的传入我们是通过Document类完成的
有三个Document,BaseDocument,ESDocument,SearchDocument,后两个继承前一个。
BaseDocument:
public class BaseDocument {
private String indexName;
private String typeName; public String getIndexName() {
return this.indexName;
}
public void setIndexName(String indexName) {
this.indexName = indexName;
}
public String getTypeName() {
return this.typeName;
}
public void setTypeName(String typeName) {
this.typeName = typeName;
} }
ESDocument:
public class ESDocument extends BaseDocument {
private String id;
private String source;
public String getId() {
return id;
}
public void setId(String id) {
this.id = id;
}
public String getSource() {
return source;
}
public void setSource(String source) {
this.source = source;
} }
SearchDocument
public class SearchDocument extends BaseDocument {
private List<Map<String, String>> termList;
private List<Map<String, String>> rangeList;
private List<Map<String, Object>> termsList;
public SearchDocument() {
super();
termList = new ArrayList<>();
rangeList = new ArrayList<>();
termsList = new ArrayList<>();
}
public List<Map<String, String>> getTermList() {
return this.termList;
}
public void setTermList(List<Map<String, String>> termList) {
this.termList = termList;
}
public List<Map<String, String>> getRangeList() {
return this.rangeList;
}
public void setRangeList(List<Map<String, String>> rangeList) {
this.rangeList = rangeList;
} public void setTermsList(List<Map<String, Object>> termsList) {
this.termsList = termsList;
}
public List<Map<String, Object>> getTermsList() {
return termsList;
}
}
3、使用的时候,拼装Document,并通过ESDao查询即可
例如:
SearchDocument searchDocument = new SearchDocument();
// term查询, field:topicName
Map<String, String> topicMap = new HashMap<>();
topicMap.put("field", "topicName");
topicMap.put("value", topicName.toLowerCase());
List<Map<String, String>> termList = new ArrayList<>();
termList.add(topicMap); // range查询, field:timestamp
Map<String, String> timeRange = new HashMap<>();
timeRange.put("field", "timestamp");
timeRange.put("from", from);
timeRange.put("to", to);
List<Map<String, String>> rangeList = new ArrayList<>();
rangeList.add(timeRange); searchDocument.setTermList(termList);
searchDocument.setRangeList(rangeList);
searchDocument.setIndexName("audit");
searchDocument.setTypeName("kafka");
SearchHit[] searchHits = esDao.searchCache(searchDocument);
String hourStatus = "0";
for (SearchHit hit : searchHits) {
Map<String, Object> eachMap = hit.getSource();
}
java优雅的使用elasticsearch api的更多相关文章
- Java 8时间和日期API 20例
本文由 ImportNew - Sandy 翻译自 javarevisited.欢迎加入翻译小组.转载请见文末要求. 伴随lambda表达式.streams以及一系列小优化,Java 8 推出了全新的 ...
- 如何更优雅地对接第三方API
本文所有示例完整代码地址:https://github.com/yu-linfeng/BlogRepositories/tree/master/repositories/third 我们在日常开发过程 ...
- Spring Boot入门系列(二十一)如何优雅的设计 Restful API 接口版本号,实现 API 版本控制!
前面介绍了Spring Boot 如何快速实现Restful api 接口,并以人员信息为例,设计了一套操作人员信息的接口.不清楚的可以看之前的文章:https://www.cnblogs.com/z ...
- java通过shield链接Elasticsearch
本文mark了springboot中集成elasticsearch,并且实现连接带有shield权限管理的elasticsearch的方法. tips:首先建议java client版本和elasti ...
- Java高并发秒杀系统API之SSM框架集成swagger与AdminLTE
初衷与整理描述 Java高并发秒杀系统API是来源于网上教程的一个Java项目,也是我接触Java的第一个项目.本来是一枚c#码农,公司计划部分业务转java,于是我利用业务时间自学Java才有了本文 ...
- java根据地址获取百度API经纬度
java根据地址获取百度API经纬度(详细文档) public void getLarLng(String address) throws Exception { String ak = " ...
- Java 8 新日期时间 API
Java 8 新日期时间 API 1. LocalDate.LocalTime.LocalDateTime LocalDate.LocalTime.LocalDateTime 实例是不可变的对象,分别 ...
- springboot整合elasticsearch出错:java.lang.NoClassDefFoundError: org/elasticsearch/plugins/NetworkPlugin
Caused by: java.lang.NoClassDefFoundError: org/elasticsearch/plugins/NetworkPlugin at java.lang.Clas ...
- Java生鲜电商平台-API请求性能调优与性能监控
Java生鲜电商平台-API请求性能调优与性能监控 背景 在做性能分析时,API的执行时间是一个显著的指标,这里使用SpringBoot AOP的方式,通过对接口添加简单注解的方式来打印API的执行时 ...
随机推荐
- HTML语言笔记
html语言即超文本标记语言. 超文本标记语言,标准通用标记语言下的一个应用. "超文本"就是指页面内可以包含图片.链接,甚至音乐.程序等非文字元 ...
- 定宽块状元素居中 1记(text-align/margin:0 auto)
对于text-align:center的用法只是针对文本相对于父元素的居中,例如: #jz2{ width:300px; margin: 10px auto; border:2px solid red ...
- Word直接发布新浪博客(以Wo…
原文地址:Word直接发布新浪博客(以Word 2013为例)作者:paulke2011 注意:这篇博客直接由Word 2013发出!这虽然也算是一个教程,但更多的是一个试验品. 老早就知道Word有 ...
- 【★】Web精彩实战之<智能迷宫>
JS精彩实战之<智能迷宫> ---宝贵编程经验分享会--- hello大家好,这里是Web云课堂,之前的一年里我们经历了Html和CSS的系统攻城,此时的你们已经是做静态(动静结 ...
- 团队作业8——Beta 阶段冲刺3rd day
一.当天站立式会议 二.每个人的工作 (1)昨天已完成的工作(具体在表格中) 添加了订单功能,并且对订单功能进行了测试 (2)今天计划完成的工作(具体如下) 添加支付功能 (3) 工作中遇到的困难(在 ...
- 团队作业4——第一次项目冲刺(Alpha版本)2st day
一.Daily Scrum Meeting照片 二.燃尽图 三.项目进展 界面 1.四个用户登录界面已经完成. 2.界面内的功能完成了一小部分. 登陆部分 1.QQ授权已经申请,还未通过. 2.通过好 ...
- Git 指南 -- 什么应该被纳入管理?
Git 指南 -- 什么应该被纳入管理? 如果还不了解Git是什么,可以先阅读这篇博文:http://www.cnblogs.com/schaepher/p/5561193.html 是作品,而不是产 ...
- 201521123027 <iava程序设计>第六周学习总结
1. 本周学习总结 1.1 面向对象学习暂告一段落,请使用思维导图,以封装.继承.多态为核心概念画一张思维导图,对面向对象思想进行一个总结. 注1:关键词与内容不求多,但概念之间的联系要清晰,内容覆盖 ...
- 201521123112《Java程序设计》第4周学习总结
1. 本周学习总结 1.1 尝试使用思维导图总结有关继承的知识点 1.2 使用常规方法总结其他上课内容 关于多态,多态性就是相同的形态,不同的定义.在简单点说的话就是不同类的对象对同一个消息作出的相应 ...
- 201521123088《Java程序设计》第11周学习总结
1. 本周学习总结 1.1 以你喜欢的方式(思维导图或其他)归纳总结多线程相关内容. 2. 书面作业 本次PTA作业题集多线程 1. 互斥访问与同步访问 完成题集4-4(互斥访问)与4-5(同步访问) ...