眾所周知,elasticsearch簡(jiǎn)稱(chēng)es,它是基于基于Lucene的搜索服務(wù)器。它提供了一個(gè)分布式多用戶(hù)能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java開(kāi)發(fā)的,并作為Apache許可條款下的開(kāi)放源碼發(fā)布,是當(dāng)前流行的企業(yè)級(jí)搜索引擎。設(shè)計(jì)用于云計(jì)算中,能夠達(dá)到實(shí)時(shí)搜索,穩(wěn)定,可靠,快速,安裝使用方便。
我們建立一個(gè)網(wǎng)站或應(yīng)用程序,并要添加搜索功能,但是想要完成搜索工作的創(chuàng)建是非常困難的。我們希望搜索解決方案要運(yùn)行速度快,我們希望能有一個(gè)零配置和一個(gè)完全免費(fèi)的搜索模式,我們希望能夠簡(jiǎn)單地使用JSON通過(guò)HTTP來(lái)索引數(shù)據(jù),我們希望我們的搜索服務(wù)器始終可用,我們希望能夠從一臺(tái)開(kāi)始并擴(kuò)展到數(shù)百臺(tái),我們要實(shí)時(shí)搜索,我們要簡(jiǎn)單的多租戶(hù),我們希望建立一個(gè)云的解決方案。因此我們利用Elasticsearch來(lái)解決所有這些問(wèn)題以及可能出現(xiàn)的更多其它問(wèn)題。
在javascript/212223.html">javascript/51251.html">java中使用es時(shí),無(wú)非想解決的是查詢(xún)速度不夠快,效率不夠高問(wèn)題,單一從數(shù)據(jù)庫(kù)里查詢(xún)數(shù)據(jù)已經(jīng)不能拿滿(mǎn)足當(dāng)前的業(yè)務(wù)需求,ok!那么現(xiàn)在我們來(lái)講述一下如何在java中使用到es這個(gè)神奇的搜索服務(wù)器呢,首先,你得要去引用es的依賴(lài)包,依賴(lài)如下:
<dependency><groupId>org.elasticsearch.client</groupId><artifactId>transport</artifactId><version>5.5.0</version> </dependency><groupId>org.elasticsearch.client</groupId><artifactId>transport</artifactId><version>5.5.0</version> </dependency> <dependency><groupId>org.elasticsearch</groupId><artifactId>elasticsearch</artifactId><version>5.5.0</version> </dependency>
好的,添加完依賴(lài)之后,進(jìn)入到es使用階段,對(duì)了,有個(gè)問(wèn)題得需要說(shuō)明一下,要使用es的話(huà)需要安裝jdk1.8工具包并且tomcat最好是7.05以上的版本,不然es會(huì)不支持,集成到項(xiàng)目里面可能會(huì)報(bào)錯(cuò)!,還有es的安裝和下載,這里附下載地址下載地址:https://www.elastic.co/downloads/elasticsearch
一切準(zhǔn)備就緒后接下來(lái)進(jìn)入到我們真正期待的時(shí)刻,什么呢,沒(méi)錯(cuò),集成es,究竟如何在java里面搜索查詢(xún)es服務(wù)器里面的東西呢,讓我一一來(lái)為你揭曉:
首先我們建議一個(gè)es的工具類(lèi)
package com.osa.utils;import java.io.BufferedReader;import java.io.IOException;import java.io.InputStreamReader;import java.io.PrintWriter;import java.net.URL;import java.net.URLConnection;import java.net.URLEncoder;import java.util.Iterator;import java.util.List;import java.util.Map;import java.util.Set;import org.apache.http.client.ClientProtocolException;import com.alibaba.fastjson.JSONArray;import com.alibaba.fastjson.JSONException;import com.alibaba.fastjson.JSONObject;public class HTTPSentUtils {/** * 向指定URL發(fā)送GET方法的請(qǐng)求 * * @param url * 發(fā)送請(qǐng)求的URL * @param param * 請(qǐng)求參數(shù),請(qǐng)求參數(shù)應(yīng)該是 name1=value1&name2=value2 的形式。 * @return URL 所代表遠(yuǎn)程資源的響應(yīng)結(jié)果 */ public static String sendGet(String url, String param) { String result = ""; BufferedReader in = null; try { String urlNameString = url + "?" + param; URL realUrl = new URL(urlNameString); // 打開(kāi)和URL之間的連接 URLConnection connection = realUrl.openConnection(); // 設(shè)置通用的請(qǐng)求屬性 connection.setRequestProperty("accept", "*/*"); connection.setRequestProperty("connection", "Keep-Alive"); connection.setRequestProperty("user-agent", "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1;SV1)"); // 建立實(shí)際的連接 connection.connect(); // 獲取所有響應(yīng)頭字段 Map<String, List<String>> map = connection.getHeaderFields(); // 遍歷所有的響應(yīng)頭字段 for (String key : map.keySet()) { System.out.println(key + "--->" + map.get(key)); } // 定義 BufferedReader輸入流來(lái)讀取URL的響應(yīng) in = new BufferedReader(new InputStreamReader( connection.getInputStream())); String line; while ((line = in.readLine()) != null) { result += line; } } catch (Exception e) { System.out.println("發(fā)送GET請(qǐng)求出現(xiàn)異常!" + e); e.printStackTrace(); } // 使用finally塊來(lái)關(guān)閉輸入流 finally { try { if (in != null) { in.close(); } } catch (Exception e2) { e2.printStackTrace(); } } return result; } /** * 向指定 URL 發(fā)送POST方法的請(qǐng)求 * * @param url * 發(fā)送請(qǐng)求的 URL * @param param * 請(qǐng)求參數(shù),請(qǐng)求參數(shù)應(yīng)該是 name1=value1&name2=value2 的形式。 * @return 所代表遠(yuǎn)程資源的響應(yīng)結(jié)果 */ public static String sendPost(String url, String param) { PrintWriter out = null; BufferedReader in = null; String result = ""; try { URL realUrl = new URL(url); // 打開(kāi)和URL之間的連接 URLConnection conn = realUrl.openConnection(); // 設(shè)置通用的請(qǐng)求屬性 conn.setRequestProperty("accept", "*/*"); conn.setRequestProperty("connection", "Keep-Alive"); conn.setRequestProperty("user-agent", "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1;SV1)"); // 發(fā)送POST請(qǐng)求必須設(shè)置如下兩行 conn.setDoOutput(true); conn.setDoInput(true); // 獲取URLConnection對(duì)象對(duì)應(yīng)的輸出流 out = new PrintWriter(conn.getOutputStream()); // 發(fā)送請(qǐng)求參數(shù) out.print(param); // flush輸出流的緩沖 out.flush(); // 定義BufferedReader輸入流來(lái)讀取URL的響應(yīng) in = new BufferedReader( new InputStreamReader(conn.getInputStream())); String line; while ((line = in.readLine()) != null) { result += line; } } catch (Exception e) { System.out.println("發(fā)送 POST 請(qǐng)求出現(xiàn)異常!"+e); e.printStackTrace(); } //使用finally塊來(lái)關(guān)閉輸出流、輸入流 finally{ try{ if(out!=null){ out.close(); } if(in!=null){ in.close(); } } catch(IOException ex){ ex.printStackTrace(); } } return result; } }
工具類(lèi)有了之后,可以看到里面有兩個(gè)發(fā)送請(qǐng)求的方法,一個(gè)是sendGet和sendPost方法,兩個(gè)方法可以基于自己的選擇選用,當(dāng)然這只是個(gè)發(fā)送請(qǐng)求的方法,如何調(diào)用?在這里的話(huà),我們既然是從es里面查詢(xún),就沒(méi)有必要使用mybatis或者h(yuǎn)ibernate框架了,可以在數(shù)據(jù)層中,自己定義sql,然后將sql將拼好的sql通過(guò)前面的工具類(lèi)調(diào)用sendGet/sendPost方法,如下:
String sql=URLEncoder.encode(" select * from table");encode方法主要是去除sql里面的一些空格
String result=HTTPSentUtils.sendGet("http://221.124.71.8:9200/_sql", "sql="+sql);ip加端口自己可以在安裝的時(shí)候配置
OK!一般到這個(gè)時(shí)候的發(fā)送可以成功的話(huà),就能取到es里面的數(shù)據(jù),因?yàn)閑s里面返回的都是json數(shù)據(jù),所以我們
格式化一下json字符串
net.sf.json.JSONObject jsonObject =net.sf.json.JSONObject.fromObject(result); //取出hits標(biāo)簽net.sf.json.JSONObject hitsjsonObject = jsonObject.getJSONObject("hits");
數(shù)據(jù)拿到之后,結(jié)下來(lái)就是業(yè)務(wù)操作了。到這里也差不多結(jié)束了。
以上是查詢(xún)的一些操作,那么如果我們需要將數(shù)據(jù)批量插入到es里面該如何操作?舉個(gè)例子吧
package com.sojson.core.elasticsearch.manager;import java.util.ArrayList;import java.util.HashMap;import java.util.List;import java.util.Map;import net.sf.json.JSONObject;import org.elasticsearch.action.bulk.BulkRequestBuilder;import org.elasticsearch.action.bulk.BulkResponse;import org.elasticsearch.action.index.IndexRequestBuilder;import com.sojson.common.utils.StringUtils;import com.sojson.core.elasticsearch.utils.ESTools;publicclassInsertManager{/*** 添加數(shù)據(jù)到Elasticsearch*@param index 索引*@param type 類(lèi)型*@param idName Id字段名稱(chēng)*@param json 存儲(chǔ)的JSON,可以接受Map*@return*/publicstaticMapsave(String index,String type,String idName,JSONObject json){List list =newArrayList();list.add(json);return save(index, type, idName, list);}
通過(guò)傳來(lái)的參數(shù)進(jìn)行處理調(diào)用save方法執(zhí)行插入es操作
/*** 添加數(shù)據(jù)到Elasticsearch*@param index 索引*@param type 類(lèi)型*@param idName Id字段名稱(chēng)*@param listData 一個(gè)對(duì)象集合*@return*/@SuppressWarnings("unchecked")publicstaticMapsave(String index,String type,String idName,List listData){BulkRequestBuilder bulkRequest =ESTools.client.prepareBulk().setRefresh(true);Map resultMap =newHashMap();for(Object object: listData){JSONObject json =JSONObject.fromObject(object);//沒(méi)有指定idName 那就讓Elasticsearch自動(dòng)生成,if(StringUtils.isBlank(idName)){IndexRequestBuilder lrb =ElasticsearchUtils.client .prepareIndex(index, type) .setSource(json);bulkRequest.add(lrb);//ElasticsearchUtils是工具類(lèi),里面配置的是一些es配置信息}else{String idValue = json.optString(idName);IndexRequestBuilder lrb =ESTools.client.prepareIndex(index, type,idValue).setSource(json);bulkRequest.add(lrb);}}BulkResponse bulkResponse = bulkRequest.execute().actionGet();if(bulkResponse.hasFailures()){// process failures by iterating through each bulk response itemSystem.out.println(bulkResponse.getItems().toString());resultMap.put("500","保存ES失敗!");return resultMap;}bulkRequest=ESTools.client.prepareBulk();resultMap.put("200","保存ES成功!");return resultMap;}}
ElasticsearchUtils工具類(lèi)
public class ElasticsearchUtils {private static final String CLUSTER_NAME = "cluster.name";private static final String ES_IP="es.ip";private static final String ES_PORT="es.port";private static Settings settings;private static TransportClient client;public static TransportClient getESClient() throws UnknownHostException{settings = Settings.builder().put(CLUSTER_NAME,ConfigUtils.getConfig(CLUSTER_NAME)).build();if(client != null){client = new PreBuiltTransportClient(settings).addTransportAddress(new InetSocketTransportAddress(InetAddress.getByName(ConfigUtils.getConfig(ES_IP)), Integer.parseInt(ConfigUtils.getConfig(ES_PORT))));}return client;}
以上是插入es操作,好了,今天的總結(jié)就到這里吧,希望可以給大家?guī)?lái)一些小小的幫助,也希望大家多多支持VeVb武林網(wǎng)。
新聞熱點(diǎn)
疑難解答
圖片精選