全部产品
存储与CDN 数据库 安全 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网
开放搜索

Commit推送Demo

更新时间:2017-09-07 17:39:39

V3.1 SDK Commit方式新增文档样例代码

Commit 提交数据方式,主要是在程序中动态将对应的文档数据封装到Map对象中,再将这些Map对象通过add方法添加到缓存中,最后调用Commit方法,批量提交这些Map对象文档数据。

适用场景

  • 动态拼接数据提交场景
  • 单个文档提交场景
  • 小批量性文档提交场景
  1. package com.aliyun.opensearch;
  2. import com.aliyun.opensearch.sdk.dependencies.com.google.common.collect.Lists;
  3. import com.aliyun.opensearch.sdk.dependencies.com.google.common.collect.Maps;
  4. import com.aliyun.opensearch.sdk.dependencies.org.json.JSONObject;
  5. import com.aliyun.opensearch.sdk.generated.OpenSearch;
  6. import com.aliyun.opensearch.sdk.generated.commons.OpenSearchClientException;
  7. import com.aliyun.opensearch.sdk.generated.commons.OpenSearchException;
  8. import com.aliyun.opensearch.sdk.generated.commons.OpenSearchResult;
  9. import com.aliyun.opensearch.sdk.generated.search.Config;
  10. import com.aliyun.opensearch.sdk.generated.search.SearchFormat;
  11. import com.aliyun.opensearch.sdk.generated.search.SearchParams;
  12. import com.aliyun.opensearch.sdk.generated.search.general.SearchResult;
  13. import java.io.UnsupportedEncodingException;
  14. import java.nio.charset.Charset;
  15. import java.util.Map;
  16. import java.util.Random;
  17. public class testCommitSearch {
  18. private static String appName = "替换为opensearch应用名";
  19. private static String tableName = "替换opensearch应用表名";
  20. private static String accesskey = "替换accesskey";
  21. private static String secret = "替换secret";
  22. private static String host = "替换应用的API访问地址";
  23. public static void main(String[] args) {
  24. //查看文件和默认编码格式
  25. System.out.println(String.format("file.encoding: %s", System.getProperty("file.encoding")));
  26. System.out.println(String.format("defaultCharset: %s", Charset.defaultCharset().name()));
  27. //生成随机数,作为主键值
  28. Random rand = new Random();
  29. int value = rand.nextInt(Integer.MAX_VALUE);
  30. //定义Map对象存储上传数据doc1
  31. Map<String, Object> doc1 = Maps.newLinkedHashMap();
  32. doc1.put("id", value);
  33. String title_string = "Commit方式新增文档1";// utf-8
  34. byte[] bytes;
  35. try {
  36. bytes = title_string.getBytes("utf-8");
  37. String utf8_string = new String(bytes, "utf-8");
  38. doc1.put("name", utf8_string);
  39. } catch (UnsupportedEncodingException e) {
  40. e.printStackTrace();
  41. }
  42. doc1.put("phone", "13712345678");
  43. int[] int_arr = {33,44};
  44. doc1.put("int_arr", int_arr);
  45. String[] literal_arr = {"Commit方式新增文档1","测试Commit方式新增文档1]"};
  46. doc1.put("literal_arr", literal_arr);
  47. float[] float_arr = {(float)1.1,(float)1.2};
  48. doc1.put("float_arr", float_arr);
  49. doc1.put("cate_id", 1);
  50. //创建并构造OpenSearch对象
  51. OpenSearch openSearch1 = new OpenSearch(accesskey, secret, host);
  52. //创建OpenSearchClient对象,并以OpenSearch对象作为构造参数
  53. OpenSearchClient serviceClient1 = new OpenSearchClient(openSearch1);
  54. //定义DocumentClient对象添加数据并提交
  55. DocumentClient documentClient1 = new DocumentClient(serviceClient1);
  56. // 把doc1加入缓存,并设为新增文档
  57. documentClient1.add(doc1);
  58. //文档输出
  59. System.out.println(doc1.toString());
  60. try {
  61. //执行提交新增操作,此处用于测试故单个提交延迟10s查看操作信息,也可在后面一次性提交执行操作
  62. OpenSearchResult osr = documentClient1.commit(appName, tableName);
  63. //判断数据是否推送成功,主要通过判断2处,第一处判断用户方推送是否成功,第二处是应用控制台中有无报错日志
  64. //用户方推送成功后,也有可能在应用端执行失败,此错误会直接在应用控制台错误日志中生成,比如字段内容转换失败
  65. if(osr.getResult().equalsIgnoreCase("true")){
  66. System.out.println("用户方推送无报错!\n以下为getTraceInfo推送请求Id:"+osr.getTraceInfo().getRequestId());
  67. }else{
  68. System.out.println("用户方推送报错!"+osr.getTraceInfo());
  69. }
  70. } catch (OpenSearchException e) {
  71. e.printStackTrace();
  72. } catch (OpenSearchClientException e) {
  73. e.printStackTrace();
  74. }
  75. try {
  76. Thread.sleep(10000);//休眠10秒,可在控制台查看新增的数据
  77. } catch (InterruptedException e) {
  78. e.printStackTrace();
  79. }
  80. //定义Map对象doc2,并更新doc1,更新也采用add,已存在数据且主键值相同即为更新处理
  81. Map<String, Object> doc2 = Maps.newLinkedHashMap();
  82. doc2.put("id", value);
  83. String title_string2 = "Commit方式更新文档1";// utf-8
  84. byte[] bytes2;
  85. try {
  86. bytes2 = title_string2.getBytes("utf-8");
  87. String utf8_string2 = new String(bytes2, "utf-8");
  88. doc2.put("name", utf8_string2);
  89. } catch (UnsupportedEncodingException e) {
  90. e.printStackTrace();
  91. }
  92. doc2.put("phone", "13712342222");
  93. int[] int_arr2 = {22,22};
  94. doc2.put("int_arr", int_arr2);
  95. String[] literal_arr2 = {"Commit方式更新文档1","Commit方式更新文档1"};
  96. doc2.put("literal_arr", literal_arr2);
  97. float[] float_arr2 = {(float)1.1,(float)1.2};
  98. doc2.put("float_arr", float_arr2);
  99. doc2.put("cate_id", 1);
  100. // 把doc2加入缓存,因为此数据已存在,且主键值也相同,此记录作更新处理
  101. documentClient1.add(doc2);
  102. //文档输出
  103. System.out.println(doc2.toString());
  104. try {
  105. // 执行更新并提交,此处用于测试故单个提交延迟10s查看操作信息,也可在后面一次性提交执行操作
  106. OpenSearchResult osr = documentClient1.commit(appName, tableName);
  107. //判断数据是否推送成功,主要通过判断2处,第一处判断用户方推送是否成功,第二处是应用控制台中有无报错日志
  108. //用户方推送成功后,也有可能在应用端执行失败,此错误会直接在应用控制台错误日志中生成,比如字段内容转换失败
  109. if(osr.getResult().equalsIgnoreCase("true")){
  110. System.out.println("用户方推送无报错!\n以下为getTraceInfo推送请求Id:"+osr.getTraceInfo().getRequestId());
  111. }else{
  112. System.out.println("用户方推送报错!"+osr.getTraceInfo());
  113. }
  114. } catch (OpenSearchException e) {
  115. e.printStackTrace();
  116. } catch (OpenSearchClientException e) {
  117. e.printStackTrace();
  118. }
  119. try {
  120. Thread.sleep(10000);//休眠10秒,可在控制台查看更新的数据
  121. } catch (InterruptedException e) {
  122. e.printStackTrace();
  123. }
  124. // 定义Map对象doc3,删除文档只需指定需删除文档主键值即可
  125. Map<String, Object> doc3 = Maps.newLinkedHashMap();
  126. doc3.put("id", value);
  127. // 把doc3加入缓存,此处做删除文档处理
  128. documentClient1.remove(doc3);
  129. //文档输出
  130. System.out.println(doc3.toString());
  131. try {
  132. // 执行删除并提交,此处用于测试故单个提交延迟10s查看操作信息,也可在后面一次性提交执行操作
  133. OpenSearchResult osr = documentClient1.commit(appName, tableName);
  134. //判断数据是否推送成功,主要通过判断2处,第一处判断用户方推送是否成功,第二处是应用控制台中有无报错日志
  135. //用户方推送成功后,也有可能在应用端执行失败,此错误会直接在应用控制台错误日志中生成,比如字段内容转换失败
  136. if(osr.getResult().equalsIgnoreCase("true")){
  137. System.out.println("用户方推送无报错!\n以下为getTraceInfo推送请求Id:"+osr.getTraceInfo().getRequestId());
  138. }else{
  139. System.out.println("用户方推送报错!"+osr.getTraceInfo());
  140. }
  141. } catch (OpenSearchException e) {
  142. e.printStackTrace();
  143. } catch (OpenSearchClientException e) {
  144. e.printStackTrace();
  145. }
  146. try {
  147. Thread.sleep(10000);//休眠10秒后,再查看删除后的数据,如果此处不休眠而是立刻查询可能会因为数据没有及时删除而查出存在的数据,至少休眠1秒
  148. } catch (InterruptedException e) {
  149. e.printStackTrace();
  150. }
  151. //-------------查询删除后的文档,此处因为查询删除后的问题还是存在,暂不提供查询代码,怀疑有延迟-----------------
  152. //创建并构造OpenSearch对象
  153. OpenSearch openSearch2 = new OpenSearch(accesskey, secret, host);
  154. //创建OpenSearchClient对象,并以OpenSearch对象作为构造参数
  155. OpenSearchClient serviceClient2 = new OpenSearchClient(openSearch2);
  156. //创建SearcherClient对象,并以OpenSearchClient对象作为构造参数
  157. SearcherClient searcherClient2 = new SearcherClient(serviceClient2);
  158. //创建Config对象,用于设定config子句参数,分页或数据返回格式等等
  159. Config config = new Config(Lists.newArrayList(appName));
  160. config.setStart(0);
  161. config.setHits(30);
  162. //设置返回格式为json,目前只支持返回xml和json格式,暂不支持返回fulljson类型
  163. config.setSearchFormat(SearchFormat.JSON);
  164. SearchParams searchParams = new SearchParams(config);
  165. searchParams.setQuery("id:'" + value + "'");
  166. //// 执行返回查询结果
  167. SearchResult searchResult;
  168. try {
  169. searchResult = searcherClient2.execute(searchParams);
  170. String result = searchResult.getResult();
  171. JSONObject obj = new JSONObject(result);
  172. // 输出查询结果
  173. System.out.println("查询调试输出:"+obj.toString());
  174. } catch (OpenSearchException e) {
  175. e.printStackTrace();
  176. } catch (OpenSearchClientException e) {
  177. e.printStackTrace();
  178. }
  179. }
  180. }
本文导读目录