华为云Elasticsearch(FusionInsight HD) 连接和开发教程-环境准备

应用开发简介

Elasticsearh简介

Elasticsearch是一个基于Lucene的搜索服务器，它提供了一个分布式多用户能力的全文搜索引擎和分析引擎。设计用于大数据中，能够稳定、可靠、快速地实现实时搜索和分析，并且安装使用的方法十分简单方便。

Elasticsearch相比传统关系数据库，通过时间戳或者精确匹配做过滤的基本功能外，还能够进行全文搜索，处理同义词和根据相关性给文档打分，根据同一份数据生成分析和聚合的结果，在没有大量工作进程的情况下能做到对数据的实时处理。这也是Elasticsearch存在的重要意义。它让你以前所未有的速度处理大数据。

常用概念

基本概念

• cluster

  代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。Elasticsearch的一个概念就是去中心化，字面上理解就是无中心节点，这是对于集群外部来说的，因为从外部来看Elasticsearch集群，在逻辑上是个整体，你与任何一个节点的通信和与整个Elasticsearch集群通信是等价的。

• shards

  代表索引分片，Elasticsearch可以把一个完整的索引分成多个分片，这样的好处是可以把一个大的索引拆分成多个，分布到不同的节点上。构成分布式搜索。分片的数量只能在索引创建前指定，并且索引创建后不能更改。

• replicas

  代表索引副本，Elasticsearch可以设置多个索引的副本，副本的作用一是提高系统的容错性，当某个节点某个分片损坏或丢失时可以从副本中恢复。二是提高Elasticsearch的查询效率，Elasticsearch会自动对搜索请求进行负载均衡。

• recovery

  代表数据恢复或叫数据重新分布，Elasticsearch在有节点加入或退出时会根据机器的负载对索引分片进行重新分配，挂掉的节点重新启动时也会进行数据恢复。

• river

  代表Elasticsearch的一个数据源，也是其它存储方式（如：数据库）同步数据到Elasticsearch的一个方法。它是以插件方式存在的一个Elasticsearch服务，通过读取river中的数据并把它索引到Elasticsearch中，官方的river有couchDB、RabbitMQ、Twitter、Wikipedia的。

• gateway

  代表Elasticsearch索引快照的存储方式，Elasticsearch默认是先把索引存放到内存中，当内存满了时再持久化到本地硬盘。gateway对索引快照进行存储，当这个Elasticsearch集群关闭再重新启动时就会从gateway中读取索引备份数据。Elasticsearch支持多种类型的gateway，有本地文件系统（默认），分布式文件系统和Hadoop的HDFS。

• discovery.zen

  代表Elasticsearch的自动发现节点机制，Elasticsearch是一个基于p2p的系统，它先通过广播寻找存在的节点，再通过多播协议来进行节点之间的通信，同时也支持点对点的交互。

• Transport

  代表Elasticsearch内部节点或集群与客户端的交互方式，默认内部是使用TCP协议进行交互，同时它支持HTTP协议（json格式）、Thrift、Servlet、Memcached、ZeroMQ等的传输协议（通过插件方式集成）。

• Index

  这是Elasticsearch存储数据的地方，类似于关系数据库的database。

• Document type

  类似关系数据库的表，一个index里面只可以有一个Document type。

• Document

  这个类似关系数据库的一行，每一Document都有一个唯一的ID作为区分；

• Field

  类似关系数据库的某一列，这是Elasticsearch数据存储的最小单位。

下载客户端

操作场景

您可以