阿里云ElasticSearch教程

Elastic公司的“ELK”是目前最火的日志分析三剑客，其中ElasticSearch负责日志的索引，Logstash负责日志的收集，Kibana负责日志的展示和分析。

事实上并不局限于日志分析，ELK技术栈同样适用于通用的数据采集、索引、分析业务。不可谓不强大。

Elastic与阿里云达成了合作伙伴关系，提供“阿里云 Elasticsearch”的新服务，提供了开箱即用的Elasticsearch和Kibana服务，方便我们快速搭建数据分析平台。下面我们将手把手演示一下如何在阿里云上创建并使用ElasticSearch服务。

首先，我们创建阿里云Elasticsearch服务，阿里云提供了一个月的免费体验服务。

如图，选择自己服务器所在的区域、VPC以及下面的虚拟交换机。对于大规模集群，可以勾选dedicated master，专用主节点可增强群集的稳定性。

阿里云目前提供了5.5.3_with_X-Pack版本的ElasticSearch，集成了X-Pack扩展，用户不必再手动购买。

X-pack是Elasticsearch的一个商业版扩展包，将安全，警告，监视，图形和报告功能捆绑在一个易于安装的软件包中。它可以作为插件被快速集成在Kibana中，并提供给用户集群启用认证、角色权限管控、集群实时监控、可视化报表生成、机器学习等能力。

开通完成后，需要等待3-5分钟进行初始化。初始化完成后，可以点击实例ID，进入管理页面。

管理界面显示了ElasticSearch实例的基本信息，并且提供了重启、扩容、续费等操作。同时可以从这里进入Kibana控制台以及监控页面。

监控

监控页面已经和阿里云的云监控整合在一起，使用方式和云监控完全相同。

譬如在这里我们可以设置一条报警规则，集群的磁盘使用率5分钟的平均值大于80%则报警。还可以配置通知方式，可以选择手机、邮箱、旺、钉钉机器人等。

ElasticSearch

购买ElasticSearch后，在同一区域相同VPC下的服务器便可以直接访问ElasticSearch，相关API可以参考官方文档

登录到机器上，调用HTTP API来测试一下是否可以连通ElasticSearch

查看节点信息：

查看index信息：

可见，阿里云ElasticSearch已经帮我们已经默认创建了几个系统index，这其实是集群的监控信息。

我们来查看一下其中一个index：

可见，这里记录的是Kibana的监控信息，同理.monitoring-es-6-2018.xx.xx里面记录的是ElasticSearch的监控信息。

ElasticSearch的使用方式非常简单，我们可以创建一个新的index来体验一下。

创建一个名为aliyun_es的index：

curl -XPUT -u elastic:YOUR_PASSWORD es-cn-xxxxxxxxxxxxx.elasticsearch.aliyuncs.com:9200/aliyun_es

index中的每条记录，称为document（下文简称doc），类似于MongoDB中的概念，事实上也很类似，因为每个doc都是一个json对象。 ElasticSearch的灵活之处就在于可以灵活地支持各种结构的数据，同一个index下，doc也可以有不同的structure，但最好不要这么做，这样很影响效率。

在index下，还可以用Type对doc进一步分组，以区别不同类型（无需单独创建，添加数据时指定路径即可）。

添加数据的方式非常简单：

curl -X POST -u elastic:YOUR_PASSWORD es-cn-xxxxxxxxxxxxx.elasticsearch.aliyuncs.com:9200/index_name/type_name -d '{...}' 

我们创建如下几个doc试试。

{
    "title":"hahaha",
    "body":"I am very happy.",
    "author":"admin"
},

{
    "title":"foo",
    "body":"bar",
    "author":"admin"
},

{
    "title":"hello",
    "body":"helloworld",
    "author":"root"
}