设为首页 收藏本站
查看: 2126|回复: 0

[经验分享] Elasticsearch权威指南--集群

[复制链接]
累计签到:2 天
连续签到:1 天
发表于 2016-4-22 09:45:34 | 显示全部楼层 |阅读模式
1.一个空的集群
如果启动单个Elasticsearch实例,没有数据和索引。那么集群就是如下形式:




Node 节点,就是一个运行的Elasticsearch实例。一个集群Cluster包含一个或者多个具有相同cluster.name的节点。cluster.name在elasticsearch.yml中指定。一个集群中的节点共同分担整个集群的数据和压力。当向集群中增加或者删除节点时,集群自身会从新均匀地分布数据到其他节点上。
集群中的Master节点时通过选举产生的,Master节点会负责整个集群层面的变更,例如创建或者删除一个索引,或者增加或删除一个节点。Master节点并不会涉及到文档层面的变更或者查询,这就意味着当流量增长时如果在集群中只有一个Master节点并不会成为瓶颈。任何节点都可以成为Master节点。

用户可以和集群中任何一个节点通信,包括Master节点。每个节点都知道每个文档存放在哪里并且会将我们的查询请求直接转发到存储所要数据的节点上。然后那个节点会将响应直接返回给客户端。所有这些都是通过Elasticsearch自身来管理的。


2.集群健康状况
1
curl http://127.0.0.1:9200/_cluster/health?pretty



1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
{
  "cluster_name" : "xxxxx_prod_elasticsearch",
  "status" : "green",
  "timed_out" : false,
  "number_of_nodes" : 1,
  "number_of_data_nodes" : 1,
  "active_primary_shards" : 0,
  "active_shards" : 0,
  "relocating_shards" : 0,
  "initializing_shards" : 0,
  "unassigned_shards" : 0,
  "delayed_unassigned_shards" : 0,
  "number_of_pending_tasks" : 0,
  "number_of_in_flight_fetch" : 0,
  "task_max_waiting_in_queue_millis" : 0,
  "active_shards_percent_as_number" : 100.0
}





最重要的就是status字段,表示整个集群的监控状况
green  表示所有的primary和repica分片活动状态。
yellow  表示所有的primary分片处于活动状态,但是不是所有的replica分片是活动的
red    不是所有的primary分片都是活动的

3.增加一个索引
为了向Elasticsearch中添加数据,我们需要一个索引,就是一个存放数据的地方。实际上,一个索引就仅是一个指向一个或者多个物理分片的逻辑上的域名空间而已。

一个分片只是索引中的所有的数据的一个切片,它是一个低级的工作单元。文档是存放并索引在分片中的,但是应用程序不直接和分片通信,而是通过索引来通信。

一个分片要么是一个primary分片或者一个replica分片。索引中的每条文档都归属于单个primary分片。所以,primary分片的数量决定了索引可以存储的最大数据容量。

replica分片仅仅是primary分片的一个拷贝,是为了为数据提供冗余,防止在硬件出故障的时候数据丢失。并且提供查询文档或者获取文档的功能。
现在创建一个叫做blogs的索引

1
curl -XPUT  http://127.0.0.1:9200/blogs



1
curl -XGET  http://127.0.0.1:9200/blogs?pretty=true



1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
{
  "blogs" : {
    "aliases" : { },
    "mappings" : { },
    "settings" : {
      "index" : {
        "creation_date" : "1461250293462",
        "number_of_shards" : "5",
        "number_of_replicas" : "1",
        "uuid" : "fIdjCvoXTQy9eMaKmIrnrQ",
        "version" : {
          "created" : "2030199"
        }
      }
    },
    "warmers" : { }
  }
}




默认情况下,新创建的索引会被分配5个primary分片,每个primary分片被分配1个replica分片。



然后再查看集群的状态
1
curl -XGET  http://127.0.0.1:9200/_cluster/health?pretty



1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
{
  "cluster_name" : "xxxx_prod_elasticsearch",
  "status" : "yellow",
  "timed_out" : false,
  "number_of_nodes" : 1,
  "number_of_data_nodes" : 1,
  "active_primary_shards" : 5,
  "active_shards" : 5,
  "relocating_shards" : 0,
  "initializing_shards" : 0,
  "unassigned_shards" : 5,
  "delayed_unassigned_shards" : 0,
  "number_of_pending_tasks" : 0,
  "number_of_in_flight_fetch" : 0,
  "task_max_waiting_in_queue_millis" : 0,
  "active_shards_percent_as_number" : 50.0
}




可以看到status是yellow状态,unassigned_shards是5
集群健康状态是yellow表示所有的primary分片都是活动的,可以向外提供任何的请求,但是不是所有的replica分片是活动的。


4.增加备用节点
只运行单个节点意味着存在单点故障的问题,没有冗余功能。可以通过增加备用节点来保护我们的数据。






参考文档:
https://www.elastic.co/guide/en/ ... ibuted-cluster.html



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-207223-1-1.html 上篇帖子: Syslog-ng+Rsyslog收集日志:收集SSH用户命令(四) 下篇帖子: Syslog-ng+Rsyslog收集日志:RELP可靠传输,替代UDP、TCP(五)
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表