q9989 发表于 2019-1-29 13:55:28

ELK学习,架构和概要

  记一记方便日后学习。
  ELKG 架构设计图:
  ELKG 优点简介:

[*]  处理方式灵活。Elasticsearch 是实时全文索引,不需要像 storm 那样预先编程才能使用;
[*]  配置简易上手。Elasticsearch 全部采用 JSON 接口,Logstash 是 Ruby DSL 设计,都是目前业界最通用的配置语法设计;
[*]  检索性能高效。虽然每次查询都是实时计算,但是优秀的设计和实现基本可以达到全天数据查询的秒级响应;
[*]  集群线性扩展。不管是 Elasticsearch 集群还是 Logstash 集群都是可以线性扩展的;
[*]  前端操作炫丽。Kibana 界面上,只需要点击鼠标,就可以完成搜索、聚合功能,生成炫丽的仪表板。
  各组件简介:

[*]  logstash:Logstash is a tool for managing events and logs. You can use it to collect logs, parse them, and store them for later use (like, for searching)。是一个用来收集、解析日志的工具;
[*]  kafka :接受logstash agent的日志消息队列;
[*]  Elasticsearch:是一个分布式可扩展的实时搜索和分析引擎。它能帮助你搜索、分析和浏览数据;
[*]  kibana:是一个高吞吐量的分布式发布订阅日志服务,具有高可用、高性能、分布式、高扩展、持久性等特性;
[*]  grafana:用于可视化大型测量数据的开源程序,他提供了强大和优雅的方式去创建、共享、浏览数据。dashboard中显示了你不同metric数据源中的数据;
  ELKG 学习网址:

[*]  Elasticsearch: http://www.learnes.net/
[*]  Logstash:http://udn.yyuap.com/doc/logstash-best-practice-cn/
[*]  kibana: http://kibana.logstash.es/content/
  原文来源:http://mp.weixin.qq.com/s?__biz=MzIyODI4ODI2Ng==&mid=2659193149&idx=1&sn=ccb7965454bbb72164f45d5561df92ae&scene=4#wechat_redirect

页: [1]
查看完整版本: ELK学习,架构和概要