ELK学习,架构和概要
记一记方便日后学习。ELKG 架构设计图:
ELKG 优点简介:
[*] 处理方式灵活。Elasticsearch 是实时全文索引,不需要像 storm 那样预先编程才能使用;
[*] 配置简易上手。Elasticsearch 全部采用 JSON 接口,Logstash 是 Ruby DSL 设计,都是目前业界最通用的配置语法设计;
[*] 检索性能高效。虽然每次查询都是实时计算,但是优秀的设计和实现基本可以达到全天数据查询的秒级响应;
[*] 集群线性扩展。不管是 Elasticsearch 集群还是 Logstash 集群都是可以线性扩展的;
[*] 前端操作炫丽。Kibana 界面上,只需要点击鼠标,就可以完成搜索、聚合功能,生成炫丽的仪表板。
各组件简介:
[*] logstash:Logstash is a tool for managing events and logs. You can use it to collect logs, parse them, and store them for later use (like, for searching)。是一个用来收集、解析日志的工具;
[*] kafka :接受logstash agent的日志消息队列;
[*] Elasticsearch:是一个分布式可扩展的实时搜索和分析引擎。它能帮助你搜索、分析和浏览数据;
[*] kibana:是一个高吞吐量的分布式发布订阅日志服务,具有高可用、高性能、分布式、高扩展、持久性等特性;
[*] grafana:用于可视化大型测量数据的开源程序,他提供了强大和优雅的方式去创建、共享、浏览数据。dashboard中显示了你不同metric数据源中的数据;
ELKG 学习网址:
[*] Elasticsearch: http://www.learnes.net/
[*] Logstash:http://udn.yyuap.com/doc/logstash-best-practice-cn/
[*] kibana: http://kibana.logstash.es/content/
原文来源:http://mp.weixin.qq.com/s?__biz=MzIyODI4ODI2Ng==&mid=2659193149&idx=1&sn=ccb7965454bbb72164f45d5561df92ae&scene=4#wechat_redirect
页:
[1]