首页 > 其他 > 详细

海量日志分析方案--logstash+kibnana+kafka

时间:2014-03-24 17:26:28      阅读:659      评论:0      收藏:0      [点我收藏+]

下图为唯品会在qcon上面公开的日志处理平台架构图。听后觉得有些意思,好像也可以很容易的copy一个,就动手尝试了一下。

bubuko.com,布布扣

由于各种原因,目前只对flume===>kafka===>elacsticSearch===>kibnana(logstash)这条线路做一个简单的demo,以后有时间尝试整个架构的学习。

以下为日志处理平台的展现图。

 bubuko.com,布布扣

bubuko.com,布布扣

 

bubuko.com,布布扣

当然logstash还能做很多事情,demo中并未接入实际的数据,图形并不是很美观。

下面将简单介绍这一平台搭建过程:

现在我们来搭建这样flume===>kafka===>elacsticSearch===>kibnana(logstash)一个日志收集分析平台

首先分解以下问题,将日志收集和日志分析分开,分为flume====>kafka和logstash两部分。

为了比较有成就感,我们先搭建logstash。logstash的搭建非常简单,详见http://logstash.net/

海量日志分析方案--logstash+kibnana+kafka,布布扣,bubuko.com

海量日志分析方案--logstash+kibnana+kafka

原文:http://www.cnblogs.com/dempe/p/3620283.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!