首页 > Web开发 > 详细

Flume+Morphline+Solr+Hue实时索引调试及问题定位

时间:2016-12-12 22:13:40      阅读:289      评论:0      收藏:0      [点我收藏+]

Technorati Tags: ,,,,
1.Flume和Morphline添加日志打印

log4j.logger.org.apache.flume.sink.solr=DEBUG
log4j.logger.org.kitesdk.morphline=TRACE

2.在线更新solr collection配置

$ solrctl instancedir --update url_analysis_records url_analysis_configs/
$ solrctl collection --reload url_analysis_records

3.删除solr已经有的index文件

<delete><query>*:*</query></delete>
<commit/>

 

Hue3.10 search(solr)最近调试发现的已知问题:

1.对动态索引不太能识别,尤其是对中文。

2.timeline功能会导致gc时间过长。

3.对中国时区支持不够,选择时间的字段慢8个小时,timeline快8个小时。因此需要专门指定一个Solr索引字段存UTC时间才能正常使用Hue功能。

Flume+Morphline+Solr+Hue实时索引调试及问题定位

原文:http://www.cnblogs.com/arli/p/6165924.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!