您好,匿名用户
随意问技术百科期待您的加入

flume-ng 使用 MySQL Sink

0 投票

我准备使用apache flume 1.3 来处理日志的收集工作,日志的量不是很大,每天10个G左右,
我准备仅把WARN和ERROR级别的日志抽取出来保存,供后续分析使用。
由于目前这两类数据不会很多,初步打算把他们写入MySQL DB, 使用起来方便一些。

问题:
1. 官方文档没有提供到普通关系数据的Sink实现,我是否需要自己实现,或者是否已经有比较好的第三方实现?
2. 把日志写入MySQL是否是个好主意?

用户头像 提问 2014年 4月8日 @ 河蟹 列兵 (96 威望)
分享到:

1个回答

0 投票
 
最佳答案

flume本身没有实现,自己写个插件吧,不费力。
将日志写到mysql没问题的,但是得考虑到分表,也便于以后统计。

用户头像 回复 2014年 4月8日 @ 我和小伙伴们都惊呆了 上等兵 (156 威望)
选中 2013年 9月7日 @河蟹
提一个问题:

相关问题

0 投票
0 回复 20 阅读
用户头像 提问 2013年 10月25日 @ Garen 上等兵 (269 威望)
0 投票
1 回复 26 阅读
用户头像 提问 2012年 12月1日 @ Rammus 上等兵 (334 威望)
0 投票
0 回复 22 阅读
用户头像 提问 2012年 12月1日 @ Aries 上等兵 (238 威望)
0 投票
1 回复 48 阅读
用户头像 提问 2012年 12月1日 @ Renekton 上等兵 (260 威望)
0 投票
1 回复 34 阅读
用户头像 提问 2012年 12月1日 @ Tryndamere 上等兵 (325 威望)

欢迎来到随意问技术百科, 这是一个面向专业开发者的IT问答网站,提供途径助开发者查找IT技术方案,解决程序bug和网站运维难题等。
温馨提示:本网站禁止用户发布与IT技术无关的、粗浅的、毫无意义的或者违法国家法规的等不合理内容,谢谢支持。

欢迎访问随意问技术百科,为了给您提供更好的服务,请及时反馈您的意见。
...