为了账号安全,请及时绑定邮箱和手机立即绑定

请教下把日志写入MySQL是否是个好主意?

请教下把日志写入MySQL是否是个好主意?

万千封印 2023-04-26 19:11:50
我准备使用apache flume 1.3 来处理日志的收集工作,日志的量不是很大,每天10个G左右,我准备仅把WARN和ERROR级别的日志抽取出来保存,供后续分析使用。由于目前这两类数据不会很多,初步打算把他们写入MySQL DB, 使用起来方便一些。问题:官方文档没有提供到普通关系数据的Sink实现,我是否需要自己实现,或者是否已经有比较好的第三方实现?
查看完整描述

2 回答

?
萧十郎

TA贡献1815条经验 获得超13个赞

flume本身没有实现,自己写个插件吧,不费力。
将日志写到mysql没问题的,但是得考虑到分表,也便于以后统计。

查看完整回答
反对 回复 2023-04-29
?
慕勒3428872

TA贡献1848条经验 获得超6个赞

1.没有
2.MySQL存日志不是一个好主意

考虑存到hdfs吧,如果实在要用MySQL考虑下tokudb


查看完整回答
反对 回复 2023-04-29
  • 2 回答
  • 0 关注
  • 180 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信