由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Programming版 - kafka vs fluentd
相关主题
关于Kafka,一个log数据处理的问题matlab 和 R 的最大(根本)区别?
ES怎么玩?我知道为啥ruby这些framework没有用v8引擎原理的原因了
关于es的缺点哪天ruby把performance 提高上去了 这个语言还是可以掰掰手腕的
最近用vert.x解决了一个实际问题我最近写ruby写得很开心
搜索 lucene 之类是不是不流行了?有一点我不同意公孙大神说的
JVM上的语言互掐感觉os之上很多automation都是用perl类脚本来搞
蜥蜴和好虫掐起来了很多人没有意识到,其实很多人手写的c程序比java程序要慢
jvm上的脚本,这个老外说得靠谱写了一年ruby 半年Python 还是觉得ruby 太爽了
相关话题的讨论汇总
话题: fluentd话题: kafka话题: ruby话题: logstash话题: log
进入Programming版参与讨论
1 (共1页)
c*******a
发帖数: 1879
1
你选择哪个?
d*******r
发帖数: 3299
2
fluentd 用过, 设计和可靠性比 logstash 这个垃圾好很多.
不过流量大了,我记得 fluentd 扛不住, 应该不如 kafka.
fluentd 和 kafka 这2个使用场景不一样.
c*******a
发帖数: 1879
3
具体哪个用在哪个场合啊?

【在 d*******r 的大作中提到】
: fluentd 用过, 设计和可靠性比 logstash 这个垃圾好很多.
: 不过流量大了,我记得 fluentd 扛不住, 应该不如 kafka.
: fluentd 和 kafka 这2个使用场景不一样.

d*******r
发帖数: 3299
4
fluentd 是 log parser and collector
kafka 是 big message queue
比如, 你把 fluentd 安装在你要搜集 log 的 server 机器上.
每个 fluentd 搜集的 log 可以一股脑扔到 kafka 里面.
kafka 扛住大流量后,再扔到各种下游的 service, 比如 elasticsearch.

【在 c*******a 的大作中提到】
: 具体哪个用在哪个场合啊?
d****n
发帖数: 12461
5
ruby写的,data format用的json,看着是朝ui用户去的。

【在 d*******r 的大作中提到】
: fluentd 用过, 设计和可靠性比 logstash 这个垃圾好很多.
: 不过流量大了,我记得 fluentd 扛不住, 应该不如 kafka.
: fluentd 和 kafka 这2个使用场景不一样.

d*******r
发帖数: 3299
6
fluentd 不是朝ui去的, 就是搜集分析log的,
竞争的是 ELK stack 里面的 logstash (也是Ruby写的)

【在 d****n 的大作中提到】
: ruby写的,data format用的json,看着是朝ui用户去的。
s*********y
发帖数: 6151
7
logstash是ruby吗 一直以为是java

【在 d*******r 的大作中提到】
: fluentd 不是朝ui去的, 就是搜集分析log的,
: 竞争的是 ELK stack 里面的 logstash (也是Ruby写的)

d*******r
发帖数: 3299
8
是Ruby, 在JVM上能用JRuby跑

【在 s*********y 的大作中提到】
: logstash是ruby吗 一直以为是java
1 (共1页)
进入Programming版参与讨论
相关主题
写了一年ruby 半年Python 还是觉得ruby 太爽了搜索 lucene 之类是不是不流行了?
什么语言处理xml最方便?JVM上的语言互掐
有没有这样的blind JSON parser蜥蜴和好虫掐起来了
关于clojurejvm上的脚本,这个老外说得靠谱
关于Kafka,一个log数据处理的问题matlab 和 R 的最大(根本)区别?
ES怎么玩?我知道为啥ruby这些framework没有用v8引擎原理的原因了
关于es的缺点哪天ruby把performance 提高上去了 这个语言还是可以掰掰手腕的
最近用vert.x解决了一个实际问题我最近写ruby写得很开心
相关话题的讨论汇总
话题: fluentd话题: kafka话题: ruby话题: logstash话题: log