云计算实战 （海量日志管理）hadoop + scribe -- scribe 介绍和安装

scribe 介绍:

?

scribe 是facebook 开源的分布式日志系统 。 可以用java 借助log4j 向分布式scribe 写入日志。

?

[Sun Oct 31 23:37:38 2010] "STATUS: configuring" [Sun Oct 31 23:37:38 2010] "got configuration data from file </home/setups/scribe/scribe/examples/example1.conf>" [Sun Oct 31 23:37:38 2010] "CATEGORY : default" [Sun Oct 31 23:37:38 2010] "Creating default store" [Sun Oct 31 23:37:38 2010] "configured <1> stores" [Sun Oct 31 23:37:38 2010] "STATUS: " [Sun Oct 31 23:37:38 2010] "STATUS: ALIVE" [Sun Oct 31 23:37:38 2010] "Starting scribe server on port 1463" Thrift: Sun Oct 31 23:37:38 2010 libevent 2.0.7-rc method epoll

?

9 楼 ciyuanlong 2011-01-14 scribe输出给hdfs，是实时put的还是？ 10 楼 houzhaowei 2011-01-14 ciyuanlong 写道scribe输出给hdfs，是实时put的还是？
用rsync 同步到hadoop 的master 再执行cron 定时导入到hdfs。 11 楼 nwf5d 2011-02-11 Scribe、Chukwa和Flume的应用场景是大量日志服务器，收集日志到集群上吧。其中Chukwa更适合收集集群运行信息以利于管理配置。不知道您的应用场景是否需要这个呢？考虑过Chukwa和Flume吗？现在使用Scribe是否稳定？希望能和您多交流,MSN:nwfengwolf@hotmail.com QQ:77878449 12 楼 star22 2012-03-08 楼主是全部部件都装在一台机器上吗？ 13 楼 houzhaowei 2012-03-12 star22 写道楼主是全部部件都装在一台机器上吗？
对 ，就是一个scribe的server机器