`

使用Scribe重新构建log4j实现分布式日志中心

 
阅读更多

在浏览了诸多中文Scribe+log4j的博客之后，我发现，大家都是很不要face的抄人家的文，却没有一点要引用原文的意思。估计是抄来抄去，抄的多了都想不起来是谁抄谁的了。

 

原作应该是 Alex Loddengaard 的大作，写的很清楚，而且还有代码。这里不需要画蛇添足，大家欣赏吧。

Configuring and Using Scribe for Hadoop Log Collection

http://www.cloudera.com/blog/2008/11/configuring-and-using-scribe-for-hadoop-log-collection/

 

 

跑题篇，

除了Scribe之外，你还可以基于Thrift构建RPC服务。做到跨语言、高效通讯。推荐 Andrew Prunicki 的大作，

 

Apache Thrift

http://jnb.ociweb.com/jnb/jnbJun2009.html

分享到：
| Jetty Continuation实现原理和使用场景分析
评论
发表评论

您还没有登录,请您登录后再发表评论

相关推荐

    Thrift+Scribe分布式日志系统的构建

    在 Thrift+Scribe 构建的分布式日志系统中，日志的产生端（如服务器或应用）使用 log4j 或其他日志框架记录日志。这些日志可以通过 Thrift 的服务接口发送到 Scribe 客户端。Scribe 客户端将接收到的日志封装成 `Log...

    scribe+hadoop+log4j+hive+mysql

    综上所述，通过结合使用 Scribe、Hadoop、Log4j、Hive 和 MySQL 这些工具和技术，可以构建一套完整的日志数据采集、存储、处理和分析的解决方案。这对于深入理解用户行为、提升系统性能等方面都具有重要意义。

    scribe客户端所需jar包

    log4j是Java领域广泛使用的日志记录框架，它允许开发者灵活地配置日志级别、格式和输出目的地。通过结合scribe和log4j，你可以将应用程序的日志轻松地发送到scribe服务端。这个示例通常会展示如何配置log4j....

    Facebook大量相似高速数据实时日志收集系统

    **Scribe**：一个分布式日志收集系统，正在集成Zookeeper来提高系统的可靠性和一致性。 **HDFS**：一种可靠的分布式文件系统，其中`hdfsSync`和`ConcurrentReader`是关键组件，用于确保数据的一致性和并发访问。 *...

    Github Account

    推荐系统的整体架构包括前端系统（如Android、iOS、HTML5等）、后端系统（Nginx、Java、Spring等）、日志系统（scribe、flume、log stash、kafka等）、ETL系统（离线如Spark、Map/Reduce，在线如Spark Streaming、...

Magicbox
Global site tag (gtag.js) - Google Analytics