`

scribed 安装

阅读更多

最近做日志分流,早闻scribed大名,正好安装尝试一下.据说源码很简单,安装很麻烦.

公司yum源里其实有打好包的scribe,可惜是centos5的,苦逼的未升级的历史遗留centos4只能蛋疼的从源码安装.

刚开始借鉴的这篇:

http://dongxicheng.org/search-engine/scribe-installation/

后来发现这篇更简洁:

http://agiletesting.blogspot.com/2009/10/compiling-installing-and-test-running.html

 

步骤都差不多,先装boost(已有),再装thrift,然后fb303.在之中检查各种依赖的库和软件.

我自己的话,是升级了libevent和automake.

 

主要说说安装中遇到得问题:

1. thrift对boost的依赖问题: 即使使用正确的--with-boost也始终报版本不匹配.:

改configure文件,把BOOST_CPPFLAGS="-I$ac_boost_path/include" 改为 BOOST_CPPFLAGS="-I$ac_boost_path/"

通过.

2. htons,htonl报parameter不匹配等. 加configure参数(这个在编译scribe的时候也要加上):

CPPFLAGS="-DHAVE_INTTYPES_H -DHAVE_NETINET_IN_H"

3. std:tr1:functional找不到:

find . -name *.h -o -name *.cpp | xargs -i grep -H "tr1/func" {}

文件不多,其实是sed不熟,手动修改了.

4. fb303遇到问题与thrift类似.

4. scribe遇到问题与thrift类似.

5. 编译scribe遇到, configure: error: Could not link against  !的问题: 没有链接上boost的库.

编译boost的共享动态库(.so)于系统库目录.

6. 用example下的scribed_cat做测试程序(scribed_pipe版本过老):

cat apache_access_log | python scribed_cat apache.access

 

由于项目中木有用hadoop,没有试验与hdfs的集成.

 

分享到:
评论

相关推荐

    scribe安装配置文档[汇编].pdf

    Scribe 安装配置文档 Scribe 是 Facebook 开源的日志收集系统,已经在 Facebook 内部得到大量的应用。它能从各种日志源收集日志,存储到一个中央存储系统上,便于进行集中统计分析处理。它为日志的”分布式收集,...

    scribe详细安装文档

    **scribe详细安装文档** scribe是一个广泛使用的日志聚合系统,主要设计用于收集、分类和转发分布式系统的日志数据。在大型分布式环境中,如Hadoop或Facebook等,scribe扮演着至关重要的角色,它允许各个节点将日志...

    facebook-scribe-63e4824.tar

    - **安装**: 执行`sudo make install`将Scribe安装到系统路径。 - **配置**: 配置`scribe.conf`文件,指定监听端口、日志存储方式以及存储模块的配置。 - **启动Scribe**: 使用`scribe`命令启动服务。 **4. 使用...

    scribe软件

    - **文档**: 可能包含README文件或wiki页面,介绍如何安装、配置和使用scribe。 在实际应用中,scribe常与其它日志处理工具结合使用,例如Logstash或Fluentd,以实现更复杂的数据处理和分析。同时,它也可以配合...

    Scribe日志记录讲解

    在安装配置方面,以 FreeBSD 为例,Scribe 可以通过 pkg_add 命令直接安装二进制包,同时需要安装 thrift 和 fb303 包。在 Ubuntu 系统下,使用 apt-get 命令获取依赖包,而在 CentOS 中,可能需要手动下载依赖并...

    scribe客户端所需jar包

    scribe客户端是用于集成日志记录系统的一个开源库,主要针对分布式环境中的日志管理。它支持多种日志接收协议,...确保你正确地安装了所有必要的jar包,并根据示例代码和配置文件进行适当的调整,以适应你的特定需求。

    VideoScribe.7z

    在压缩包内的文件名称列表中,“使用说明.txt”是为用户提供操作指导的文档,帮助用户了解如何安装、配置和使用VideoScribe;而“VideoScribe2.3.4中文汉化可输入汉字”则意味着这是一个经过汉化的版本,不仅语言...

    VideoScribe.3.2.003

    如果您想自己尝试一下,则可以以某种方式安装摄像机并花费数小时进行绘制,但是更有效的方法是使用VideoScribe。它使您可以创建自己绘制的视频演示文稿。界面的现代设计及其直观的控件使此过程尽可能简单。 该软件...

    scribectl:backubescribe的命令行界面

    要将Scribe安装在Kubernetes或OpenShift集群中: 要试用Scribe,请按照的步骤进行。 在集群中设置存储的提示 (已包含在上面链接的实物脚本中) AWS技巧来设置您的存储以使用Snapshot CopyMethod: # Switch ...

    scribe+hadoop+log4j+hive+mysql

    - **安装与配置**:文中详细介绍了 Hadoop、Hive 和 MySQL 的安装过程。例如,为了确保 Java 环境正确配置,需要设置 JAVA_HOME 和 PATH 环境变量。对于 MySQL,还需要安装相应的 JDBC 驱动程序以便其他应用程序能够...

    File-Tail-Scribe

    File-Tail-Scribe 提供了解压安装的便捷方式,使得用户能够轻松地集成到自己的工作流程中。 **主要功能:** 1. **实时监控**:File-Tail-Scribe 可以实时跟踪日志文件的变化,一旦有新的日志条目写入,它会立即...

    scribe+thrift+fb303已经编译好的rpm包,直接下载安装使用

    最佳环境 CentOS 5.4 Scribe真正可用rpm安装包 apache-thrift-0.7.0-1.x86_...无需编译,一命令安装。简单快捷,方便部署。 ======================================== 本资料共包含以下附件: scribe+thrift+fb303.7z

    scribe-log4j:将日志消息发送到 Scribe 的 log4j appender

    将 scribe-client 安装到本地 maven 仓库 cd scribe-log4j/scribe-client mvn install 运行聚合日志的 scribe 服务器(请参阅下面的简短说明) 如果需要,请修复scribe-log4j/scribe-example/src/main/resources/...

    scribe:node.js 日志模块

    node.js 的流日志记录模块 _ _ (_) | ___ ___ _ __ _| |__ ___ / __|/ __| '__| | '_ \ / _ \ \__ \ (__| | | | |_) | __/ |___/\___|_| |_|_.__/ \_...Scripta 只是 Scriptum 的复数,它是为 Scribe 实现的 writ

    ddth-log2scribe:Log4j & Slf4j 适配器将日志写入 scribe 服务器

    安装 最新发布版本: 0.1.0 。 请参阅 。 Maven 依赖: < groupId>com.github.ddth</ groupId> < artifactId>ddth-log2scribe < version>0.1.0 用法 Log4j 配置 log4j.appender.X=...

    scribe-bus:在redis pub-sub和Scribe-js上运行的Light日志管理器,以确保您拥有一个智能仪表板来查看所有日志

    更好的日志管理 ...首先安装模块。 yarn add scribe-bus 在您的应用程序中登录 在您的应用中使用以下代码。 注意:此记录器不会替换默认控制台(因为默认情况下Scribe-Js起作用)。 //pass redis configurati

    scribe-plugin-smart-lists

    安装 bower install scribe-plugin-smart-lists 或者,您可以。 使用范例 scribe-plugin-smart-lists是一个AMD模块: require ( [ 'scribe' , 'scribe-plugin-smart-lists' ] , function ( Scribe , ...

    scribe-plugin-image-command:用于将图像上传到 S3 的 Scribe 编辑器插件

    - 文档:可能包含README文件,介绍如何安装、配置和使用插件的详细信息。 - 资源文件:如CSS样式表,可能用于自定义插件的视觉表现。 了解并掌握"scribe-plugin-image-command"的使用,不仅可以提高Scribe编辑器的...

    scribe:从您的Laravel代码库中为人类生成API文档。

    :waving_hand: Scribe可以帮助您自动生成文档,但是如果您真的想制作友好,可维护和可测试的API文档,则还需要了解一些其他信息。 所以我为你做。 :hugging_face: 特征 漂亮HTML文档页面,包括随附的代码示例和友好...

    scribe:cli笔记程序

    用户需要了解如何在自己的系统上安装和配置scribe,包括获取源代码(如从压缩包“scribe-master”解压)、设置环境变量以及初始化和配置Git仓库。 9. **自定义与扩展**: scribe 可能允许用户自定义快捷键、配置...

Global site tag (gtag.js) - Google Analytics