最近做日志分流,早闻scribed大名,正好安装尝试一下.据说源码很简单,安装很麻烦.
公司yum源里其实有打好包的scribe,可惜是centos5的,苦逼的未升级的历史遗留centos4只能蛋疼的从源码安装.
刚开始借鉴的这篇:
http://dongxicheng.org/search-engine/scribe-installation/
后来发现这篇更简洁:
http://agiletesting.blogspot.com/2009/10/compiling-installing-and-test-running.html
步骤都差不多,先装boost(已有),再装thrift,然后fb303.在之中检查各种依赖的库和软件.
我自己的话,是升级了libevent和automake.
主要说说安装中遇到得问题:
1. thrift对boost的依赖问题: 即使使用正确的--with-boost也始终报版本不匹配.:
改configure文件,把BOOST_CPPFLAGS="-I$ac_boost_path/include" 改为 BOOST_CPPFLAGS="-I$ac_boost_path/"
通过.
2. htons,htonl报parameter不匹配等. 加configure参数(这个在编译scribe的时候也要加上):
CPPFLAGS="-DHAVE_INTTYPES_H -DHAVE_NETINET_IN_H"
3. std:tr1:functional找不到:
find . -name *.h -o -name *.cpp | xargs -i grep -H "tr1/func" {}
文件不多,其实是sed不熟,手动修改了.
4. fb303遇到问题与thrift类似.
4. scribe遇到问题与thrift类似.
5. 编译scribe遇到, configure: error: Could not link against !的问题: 没有链接上boost的库.
编译boost的共享动态库(.so)于系统库目录.
6. 用example下的scribed_cat做测试程序(scribed_pipe版本过老):
cat apache_access_log | python scribed_cat apache.access
由于项目中木有用hadoop,没有试验与hdfs的集成.
分享到:
相关推荐
Scribe 安装配置文档 Scribe 是 Facebook 开源的日志收集系统,已经在 Facebook 内部得到大量的应用。它能从各种日志源收集日志,存储到一个中央存储系统上,便于进行集中统计分析处理。它为日志的”分布式收集,...
**scribe详细安装文档** scribe是一个广泛使用的日志聚合系统,主要设计用于收集、分类和转发分布式系统的日志数据。在大型分布式环境中,如Hadoop或Facebook等,scribe扮演着至关重要的角色,它允许各个节点将日志...
- **安装**: 执行`sudo make install`将Scribe安装到系统路径。 - **配置**: 配置`scribe.conf`文件,指定监听端口、日志存储方式以及存储模块的配置。 - **启动Scribe**: 使用`scribe`命令启动服务。 **4. 使用...
- **文档**: 可能包含README文件或wiki页面,介绍如何安装、配置和使用scribe。 在实际应用中,scribe常与其它日志处理工具结合使用,例如Logstash或Fluentd,以实现更复杂的数据处理和分析。同时,它也可以配合...
在安装配置方面,以 FreeBSD 为例,Scribe 可以通过 pkg_add 命令直接安装二进制包,同时需要安装 thrift 和 fb303 包。在 Ubuntu 系统下,使用 apt-get 命令获取依赖包,而在 CentOS 中,可能需要手动下载依赖并...
scribe客户端是用于集成日志记录系统的一个开源库,主要针对分布式环境中的日志管理。它支持多种日志接收协议,...确保你正确地安装了所有必要的jar包,并根据示例代码和配置文件进行适当的调整,以适应你的特定需求。
在压缩包内的文件名称列表中,“使用说明.txt”是为用户提供操作指导的文档,帮助用户了解如何安装、配置和使用VideoScribe;而“VideoScribe2.3.4中文汉化可输入汉字”则意味着这是一个经过汉化的版本,不仅语言...
如果您想自己尝试一下,则可以以某种方式安装摄像机并花费数小时进行绘制,但是更有效的方法是使用VideoScribe。它使您可以创建自己绘制的视频演示文稿。界面的现代设计及其直观的控件使此过程尽可能简单。 该软件...
要将Scribe安装在Kubernetes或OpenShift集群中: 要试用Scribe,请按照的步骤进行。 在集群中设置存储的提示 (已包含在上面链接的实物脚本中) AWS技巧来设置您的存储以使用Snapshot CopyMethod: # Switch ...
- **安装与配置**:文中详细介绍了 Hadoop、Hive 和 MySQL 的安装过程。例如,为了确保 Java 环境正确配置,需要设置 JAVA_HOME 和 PATH 环境变量。对于 MySQL,还需要安装相应的 JDBC 驱动程序以便其他应用程序能够...
File-Tail-Scribe 提供了解压安装的便捷方式,使得用户能够轻松地集成到自己的工作流程中。 **主要功能:** 1. **实时监控**:File-Tail-Scribe 可以实时跟踪日志文件的变化,一旦有新的日志条目写入,它会立即...
最佳环境 CentOS 5.4 Scribe真正可用rpm安装包 apache-thrift-0.7.0-1.x86_...无需编译,一命令安装。简单快捷,方便部署。 ======================================== 本资料共包含以下附件: scribe+thrift+fb303.7z
将 scribe-client 安装到本地 maven 仓库 cd scribe-log4j/scribe-client mvn install 运行聚合日志的 scribe 服务器(请参阅下面的简短说明) 如果需要,请修复scribe-log4j/scribe-example/src/main/resources/...
node.js 的流日志记录模块 _ _ (_) | ___ ___ _ __ _| |__ ___ / __|/ __| '__| | '_ \ / _ \ \__ \ (__| | | | |_) | __/ |___/\___|_| |_|_.__/ \_...Scripta 只是 Scriptum 的复数,它是为 Scribe 实现的 writ
安装 最新发布版本: 0.1.0 。 请参阅 。 Maven 依赖: < groupId>com.github.ddth</ groupId> < artifactId>ddth-log2scribe < version>0.1.0 用法 Log4j 配置 log4j.appender.X=...
更好的日志管理 ...首先安装模块。 yarn add scribe-bus 在您的应用程序中登录 在您的应用中使用以下代码。 注意:此记录器不会替换默认控制台(因为默认情况下Scribe-Js起作用)。 //pass redis configurati
安装 bower install scribe-plugin-smart-lists 或者,您可以。 使用范例 scribe-plugin-smart-lists是一个AMD模块: require ( [ 'scribe' , 'scribe-plugin-smart-lists' ] , function ( Scribe , ...
- 文档:可能包含README文件,介绍如何安装、配置和使用插件的详细信息。 - 资源文件:如CSS样式表,可能用于自定义插件的视觉表现。 了解并掌握"scribe-plugin-image-command"的使用,不仅可以提高Scribe编辑器的...
:waving_hand: Scribe可以帮助您自动生成文档,但是如果您真的想制作友好,可维护和可测试的API文档,则还需要了解一些其他信息。 所以我为你做。 :hugging_face: 特征 漂亮HTML文档页面,包括随附的代码示例和友好...
用户需要了解如何在自己的系统上安装和配置scribe,包括获取源代码(如从压缩包“scribe-master”解压)、设置环境变量以及初始化和配置Git仓库。 9. **自定义与扩展**: scribe 可能允许用户自定义快捷键、配置...