Databus就是一个实时的低延迟数据抓取系统。
Databus提供如下功能:
来源独立:Databus支持多种数据来源的变更抓取,包括Oracle和MySQL。Oracle适配器在开源版本中有提供,MySQL适配器将在以后提供。
可扩展、高度可用:Databus能扩展到支持数千消费者和事务数据来源,同时保持高度可用性。
事务按序提交:Databus能保持来源数据库中的事务完整性,并按照事务分组和来源的提交顺寻交付变更事件。
低延迟、支持多种订阅机制:数据源变更完成后,Databus能在微秒级内将事务提交给消费者。同时,消费者使用Databus中的服务器端过滤功能,可以只获取自己需要的特定数据。
无限回溯:这是Databus最具创新性的组件之一,对消费者支持无限回溯能力。当消费者需要产生数据的完整拷贝时(比如新的搜索索引),它不会对主OLTP数据库产生任何额外负担,就可以达成目的。当消费者的数据大大落后于来源数据库时,也可以使用该功能。
源代码地址:
https://github.com/linkedin/databus
- 浏览: 1682886 次
- 性别:
- 来自: 北京
文章分类
- 全部博客 (1323)
- easyui学习 (21)
- jquery (51)
- css (21)
- js (103)
- html (19)
- java (95)
- 测试工具 (7)
- oracle (45)
- eclipse (9)
- spring (8)
- 开源框架 (111)
- struts (12)
- hsqlbd (2)
- h2database (2)
- maven (8)
- activiti (2)
- sql语句 (7)
- fmpp (1)
- apache (2)
- tomcat (6)
- jbpm (2)
- ant (20)
- mysql (10)
- 业务需求 (54)
- ralasafe (3)
- Quartz (4)
- mybatis (8)
- flex (6)
- html5 (16)
- apache工具 (4)
- hibernate (5)
- linux (109)
- powerdesigner (3)
- 报表 (1)
- log4j (2)
- junit (1)
- shiro (4)
- wap (3)
- php (28)
- mantis (1)
- poi (3)
- extjs (1)
- 安防 (34)
- 网络 (113)
- UltraEdit (1)
- 手机 (9)
- freemarker (19)
- jquery mobile (28)
- css3 (1)
- 微信 (9)
- nodejs (7)
- 项目管理 (14)
- 文档 (13)
- ibatis (22)
- ftp (3)
- spring MVC (9)
- groovy (2)
- AngularJS (19)
- nginx (15)
- 会计 (5)
- hive (1)
- 分布式 (8)
- 设计模式 (4)
- velocity (2)
- 爬虫 (2)
- git (1)
- thymeleaf (4)
- activemq (5)
- bootstrap (1)
- Spring Batch (1)
- memcache (20)
- ttserver (1)
- Jenkins (1)
- cxf (1)
- axure (2)
- 银行金融 (11)
- c语言 (2)
- 大数据 (4)
- drools (4)
- python (2)
- 交易所 (1)
- haproxy (1)
- dubbo (3)
- dos (3)
- 人力资源 (4)
- 支付 (1)
- Intellij IDEA (1)
- IPO (1)
- springboot (1)
- 质量管理 (7)
- svn (1)
- 其他 (8)
- 阿里云 (2)
- 多媒体设计 (2)
- 数据库 (4)
- wps (0)
最新评论
-
masuweng:
en
Native.js -
rmnjava:
我按照你的方法写的,不起作用啊
easyui验证的删除和恢复 -
rmnjava:
原地址打不开了呀
easyui验证的删除和恢复 -
sunteng:
sunteng 写道这是json 吗[{url:'aaa'}, ...
freemarker解析json数组 -
sunteng:
这是json 吗
freemarker解析json数组
发表评论
-
QuickTest Professional
2019-05-06 13:29 309QuickTest Professional简称QTP,是一种 ... -
Apache ab并发负载压力测试
2019-05-06 13:24 339ab是Apache提供的一款小巧的压力测试工具。 ab命令 ... -
JSON Web Token(JWT)
2019-03-06 13:19 327JSON Web Token(JWT)是目前最流行的跨域身 ... -
PageOffice 在线office编辑
2019-03-05 17:17 0http://www.zhuozhengsoft.com/P ... -
Elasticsearch
2019-03-05 16:33 0Elasticsearch是一个基于Apache Luce ... -
Prezi
2018-06-29 14:15 318Prezi是一款非常有创意的PPT演示文稿制作软件,具有Mac ... -
sftp搭建
2018-06-28 08:24 681最近项目需要用到sftp服务器,整体sftp服务器搭建比ft ... -
java执行linux命令
2018-05-09 15:51 299http://www.ganymed.ethz.ch/ssh ... -
protocol buffer
2018-04-25 08:27 349protocolbuffer(以下简称PB)是google 的 ... -
JavaMelody
2018-04-24 18:11 568JavaMelody是运行在Java Web容器中,用来监控 ... -
Swagger
2018-04-24 15:58 405Swagger是一个Restful风格接口的文档在线自动生成和 ... -
阿里开源前端框架
2017-12-28 08:41 1529https://ant.design/ http:/ ... -
gitlab
2017-12-26 13:44 377GitLab 是一个用于仓库管理系统的开源项目。使用Git作为 ... -
Flume
2017-10-10 08:57 323Flume最早是Cloudera提供的日志收集系统,目前是A ... -
wicket
2017-09-04 15:40 382Wicket,一个开发Java Web应用程序框架。它使得开发 ... -
推荐个restful小工具
2017-07-27 08:09 509https://github.com/ijson/in-res ... -
U聊通讯工具
2017-07-18 15:44 422https://upchat.95516.net -
Tokyo Cabinet ttserver
2017-01-17 16:32 342http://fallabs.com/tokyocabine ... -
mybatis-dalgen
2016-12-21 09:35 2358官网:http://git.oschina.net/bang ... -
Middlegen
2016-12-21 09:16 263Middlegen一个免费数据库驱动(database-dri ...
相关推荐
"服务集成总线,DataBus"是一个自定义开发的工具,旨在简化各种服务的集成过程,包括WebService、WebApi、动态库以及数据库。这个工具的主要功能是将这些不同的服务资源转化并整合为一个统一的服务接口,以提高开发...
《数据库同步系统Databus深度解析》 在大数据领域,数据的实时同步是不可或缺的一环。今天我们将聚焦于名为"Databus"的数据库同步系统,通过深入探讨其核心原理、功能特性以及应用场景,来理解这一工具如何在数据...
### Databus数据库与MySQL二进制日志详解 #### 一、二进制日志(Binary Log)概览 在MySQL数据库系统中,二进制日志(Binary Log)是一种非常重要的功能,它记录了所有对数据库执行更改的操作,如INSERT、UPDATE、...
LinkedIn最近发布了一套源无关的分布式数据同步系统Databus。简单说,就是把交易数据同步到各个不同的应用中。一个大的特色是这系统采用pull模式从log中取得数据,以达到对生产系统最小影响。 标签:...
DM 数据交换平台(简称 DMETL 或 DataBus)是一种用于在网络环境中实现各种异构系统和数据源之间进行数据交换的技术平台。为了实现这一点,该平台在每个 ETL (Extract, Transform, Load) 内部嵌入了一个消息服务器。...
Industrial Edge Device的系统组件包括Industrial Edge Runtime、Edge Device Kit (IEDK)、Industrial Edge App、Industrial Edge 系统应用程序、Databus、Databus Configurator等。 五、数据管理 Industrial Edge ...
LinkedIn开源了其低延时变化数据捕获系统Databus,该系统可以在MySQL以及Oracle数据源上捕获数据,当下LinkedIn只开源了Oracle上的连接器。Databus作为LinkedIn生态系统中的一致性保障组件,在低延时的情况下仍然...
Databus Ping Pong用Java语言实现 描述 该存储库包含用于构建以Javascript实现的Databus Ping Pong应用程序示例的源文件。 请参阅以获取有关此应用程序示例的更多信息。 概述 node:10.16.3-alpine Ping Pong应用程序...
计算机技术、IT咨询、人工智能AI理论介绍,学习参考资料计算机技术、IT咨询、人工智能AI理论介绍,学习参考资料计算机技术、IT咨询、人工智能AI理论介绍,学习参考资料计算机技术、IT咨询、人工智能AI理论介绍,学习...
数据总线 NREL 使用此存储库进行数据总线开发。 如果您要试用,请单击文档链接以开始安装 - 一般用户可以获得帮助 如果论坛中没有解决某些问题,您可以通过向我们发送电子邮件,上论坛帖子的链接,我们将确保有人...
极速数据总线执照Copyright 2021 ZhupfLicensed under the Apache License, Version 2.0 (the "License");... softwaredistributed under the License is distributed on an "AS IS" BASIS,WITHOUT WARRANTIES O
Virtuoso SPARQL端点快速入门创建并运行一个Virtuoso开源实例,其中包括一个预装有Databus集合和已安装VOS DBpedia插件的SPARQL端点。快速开始运行Virtuoso SPARQL Endpoint快速入门需要在系统上安装Docker和Docker ...
本文主要对比了三个流行的MySQL Binlog处理工具:Canal、Maxwell和Databus,以及阿里云的数据传输服务DTS。 1. **Canal** Canal是一款由阿里巴巴开发的开源项目,它专注于MySQL的增量数据订阅与消费。Canal的工作...
最新飞机即时通讯源码 PC+Android+IOS+WEB四端 经环境Nginx+mysql5.7+php7.3+redis+jdk1.8+etcd、kafka、minio、ssdb数据库imweb、enterprise、databus环境nginx+mysql5.7+php7.3+redis+jdk1.8+etcd、kafka、minio、...
本文主要对比了三个基于MySQL binlog实现实时同步的工具:Canal、Maxwell和Databus,以及阿里云的数据传输服务DTS。 Canal是阿里巴巴开源的一款工具,主要用于MySQL的binlog订阅和消费。Canal的工作原理是模拟MySQL...
Databus在LinkedIn中的作用是作为数据变更的传输层,独立于数据源(如Oracle、MySQL等),确保交易的语义一致性,实现有序且至少一次的交付。它能够处理数十个中继节点、数百个数据源,并保持低延迟——仅在毫秒级别...
寻聊最新飞机即时通讯系统源码 PC+Android+IOS+WEB四端 经过测试 刚...数据库imweb、enterprise、databus 伪静态规则在下载包内 本软件或源代码仅可用于学习等合法合规的用途,禁止将本软件或源代码用于任何非法用途。
4. 总线绘制:通过Databus[0..7]创建总线,网络标号如Databus0~Databus7。 5. 编译检查:绘制完成后编译,查看"Message"中的Error和Warning信息。 6. 关闭ERC检查:在Place—>Directives中选择No ERC,可避免对特定...
数据库imweb、enterprise、databus web 伪静态 code location / { if (!-e $request_filename){ rewrite ^(.*)$ /index.php?s=$1 last; break; } } 后台伪静态 code location /photo { proxy_pass ...
It also offers an 8bit bi-directional databus with EPP/MEM protocol, which could be used to interface HD44789 compatibl etextLCD displays for example. Programming is made easy using an API-DLL,...