没有合适的资源?快使用搜索试试~ 我知道了~
bireme:Bireme是Greenplum HashData数据仓库的增量同步工具
共74个文件
java:25个
sh:9个
xml:7个
需积分: 50 0 下载量 64 浏览量
2021-02-03
10:47:45
上传
评论
收藏 204KB ZIP 举报
温馨提示
Bireme Bireme是用于Greenplum / HashData数据仓库的增量同步工具。 目前,它支持MySQL,PostgreSQL和MongoDB数据源。 是一个高级的,功能齐全的开源数据仓库,可对PB数据量进行强大而快速的分析。 它面向大数据分析,具有独特的方向,并得到世界上最先进的基于成本的查询优化器的支持。 它可以对大量数据提供高查询性能。 是基于Greenplum构建的灵活的云数据仓库。 Bireme使用DELETE + COPY将数据源的修改记录同步到Greenplum / HashData。 此模式比INSERT + UPDATE + DELETE更快更好。 功能和限制: 使用小批量加载来增强数据同步的性能。 默认的加载延迟时间是10秒。 所有表在目标数据库中必须具有主键。 1.1数据流 Bireme支持多个数据源的同步工作。 它可以同时并行地从多个数据源读取记录,并将记录加载到目标数据库。 1.2数据源 1.2.1麦克斯韦+卡夫卡 Maxwell + Kafka是bireme当前支持的数据源类型。 结构如下: 是一个读取MySQL二进制日志并将
资源推荐
资源详情
资源评论
收起资源包目录
bireme-master.zip (74个子文件)
bireme-master
.travis.yml 487B
bin
bireme 4KB
pom.xml 7KB
docs
bireme_guide_zh-cn.md 5KB
data_flow.png 17KB
bireme_guide.md 6KB
bireme.png 30KB
debezium.png 20KB
pipeline.png 44KB
maxwell.png 17KB
_config.yml 29B
integration_test
sqldump.py 3KB
test.sh 531B
maxwell
prepare.sh 1KB
pg_setup.sql 513B
check_result.py 2KB
etc
maxwell_CI.properties 203B
log4j2.xml 621B
config.properties 1KB
mysql_setup.sql 1KB
debezium
prepare.sh 1KB
setup.sql 2KB
check_result.py 2KB
etc
log4j2.xml 621B
config.properties 1KB
debezium_CI.properties 211B
bireme_tpcc_test
parallel_load.sh 644B
init.sh 255B
tpcc_test.md 2KB
sqlCheckSum.py 3KB
create_table_index.sql 4KB
source.sh 2KB
compare.py 1009B
src
test
docker
docker-compose.yml 996B
mysql_test.sh 3KB
main
assembly
assembly.xml 2KB
resources
checkstyle.xml 11KB
log4j2.xml 622B
java
cn
hashdata
bireme
Bireme.java 10KB
pipeline
SourceConfig.java 872B
DebeziumPipeLine.java 7KB
PipeLine.java 14KB
MaxwellPipeLine.java 5KB
KafkaPipeLine.java 6KB
Context.java 6KB
LoadTask.java 911B
ChangeLoader.java 13KB
Row.java 636B
Config.java 10KB
RowSet.java 628B
CommitCallback.java 1018B
PipeLineStat.java 4KB
BiremeException.java 491B
Scheduler.java 2KB
AbstractCommitCallback.java 1KB
RowCache.java 6KB
Dispatcher.java 3KB
GetPrimaryKeys.java 3KB
BiremeUtility.java 2KB
StateServer.java 6KB
Table.java 3KB
Record.java 620B
ChangeSet.java 466B
.clang-format 3KB
.gitignore 364B
README.md 7KB
scripts
format.sh 514B
setup-eclipse.sh 117B
eclipse-java-google-style.xml 35KB
etc
maxwell1.properties 107B
debezium1.properties 79B
config.properties 2KB
LICENSE.txt 13KB
README_zh-cn.md 6KB
共 74 条
- 1
资源评论
FeMnO
- 粉丝: 22
- 资源: 4608
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- (源码)基于Spring Boot框架的博客管理系统.zip
- (源码)基于ESP8266和Blynk的IR设备控制系统.zip
- (源码)基于Java和JSP的校园论坛系统.zip
- (源码)基于ROS Kinetic框架的AGV激光雷达导航与SLAM系统.zip
- (源码)基于PythonDjango框架的资产管理系统.zip
- (源码)基于计算机系统原理与Arduino技术的学习平台.zip
- (源码)基于SSM框架的大学消息通知系统服务端.zip
- (源码)基于Java Servlet的学生信息管理系统.zip
- (源码)基于Qt和AVR的FestosMechatronics系统终端.zip
- (源码)基于Java的DVD管理系统.zip
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功