没有合适的资源?快使用搜索试试~ 我知道了~
tazk:mongo和大数据同步工具
共37个文件
scala:27个
sh:2个
xml:2个
需积分: 10 0 下载量 26 浏览量
2021-04-12
08:48:48
上传
评论
收藏 48KB ZIP 举报
温馨提示
tazk mongo和大数据同步工具,Mongo同步数据到Hive;Hive同步数据到Mongo中。 即使Mongo中没有建立索引,速度以然不受影响。 如何使用 导入(import) 当增量导入mongo时,可以配置--mongo-import-condition参数, 当以cluster提交到yarn上运行时,必须将参数的json内容进行base64加密, 并通过--mongo-import-condition-encrypt指定。 tazk-submit import --connect "mongodb://test:test@127.0.0.1:1370/admin" --database "test_databse" --collection "test_collection" --mongo-camel-convert true --hive-database "de
资源推荐
资源详情
资源评论
收起资源包目录
tazk-master.zip (37个子文件)
tazk-master
src
test
com
tazk
util
JSONTest.scala 807B
main
scala
com
mongodb
spark
sql
TazkMapFunctions.scala 14KB
tazk
common
TazkCommon.scala 656B
source
TazkSource.scala 239B
SparkMongoSource.scala 3KB
SparkHiveSource.scala 1KB
sink
SparkMongoSink.scala 10KB
SparkHiveSink.scala 3KB
TazkSink.scala 296B
SparkGreenPlumSink.scala 622B
core
TazkCore.scala 175B
Arguments.scala 4KB
TazkFactory.scala 3KB
TazkSparkImport.scala 2KB
TazkSparkCore.scala 780B
TazkSparkExport.scala 2KB
TazkException.scala 356B
internal
Logging.scala 6KB
util
CommandLineUtils.scala 1002B
Utils.scala 4KB
launcher
TazkSubmitArgumentsParser.scala 179B
alarm
Alarm.scala 98B
deploy
TazkSparkDepoly.scala 2KB
TazkSubmitArguments.scala 16KB
TazkSubmit.scala 4KB
TazkDepolyJob.scala 239B
package.scala 2KB
resources
tazk-version-info.properties 91B
java
com
tazk
launcher
TazkSubmitOptionParser.java 7KB
assembly
assembly.xml 1KB
LICENSE 11KB
README.md 2KB
pom.xml 4KB
.gitignore 27B
bin
tazk-submit 424B
export-example.sh 602B
import-example.sh 940B
共 37 条
- 1
资源评论
是十五呀
- 粉丝: 23
- 资源: 4635
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 基于python的高性能爬虫程序,使用了多线程+缓存+xpath实现的,这里以彼-岸图库为例,实现,仅用于学习交流
- 中分辨率成像光谱仪(MODIS)烧毁面积产品信息MODIS-C6-BA-User-Guide-1.2.pdf
- Screenshot_20240427_172613_com.huawei.browser.jpg
- 关于学习Python的相关资源网站链接及相关介绍.docx
- (HAL库)基于STM32F103C8T6的温控PID系统[Dht11、ESP8266、无线透传、L298N……]
- VoLTE高丢包优化指导书.xlsx
- Rust资源文件.zip
- 前后端分离实践:使用 React 和 Express 搭建完整登录注册流程
- gradle-publish-to-MavenLocal.zip
- 10份网络优化创新案例.zip
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功