没有合适的资源?快使用搜索试试~ 我知道了~
DataFlow
共66个文件
java:59个
jar:2个
txt:1个
需积分: 9 0 下载量 198 浏览量
2021-03-31
14:56:45
上传
评论
收藏 373KB ZIP 举报
温馨提示
产品开发背景 DataFlow是基于应用程序日志流的一套分布式ETL系统服务组件,其前身是LogCollector2.0日志系统框架,自LogCollector3.0版本开始正式更名为DataFlow3.0。 Sqoop等也可以完成日志的采集,传输,转换和存储;但这些工具都不存在事务一致性。等因素导致连接远端服务的发送器组件失败,而此时收集器组件可能并不知情,数据仍然会继续传送到通道组件,这容易导致通道组件内存占用从而引发OOM错误;并通过通道错误导致实时收集的数据发送失败,收集器也没有记录实时检查点,这意味着发送失败的数据将面临丢失。发生所有这些问题的根源在于公网传递数据的不稳定性所致,因此Flume是在这种问题背景的需求驱动下产生了DataFlow这款产品,DataFlow完全按照产品级标准使用JAVA语言进行开发,安装时无需再安装外置JDK支持,解压开箱即用。 产品功能特性 Data
资源推荐
资源详情
资源评论
收起资源包目录
DataFlow-main.zip (66个子文件)
DataFlow-main
src
main
resources
META-INF
spring.factories 119B
banner.txt 870B
java
com
github
lixiang2114
flow
service
TRAService.java 956B
impl
ETLServiceImpl.java 5KB
BaseService.java 3KB
TRAServiceImpl.java 4KB
ETLService.java 956B
thread
SpringThreadPool.java 8KB
ThreadHolder.java 3KB
GracefulShutdown.java 1007B
controller
AdminController.java 10KB
scheduler
ETLSchedulerPool.java 6KB
SchedulerPool.java 2KB
TRASchedulerPool.java 5KB
plugins
face
TransferPlugin.java 791B
AbstractPlugin.java 969B
FilterPlugin.java 641B
SourcePlugin.java 333B
SinkPlugin.java 513B
RealtimePlugin.java 731B
ManualPlugin.java 609B
Procedure.java 472B
ETLFlow.java 228B
adapter
ManualPluginAdapter.java 783B
TransferPluginAdapter.java 780B
SinkPluginAdapter.java 760B
FilterPluginAdapter.java 777B
RealtimePluginAdapter.java 789B
CheckPointable.java 274B
TRAFlow.java 228B
Configurable.java 286B
util
ApplicationUtil.java 54KB
IPUtil.java 33KB
ClassLoaderUtil.java 21KB
FileUtil.java 24KB
CommonUtil.java 124KB
PropertiesReader.java 6KB
RestClient.java 23KB
DateUtil.java 13KB
DataFlowApplication.java 753B
caller
TRACaller.java 2KB
ETLCaller.java 2KB
listener
ApplicationLifecycleListener.java 8KB
AbstractApplicationListener.java 394B
AAABootConfigListener.java 2KB
context
Default.java 2KB
Context.java 10KB
Token.java 3KB
SizeUnit.java 1KB
comps
PluginType.java 2KB
ETLFuture.java 1KB
Channel.java 2KB
Flow.java 5KB
TRAFuture.java 653B
CompType.java 349B
Comp.java 581B
Plugin.java 3KB
handler
TransferHandler.java 1KB
FilterHandler.java 1024B
SinkHandler.java 1001B
SourceHandler.java 1KB
target
DataFlow-3.0-sources.jar 105KB
DataFlow-3.0.jar 169KB
LICENSE 11KB
README.md 23KB
pom.xml 2KB
共 66 条
- 1
资源评论
chsqi
- 粉丝: 19
- 资源: 4655
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- Python 程序语言设计模式思路-结构型模式:组合模式:将对象组合成树形结构
- 毕业设计基于python矩阵分解的推荐算法研究源码+详细文档+全部数据资料 高分项目.zip
- 基于网络的入侵检测系统源码+数据集+详细文档(高分毕业设计).zip
- 微信小程序源码 旅行故事分享 - 面包旅行App界面设计与文本展示资源下载
- 微信小程序源码 创意互动游戏 - 你画我猜App下载
- 摸底考试_学生版20230305.py
- 课程设计基于FPGA数字钟课程设计源码+课设报告(95分以上).zip
- 基于Java的企业家申报系统设计源码
- Cesium案例,集成各种模型,推演,各种Cesium效果
- 基于Python的Struts2全漏洞扫描利用工具设计源码
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功