RestCloud安装、使用调研
需积分: 1 92 浏览量
2024-02-27
10:18:41
上传
评论 1
收藏 58.24MB DOC 举报
RestCloud安装、使用调研
https://www.sohu.com/a/559056328_121200771
ETLCloud为最新一代的数据集成平台，我们致力于打造一款集离线数据集成ETL、ELT
、CDC实时数据集成、编排调度、数据服务API为一体的数据集成平台(DataOps)，一站式
满足企业的各种最为复杂的数据集成场景。提供私有化部署能力和云原生架构，满足企业
不同发展阶段的业务需求。 提供开放的组件市场,企业通过本平台可以快速构建大数据基
础底座，同时快速打通ERP、MES、OA、SaaS、API、MQ、IOT等数据构建数据仓库。
一、产品架构
RestCloud数据集成平台采用SprigCloud微服务架构技术开发，底层基于纯Java语言采用前
后端分离架构，前端采用React技术进行开发。 RestCloud数据集成平台是基于数据流+工
作流引擎的架构进行研发的。
其底层设计了一个专门为数据处理任务流而研发的工作流引擎用以支撑任意复杂的数据流
处理包括：串行、同步并行、异步并行、同步子流程、异步子流程、事务控制、循环任务
执行、多流合并、数据折分、数据流复制等。
而不是基于DAG这种简单的有向无环图的数据流程处理逻辑，得益于我们在工作流上面
集累的优势我们不但可以做DAG这种简单的依赖任务处理还可以做复杂的多层任务调度
能力，企业可以把数据处理任务分为原子层、逻辑组合层、调度层等方式来组合企业的复
杂任务调度需求，可以把一个复杂的数据集成流程拆分成多个可复用的子任务来进行调度
。
剩余14页未读，继续阅读
资源评论
