RestCloud
ETL数据集成平台是基于微服务架构的新一代数据集成平台,是为企业提供业务系统数据之间的集成以及异构数据源之间的数据传输于一体的一站式的数据处理平台,全Web化配置开箱即用,多种异构数据源之间通过平台快速进行数据交换,快速帮助企业构建数据集成平台,同时通过叠加API服务平台即可快速落地构建一个轻量级的数据中台。

一、WEB可视化流程定义
通过Web界面的拖、拉、拽,即可快速构建数据集成流程,支持数据在线预览、流程全过程调试,Web界面追踪调试日志等功能。平台兼具实时数据处理和数据集成分发功能,用户通过可视化的拖、拉、拽,即可完成数据处理逻辑,将数据加工处理后分发到下游业务系统或其他异构存储中。

二、实时传输监控/动态回放传输过程
提供Web化的实时数据传输监控平台,可以清析的看到每个节点读取的数据量、插入的数据量、更新的数据量、删除的数据量、同时可以在日志中看到所有传输成功和传输失败的数据记录,传输失败的数据记录平台会自动记录失败原因和数据内容方便对数据质量进行控制。
支持执行流程的动态回放功能,对于复杂的数据集成流程可以清析的看到数据的传输路径及时定位错误。
三、人工审批支持
对于重要数据或手工填报数据为了保证数据质量和可靠性支持人工审核节点,人工审核节点支持会签模式,数据审批人员可以针对不合格的数据进行删除、修改、拒绝等操作阻止数据流入目标数据库表,同时提供Restful API接口可以对接OA系统的审批流程,实现更为复杂的数据审批流程。
RestCloud ETL数据集成平台支持在Mongo DB中存储所有源表到目标表之间的交换数据,可根据源表或目标查看数据的来龙去脉对数据交换的过程进行全程掌控,同时支持使用Mongo DB作为缓冲库来存储传输的数据,可以把生产系统中的数据先行抽取到缓冲库中,再从缓冲库中加载到目标业务系统,可以最大程度减轻对生产系统的压力。