ETL
数据融合软件

体系架构


ETL数据融合软件通过图形化开发环境,定义转换、处理流程、从源到目标的映射关系等。元数据资料库保存设计和运行处理等相关定义、管理信息。基于事件和时间进行调度、运行、监测ETL作业、管理错误信息、从失败中恢复和调节源系统输出。





产品简介


ETL数据融合软件,基于Weshare大数据平台的物联网大数据采集软件,实现了海量数据的分类、清洗、转换和加载,建立了数据之间的业务的关系,达到海量数据融合治理的目的。

ETL数据融合软件是一款简单易用的平台软件,软件内置高效的数据处理引擎,可通过多种协议与方法实现海量数据的融合;平台内置数据分析模型和转换组件,用户可通过可视化编程快速的实现任务的定制、管理和调度,实现复杂多样的数据融合需求。

产品特性


支持Hadoop

实现高容错性,故障发生时保证数据完整性;支持HDFS,实现海量数据的分布式存储;

可靠性

提供日志和审计功能,记录转换过程中执行的步骤,包括每个步骤开始和结束时间戳,追踪对数据进行的读行数、转换行数、写行数等所有操作;

设计灵活

基于过程实现源数据和目的数据的映射,根据实际的数据和业务需求,创建自定义的步骤和转换;

平台独立

能够在各种平台上上进行部署,保证开发、测试、部署阶段系统间无缝切换;

高扩展性

支持集群部署,通过多处理器硬件平台实现对大数据量的支持;
支持组件式开发,实现功能的复用。

返回顶部