数据联邦概述¶
面向应用开发和数据分析人员,数据联邦服务提供了多源异构数据存储系统的数据查询及文件写入服务。
用户按照统一的 SQL 语法标准,即可实现基于全景数据的混合查询,而不用关心各类数据系统查询语言的差异。只需通过简单配置,即可将本地文件快速写入各类存储系统。同时,数据联邦服务还支持 OData 及 JDBC 连接,帮助用户快速对接 Tableau、PowerBI 等主流 BI 分析工具,而不用关心源数据存储系统的不同。
数据联邦服务的架构如下图所示:
架构图简要说明
数据源层:支持的数据源类型包括:MySQL、Blob、HDFS(EnOS)、HIVE(EnOS)、KAFKA(EnOS)、Redis、S3、TSDB(EnOS)、MongoDB
数据源连接:需要通过数据源注册(将数据源与联邦通道绑定)
支持的数据访问方式:JDBC访问、ODATA访问、SDK访问
支持的目标用户:数据分析师、数据工程师、数据科学家