数据仓库 - ETL 和报告工具


ETL 工具从所有这些异构数据源中提取数据,转换数据(例如应用计算、连接字段、键、删除不正确的数据字段等),并将其加载到数据仓库中。

萃取

ETL 加载期间需要暂存区。需要暂存区的原因有多种。源系统仅可在特定时间段内提取数据。该时间段小于总数据加载时间。因此,暂存区允许您在时隙结束之前从源系统中提取数据并将其保留在暂存区中。

当您想要从多个数据源一起获取数据或者想要将两个或多个系统连接在一起时,需要暂存区。

例如- 您将无法执行连接两个物理上不同的数据库中的两个表的 SQL 查询。

不同系统的数据提取时间段因时区和运行时间而异。从源系统提取的数据可用于多个数据仓库系统、操作数据存储等。

ETL 允许您执行复杂的转换,并且需要额外的空间来存储数据。

萃取

转换

在数据转换中,您对提取的数据应用一组函数以将其加载到目标系统中。不需要任何转换的数据称为直接移动或传递数据。

您可以对从源系统提取的数据应用不同的转换。例如,您可以执行自定义计算。如果您想要销售收入总和并且该数据不在数据库中,您可以在转换期间应用 SUM 公式并加载数据。

例如- 如果表中的名字和姓氏位于不同的列中,则可以在加载之前使用连接。

加载

在加载阶段,数据被加载到最终目标系统中,它可以是平面文件或数据仓库系统。

商业智能报告工具

业务用户使用 BI(商业智能)工具根据数据仓库中的事务数据创建基本、中等和复杂的报告,并使用信息设计工具/UDT 创建Universe。各种 SAP 和非 SAP 数据源可用于创建报告。

市场上有很多 BI 报告、仪表板和数据可视化工具。其中一些如下 -

  • SAP 业务对象 Web 智能 (WebI)
  • 水晶报表
  • SAP Lumira
  • 仪表板设计师
  • IBM Cognos
  • 微软商业智能平台
  • Tableau 商业智能
  • 贾斯帕软件公司
  • Oracle BI OBIEE
  • 彭塔霍
  • 快速查看
  • SAP BW
  • SAS 商业智能
  • 内克托
  • Tibco Spotfire