概述
数据抽取是指从源数据源系统抽取目的数据源系统需要的数据,以保证秒级获取大级别量的数据结果,提高系统性能。
数据抽取出来后,会以视图的形式存放在SmartbiMpp数据源下,后续创建组合分析、透视分析、可视化查询、SQL查询等时SmartbiMpp数据源可以当做一般关系源使用。
只有在数据抽取成功或者不进行数据抽取情况下,才能正确创建自助仪表盘。(此句话可不要)
目前系统中支持数据抽取的有:自助数据集、可视化查询、SQL查询、原生SQL查询、存储过程查询、Java查询、透视分析、组合分析、加载Excel数据。
系统支持通过数据行权限控制,保证所有用户抽取到其权限内的数据的有:可视化查询、组合分析、自助数据集。
注:V8.0及之前版本只有自助数据集可以做数据抽取,V8.5版本中,SQL查询等非自助数据集以及加载Excel数据支持抽取到高速缓存库。
数据抽取功能必须要在当前数据集保存的前提下才能被激活使用。
抽取设置
实时
实时表示不抽取。
全量抽取
全量抽取类似于数据迁移或数据复制,它将当前数据集数据原封不动的从数据库中抽取数据。
增量抽取
增量抽取指抽取自上次抽取以来抽取的数据集中新增、修改、删除的数据。
统一数据集的抽取功能
1 自助数据集数据抽取(具体介绍)
使用自助数据集设置数据抽取,在之后创建自助仪表盘时会直接从SmartbiMpp里取数据,提高系统性能。
操作步骤
1.新建自助数据集并 保存,点击右上方的抽取图标 后点击 设置,在弹出的界面中选择抽取方式,默认为全量抽取
2 可视化查询数据抽取
操作入口:单击可视化查询工具栏中的 数据抽取 按钮,弹出“数据抽取设置”窗口。如下图所示:
3 SQL查询数据抽取(具体介绍)
4 原生SQL查询数据抽取
5 存储过程查询数据抽取
6 Java查询数据抽取
7 透视分析数据抽取
8 组合分析数据抽取
9 加载Excel数据数据抽取