概述
数据抽取是指从源数据源系统抽取目的数据源系统需要的数据,以保证秒级获取大级别量的数据结果,提高系统性能。
数据抽取出来后,会以视图的形式存放在SmartbiMpp数据源下,后续创建组合分析、透视分析、可视化查询、SQL查询等时SmartbiMpp数据源可以当做一般关系源使用。
只有在数据抽取成功或者不进行数据抽取情况下,才能正确创建自助仪表盘。(此句话可不要)
注:V8.0及之前版本只有自助数据集可以做数据抽取,V8.5版本中,SQL查询等非自助数据集以及加载Excel数据支持抽取到高速缓存库。
目前系统中支持数据抽取的有:自助数据集、可视化查询、SQL查询、原生SQL查询、存储过程查询、Java查询、透视分析、组合分析、加载Excel数据。
抽取方式
全量抽取
全量抽取类似于数据迁移或数据复制,它将数据集中数据原封不动的从数据库中抽取出来。
增量抽取
增量抽取指抽取自上次抽取以来抽取的数据集中新增、修改、删除的数据。增量抽取较全量抽取应用更广。
统一数据集的抽取功能
1 自助数据集数据抽取
2 可视化查询数据抽取
3 SQL查询数据抽取
4 原生SQL查询数据抽取
5 存储过程查询数据抽取
6 Java查询数据抽取
7 透视分析数据抽取
8 组合分析数据抽取
9 加载Excel数据数据抽取