页面树结构
转至元数据结尾
转至元数据起始

正在查看旧版本。 查看 当前版本.

与当前比较 查看页面历史

« 前一个 版本 4 下一个 »

抽取日志跟踪

日志类型

目前抽取过程的日志分为两种:
1.抽取过程的错误日志,这种是在抽取异常的时候会记录在error文件,在数据集抽取日志中能查看
2.抽取过程中的DEBUG日志,这种是为了便于跟踪抽取过程直接输出到控制台

错误日志

错误日志我们可直接在抽取监控面板查看或者右键数据集-调度管理-抽取日志查看

DEBUG日志

下面是抽取过程的流程图

DEBUG日志,我们有两种方式实时监控:

1.tail -f smartbi.log

2.系统监控-日志,这里可以在浏览器实时监控

抽取过程

结合抽取过程流程图,我们一般能采集到的下面的关键信息便于跟踪整个抽取过程:

1.抽取开始:

*********  SaveToDBNode 开始>>>> *********

2.抽取目标表:

SmartbiCache目标表:null.smartbimpp.I8a8a95640171965496549f7a017196549f7a0000

3.如果清空数据,创建目标表:

创建SmartbiCache表:create table `smartbimpp`.`I8a8a95640171965496549f7a017196549f7a0000`(`ID` Nullable(Int32),`shuzhi1` Nullable(Float64),...

4.导出csv的查询sql:

select `t_100`.`ID` as `ID`, `t_100`.`shuzhi1` as `shuzhi1`, `t_100`.`shuzhi2` as `shuzhi2`, `t_100`.`str1` as `str1`, `t_100`.`str2` as `str2` from `t_100` `t_100`..

5.导入目标抽取表进度百分比

[SUCCESS] CSV文件(E:\Git\Smartbi\Applications\Smartbi.Application\apache-tomcat-7.0.40\bin\SmartbiX-ExtractData\I8a8a97ba017206e506e5a70f017206fbecf400f5\2000000) into `smartbimpp`.`I8a8a95640171965496549f7a017196549f7a0000` 100000 rows.Import progress:9.09%

6.抽取结束:

*********  SaveToDBNode 结束<<<< *********

 

 

 

  • 无标签