1. 概述编辑
1.1 版本
| FineBI 版本 | 功能变更 |
|---|---|
| 6.0 | - |
1.2 功能简介
treasures 数据包的具体 CSV 表结构，下面将详细说明。
2. 数据包获取编辑
管理员登录FineBI系统，点击「管理系统>智能运维>云端运维」，点击「下载日志」即可下载云端运维数据包。如下图所示：
3. 数据包整体结构编辑
3.1 月数据包
1）下载后的文件解压后，有多个月数据包+数据包信息文件( json 格式)。如下图所示：
package.json 文件中信息为应用名称、应用 ID 、所有数据包所属月份以及该数据包所含月数据包的个数。
2）单个月数据包解压后，有多个日数据包+该月数据包信息文件( json 格式)。如下图所示：
package.json 文件中信息为应用名称、应用 ID 、该月数据包所属月份以及该月数据包所含日数据包的个数。
3.2 日数据包
日数据包解压后有 20 张 CSV 表。如下图所示：
4. 数据表-通用&FR编辑
4.1 package
应用的基本信息，每个数据包里都包含这个，用于鉴别数据包的来源。
| 字段 | 含义 |
|---|---|
| appname | 应用名称 |
| appid | 应用ID |
| time | 数据包时间，例如20230905（自动导出情况下：每日凌晨四点导出前一天的包，记为导出日期的前一日） |
| version | 云端运维版本 |
| DAU | 当日登录该工程的用户数 |
| gcRecord | 当日该工程GC次数 |
| BIUpdateTask | 当日该工程BI更新任务数 |
| BIExecute | 当日用户访问该工程FineBI仪表板次数 |
| recordOperate | 当日用户对该工程进行管理操作次数 |
| execute | 当日用户访问该工程FineReport模板次数 |
| focusPoint | 当日该工程功能点使用次数 |
| honeypot | 埋点记录次数 |
| realTime | 当日该应用实时情况记录次数 |
| engineQueryPerformance | 引擎埋点记录次数 |
| biDailyOperation | 当日用户对该工程FineBI仪表板、组件、数据集编辑查看次数 |
| BIUpdateTaskDetail | 当日该工程BI更新任务明细记录数 |
| fdlExecutorTask | FDL任务/节点/算子运行情况记录次数 |
| logpoint | 埋点报错信息记录次数 |
| biUserLifecycle | FineBI用户流失记录条数 |
| consumePoint | 当日该工程模板性能记录次数 |
| recordWrite | 当日该工程FineReport报表填报次数 |
| templateError | 当日该工程报错日志记录条数 |
| processLog | 当日该工程云端运维任务运行次数 |
| executeSql | SQL 执行记录明细条数 |
4.2 execute
模板使用情况，记录模板的执行明细。
| 字段 | 备注 |
|---|---|
| id | 主键 |
| tname | 物理模板名字（reportlet 下的完整路径） |
| displayName | 挂载到平台的目录名称（全路径），如果直接访问链接则为空 |
| time | 记录的时间，到秒即可 |
| memory | 报表占用内存，单位 B |
| type | 报表访问方式 |
| consume | 后台耗时 |
| sqlTime | SQL 执行耗时间 |
| reportId | 模板 ID |
| userId | 用户 ID |
| ip | 用户所在ip（加密导出） |
| complete | 是否计算完成 |
| source | 链接访问/平台访问 |
| brower | 浏览器 |
| sessionID | 会话ID，用于与性能埋点表中的前端渲染耗时相关埋点进行关联 |
| node | 加载模板的节点名 |
| error | 模板执行过程中第一个报错信息 |
| webInfo | 模板执行信息 webResolution：当前模板执行在前端访问时的分辨率，记录格式为x*y fullScreen：当前模板执行在前端访问时是否是全屏模式，记录格式为1/0 |
| fineMarkId | 一个用户的标识id（用于判断非登录场景下的用户数） |
| estimate | 估算内存(非格子计算)，单位KB |
| frFullVersion | FineReport工程模块版本 |
| biFullVersion | FineBI工程模块版本 |
| cloudVersion | 云端运维插件版本 |
4.3 executesql
记录 SQL 的执行记录明细。
| 字段 | 备注 |
|---|---|
| time | 执行时间，时间戳格式 |
| executeid | 执行表 ID |
| dsname | 数据集的名称 |
| sqltime | SQL 执行时间，单位毫秒 |
| rows | 数据集规模，行 |
| columns | 数据集规模，列 |
| connection | 数据连接名 |
| connectionID | 数据连接标识 ID，用于与功能埋点表中的数据源连接相关埋点进行关联 |
4.4 realTime
应用的实时情况，每分钟记录一条。
| 字段 | 备注 |
|---|---|
| time | 记录时间，每分钟一条 |
| node | 节点名 |
| cpu | CPU 利用率 |
| memory | 当前 jvm 内存情况 |
| sessionnum | 存活会话数 |
| onlinenum | 系统在线人数 |
| pid | 进程 pid |
| templateRequest | 正在计算的模板请求数 |
| httpRequest | 总的正在处理的 http 请求数 |
| sessionRequest | 正在处理的带 SessionID 的请求数 |
| fineIO | fineIO占用堆外内存大小，单位 KB |
| NIO | NIO占用堆外内存大小，单位 KB |
| bufferMemUse | 堆外使用总内存，directMem「nio」和mappedMem，单位 KB |
| physicalMemUse | 物理内存已使用空间，单位 KB |
| physicalMemFree | 物理内存空闲空间，单位 KB |
4.5 consumepoint
模板的性能情况，每日记录一次。
| 字段 | 含义 | 备注 |
|---|---|---|
| id | 埋点 id 编号 | |
| source | 埋点来源 | Original 类 1 表示当前系统的 0 表示插件的埋点 -1 表示没有定义来源 |
| time | 开始时间 | 开始时间（时间戳格式） |
| username | 用户名ID | 进行了转码处理 |
| ip | 用户ip | 进行了转码处理 |
| finish | 结束时间 | FineReport 字段，FineBI不适用 |
| consume | 耗时，单位 ms | - |
| memory | 内存大小，单位 byte | FineReport 字段，FineBI不适用 |
| title | 资源 id | 可以是模板id，分析表id，表id等 |
| text | 资源内容 | FineReport 字段，FineBI不适用 |
| type | 操作类型 | FineReport 字段，FineBI不适用 |
| comment | 资源备注 | FineReport 字段，FineBI不适用 |
| body | 埋点具体信息 | - |
| frFullVersion | FineReport工程模块版本 | - |
| biFullVersion | FineBI工程模块版本 | - |
| cloudVersion | 云端运维插件版本 | - |
4.6 focusPoint
记录功能点的使用情况，以及各种埋点信息。
| 字段 | 说明 | 备注 |
|---|---|---|
| id | 功能点 id | 例如：FR-F4001 |
| source | 埋点来源 | 功能点的类型 embed 表示当前系统的 plugin 表示插件的埋点 undefined表示没有定义来源 |
| time | 时间 | 使用该功能的时间点 |
| username | 用户名 | 用户名ID，进行了转码处理 |
| ip | 用户IP | 用户IP，进行了转码处理 |
| title | 标题 | 主要内容 |
| text | 内容 | 功能点的主要信息 |
| body | 埋点具体信息 | 埋点具体信息，一个 json 数据结构，根据不同的埋点里面存放不同的信息（次要信息，可能为空） |
| frFullVersion | FineReport工程模块版本 | - |
| biFullVersion | FineBI工程模块版本 | - |
| cloudVersion | 云端运维插件版本 | - |
4.7 templateError
错误日志记录表：记录系统中发生过的报错日志。
| 字段 | 含义 |
|---|---|
| tname | 出错的物理模板名字（reportlet下的完整路径） |
| time | 出错记录时间 |
| displayName | 挂载到平台的目录名称（全路径） 如果为空时，判断 platformDisplay是否为0，为零时平台前端显示处理为国际化的“非挂载访问” |
| result | 是否成功预览 1：预览成功 0：预览失败 |
| code | 错误代码 |
| platformDisplay | 是否挂载访问 1：表示挂载访问 0：表示url访问 |
| username | 执行报表的用户 notLogged：表示未登录访问 fromSchedule：表示来自定时调度 |
4.8 gcRecord
记录系统的 GC 信息。
| 字段 | 数据类型 & 单位 | 备注 |
|---|---|---|
| time | long timestamp | 记录时间 |
| gcStartTime | long timestamp | GC 开始时间 |
| gcType | String | GC 类型 |
| gcCause | String | GC 的原因 |
| pid | String | 进程pid |
| node | String | 用户命名的节点名，单机下记为空 |
| duration | long ms | GC 持续时间 |
| youngBeforeUsed | long KB | 年轻代 GC 前使用内存 |
| youngBeforeCommitted | long KB | 年轻代 GC 前申请内存 |
| youngAfterUsed | long KB | 年轻代 GC 后使用内存 |
| youngAfterCommitted | long KB | 年轻代 GC 后申请内存 |
| oldBeforeUsed | long KB | 老年代 GC 前使用内存 |
| oldBeforeCommitted | long KB | 老年代 GC 前申请内存 |
| oldAfterUsed | long KB | 老年代 GC 后使用内存 |
| oldAfterCommitted | long KB | 老年代 GC 后申请内存 |
| metaspaceBeforeUsed | long KB | metaspace GC 前使用内存 |
| metaspaceBeforeCommitted | long KB | metaspace GC 前申请内存 |
| metaspaceAfterUsed | long KB | metaspace GC 后使用内存 |
| metaspaceAfterCommitted | long KB | metaspace GC 后申请内存 |
| heapBeforeUsed | long KB | GC 前堆使用内存 |
| heapBeforeCommitted | long KB | GC 前堆申请内存 |
| heapAfterUsed | long KB | GC 后堆使用内存 |
| heapAfterCommitted | long KB | GC 后堆申请内存 |
| balancePromoterScore | int 分「分值的分」 | 中止计算分值 |
| releasePromoterScore | 同上 | 释放会话分值 |
| loadScore | 同上 | 整体负载分值 |
4.9 processLog
记录云端运维任务运行相关的日志。
| 字段 | 含义 |
|---|---|
| time | 时间 |
| node | 节点 |
| process | 流程 |
4.10 recordOperate
管理日志表，即用户对模块进行操作的时候，将会在该表中添加一条记录，并在相应字段中填写其对应的信息记录。
注：5.1.7 及之后版本的 FineBI 新增该表。
字段 | 备注 |
|---|---|
| type | 模块（存国际化的 key） |
| item | 设置项 |
| operation | 操作 |
| username | 用户名 |
| ip | 用户 IP 地址 |
| time | 用户操作时间 |
4.11 recordWrite
填报表：记录填报日志信息，即如果报表进行填报的时候，将会在该表中添加一条记录，并在相应字段中填写其对应的信息记录。
注：5.1.7 及之后版本的 FineBI 新增该表。
字段 | 备注 |
|---|---|
| username | 填报报表的用户 |
| tname | 仪表板存放路径 |
| time | 填报时间 |
| result | 是否填报成功 |
| ip | 填报报表的IP地址 |
| displayName | 仪表板的实际名称，非「目录管理」中仪表板的名称 如果直接访问链接则为空 |
| browser | 客户端访问报表所用的浏览器版本 |
| consume | 执行耗时，包括 SQL 执行时间，报表计算时间 |
| body | 用json数据结构记录以下信息(times, max,min,avg) times：该类请求出现次数，单位：次 max：该类请求最大响应时长，单位：ms min：该类请求最小响应时长，单位：ms avg：该类请求平均响应时长，单位：ms |
| frFullVersion | FineReport工程模块版本 |
| biFullVersion | FineBI工程模块版本 |
| cloudVersion | 云端运维插件版本 |
5. 数据表-BI编辑
5.1 biExecute
仪表板访问情况。
| 字段 | 含义 | 备注 |
|---|---|---|
| id | 主键 | - |
| tname | 仪表板名字 | 文件夹名称/……/仪表板名称 FineReport 报表有后缀.cpt |
| displayName | 记录被分享的数据集名称 | 没有挂出的 BI 仪表板显示仪表板名 |
| time | 日志开始时间 | 时间戳格式 |
| memory | 报表占用内存，单位 B | FineReport 字段，BI 不适用 |
| type | 仪表板访问方式，具体列举在下文 | - |
| username | 执行仪表板的用户 | - |
| userrole | 执行仪表板的用户角色 | - |
| consume | BI 仪表板访问耗时，从打开仪表板到所有组件加载完成的时间，单位为毫秒 | 注：该 BI 仪表板访问耗时为 2019-04 之后的版本增加。 |
| sqlTime | sql 执行的总时间 | FineReport字段，BI 不适用 |
| reportID | 仪表板编号 | - |
| userId | 用户 Id | - |
| complete | 是否计算完成 | FineReport字段，BI 不适用 |
| source | 访问方式（integration 是通过 url 访问，single 是平台访问的 ） | FineReport字段，BI 不适用 |
| param | 记录被分享节点名称 | 如果被分享节点为多层级部门，则记录形式为：1层节点/2层节点/节点 |
| frFullVersion | FineReport工程模块版本 | |
| biFullVersion | FineBI工程模块版本 | |
| cloudVersion | 云端运维插件版本 |
字段 type 具体含义：
编码 | 类型 | 参数 |
0 | 分页预览 | page |
1 | 在线分析 | view |
2 | 填报预览 | write |
3 | 决策报表预览 | form |
4 | 行式引擎 | layer |
5 | 在线编辑 | edit |
6 | 新填报 | write_plus |
7 | 新引擎预览 | page_plus |
8 | 大屏FVS预览 | |
9 | 开发者调试预览 | |
10 | Excel 分页导出 | excel |
11 | Excel 原样导出 | excelO |
12 | Excel整页导出，对应场景包括： 1）大数据集导出插件导出Excel 2）Excel分页导出、原样导出启用了行式引擎的报表 | excelL |
13 | Excel 分页分 sheet 导出 | excelS |
14 | PDF 导出 | |
15 | Word 导出 | word |
16 | SVG 导出 | svg |
17 | CSV 导出 | csv |
18 | 文本导出 | text |
19 | JPG 图片导出 | jpg |
20 | PNG 图片导出 | png |
21 | GIF 图片导出 | gif |
22 | BMP 图片导出 | bmp |
23 | WBMP 图片导出 | wbmp |
24 | 内置数据集导出模板 | cpt |
25 | HTML 导出 | html |
26 | 填报 HTML 导出 | write_html |
27 | BI 导出 Excel | |
30 | Flash 打印 | print_flash |
31 | PDF 打印 | print_pdf |
32 | Applet 打印 | print_applet |
33 | 零客户端打印 | print_noclient |
34 | 本地软件打印 | print_native |
101 | 查看BI模板 | bi_view |
102 | 编辑BI模板 1）记录逻辑：点开一张仪表板进入编辑状态，等待页面全部加载完毕，无论做多少操作或不做操作，记录一次；下次再点模板进去编辑或者刷新网页记录第二次 2）同一张仪表板，每次编辑都会有记录 | bi_edit |
103 | 分享BI模板 | bi_share |
104 | 创建BI公共链接 | bi_create_publink |
105 | 查看BI公共链接 | bi_view_share |
106 | BI 模板全局导出 PDF | bi_template_export_pdf |
107 | BI 模板全局导出 Excel | bi_template_export_excel |
108 | BI 组件导出 Excel | bi_component_export_excel |
109 | BI模板另存为 | |
201 | 关闭浏览器或者 Tab 页（BI） | |
202 | 编辑自助数据集 | |
| 205 | 关闭分享BI模板 | |
206 | 关闭BI公共链接 | |
| 301 | 预览组件 | |
| 302 | 编辑组件 | |
401 | 预览Excel插件模板 | |
402 | 编辑Excel插件模板（预留） | |
403 | 分享Excel插件模板 | |
404 | 创建Excel插件公共链接 | |
405 | 通过公共链接访问Excel插件模板 | |
408 | Excel组件导出Excel | |
409 | Excel仪表板另存为 | |
| 501 | 查看主题 | |
| 502 | 编辑主题 | |
| 503 | 分组协作 | |
| 504 | 主题协作 | |
| 602 | 编辑基础表 |
5.2 biUpdteTask
更新任务表
| 字段 | 含义 | 备注 |
|---|---|---|
| planId | 任务实例唯一标识，每一次运行都不同 | - |
| triggerId | 触发ID | 触发的单表、业务包、全局的ID |
| taskName | 任务名称 | 表名+任务类型（单表/业务包/全局） |
| startTime | 任务开始时间 | - |
| endTime | 任务结束时间 | - |
| runningResult | 完成状态 | 1 全部成功 2 部分成功 |
| state | 更新状态 | 1 已结束 2 运行 |
| triggerType | 触发方式 | 1 手动 2 定时 |
| roleId | 触发人Id | - |
| roleName | 触发人名称 | - |
| countOverView | 任务中各类型的表的更新情况。JSON | expectBaseTableUpdate 期望的基础表数量 actualBaseTableUpdate 实际成功更新的基础表数量 expectComplexUpdate 期望的自助数据集数量 actualComplexUpdate 实际成功的自助数据集数量 expectRelationUpdate 期望的关联更新数量 actualRelationUpdate 实际成功的关联数量 |
| extra1 | 额外的字段1 | - |
| extra2 | 额外的字段2 | - |
| extra3 | 额外的字段3 | - |
| time | 数据插入时间，swift表清理需要 | - |
5.3 biUpdateTaskDetail
更新任务明细表
| 字段 | 含义 | 备注 |
|---|---|---|
| planId | 任务实例唯一标识，每一次运行都不同 | - |
| tableId | 更新表ID | - |
| loadId | 明细标识，在一个更新任务中唯一 | - |
| loadName | 明细信息的名字 | 表为表名+包名，关联为关联的信息 |
| loadType | 明细类型 | 1 基础表 2 自助数据集 3 关联 |
| updateType | 更新类型 | 1 全量 2 增量 |
| state | 更新状态 | 1 更新中 2 成功 3 部分成功 4 排队等待 5 失败 |
| endTime | 数据更新结束时间 | - |
| effectTime | 生效时间，真正可用 | - |
| startTime | 更新开始时间 | - |
| execption | 失败报错信息 | - |
| failedSonId | 基础表导致的更新失败的表的ID集合 | - |
| extra1 | 额外的字段1 | - |
| extra2 | 额外的字段2 | - |
| extra3 | 额外的字段3 | - |
| time | 数据插入时间，swift表清理需要 | - |
| fatherFailedIds | 更新失败的父表的ID集合 | - |
| updateCount | 变化的行数，可能有增有减 | - |
| errorCode | 错误代码 | - |
| totalCount | 总行数 | - |
| deleteCount | 增量减行数 | - |
| writeTime | 写文件时间 | - |
| etlFlow | 自助数据集的步骤 | - |
| appendCount | 增量增行数 | - |
| columns | 列 | - |
| jdbcTime | 数据获取时间 | - |
| openTime | sql执行时间 | - |
| infos | 非报错信息（只有国际化的key值和参数） | - |
5.4 biDailyOperation
FineBI用户活跃度分析表
| 字段 | 含义 | 计算方式 |
|---|---|---|
| time | 统计时间 | - |
| username | 用户名称 | - |
| day | 日期 | - |
| dayMake | 当日编辑仪表板次数 | 前一天内存记录的make值 |
| dayMakeT | 当日编辑数据集次数 | 前一天内存记录的makeT值 |
| dayMakeC | 当日编辑组件次数 | 前一天内存记录的makeC值 |
| dayView | 当日查看仪表板次数 | 前一天内存记录的view值 |
| totalMake | 累计编辑仪表板次数 | 首次计算：execute表中所有时间该用户type=“102”的记录数 非首次计算：该用户前一天表中的totalMake+前一天内存记录的make |
| totalMakeT | 累计编辑数据集次数 | 首次计算：execute表中所有时间该用户type=“202”的记录数 非首次计算：该用户前一天表中的totalMakeT+前一天内存记录的makeT |
| totalMakeC | 累计编辑组件次数 | 首次计算：execute表中所有时间该用户type=“302”的记录数 非首次计算：该用户前一天表中的totalMakeC+前一天内存记录的makeC |
| totalView | 累计查看次数 | 首次计算：execute表中所有时间该用户type=“101”的记录数 非首次计算：该用户前一天表中的totalView+前一天内存记录的view |
| totalMakeMonth | 累计编辑仪表板月份数 | 首次计算：execute表中该用户type=“102”的月份数 每月1号计算：若上月该用户存在totalMake>0，则+1；否则为前一天的totalMakeMonth 其他时间计算：前一天的totalMakeMonth |
| lastMakeDay | 最近一次编辑仪表板日期 | 首次计算：execute表中该用户type=“102”的最近一次记录数 非首次计算：若用户前一天的totalMake>0,则记录前一天日期；否则为前一天的lastMakeDay |
5.5 biUserLifecycle
FineBI用户流失分析表
| 字段 | 含义 | 计算方式 |
|---|---|---|
| time | 统计时间 | - |
| username | 用户名称 | - |
| day | 日期 | - |
| maxThreeMonMake | 历史3月总编辑次数最大值 | 近3月每日编辑仪表板次数的最大值 |
| threeConMonMake | 是否3个月连续编辑 | 近3个月每日是否均有编辑仪表板行为 |
| productUsability | 产品使用能力 | P1：累计编辑次数≤100，且累计编辑月份数≤=4 P2：累计编辑次数>100，或累计编辑月份数>4 P3：累计编辑次数>200，或累计编辑月份数>10 |
| loss | 是否流失用户 | 1：已流失，包括以下两种情况 近3月的月编辑月份数=3，且近60天内没有编辑行为 近3月的月编辑月份数<=2，且近120天没有编辑行为 0：未流失 |
| lifecycle | 生命周期标签 | introduction：导入期，近3月均编辑次数≤5 new：新手期，即产品使用能力为P1 growth：成长期，即产品使用能力为P2 maturity：成熟期，即产品使用能力为P3 loss：流失期，即近3月均编辑次数＞5，且为已流失用户 |
| preLoss | 是否预流失 | low：生命周期处于新手期/成长期，且超过12天没有编辑行为 high：生命周期处于新手期/成长期，且超过30天没有编辑行为 0：其他情况 |
5.6 honeypot
埋点表
| 字段 | 含义 |
|---|---|
| 类型 (id) | 区分类别的父类ID |
| 参数 (param) | 记录备注信息，主要记录步骤的名称、状态、等内容 |
| 时间 (time) | 时间 |
| 用户名 (username) | 用户名，转码处理 |
| 用户类型 (userType) | - |
| 对象 (target) | 该步骤的操作对象，资源id；记录模板id，分析表id，表id等 |
| 表转义名 (transferName) | 操作对象的转义名 |
| 公司 ID (companyName) | license中的公司ID |
| 项目名字 (projectName) | license中的项目名称 |
| 版本 (version) | license中的版本号 |
| frFullVersion | FineReport工程模块版本 |
| biFullVersion | FineBI工程模块版本 |
| cloudVersion | 云端运维插件版本 |
5.7 engineQueryPerformance
引擎埋点关键类
| 字段 | 含义 |
|---|---|
| queryId | 查询标识/ID |
| startTime | 开始时间 |
| endTime | 结束时间 |
| engineType | 引擎类型 1：直连 2：抽取 |
| innerEngineType | 细分内部引擎类型 直连： 1：DB 2：Excel 3：TCERID 抽取： 1：抽取 |
| baseStartTime | 基础计算开始时间 直连：直连SQL查询层开始时间 抽取：spider引擎基础计算层开始时间 |
| baseEndTime | 基础计算结束时间 直连：直连SQL查询层结束时间 抽取：spider引擎基础计算层结束时间 |
| dataModelCol | 基础结果列数 |
| dataModelRow | 基础结果行数 |
| dataModelMem | 基础结果内存占用大小，单位B |
| peakMemory | 计算结果中内存峰值，单位B 部分情况下会没有记录，比如命中缓存或者内存控制未覆盖或者未走到检查点 |
| cacheHitType | 缓存命中情况 直连： 0：未命中 1：PAGE_CACHE_HIT 2：HYPER_CACHE_HIT 3：SQL_CACHE_HIT 4：ETL_CACHE_HI 抽取： 1：分页缓存 2：全局缓存 |
| cacheCost | 缓存处理耗时 |
| matchType | 直连策略命中情况 0：表示未命中 1：表示规则命中但是实际未命中 2：表示规则命中，实际命中 |
| parseTime | 解析耗时 |
| mergeCost | 并发计算后合并操作的耗时 |
| tableId | 数据集ID |
| widgetId | 组件ID |
| widgetType | 组件类型 |
| dashboardId | 模板ID |
| baseCriteria | 基础查询信息 |
| extra | 额外字段 |
| executeType | 运行状态 0：成功 1：报错 |
| username | 查询用户名 |
| frFullVersion | FineReport工程模块版本 |
| biFullVersion | FineBI工程模块版本 |
| cloudVersion | 云端运维插件版本 |
5.8 logpoint
埋点报错信息表
| 字段 | 含义 | 备注 |
|---|---|---|
| 埋点类型编号 | 区分类别的父类ID | |
| 出现报错时间 | - | |
| 错误代码 | 具体的错误代码 | 参考 错误代码 |
6. 数据表-FDL编辑
6.1 fdlExecutorTask
记录FDL任务/节点/算子运行情况
| 字段 | 含义 |
|---|---|
| id | 主键 |
| targetId | 任务/节点/算子ID |
| category | 一级分类（区分任务 OR 节点 OR 算子） 0：任务 1：节点 2：算子 |
| type | 二级分类 1）任务 SCHED：定时任务 2）节点 3）算子 |
| beginTime | 执行开始时间 （时间戳格式） |
| endTime | 执行结束时间 （时间戳格式） |
| status | 执行状态 任务和算子只有SUCCESS和FAILED状态 节点状态有SUCCESS、FAILED、EXECUTOR_LINE_NOT_MATCH |
| lasting | 执行耗时 |
| extraInfo | 执行补充信息（JSON） execUser：执行用户（仅任务包含，定时调度触发或作为子任务被调用时值固定为SYSTEM、手动运行时值为对应用户） |
| time | 数据入库时间，logdb自动生成（Swift表清理需要） |
6.2 fdlPipeExecInfo
| 字段 | 含义 |
|---|---|
| day | |
| taskId | |
| taskName | |
| taskStatus | |
| syncType | |
| fullSyncFinished | |
| sourceTableName | |
| targetTableName | |
| readRecordCount | |
| totalReadRecordCount | |
| toSyncRecordCount | |
| errorRecordCount | |
| insertRecordCount | |
| totalInsertRecordCount | |
| updateRecordCount | |
| totalUpdateRecordCount | |
| deleteRecordCount | |
| totalDeleteRecordCount |
6.3 fdlSchedExecInfo
| 字段 | 含义 |
|---|---|
| id | |
| targetId | |
| category | |
| type | |
| beginTime | |
| endTime | |
| status | |
| lasting | |
| extraInfo | |
| time |
7. 其他说明编辑
若导出数据包时该日数据包已存在，则先将该日数据包删除后再导出，即进行覆盖操作。
（例如 2019-03-02 日凌晨四点会导出 2019-03-01 日数据包。而在 2019-03-01 日用户进行过手动下载，已生成当日数据包，2019-03-02 日凌晨四点导出的数据包则会将之前生成的数据包覆盖）。