1.1 版本
FineBI 版本 | JAR 包 |
---|
5.1 | 2020-08-03
|
注:本文适用于 Spider 引擎 版本参数,直连版本不适用。
1.2 功能简介
FineBI 在系统管理里提供了配置一些 BI 参数和调优参数的功能,方便系统管理和项目实施人员简单快捷的了解当前系统配置,并在界面上进行快速设置。
管理员登录数据决策系统,进入管理系统>系统管理>常规,可以看到 BI 和 Spider 参数配置的页面。如下图所示:

FineBI 版本
| JAR 包 |
---|
5.1 | 2020-08-03 |
Spider 参数是指对 Spider 引擎 版本的 BI 生效的参数,包含基础参数和高级调优参数,如下图所示:

3.1 基础参数
3.1.1 分析用户自助数据集磁盘占用大小(单元格)
参数属性
|
|
---|
默认值 | 50,000,000; |
参数说明 | 快速分析生成过程中支持的最大单元格数量,超出则生成失败。具体可参考: 自助数据集数据量限制 。 |
修改后是否需要重启 | 是 |
3.2 高级调优参数(常用)
3.2.1 抽数压缩线程数
参数属性
|
|
---|
默认值 | 8 |
参数说明 | 抽取数据时,分片(压缩&写入)线程的数量。在内存很小(不超过4G)并且无法扩大内存的情况下,可以调小该线程,减轻内存压力; |
修改后是否需要重启 | 是 |
3.2.2 抽数压缩线程队列大小
参数属性
|
|
---|
默认值 | 200 |
参数说明 | 抽取数据时,未处理的分片等待队列长度,在内存很小(不超过4G)并且无法扩大内存的情况下,可以调小队列长度,减轻内存压力; |
修改后是否需要重启 | 是 |
3.2.3 spark日志输出等级
参数属性
|
|
---|
默认值 | INFO; |
参数说明 | spark日志输出等级,标准输出流,输出在tomcat的catalina.out文件内或者BI的nohup文件内,可以选择项为:INFO、WARN、ERROR、DEBUG。 INFO:打印错误类和基本执行日志;WARN:打印警告或提示类信息;ERROR:只打印错误类日志;DEBUG:打印所有日志; |
修改后是否需要重启 | 是 |
3.2.4 新增数据抽数任务执行线程数
参数属性
|
|
---|
默认值 | 5 |
参数说明 | 新增数据的抽数任务同时执行的线程数,在内存很小(不超过4G)并且无法扩大内存的情况下,可以调小该线程数,减轻内存压力; |
修改后是否需要重启 | 是 |
3.2.5 精简模式日期
参数属性 |
|
---|
默认 | 关闭 |
参数说明 | 精简模式开启时,日期字段在进行数据抽取时,只提前生成少量分组类型,加快生成速度,减少占用空间。未生成的分组在进行计算时可能会有性能损耗; |
修改后是否需要重启 | 是(且需重新更新数据) |
3.3 更多参数
3.3.1 spark driver端口
3.3.2 spark blockManager端口
3.3.3 spark本地模式临时文件路径
参数属性
|
|
---|
默认值 | null (linux下实际为/tmp) |
参数说明 | Spark写临时文件的目录,需给足一定的空间,修改至SSD挂载路径可提升Spark处理关联、SparkSql查询的性能(注:集群版该参数无效,需要在服务器端配置) |
修改后是否需要重启 | 是 |
3.3.4 优先使用 Spark SQL 计算去重记录数
参数属性 |
|
---|
默认值 | 关闭 |
参数说明
| 是否优先使用SparkSQL计算去重记录数,在数据量不超过1000w但是分组数依旧很大的情况下(会有内存溢出报错)可能会需要设置为true,绝大多数场景默认值满足需求, |
修改后是否需要重启 | 是 |
3.3.5 spark动态调节功能
参数属性 |
|
---|
默认值 | 开启 |
参数说明 | spark动态 根据计算数据量调节task的数目,开启后对于小数据量的计算性能提升明显 |
修改后是否需要重启 | 是 |
3.3.6 增量更新数据块整理计划
参数属性 |
|
---|
默认值 | 关闭 |
参数说明 | 在这个时间段内,增量更新任务不会执行合并操作,提升增量更新的速度。默认是null,设置格式hh:mm:ss-hh:mm:ss, example:10:10:10-12:12:12。 |
修改后是否需要重启 | 是 |