BI/Spider参数

新增BI參數「抽取查詢逾時時間」

「Spider參數」更名為「抽取參數」

1）新增參數

新增BI參數「Excel匯出剩餘磁碟空間」

新增抽取參數「更新高效能時間區間」

2）刪除參數

刪除抽取參數「Spark Driver埠」

刪除抽取參數「Spark blockManager埠」

刪除抽取參數「Spark動態調節功能」

3）參數分類優化，調整部分參數的分類

「明細表匯出併發執行緒數限制」、「多指標計算執行緒數」調整為BI參數-進階調優參數

「spark日誌匯出等級」、「精簡模式日期」調整為抽取參數-基礎參數

「spark本地模式臨時檔案路徑」、「增量更新資料塊整理計劃」調整為抽取參數-進階調優參數

1）「抽取參數」更名為「Spider參數」

2）新增參數

新增Spider參數「資料存取活躍週期（天）」

新增Spider參數「資料建立活躍週期（天）」

新增Spider參數「資料活躍度全局檢查時間」

3）刪除參數

刪除Spider參數「分析使用者自助資料集磁碟佔用大小（儲存格）」

1）增加不合理計算的限制，分組後、左右合併後資料量過大，那麼在組件/儀表板中進行計算的時候會被打斷。

2）刪除BI參數「多指標計算執行緒數」

1）新增「BI參數」Tab頁，原「標準」下的參數配置行動到「BI參數」Tab頁。

2）新增參數限制：儀表板組件數、組件新增計算欄位數、def公式巢狀層數、直連自助資料集複雜計算步驟數、抽取血緣層級數、直連血緣層級數、定時更新頻率、抽取自助資料集儲存格數、主題編輯資料量限制。

1）無論是否開啟，有小數位數時欄位始終被識別為數值類型

2）不開啟資料類型識別時，數字個數超過15位的識別為正文類型，小於等於15位的識別為數值類型

3）開啟資料類型識別後始終識別為數值類型(double)，double有效精度為15位(2^52)，所以當數字個數超過15位時就可能發生精度丟失的情況，開啟後資料表需要重做。

4）在未開啟參數的情況下新增的表：

如果表沒被編輯過，開啟參數重啟後，進入表編輯介面可以獲取為數值欄位類型，重新儲存即可。

如果表是被編輯過的，開啟參數重啟後，進入表編輯介面依然會是正文類型，不會再讀取為數值。

對於維運平台部署的存算分離的FineBI6.1，該配置無效

是否使用中文排序

預設關閉，表示不使用中文排序

開啟後，抽取資料的表需要重新抽數

詳情參見：排序 1.4 

開啟後將智慧選取維度進行解釋

注：license中資料解譯功能點註冊後該配置才生效

spark日誌匯出等級，標準匯出流，匯出在 Tomcat 的 catalina.out 檔案內或者 BI 的 nohup 檔案內

可選項為：INFO、WARN、ERROR、DEBUG。

INFO：列印錯誤類和基本執行日誌

WARN：列印警告或提示類資訊

ERROR：只列印錯誤類日誌

DEBUG：列印所有日誌

單位為秒，預設為空，空代表不開啟手動預覽參數。

配置參數後，所有組件請求資料查詢時間超過設定的時長後，提示使用者開啟手動預覽，但不強制為使用者開啟。降低對引擎的查詢壓力

參數無需重啟，配置後即生效。

自助資料集單表更新是否跟隨父表更新

詳情請參見：自助資料集單表更新

在配置的時間段內不限制更新資源池核心數佔用。

為不影響使用者使用，建議配置到系統無人使用、更新任務頻繁的時間段。

資料集被存取後的持續活躍週期

存在以下兩種情況之一的資料集會被視為活躍：

   ● 資料集製作的儀表板/組件，在 x 天內被編輯或存取

   ● 資料集的子表是活躍表

單位：天

資料集被建立後的持續活躍週期

資料集在被建立的 x 天內被視為活躍，超出則視為不活躍

單位：天

資料集活躍狀態判斷的檢查時間。

將在該時間統一檢查資料集的存取、建立情況，重新整理其活躍狀態，進而將一部分資料集設定為不抽取。

可選項為：

    ● 固定時間檢查：每天XXX點檢查，設定格式 hh:mm:ss

    ● 全局更新定時任務前檢查

固定時間檢查

00:00:00

資料存取量限制了可讀入伺服器記憶體的資料列數。並非所有大數據量計算場景都會將所有資料讀入記憶體，FineBI Spider 引擎具有智慧的記憶體使用策略，例如：

• 執行過分組匯總後的資料列超過【設定值】，組件/儀表板中的計算會被打斷。

• 左右合併中較小的資料表，它的聯動欄位分組後若超過【設定值】列數，組件/儀表板中的計算會被打斷。
  

配置過低，將影響資料計算準確性。

配置過高，系統有當機風險。

單位：列

可配置區間：[0，10000000]

建議設定區間：[10000，1000000]，建議保持預設值

限制每個主題層面的資料編輯程式中，實時處理的資料量，預設為 10000000。該參數無需重啟即可生效。

可配置範圍：[1100,000，10,000,000]

如需調整上限，可聯絡技術支援修改 finedb 中的配置檔案

當儀表板中組件過多，組件查詢時間會過長，或者儀表板中某個組件查詢時間過長，導致後續 BI 請求被阻擋，容易誤認為產品當機。

此時可設定直連查詢逾時時間，所有實時資料查詢逾時之後將會中止查詢，防止異常慢查詢阻擋其他正常查詢。

組件傳回如下報錯： 組件查詢時間超過Xmin，查詢中斷

單位：秒

建議配置範圍：10-300

生效範圍：BI直連除獲取表結構之外的所有查詢請求

限制直連資料集血緣層數上限，防止生成的sql過於複雜，影響儀表板載入速度。

可配置範圍：2-3

如需調整上限，可聯絡技術支援修改 finedb 中的配置檔案

限制直連自助資料集中複雜計算步驟數，防止生成的sql過於複雜，計算時佔用大量記憶體和CPU。

複雜計算步驟包括左右合併、從其他表新增欄、新增匯總欄、列轉欄、欄轉列。

可配置範圍：0-2

如需調整上限，可聯絡技術支援修改finedb中的配置檔案。

當儀表板中組件過多，組件查詢時間會過長，或者儀表板中某個組件查詢時間過長，導致後續 BI 請求被阻擋，容易誤認為產品當機。

此時可設定抽取查詢逾時時間，所有抽取資料查詢逾時之後將會中止查詢，防止異常慢查詢阻擋其他正常查詢。

組件傳回如下報錯： 組件查詢時間超過xxx，查詢中斷

單位：秒

建議配置範圍：10-300

限制抽取資料集血緣層數上限，防止生成的sql過於複雜，影響儀表板載入速度；也可以防止資料集整體更新時長過長。

可配置範圍：2-16

如需調整上限，可聯絡技術支援修改finedb中的配置檔案。

限制公式中的DEF函式巢狀層數上限，防止生成的sql過於複雜，計算時間過長，影響儀表板載入速度。該參數無需重啟即可生效。

可配置範圍：0-4。

如需調整上限，可聯絡技術支援修改finedb中的配置檔案。

定時設定的

更新頻率

限制單個資料集設定的定時更新頻率，防止業務設定更新頻率過高導致系統負載過高。

單位：分鐘

抽取自助資料集

儲存格數

使用者匯出 Excel 時可能會超出資料量限制，提供該參數便於使用者設定，超過限制匯出將直接報錯

單位：儲存格（列*欄）

配置範圍：0-2000000000

建議配置範圍：0-1000000000

匯出Excel時會進行磁碟空間檢查，當磁碟空間小於限制值時，將中斷匯出行為。預防因磁碟佔滿導致當機。

觸發該限制後，匯出失敗，系統彈窗報錯：當前匯出資料量過大，磁碟空間不足。已觸發系統保護機制，匯出中斷。請即時清理磁碟空間，受【Excel匯出磁碟空間檢查】參數限制，磁碟空間限制：XXG

配置範圍：5~無限制

配置範圍：1-10

建議配置範圍：1-5，建議保持預設值