隱藏在液晶拼接屏背后的數據處理邏輯

發布日期:2023-02-13 點擊次數:681

液晶拼接屏大屏幕，表面上是一個簡單的屏幕，而屏幕背后的數據處理邏輯有時是很復雜的；方案提供商、系統提供商、大屏集成商不管安裝液晶拼接屏的屬于什么角色，如果整個方案不能為用戶解決問題，屏幕也就沒有安裝的價值。有時會是一些很奇特的不能實現的問題。比如財務大數據處理中心，如果不能對數據進行合理監控，而是直接使用，不用考慮數據的敏感性，用戶的層級，加完班終產品會無法使用。

（二）液晶拼接屏監控對象管理

數據質量監控對象主要分為納稅人和稅務機關兩大類，不同的數據質量監控維度，對監控對象的監控方式不同，在收集局方各業務處室監控需求基礎上，設置數據底層監控邏輯，增加數據質量監控對象種類，以供在質量規則配置中使用。

（二）質量規則管理

根據數據質量監控對象，以及質量監控目的，配置對應的質量規則。支持自定義質量檢測模型，模型類型包括列值檢測、列值波動檢測、跨表的外鍵檢查和引用完整性檢查；在數據分析監控規則上，支持布爾分析、完整性分析、標準值域分析、枚舉值分析、數值分析和唯一性分析等常見分析規則；

在數據分析修復規則上，支持包括去除空白字符、去除特定字符、大小寫轉換、數據脫敏、漢語轉拼音、同義詞替換、身份證校驗轉換、身份證信息提取、日期拆分、字符串截取、轉換為字符串、轉為Unix時間戳、全角半角轉換、多表合并、多列合并、拆分列、數據分組合并、空值填充、日期標準化、電話號碼清洗、分區標準化、歷史拉鏈表、實時業務表和SQL清洗等。

（三）液晶拼接屏數據質量監控

對數據質量監控任務進行全流程跟蹤，提供自動、人工任務監控方式，自定義任務監控周期，提供任務有效周期選擇，可即時啟用停用監控任務，在任務監控過程中，可即時獲取任務監控結果，查看任務監控結果明細，并提供標準的統計口徑，可根據用戶需求，提供定制化統計方式。

（四）數據質量報告

提供對數據表字段空值率、合法率檢查功能，能夠統計生成數據質量完整性和合法性評估報表，并支持下載。完整性評估：不完整比率即空值字段占比，是指每張表的不完整列的比率，即不完整字段數/字段總數。值域合法率：合法值數/有值總數

（五）數據質量改進

提供數據質量問題處理流程，可根據用戶需求，定制處理任務流轉規則，任務處理終端，提供可視化液晶拼接屏數據處理，拖拉拽操作方式，支持去除特定字符、大小寫轉換、數據脫敏、漢語轉拼音、同義詞轉換和身份證校驗轉換等常見的可視化數據處理方式。