業務數據“一站式”數據管理平臺,從設備實時數據和業務應用數據兩個方面要徹底解決“信息孤島”的問題

 1. 產品背景

工業數據大致分爲兩種數據:設備實時數據和業務應用數據。

設備實時數據的管理是iNeuOS工業互聯網操作系統的基礎平臺重要組成部分,要求數據的實時性、穩定性,通過設備驅動(數據交互驅動)、服務驅動(數據事務處理驅動)、設備模型(設備實時通信及處理)、業務模型(數據分組建模)、資產模型(數據空間規則提取)、計算平臺(數據計算與預警)、數據分析、數據轉發、視圖建模(2D/3D數據展示)、流程控制(數據反向操作)、算法分析(數據算法分析)、Excel報表設計(數據報表模板設計與應用)等對設備實時數據進行流程化處理和應用。

業務應用數據是指一般工業企業已經建設的業務系統,針對衆多業務系統的數據進行採集、存儲、治理、管控、應用和發佈等進行集成,通過數據建模、數據ETL、數據開發、數據集成、數據模板、報表應用、數據報告、數據看板和質量追溯等功能解決數據交互造成的數據管理困難、數據失真嚴重的痛點。優化企業生產中數據的存儲標準和規範性,實現材料數據的質量追溯,助力企業對生產過程的全面管控和質量保證。

從設備實時數據和業務應用數據兩個方面要徹底解決“信息孤島”的問題和設備及業務數據融合應用的問題。

2. 產品簡介

業務數據“一站式”數據管理平臺以業務數據治理爲目標,從業務數據的生產、採集、治理、應用、共享等多維度出發,結合生產業務場景進行應用拓展,形成一體化的業務數據管理平臺。

底層平臺基於微服務架構,對部署環境具有強適應性,可完美適配國產化環境。是企業級的應用開發、運行、管理、監控、維護的系統平臺。

平臺具有數據中心、數據採集、數據服務、數據開發、數據應用、數據可視化以及組件庫、模板庫、報告生成引擎和動態解析引擎等豐富的通用組件,是標準化、可視化、高擴展性的業務數據管理及開發技術平臺。

3. 產品功能

3.1.    數據治理

3.1.1.      數據建模

數據模型是業務質量數據存儲的綱領,數據治理平臺提供可自主配置的數據模型功能,質量師可根據業務質量數據類型、歸檔方式等組織管理要求,建立相應的業務質量數據模型。

       1)自定義數據屬性

系統可支持用戶根據數據分類,創建並擴展數據模型,目前系統支持20餘種屬性定義。

        2)自定義屬性佈局

用戶可對數據模型對應的頁面佈局進行自定義,將數據模型中的各個字段展示順序,檢索方式等信息進行定義。

       3)定義數據分類權限

數據治理平臺爲確保數據安全,提供完善的數據權限設定,用戶可在數據模型中,對模型對應的數據信息設定新增、刪除、修改、查看、導出、導入、發佈等權限信息。

 3.1.2.      數據ETL

數據治理平臺提供數據ETL應用,用戶可使用自主配置的數據ETL工具,自定義數據合併、整合、清洗規則。通過數據ETL,數據治理平臺可將導入數據、採集數據、集成數據、提取數據等各類來源的業務質量數據進行規則化的抽取、清洗轉換之後加載到數據倉庫,目的是將分散、零亂、標準不統一的數據整合到一起,爲業務質量數據分析決策提供依據,是業務質量數據管理的重要環節。

用戶可在在應用內,對輸入數據集中的數據配置值抽取、合併、轉換、分析、挖掘規則進行創建並配置,系統將根據定義的數據ETL規則完成對應的數據操作,並將數據處理結果輸出至用戶配置的數據集中,完成對是數據的整合操作,實現數據的深度利用。

3.1.3.      數據開發

數據開發功能是業務數據管理系統針對系統API的自定義配置功能,針對外部系統所需的業務測試數據,通過自定義的API配置,對業務數據庫中的數據表、數據集通過查詢方法定義的方式實現API服務的定義,當外部系統請求系統API時,系統將自動運行查詢方法對數據進行查詢並提供給外部系統。

1)嚮導式數據開發

利用嚮導式的數據開發工具,系統運維人員可自行進行數據API的開發和發佈工作,確保系統的自主維護性和高拓展性,同時提升系統存儲的業務測試數據的利用率。

        2)請求方式定義

利嚮導式的數據開發工具,在完成數據API基礎屬性定義後,數據管理員無需進行代碼開發工作,使用系統提供的數據服務開發工具,即可輕鬆定義數據服務API,並快速發佈。

       3)數據源配置

數據服務支持當前信息系統使用的各類型數據庫作爲數據源,用戶可針對不同的業務系統進行對應的數據源配置

        4)查詢結果定義

根據數據源中的數據結果類型,服務開發者可定義針對各結果的轉換規則,平臺提供規則制定工具,服務開發者可根據業務需求,定義對返回結果的轉換、計算規則,服務啓動後,平臺會根據定義的規則進行數據轉換或計算後存儲至數據中心。

 3.1.4.      數據集成

數據治理平臺數據集成支持對外部數據庫、外部數據文件的數據集成,通過數據集成的方式,抽取並存儲外部來源的業務數據,是業務數據管理系統的一部分數據來源。

       1)數據庫集成

數據集成提供的數據庫集成功能,是平臺針對外部數據庫提供的的數據連接提取服務,用於與外部數據庫建立數據連接並抽取外部數據庫中的數據。

        數據集成功能可以定義針對外部數據庫的抽取SQL,平臺將根據配置的抽取SQL查詢並提取外部數據庫中的數據,數據管理員可根據外部數據庫的數據結構,完成數據抽取配置並定義抽取的數據字段。

        2)數據文件集成

數據集成提供針對數據文件的數據抽取功能,用戶通過建立對數據文件中標題行字段的定義,將數據文件中的各字段的信息進行定義。平臺將根據對數據文件中標題字段的定義自動建立相應的數據模型及數據表數據的存儲規則,實現對外部數據文件中業務測試數據的抽取和存儲工作。

       針對數據文件的集成配置完成後,系統將對數據文件中的數據列、數據字段信息進行定義,系統將在對應的數據模型中建立針對該數據的數據集,實現從數據文件中進行的數據抽取。

3.1.5.      數據模板

1)定義模板

平臺提供數據模板編制功能,可在數據模板管理頁面利用嚮導式、圖形化的模板配置工具進行數據模板的配置工作,對數據模板進行規範化標準化的制定。

        2)在線設計

系統提供的數據模板應用採用基於數據表格的模板在線配置方式,質量師可通過對所選數據集字段的拖拽式的定義,實現從數據文件模板到數據庫字段的存儲配置工作。

 3.1.6.      數據導入

爲解決測試試驗過程中,因外協產生的第三方數據或者其它原因產生的外部數據的結構化管理需求,系統提供完善的數據導入功能,用於處理第三方或者外部數據的結構化管理。

1)數據導入

用戶可通過下載默認的導入模板,或者通過自定義配置導入規則定義數據導入存儲規則,系統提供拖拽式的自定義模板配置工具,用戶可根據實際需求對模板中對應單元格的數據字段與數據模型中的對應字段進行關係定義,系統將在文件導入時通過定義的字段關係進行數據文件解析,並將解析後的結構化數據存儲至數據庫中。

       2)導入撤回

由於第三方數據、外部數據具有一定的不確定性,數據導入後,在數據審覈過程中若發現數據質量問題或數據錯誤,需對導入數據進行撤銷,系統提供數據導入的一鍵撤銷功能,用戶可在數據導入頁面查看通過當前系統導入數據的狀態,同時針對每一次的數據導入進行一鍵撤銷操作,系統將根據導入記錄將指定的導入數據進行撤銷。

3.2.    數據應用

3.2.1.      複雜報表

1)報表管理

複雜報表應用是平臺提供的數據報表製作工具,數據管理員可使用該應用結合實際業務需求對報表類型、數據源、格式等信息進行定義。用於對數據中心存儲的產品數據進行報表輸出。

2)報表配置

數據管理員可利用數據報表應用進行報表模板的配置,在應用頁面添加基本信息、數據集、報表信息和數據字典的信息,並調整報表格式,形成報表模板,用於進行報表數據提取及輸出工作。

        3)報表預覽

報表應用通過配置的數據源、格式信息生成設定的報表文件類型,在遵循系統設定權限和數據標準設定權限的前提下,對應的用戶可對生成的報表進行在線預覽、打印或者下載等操作。

 3.2.2.      數據報告

1)報告模版配置

平臺提供數據報告應用,用戶通過配置報告模板的方式建立數據報告與數據集之間的數據關係,系統將通過報告模板查找對應的質量數據生成質量報告。

        2)報告預覽查看

質量報告生成後,用戶可在系統頁面中對報告進行在線預覽、下載打印、設定權限等操作。

 3.2.3.      數據看板

數據看板應用預置多種統計圖表樣式,用戶可對數據中心存儲的結構化數據進行圖表維度配置,系統將根據數據源、數據類型、字段信息進行數據提取,用戶配置將提出的數據生成數據統計圖表。

        平臺提供便捷的圖表繪製、對比配置工具,用戶可根據業務需求,針對性的配置數據源、數據模型,並通過拖拽的方式完成圖表字段定義,平臺根據用戶配置實時進行對應的數據圖表繪製

3.2.4.      包絡分析

生產過程信息追溯系統提供包絡分析功能,可針對產品生產過程中的關鍵參數定義包絡線,並根據生產過程數據進行特定參數的包絡分析,系統將依據包絡參數設定對相應的數據進行監控,當該參數上傳數據出現超包絡時,系統將提示用戶更新包絡線,並形成包絡更新記錄,實現包絡線的可溯源性。

1)參數分類

針對型號產品,用戶可對產品的關鍵參數建立分類,系統提供用戶自定義的分類創建工具,依據產品包絡分析要求及產品參數組成,用戶可創建具備層級的包絡參數分類,如產品-分系統-部件-關鍵參數,並在定義的分類下進行包絡參數的維護。

2)包絡線溯源

針對系統分析得出的參數包絡線,可通過包絡線追溯的方式對包絡線的來源及更新情況進行查看,系統將對所選包絡線的來源及更新情況通過時間軸的方式進行組織展示,方便包絡線的溯源。

       3)圖形化包絡分析

包絡分析功能支持使用數據看板提供的圖表控件,對特定參數的包絡情況進行圖形化的展示,通過設計圖形頁面,用戶可快速瞭解產品關鍵參數的數值變化情況與包絡線之間的關係,爲質量分析控制提供便捷、直觀的數據支撐。

3.2.5.      質量追溯

質量追溯是產品質量管理中的基本要求,質量數據管理系統利用質量數據庫中存儲的多維度產品質量數據,通過關聯查詢的方式,快速實現對產品質量數據各個維度的質量追溯功能。

       1)產品追溯

通過產品編號進行質量追溯,利用產品的配套關係,系統可查詢該產品配套的部件、組件、零件、材料各級元素的質量數據。

2)外購件/元器件追溯

通過外購件/元器件的批次信息,通過查詢質量數據中存在該批次外購件/元器件配套關係的各級產品組件,並獲取其質量數據,實現在外購件/元器件維度的質量追溯。

3)原材料追溯

通過原材料的批次、爐批號等信息,在質量數據庫中定位該原材料應用的產品組件,獲取對應的產品信息,實現材料維度的質量追溯。

4)儀器設備追溯

通過產品質量數據庫中存儲的產品生產、檢測所用的儀器設備信息、使用時間信息,針對儀器設備進行質量追溯。


物聯網&大數據技術 QQ羣:54256083

物聯網&大數據項目 QQ羣:727664080
QQ:504547114
微信:wxzz0151
博客:https://www.cnblogs.com/lsjwq
微信公衆號:iNeuOS

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章