Qt編寫物聯網管理平臺46-雲端數據同步

一、前言

在上一篇文章說的採集數據轉發的基礎上,針對方案一還做了雲端數據同步功能,滿足各式各樣的用戶需求。雲端數據庫同步,相當於把本地採集到的數據實時存儲到雲端,至於這些記錄到了雲端後什麼用途,客戶端軟件這邊不用管,比如一般會用來做web請求訪問,或者app請求獲取數據,具體應用看用戶需求。

雲端數據庫也會存儲到NodeData表中,意味着任意地方的客戶端,都可以選擇數據庫採集模式,直接連接雲端的數據庫作爲數據源。這樣相當於可以無限級聯。現場直連硬件採集的一套客戶端軟件,其他各個地方可以無數套一樣的客戶端軟件,設置好工作模式爲數據庫採集模式,數據庫對應雲端的數據庫信息即可。

二、功能特點

2.1 軟件模塊

  1. 設備監控模塊,包括數據監控(表格形式展示)、設備面板(面板形式展示)、地圖監控(地圖形式展示)、曲線監控(曲線形式展示)。
  2. 數據查詢模塊,包括報警記錄、運行記錄、操作記錄。
  3. 系統設置模塊,包括基本設置、端口管理、控制器管理、探測器管理、報警聯動、類型設置等。
  4. 其他設置模塊,包括用戶管理、地圖管理、位置調整、組態設計、設備調試等。

2.2 基礎功能

  1. 設備數據採集,支持串口、網絡,串口可設置串口號、波特率,網絡可設置IP地址、通訊端口。
  2. 每個端口支持採集週期時間,默認1秒鐘一個設備。
  3. 支持設置通訊超時次數,默認3次。
  4. 支持最大重連時間,用於重新讀取離線的設備。
  5. 控制器信息,能夠添加控制器名稱,選擇控制器地址、控制器型號,設置該控制器下面的探測器數量。
  6. 探測器信息,能夠添加位號、探測器型號、氣體種類、氣體符號、高報值、低報值、緩衝值、清零值、是否啓用、報警聲音、背景地圖、存儲週期、數值換算小數點位數、報警延時時間、報警的類型(HH,LL,HL)等。
  7. 類型管理可配置控制器型號、探測器型號、氣體種類、氣體符號等。
  8. 地圖支持導入和刪除,所有的探測器在地圖上的位置可自由拖動保存。
  9. 端口信息、控制器信息、探測器信息、類型信息、用戶信息等,都支持導入、導出、導出到excel、打印。
  10. 運行記錄、報警記錄、操作記錄,都支持多條件組合查詢,比如時間段、控制器、探測器等,所有記錄支持導出到excel/pdf和打印。
  11. 運行記錄、報警記錄、操作記錄都可刪除指定時間範圍內的數據。
  12. 系統設置可選擇對應表最大保存記錄數,自動清理早期數據,留出足夠的空間存儲重要的數據。
  13. 報警短信轉發,支持多個接收手機號碼,可設定發送間隔,比如即時發送或者6個小時發送一次所有的報警信息,短信內容過長,自動拆分多條短信。
  14. 報警郵件轉發,支持多個接收郵箱,可設定發送間隔,比如即時發送或者6個小時發送一次所有的報警信息,支持附件發送。
  15. 設置軟件的中文標題、英文標題、logo路徑、版權所有等。
  16. 開關設置開機運行、報警聲音、自動登錄、記住密碼等。
  17. 報警聲音可設置播放次數,界面風格樣式提供18套皮膚文件選擇。
  18. 用戶管理,包括用戶權限配置,不同用戶可以有不同模塊的權限。
  19. 用戶登錄和用戶退出,可以記住密碼和自動登錄,超過三次報錯提示並關閉程序。
  20. 四種監控模式,設備面板監控、地圖監控、表格數據監控、曲線數據監控,可自由切換,四種模式下都實時展示採集到的數據,報警閃爍等。
  21. 報警繼電器聯動,一個位號可以跨串口聯動多個模塊和繼電器號,支持多對多。

2.3 特色功能

  1. 通信協議支持modbus_com、modbus_tcp_rtu,後期拓展mqtt等協議。
  2. 數據源除了真實的硬件設備採集,還可選數據庫採集,這樣用戶可以安排其他程序員比如java程序員將前端採集好的數據放到數據庫,本系統直接從數據庫採集即可。數據庫採集模式可以作爲通用的系統使用,更適合多人多系統協作。
  3. 智能跳過超時的設備,加快對在線設備的採集速度,當設備數量很多的時候尤其有用。
  4. 對智能跳過的超時的設備,在設定的重連時間自動採集一次,以便探測設備是否又重新上線。
  5. 每個探測器可控是否啓用,不啓用則不會採集,也不會在界面顯示,相當於運行階段臨時關閉。
  6. 探測器可設置緩衝值和報警延時時間,在該值附近波動產生的報警,不計入報警,只有持續處於報警值且超過報警延時時間纔算真正報警,這樣可以規避很多波動導致的誤報。
  7. 探測器可設置存儲週期,按照設定的時間來存儲一條運行記錄,可以按照重要程度對重要性高的設定存儲週期短一些,不重要的設定大一些,這樣可以節省不少的存儲空間,也保證了重要的數據及時存儲。
  8. 探測器可設置清零值,在一些高精度高靈敏的設備可能出廠的時候默認值未必是0,需要設定清零值來表示初始值。
  9. 探測器可設置小數點,用於計算後的真實數據控制小數點點位顯示,相當於除以10、除以100、除以1000,這樣大部分的探測器數據直接通過小數點位設置控制真實換算後的值,極個別的需要特殊轉換的可以在通信協議中約定。
  10. 探測器報警的類型支持多種,有些設備是高於某個值高報,低於某個值低報,而有些設備是在最小值最大值範圍內是高報,低於最小值低報,高於最大值正常。這樣可以分情況處理,涵蓋各種報警類型。
  11. 原創數據導入、導出、打印機制,跨平臺不依賴任何組件,瞬間導出數據。
  12. 導出到excel的記錄支持所有excel、wps等表格文件版本,不依賴excel等軟件。
  13. 高報顏色、低報顏色、正常顏色、默認值顏色等,都可以自由設置。
  14. 支持雲端數據同步,將本地採集到的數據實時同步到雲端。
  15. 支持網絡轉發和網絡接收,網絡接收開啓後,軟件從udp接收數據進行解析。網絡轉發支持多個目標IP,這樣就實現了本地採集的軟件,自由將數據轉到客戶端,隨時查看採集到的數據。
  16. 自動記住用戶最後停留的界面以及其他配置信息,重啓後自動應用。
  17. 報警自動切換到對應的地圖,探測器按鈕閃爍,表格數據對應顏色顯示。
  18. 雙擊探測器圖標,彈出對應探測器詳細信息,可以根據需要定製回控操作。
  19. 數據庫支持多種,包括sqlite、mysql、sqlserver、postgresql、oracle、人大金倉等。
  20. 本地設備採集到的數據實時上傳到雲端,以便手機APP或者web等其他方式提取。
  21. 自帶設備模擬工具,支持不同型號的多個設備數據模擬,同時還帶數據庫數據模擬,以便在沒有設備的時候測試數據。
  22. 標準modbus協議,各種控制器類型、探測器類型、種類、符號等全部自定義,非常靈活和強大,通信協議示例數據非常完整,通用各種modbus協議系統,適用於各種應用場景接入。
  23. 同時集成了串口通信、網絡通信、數據庫通信、數據導入導出打印、通信協議解析、界面UI、全局換膚等衆多組件和知識點,非常適合新手入門和進階。
  24. 支持xp、win7、win10、、win11、linux、mac、各種國產系統(UOS、中標麒麟、銀河麒麟等)、嵌入式linux等系統。
  25. 註釋完整,項目結構清晰,超級詳細完整的使用開發手冊,精確到每個代碼文件的功能說明,不斷持續迭代版本。

三、體驗地址

  1. 國內站點:https://gitee.com/feiyangqingyun
  2. 國際站點:https://github.com/feiyangqingyun
  3. 個人主頁:https://blog.csdn.net/feiyangqingyun
  4. 知乎主頁:https://www.zhihu.com/people/feiyangqingyun
  5. 產品主頁:https://blog.csdn.net/feiyangqingyun/article/details/97565652
  6. 在線文檔:https://feiyangqingyun.gitee.io/qwidgetdemo/iotsystem/
  7. 體驗地址:https://pan.baidu.com/s/1ZxG-oyUKe286LPMPxOrO2A 提取碼:o05q 文件名:bin_iotsystem.zip。
  8. 文章導航:https://qtchina.blog.csdn.net/article/details/121330922

四、效果圖



五、相關代碼

void DbConnThread::execSqlPlus()
{
    int count = sqlPlus.count();
    if (!dbOk || count == 0) {
        return;
    }

    time.restart();
    mutex.lock();
    QStringList sqls = sqlPlus;
    sqlPlus.clear();
    mutex.unlock();

    //開啓數據庫事務加快速度
    database.transaction();

    //逐個執行sql語句
    foreach (QString sql, sqls) {
        QSqlQuery query(database);
        query.setForwardOnly(true);
        query.exec(sql);
    }

    QString msg = QString("(共 %1 條/用時 %2 秒)").arg(count).arg(getUseTime());
    if (database.commit() || !database.lastError().isValid()) {
        emit debug(QString("%1數據庫實時更新數據%2").arg(dbFlag).arg(msg));
    } else {
        //提交失敗則需要回滾事務
        database.rollback();
        //dbOk = false;
        QString text = database.lastError().text();
        emit error(QString("%1數據庫實時更新數據提交事務失敗%2, 原因: %3").arg(dbFlag).arg(msg).arg(text));
        qDebug() << TIMEMS << this->objectName() << text;
    }
}

void DbConnThread::append(const QString &sql)
{
    //超過隊列中最大數量限制則無需處理
    if (sqlPlus.count() >= maxCount) {
        return;
    }

    mutex.lock();
    sqlPlus << sql;
    mutex.unlock();
}

void DbConnThread::run()
{
    //如果還沒打開數據庫則先打開數據庫
    if (!dbOk) {
        openDb();
        msleep(100);
    }

    //sqlite數據庫屬於本地文件數據庫永遠不需要校驗
    if (dbType == DbType_Sqlite) {
        checkConn = false;
    }

    while (!stopped) {
        //定時執行一次校驗數據庫連接是否正常
        QDateTime now = QDateTime::currentDateTime();
        if (checkConn && lastCheckTime.secsTo(now) >= checkInterval) {
            checkDb();
            lastCheckTime = now;
            continue;
        }

        //如果數據庫連接正常則處理數據,不正常則重連數據庫
        if (!dbOk) {
            //可以修改最大的錯誤數
            if (errorCount >= 2) {
                closeDb();
                msleep(3000);
                openDb();
                msleep(3000);
            }
        } else {
            execSqlSelect();
            execSqlPlus();
            execSqlUpdate();
            msleep(10);
        }
    }

    stopped = false;
}

//雲端數據同步
if (AppConfig::UseNetDb) {
    QString sql = QString("update NodeData set NodeValue='%1',NodeStatus='%2',SaveTime='%3' where PositionID='%4'")
                    .arg(nodeValue).arg(nodeStatus).arg(dateTime).arg(positionID);
    DbData::DbNet->append(sql);
}
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章