? ? ? 地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務，地質災害數據集成和數據集成系統，數據集成的目的是通過數據集成操作為用戶提供更好的數據服務，數據集成系統的操作包括查詢優(yōu)化與更新，數據集成包括了數據轉化和數據清理，但卻不是兩者的相加，而是包括了數據清理和數據轉化的操作，數據集成主要是在集成系統上進行操作。數據集成總體模型包括兩種，一種是完全建立一個全新的信息系統，實現對遺留系統數據以及所有操作的轉換，該方式不僅成本高而且實現難度很大，另一種方式是在原來的基礎上進行擴展，使新的系統可以滿足新的應用需要，地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務地質災害數據集成系統的主要功能是為實現對地質災害相關信息數據的監(jiān)測和控制管理，利用該系統的實時性、全方位性及時發(fā)現地質災害情況并以此為依據給出相應的地質災害防控方案。因此，地質災害數據集成系統在設計時必須要求能夠獲得全方面的且真實可靠的監(jiān)測指標，實現對地質災害的自動化監(jiān)測，利用自動化處理技術和相關集成數據操作軟件。首先要利用數據庫訪問組件能夠在需要的數據庫中獲取原始的監(jiān)測數據，再利用算法對這些監(jiān)測數據進行處理分析，最后獲得的數據信息可匯總到數據庫中用于綜合評價分析所需。由于現有的數據庫優(yōu)化器以及執(zhí)行引擎等已經不能適應新的集成系統應用所需，比如缺乏統計信息、數據到達時間不可預知、異構數據源數據重疊和冗余等，因此必須加強對數據集成系統設計的研究。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務地質災害數據集成工具的系統設計地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務數據集成包含數據轉換、數據清理等操作，所以對于數據集成系統的設計和實現會遇到不少困難，目前在地質災害數據集成系統設計方面存在的問題：首先關于語義的數據清理，一方面數據清理的精確度和效率得不到保證，而數據清理的效果和效率會對數據質量產生直接的影響，另一方面記錄間算法的聚類函數也需要進一步研究才能實現高效聚類，只有提高數據清理的速度才能保證數據處理的精確度和效率。其次自動化或部分自動化的數據轉換，存在轉化效率和集成系統操作效率的問題，此外關于可視化界面的設計，主要功能集中在關系模型上，不具有數據清理功能，對于復雜的數據信息無法完成自動化轉化工作地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務關于地質災害數據集成系統設計，系統設計的主要目標是利用相關技術建立數據集成系統模型，從而為地質災害數據監(jiān)測提供高效可靠的服務。在進行該系統設計時需要滿足幾點原則：地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務要求利用組件化方式進行系統設計，系統必須要有良好的模塊化與可移植性，且遵循軟件工程的原理和方法。

? ? ? 地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務要求有方便的接口，簡單的操作就能對異構數據進行操作，實現數據清理、轉化和集成。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務要有可擴展性，能處理新的數據類型，具備二次開發(fā)的功能，且具備良好的用戶可視化界面。地質災害數據集成關鍵技術研究對原始數據的處理　　在進行地質災害數據集成系統設計過程中，首先必須采用自動化監(jiān)測技術及其相關監(jiān)測設備，但是監(jiān)測手段所獲得的數據信息都是原始信息，即頻率值，頻率值無法直接使用故而必須采用相應的算法公式進行計算，經計算獲得的數據才能被用到地質災害監(jiān)測、災害預警等工作中。因此，對原始數據進行計算處理、轉化是整個地質災害數據集成系統的關鍵技術之一，也是重要工作，為實現對監(jiān)測數據處理的自動化，有必要采用和工作流相結合的配置文件，采用不同的計算公式和參數，結合配置文件可進行相關數據處理和數據庫構建工作。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務對異構數據的集成化處理，對異構數據進行集成化處理，指的是針對不同數據庫中的不同數據，采用統一的數據標準對這些存儲的監(jiān)測數據進行集中化處理，需要用到數據轉化、計算方式，然后將這些經過統一處理后的數據匯總到統一到監(jiān)測數據庫中。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務，數據標準，利用地質災害數據監(jiān)測技術獲得的相關監(jiān)測數據在一段時間內一般會對應相應的監(jiān)測值，可通過映射關系將這些對應同一個監(jiān)測值的監(jiān)測數據集中到一個相互關系中，這個相互關系就是數據標準，可用一張表格實現對大部分監(jiān)測數據的管理。而在進行實際地質災害數據監(jiān)測工作時，一般采集一次數據需要多個監(jiān)測值，對于深部位移的監(jiān)測，深度不同、位置不同都需要設置多個監(jiān)測點，這時每一個時刻就會對應不同的位移值，因此必須要使用多個監(jiān)測值。對于不同方向的兩個位移值，監(jiān)測設備的電壓、溫度等參數也不相同，因此需要對整個數據結構中的數據進行細分，這時編碼一般要由多個字符構成。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務，多源數據庫支持，地質災害監(jiān)測數據各種各樣，包括結構性和非結構性數據，所以對于監(jiān)測數據庫的構建，也需要建立多源數據庫，不同的數據庫中包含了不同類型的監(jiān)測數據，通過集成化處理使這些數據能夠集中到相同的平臺上進行分析處理，所建立的數據平臺能夠訪問不同類型的數據庫組件，并能夠實現不同數據庫之間的轉換。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務數據集成系統優(yōu)化，地質災害數據集成系統中，對監(jiān)測數據存儲進行優(yōu)化是因為數據采集頻率高、且進行數據監(jiān)測時間持續(xù)長，隨著數據監(jiān)測時間的增加，地質災害監(jiān)測數據量將十分龐大，對數據存儲提出了更高的要求，不僅要求數據存儲的安全性還要提高數據響應效率，使這些數據能夠及時為地質災害相關工作提供服務。地質災害評估_專業(yè)地災評估報告編制單位_湖南專業(yè)工程地質技術服務此外，地質災害數據集成系統的目的之一是供地質災害數據監(jiān)測工作查詢使用，因此除了監(jiān)測數據存儲優(yōu)化外還應該做好查詢優(yōu)化，查詢優(yōu)化指的是在數據庫中預先確定好策略，或者在數據庫運行時進行調度和再優(yōu)化，在虛擬數據庫下數據分布在各個數據源上，因此查詢需要重寫，數據可能存在到達不可預知、規(guī)模和估計規(guī)模差異較大的問題，這時需要采用查詢優(yōu)化器對查詢計劃進行再次調度和再次優(yōu)化，從而提高數據查詢的效率和質量。