? ? ? 地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù),地質(zhì)災(zāi)害數(shù)據(jù)集成和數(shù)據(jù)集成系統(tǒng),數(shù)據(jù)集成的目的是通過(guò)數(shù)據(jù)集成操作為用戶提供更好的數(shù)據(jù)服務(wù),數(shù)據(jù)集成系統(tǒng)的操作包括查詢優(yōu)化與更新,數(shù)據(jù)集成包括了數(shù)據(jù)轉(zhuǎn)化和數(shù)據(jù)清理,但卻不是兩者的相加,而是包括了數(shù)據(jù)清理和數(shù)據(jù)轉(zhuǎn)化的操作,數(shù)據(jù)集成主要是在集成系統(tǒng)上進(jìn)行操作。數(shù)據(jù)集成總體模型包括兩種,一種是完全建立一個(gè)全新的信息系統(tǒng),實(shí)現(xiàn)對(duì)遺留系統(tǒng)數(shù)據(jù)以及所有操作的轉(zhuǎn)換,該方式不僅成本高而且實(shí)現(xiàn)難度很大,另一種方式是在原來(lái)的基礎(chǔ)上進(jìn)行擴(kuò)展,使新的系統(tǒng)可以滿足新的應(yīng)用需要,地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)的主要功能是為實(shí)現(xiàn)對(duì)地質(zhì)災(zāi)害相關(guān)信息數(shù)據(jù)的監(jiān)測(cè)和控制管理,利用該系統(tǒng)的實(shí)時(shí)性、全方位性及時(shí)發(fā)現(xiàn)地質(zhì)災(zāi)害情況并以此為依據(jù)給出相應(yīng)的地質(zhì)災(zāi)害防控方案。因此,地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)在設(shè)計(jì)時(shí)必須要求能夠獲得全方面的且真實(shí)可靠的監(jiān)測(cè)指標(biāo),實(shí)現(xiàn)對(duì)地質(zhì)災(zāi)害的自動(dòng)化監(jiān)測(cè),利用自動(dòng)化處理技術(shù)和相關(guān)集成數(shù)據(jù)操作軟件。首先要利用數(shù)據(jù)庫(kù)訪問(wèn)組件能夠在需要的數(shù)據(jù)庫(kù)中獲取原始的監(jiān)測(cè)數(shù)據(jù),再利用算法對(duì)這些監(jiān)測(cè)數(shù)據(jù)進(jìn)行處理分析,最后獲得的數(shù)據(jù)信息可匯總到數(shù)據(jù)庫(kù)中用于綜合評(píng)價(jià)分析所需。由于現(xiàn)有的數(shù)據(jù)庫(kù)優(yōu)化器以及執(zhí)行引擎等已經(jīng)不能適應(yīng)新的集成系統(tǒng)應(yīng)用所需,比如缺乏統(tǒng)計(jì)信息、數(shù)據(jù)到達(dá)時(shí)間不可預(yù)知、異構(gòu)數(shù)據(jù)源數(shù)據(jù)重疊和冗余等,因此必須加強(qiáng)對(duì)數(shù)據(jù)集成系統(tǒng)設(shè)計(jì)的研究。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)地質(zhì)災(zāi)害數(shù)據(jù)集成工具的系統(tǒng)設(shè)計(jì)地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)數(shù)據(jù)集成包含數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)清理等操作,所以對(duì)于數(shù)據(jù)集成系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)會(huì)遇到不少困難,目前在地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)設(shè)計(jì)方面存在的問(wèn)題:首先關(guān)于語(yǔ)義的數(shù)據(jù)清理,一方面數(shù)據(jù)清理的精確度和效率得不到保證,而數(shù)據(jù)清理的效果和效率會(huì)對(duì)數(shù)據(jù)質(zhì)量產(chǎn)生直接的影響,另一方面記錄間算法的聚類函數(shù)也需要進(jìn)一步研究才能實(shí)現(xiàn)高效聚類,只有提高數(shù)據(jù)清理的速度才能保證數(shù)據(jù)處理的精確度和效率。其次自動(dòng)化或部分自動(dòng)化的數(shù)據(jù)轉(zhuǎn)換,存在轉(zhuǎn)化效率和集成系統(tǒng)操作效率的問(wèn)題,此外關(guān)于可視化界面的設(shè)計(jì),主要功能集中在關(guān)系模型上,不具有數(shù)據(jù)清理功能,對(duì)于復(fù)雜的數(shù)據(jù)信息無(wú)法完成自動(dòng)化轉(zhuǎn)化工作地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)關(guān)于地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)設(shè)計(jì),系統(tǒng)設(shè)計(jì)的主要目標(biāo)是利用相關(guān)技術(shù)建立數(shù)據(jù)集成系統(tǒng)模型,從而為地質(zhì)災(zāi)害數(shù)據(jù)監(jiān)測(cè)提供高效可靠的服務(wù)。在進(jìn)行該系統(tǒng)設(shè)計(jì)時(shí)需要滿足幾點(diǎn)原則:地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)要求利用組件化方式進(jìn)行系統(tǒng)設(shè)計(jì),系統(tǒng)必須要有良好的模塊化與可移植性,且遵循軟件工程的原理和方法。
? ? ? 地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)要求有方便的接口,簡(jiǎn)單的操作就能對(duì)異構(gòu)數(shù)據(jù)進(jìn)行操作,實(shí)現(xiàn)數(shù)據(jù)清理、轉(zhuǎn)化和集成。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)要有可擴(kuò)展性,能處理新的數(shù)據(jù)類型,具備二次開(kāi)發(fā)的功能,且具備良好的用戶可視化界面。地質(zhì)災(zāi)害數(shù)據(jù)集成關(guān)鍵技術(shù)研究對(duì)原始數(shù)據(jù)的處理 在進(jìn)行地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)設(shè)計(jì)過(guò)程中,首先必須采用自動(dòng)化監(jiān)測(cè)技術(shù)及其相關(guān)監(jiān)測(cè)設(shè)備,但是監(jiān)測(cè)手段所獲得的數(shù)據(jù)信息都是原始信息,即頻率值,頻率值無(wú)法直接使用故而必須采用相應(yīng)的算法公式進(jìn)行計(jì)算,經(jīng)計(jì)算獲得的數(shù)據(jù)才能被用到地質(zhì)災(zāi)害監(jiān)測(cè)、災(zāi)害預(yù)警等工作中。因此,對(duì)原始數(shù)據(jù)進(jìn)行計(jì)算處理、轉(zhuǎn)化是整個(gè)地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)的關(guān)鍵技術(shù)之一,也是重要工作,為實(shí)現(xiàn)對(duì)監(jiān)測(cè)數(shù)據(jù)處理的自動(dòng)化,有必要采用和工作流相結(jié)合的配置文件,采用不同的計(jì)算公式和參數(shù),結(jié)合配置文件可進(jìn)行相關(guān)數(shù)據(jù)處理和數(shù)據(jù)庫(kù)構(gòu)建工作。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)對(duì)異構(gòu)數(shù)據(jù)的集成化處理,對(duì)異構(gòu)數(shù)據(jù)進(jìn)行集成化處理,指的是針對(duì)不同數(shù)據(jù)庫(kù)中的不同數(shù)據(jù),采用統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)對(duì)這些存儲(chǔ)的監(jiān)測(cè)數(shù)據(jù)進(jìn)行集中化處理,需要用到數(shù)據(jù)轉(zhuǎn)化、計(jì)算方式,然后將這些經(jīng)過(guò)統(tǒng)一處理后的數(shù)據(jù)匯總到統(tǒng)一到監(jiān)測(cè)數(shù)據(jù)庫(kù)中。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù),數(shù)據(jù)標(biāo)準(zhǔn),利用地質(zhì)災(zāi)害數(shù)據(jù)監(jiān)測(cè)技術(shù)獲得的相關(guān)監(jiān)測(cè)數(shù)據(jù)在一段時(shí)間內(nèi)一般會(huì)對(duì)應(yīng)相應(yīng)的監(jiān)測(cè)值,可通過(guò)映射關(guān)系將這些對(duì)應(yīng)同一個(gè)監(jiān)測(cè)值的監(jiān)測(cè)數(shù)據(jù)集中到一個(gè)相互關(guān)系中,這個(gè)相互關(guān)系就是數(shù)據(jù)標(biāo)準(zhǔn),可用一張表格實(shí)現(xiàn)對(duì)大部分監(jiān)測(cè)數(shù)據(jù)的管理。而在進(jìn)行實(shí)際地質(zhì)災(zāi)害數(shù)據(jù)監(jiān)測(cè)工作時(shí),一般采集一次數(shù)據(jù)需要多個(gè)監(jiān)測(cè)值,對(duì)于深部位移的監(jiān)測(cè),深度不同、位置不同都需要設(shè)置多個(gè)監(jiān)測(cè)點(diǎn),這時(shí)每一個(gè)時(shí)刻就會(huì)對(duì)應(yīng)不同的位移值,因此必須要使用多個(gè)監(jiān)測(cè)值。對(duì)于不同方向的兩個(gè)位移值,監(jiān)測(cè)設(shè)備的電壓、溫度等參數(shù)也不相同,因此需要對(duì)整個(gè)數(shù)據(jù)結(jié)構(gòu)中的數(shù)據(jù)進(jìn)行細(xì)分,這時(shí)編碼一般要由多個(gè)字符構(gòu)成。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù),多源數(shù)據(jù)庫(kù)支持,地質(zhì)災(zāi)害監(jiān)測(cè)數(shù)據(jù)各種各樣,包括結(jié)構(gòu)性和非結(jié)構(gòu)性數(shù)據(jù),所以對(duì)于監(jiān)測(cè)數(shù)據(jù)庫(kù)的構(gòu)建,也需要建立多源數(shù)據(jù)庫(kù),不同的數(shù)據(jù)庫(kù)中包含了不同類型的監(jiān)測(cè)數(shù)據(jù),通過(guò)集成化處理使這些數(shù)據(jù)能夠集中到相同的平臺(tái)上進(jìn)行分析處理,所建立的數(shù)據(jù)平臺(tái)能夠訪問(wèn)不同類型的數(shù)據(jù)庫(kù)組件,并能夠?qū)崿F(xiàn)不同數(shù)據(jù)庫(kù)之間的轉(zhuǎn)換。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)數(shù)據(jù)集成系統(tǒng)優(yōu)化,地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)中,對(duì)監(jiān)測(cè)數(shù)據(jù)存儲(chǔ)進(jìn)行優(yōu)化是因?yàn)閿?shù)據(jù)采集頻率高、且進(jìn)行數(shù)據(jù)監(jiān)測(cè)時(shí)間持續(xù)長(zhǎng),隨著數(shù)據(jù)監(jiān)測(cè)時(shí)間的增加,地質(zhì)災(zāi)害監(jiān)測(cè)數(shù)據(jù)量將十分龐大,對(duì)數(shù)據(jù)存儲(chǔ)提出了更高的要求,不僅要求數(shù)據(jù)存儲(chǔ)的安全性還要提高數(shù)據(jù)響應(yīng)效率,使這些數(shù)據(jù)能夠及時(shí)為地質(zhì)災(zāi)害相關(guān)工作提供服務(wù)。地質(zhì)災(zāi)害評(píng)估_專業(yè)地災(zāi)評(píng)估報(bào)告編制單位_湖南專業(yè)工程地質(zhì)技術(shù)服務(wù)此外,地質(zhì)災(zāi)害數(shù)據(jù)集成系統(tǒng)的目的之一是供地質(zhì)災(zāi)害數(shù)據(jù)監(jiān)測(cè)工作查詢使用,因此除了監(jiān)測(cè)數(shù)據(jù)存儲(chǔ)優(yōu)化外還應(yīng)該做好查詢優(yōu)化,查詢優(yōu)化指的是在數(shù)據(jù)庫(kù)中預(yù)先確定好策略,或者在數(shù)據(jù)庫(kù)運(yùn)行時(shí)進(jìn)行調(diào)度和再優(yōu)化,在虛擬數(shù)據(jù)庫(kù)下數(shù)據(jù)分布在各個(gè)數(shù)據(jù)源上,因此查詢需要重寫,數(shù)據(jù)可能存在到達(dá)不可預(yù)知、規(guī)模和估計(jì)規(guī)模差異較大的問(wèn)題,這時(shí)需要采用查詢優(yōu)化器對(duì)查詢計(jì)劃進(jìn)行再次調(diào)度和再次優(yōu)化,從而提高數(shù)據(jù)查詢的效率和質(zhì)量。