導(dǎo)語：如何才能寫好一篇數(shù)據(jù)管理，這就需要搜集整理更多的資料和文獻(xiàn)，歡迎閱讀由公務(wù)員之家整理的十篇范文，供你借鑒。

篇1

 

信息技術(shù)作為時代不斷發(fā)展的象征，不管是在我國行業(yè)的發(fā)展中，還是在人們的日常生活，都起到了重要作用。同時，在信息技術(shù)不斷發(fā)展的過程中，大數(shù)據(jù)時代的應(yīng)用范圍也在不斷的擴(kuò)大，其來源渠道也非常多，數(shù)量也在不斷增加。在這種情況下，大數(shù)據(jù)時代的大數(shù)據(jù)信息管理就顯的尤為重要。由于大數(shù)據(jù)的數(shù)量不斷增加，現(xiàn)有的管理形式已經(jīng)無法滿足大數(shù)據(jù)時代的發(fā)展，并且在利用計算機(jī)對大數(shù)據(jù)進(jìn)行全面分析和處理的過程中，也受到了嚴(yán)重的影響，因此，要想有效的對大數(shù)據(jù)進(jìn)行充分利用，就要對大數(shù)據(jù)管理形式給予高度重視，采取有效的措施，不斷加強(qiáng)大數(shù)據(jù)的管理形式，最終實(shí)現(xiàn)有效、便捷、安全等管理性能，這也為對我國信息技術(shù)提供了重要的發(fā)展方向。

 

1 大數(shù)據(jù)時代的大數(shù)據(jù)管理發(fā)展歷程

 

近幾年，在大數(shù)據(jù)管理不斷發(fā)展的過程中，也取得了一定的成績。但是，大數(shù)據(jù)管理也經(jīng)歷了一個漫長的過程，主要經(jīng)歷的人工、文件、數(shù)據(jù)庫等管理階段。同時，隨著大數(shù)據(jù)時代的大數(shù)據(jù)不斷增加，所管理的范圍和環(huán)境也在不斷的變化。并且，在大數(shù)據(jù)管理不斷發(fā)展的過程中，一些管理問題逐漸的暴露出來，為大數(shù)據(jù)管理的發(fā)展帶來了新的挑戰(zhàn)和機(jī)遇，下面就大數(shù)據(jù)管理的發(fā)展歷程，管理中存在的不足進(jìn)行簡要的分析和闡述。

 

1.1 大數(shù)據(jù)時代的大數(shù)據(jù)人工管理形式

 

在20世紀(jì)50年代，計算機(jī)技術(shù)的形成主要是針對科學(xué)計算等形式。同時，根據(jù)當(dāng)時的發(fā)展技術(shù)來說，并沒有磁盤、U盤等一些先進(jìn)設(shè)備，將其計算的結(jié)果進(jìn)行去全面的保存和整理，僅僅只是依靠紙帶、卡片等形式，對大數(shù)據(jù)的進(jìn)行有效的記錄。大數(shù)據(jù)時代的大數(shù)據(jù)管理的人員管理形式，不僅僅對大數(shù)據(jù)的記錄存在著一定程度上的誤差，并且在保存的過程中，也會經(jīng)常發(fā)生丟失的現(xiàn)象，對大數(shù)據(jù)時代的大數(shù)據(jù)管理形式的發(fā)展，是沒有任何的幫助。但是，依照當(dāng)時的技術(shù)水平來看，也只能的依靠人工管理的形式了。

 

1.2 大數(shù)據(jù)時代的大數(shù)據(jù)的文件管理形式

 

在大數(shù)據(jù)時代的大數(shù)據(jù)管理的人員管理形式，不斷發(fā)展和改革的過程中，計算機(jī)的軟件和硬件都得到了有效的提高，磁盤、磁鼓等儲存軟件，得到了全面的普及和發(fā)展。同時，在在不斷發(fā)展的過程中，計算機(jī)將大數(shù)據(jù)的組成形式，叫做大數(shù)據(jù)文件，并且在大數(shù)據(jù)文件上就可以直接的取名字，直接的進(jìn)行查看，這對大數(shù)據(jù)的管理，無疑不是一個新的發(fā)展的起點(diǎn)。在大數(shù)據(jù)時代的大數(shù)據(jù)文件管理的過程中，由于大數(shù)據(jù)長期的保存在外面的，這樣在對的大數(shù)據(jù)處理、分析、查找、刪除、修改等操作的過程中，提供了極大程度上的便利，其對其操作的程序，也具有特點(diǎn)的要求。但是，在文件管理的過程中，由于共享性能較大，數(shù)據(jù)與數(shù)據(jù)之間缺乏一定的獨(dú)立性，對其管理和維護(hù)的費(fèi)用和時間較大，這樣往往工作效率提高，不能被廣泛的使用。

 

1.3 大數(shù)據(jù)時代的大數(shù)據(jù)庫管理形式

 

數(shù)據(jù)庫管理形式是大數(shù)據(jù)管理不斷發(fā)展的重要成果，也是到目前為止最后的一個階段。在計算機(jī)技術(shù)不斷發(fā)展的過程中，計算機(jī)內(nèi)部的容量得到了很大程度的提高，并且大數(shù)據(jù)的管理和維護(hù)成本也相應(yīng)的有所下降。同時，在大數(shù)據(jù)管理形式不斷發(fā)展的過程中，對其系統(tǒng)管理內(nèi)存不足等現(xiàn)象，進(jìn)行了全面的提高，有效的實(shí)現(xiàn)了資源共享，也在最大程度上保證了大數(shù)據(jù)的安全、穩(wěn)定等性能。另外，在大數(shù)據(jù)時代的大數(shù)據(jù)庫管理的過程中，不在近幾年只是固定在某一個計算技術(shù)應(yīng)用體系，而是面向整個管理體系，以此在最大程度上提高了大數(shù)據(jù)共享的性能，使大數(shù)據(jù)與大數(shù)據(jù)形成一個獨(dú)立的個體，對其大數(shù)據(jù)進(jìn)行了全面、有效的、統(tǒng)一的管理，為我國信息技術(shù)的發(fā)展提供了重要方向。

 

2 大數(shù)據(jù)時代的大數(shù)據(jù)管理策略

 

2.1 對大數(shù)據(jù)時代的大數(shù)據(jù)管理框架進(jìn)行創(chuàng)新

 

在大數(shù)據(jù)時代的大數(shù)據(jù)管理形式不斷發(fā)展過程中，給企業(yè)發(fā)展帶來沖擊非常巨大。因此，企業(yè)要根據(jù)我國信息技術(shù)不斷發(fā)展的形式，對大數(shù)據(jù)管理框架進(jìn)行全面的設(shè)計和創(chuàng)新，如圖1所示。在大數(shù)據(jù)的處理的過程中，主要是圍繞著數(shù)據(jù)資產(chǎn)進(jìn)行管理的，同時對大數(shù)據(jù)時代的大數(shù)據(jù)管理制度，進(jìn)行全面的規(guī)劃行、設(shè)計、創(chuàng)新，這樣對其它信息技術(shù)管理領(lǐng)域，提供了便利的條件。其實(shí)，大數(shù)據(jù)時代的大數(shù)據(jù)管理最主要的目的，就是將大數(shù)據(jù)的價值進(jìn)行充分的展現(xiàn)。另外，在大數(shù)據(jù)時代的大數(shù)據(jù)管理框架不斷創(chuàng)新的過程中，有效的實(shí)現(xiàn)了大數(shù)據(jù)共享等性能，不斷擴(kuò)大了大數(shù)據(jù)時代的大數(shù)據(jù)管理的內(nèi)容，對我國現(xiàn)代化信息技術(shù)的發(fā)展，起到了重要的作用和意義。

 

2.2 開發(fā)與內(nèi)容的管理形式

 

在不斷提高大數(shù)據(jù)時代的大數(shù)據(jù)管理形式的過程中，可以從兩個方面進(jìn)行，一是大數(shù)據(jù)開發(fā)管理，二是內(nèi)容管理。其中大數(shù)據(jù)開發(fā)管理注重于大數(shù)據(jù)管理的定義，和管理解決策略，對其大數(shù)據(jù)的存在價值，進(jìn)行有效的開發(fā)。換句話說，其實(shí)也就是在大數(shù)據(jù)時代的大數(shù)據(jù)管理的過程中，對其管理形式的開發(fā)，對大數(shù)據(jù)的功能和價值，進(jìn)行充分的理解。

 

大數(shù)據(jù)時代的大數(shù)據(jù)管理中的內(nèi)容管理是指：企業(yè)對大數(shù)據(jù)進(jìn)行不斷的獲取、使用、存儲、維護(hù)等工作活動。因此，傳統(tǒng)的大數(shù)據(jù)時代的大數(shù)據(jù)管理形式，已經(jīng)無法滿足對這個時展需求。因此，在時代快速發(fā)發(fā)展的推動下，要對開發(fā)管理和內(nèi)容管理，進(jìn)行全面的創(chuàng)新和設(shè)計，對需要專門設(shè)定的管理形式，要給予高度的重視，可以利用的集合型的保存形式，進(jìn)行全面的保存。

 

其實(shí)，大數(shù)據(jù)時代的大數(shù)據(jù)管理主要是為企業(yè)提供重要的發(fā)展方向，為企業(yè)提供重要的價值信息。大數(shù)據(jù)時代的大數(shù)據(jù)管理在數(shù)據(jù)應(yīng)用和開發(fā)的過程中，起到了重要的銜接作用，也為我國信息技術(shù)的發(fā)展，打下了堅實(shí)的基礎(chǔ)。

 

2.3 對大數(shù)據(jù)架構(gòu)進(jìn)行全面的管理

 

在大數(shù)據(jù)時代的大數(shù)據(jù)管理的過程中，數(shù)據(jù)框架管理起到了重要的作用，并且與大數(shù)據(jù)開發(fā)的過程中，有很多相似的地方。在傳統(tǒng)的大數(shù)據(jù)時代的大數(shù)據(jù)管理的過程中，對其數(shù)據(jù)的開發(fā)、處理、保存等形式，都受到了一定程度上的限制。因此，在對大數(shù)據(jù)時代的大數(shù)據(jù)架構(gòu)管理的過程中，對其操作形式，進(jìn)行了全面的管理創(chuàng)新，避免受到范圍的限制。另外，隨著大數(shù)據(jù)不斷的增加，大數(shù)據(jù)構(gòu)架管理可以根據(jù)大數(shù)據(jù)的用途，質(zhì)量良好的應(yīng)用形態(tài)。例如：社交網(wǎng)絡(luò)等形式。

 

與此同時，在最近幾年的發(fā)展中，大數(shù)據(jù)時代的大數(shù)據(jù)管理形式，也面臨著新的挑戰(zhàn)基機(jī)遇。以此，只有對大數(shù)據(jù)時代的大數(shù)據(jù)管理形式，對個人信息、隱私等進(jìn)行全面的管理，避免個人信息、隱私等發(fā)生泄露、不對稱等現(xiàn)象的發(fā)生，這樣不僅僅企業(yè)在發(fā)展的過程中，提供了最大程度上的安全保障，也為大數(shù)據(jù)時代的發(fā)展，帶來了新的發(fā)展篇章。

 

3 結(jié)語

 

綜上所述，大數(shù)據(jù)時代是信息技術(shù)時代不斷發(fā)展的產(chǎn)物，不管對我國經(jīng)濟(jì)的發(fā)展，還是人們在日常工作、生活的過程中，都起到了重要的作用和意義。因此，本文對大數(shù)據(jù)時代的大數(shù)據(jù)管理發(fā)展的歷程進(jìn)行了簡要的分析，并對大數(shù)據(jù)時代的大數(shù)據(jù)管理形式，提出了一些可參考性的建議，只有對大數(shù)據(jù)時代的大數(shù)據(jù)管理形式，進(jìn)行不斷的創(chuàng)新，對大數(shù)據(jù)時代的大數(shù)據(jù)管理框架，進(jìn)行不斷的構(gòu)建，也只有這樣的才能在最大程度上促進(jìn)了我國信息技術(shù)的發(fā)展，也為我國各行各業(yè)的發(fā)展，提供了重要的發(fā)展方向，對我國經(jīng)濟(jì)的發(fā)展，也起到了推動性的作用。

篇2

IDC的數(shù)據(jù)顯示，2017年，80%以上的企業(yè)IT部門將采用混合云架構(gòu)?；旌显颇Ｊ讲粌H能夠提供超強(qiáng)的敏捷性，而且能夠保持對本地敏感數(shù)據(jù)的控制，因此成了企業(yè)的理想選擇。未來，混合基礎(chǔ)設(shè)施將成為企業(yè)主流的架構(gòu)模式。

如今，越來越多的企業(yè)嘗試從傳統(tǒng)架構(gòu)遷移到云平臺，這對數(shù)據(jù)管理和安全提出了新的挑戰(zhàn)。Commvault 提醒用戶，要想更好地管理數(shù)據(jù)，就必須確保數(shù)據(jù)能夠在云和企業(yè)本地系統(tǒng)之間實(shí)現(xiàn)無縫、有序、安全的遷移。

雖然混合云模式具有非常明顯的優(yōu)勢，但是如何部署還是一個難題。企業(yè)正在積極嘗試各種方法，引入一個深度整合的、具有云端自動化和編排功能的混合模式，從而確保云端解決方案和本地基礎(chǔ)設(shè)施的兼容性。

成功部署一個混合云模式，應(yīng)注意兩方面的問題：第一，了解哪些工作負(fù)載和應(yīng)用最適合哪種托管方式；第二，利用一個綜合的控制臺，實(shí)時查看企業(yè)中各個系統(tǒng)中的數(shù)據(jù)。

為了更好地管理混合云中的數(shù)據(jù)，IT主管應(yīng)制定一套完整的數(shù)據(jù)和信息管理策略，以便在數(shù)據(jù)創(chuàng)建時能夠捕獲工作負(fù)載，同時增強(qiáng)數(shù)據(jù)管理服務(wù)能力。為了支持混合云模式，企業(yè)應(yīng)該監(jiān)測在本地、私有云、混合云和公有云之間遷移的工作負(fù)載。借助Commvault的數(shù)據(jù)管理平臺，企業(yè)可以將工作載遷移到任何地方，從本地到云平臺，從云平臺到云平臺，或者從云平臺回到本地。有了Commvault的幫助，企業(yè)可以自由選擇最合適其工作負(fù)載、容量要求和預(yù)算的環(huán)境，并根據(jù)業(yè)務(wù)需求的轉(zhuǎn)變自由改變云策略。

Commvault提出了數(shù)據(jù)管理策略的七大要素：第一，基于標(biāo)準(zhǔn)的數(shù)據(jù)訪問，打破數(shù)據(jù)孤島和供應(yīng)商鎖定；第二，內(nèi)置數(shù)據(jù)安全，確保數(shù)據(jù)在傳輸、存放和訪問時的安全性，除了加密和密鑰管理之外，還應(yīng)當(dāng)通過內(nèi)置審核控制和合規(guī)性報告對所有數(shù)據(jù)位置進(jìn)行監(jiān)控；第三，原生格式直接訪問，按應(yīng)用程序所需的原生格式提供近實(shí)時的交互訪問，降低風(fēng)險；第四，可擴(kuò)展的搜索和查詢，通過索引、分析、可視化和優(yōu)化數(shù)據(jù)，跨不同數(shù)據(jù)集、應(yīng)用程序和存儲位置提供無縫的、強(qiáng)大的搜索查詢功能，激活數(shù)據(jù)；第五，通用訪問和協(xié)作，即使操作環(huán)境受到限制，人員和設(shè)備之間也可以安全地同步和共享數(shù)據(jù)，無論數(shù)據(jù)是何時何地創(chuàng)建的，用戶都能以無縫和通用的方式訪問所有數(shù)據(jù)備份，并安全地分享數(shù)據(jù)，提高效率和協(xié)作能力；第六，數(shù)據(jù)生命周期管理讓企業(yè)能夠以可視和安全的方式有效地管理數(shù)據(jù)，從而降低數(shù)據(jù)泄露、損失、被盜和不合規(guī)的風(fēng)險；第七，增量變更捕獲，通過更加頻繁的恢復(fù)點(diǎn)設(shè)置提高存儲和網(wǎng)絡(luò)的效率。

篇3

進(jìn)入21 世紀(jì)，人類在信息存儲和處理能力方面不斷涌現(xiàn)技術(shù)性的突破，大數(shù)據(jù)（Big Data）一詞越來越多地被提及，人們用它來描述和定義信息爆炸時代產(chǎn)生的海量數(shù)據(jù)。大數(shù)據(jù)是繼云計算、物聯(lián)網(wǎng)之后IT產(chǎn)業(yè)又一次顛覆性的技術(shù)變革。大數(shù)據(jù)時代的到來，各行各業(yè)都面臨著對龐大而復(fù)雜的數(shù)據(jù)進(jìn)行有效管理的巨大挑戰(zhàn)，人們越來越認(rèn)識到對自身產(chǎn)生和擁有的大數(shù)據(jù)進(jìn)行有效管理的重要性和迫切性，災(zāi)害檔案數(shù)據(jù)管理也不例外。隨著計算機(jī)技術(shù)和網(wǎng)絡(luò)通訊技術(shù)的飛速發(fā)展，災(zāi)害管理信息化程度不斷提高，災(zāi)害檔案數(shù)字化、網(wǎng)絡(luò)化管理已成為網(wǎng)絡(luò)信息時代檔案管理工作的必然選擇。面對洶涌而來的大數(shù)據(jù)，災(zāi)害檔案數(shù)據(jù)管理工作如何應(yīng)對，是擺在我們面前一個亟需研究的課題。

一、大數(shù)據(jù)的概念

關(guān)于大數(shù)據(jù)的定義，最早提出“大數(shù)據(jù)”時代到來的全球知名咨詢公司麥肯錫稱：大數(shù)據(jù)是指無法在一定時間內(nèi)用傳統(tǒng)數(shù)據(jù)庫軟件工具對其內(nèi)容進(jìn)行采集、存儲、管理和分析的數(shù)據(jù)集合。維基百科的定義：大數(shù)據(jù)指的是所涉及的資料量規(guī)模巨大到無法通過目前主流軟件工具，在合理時間內(nèi)達(dá)到擷取、管理、處理并整理成為幫助企業(yè)經(jīng)營決策目的的資訊。還有學(xué)者認(rèn)為大數(shù)據(jù)指的是需要新處理模式才能具有更強(qiáng)的決策力、洞察力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)[1]?？梢钥闯?，大數(shù)據(jù)由海量交易數(shù)據(jù)、海量交互數(shù)據(jù)和海量數(shù)據(jù)處理三大主要的技術(shù)趨勢匯聚而成[2]。

從本質(zhì)上看，大數(shù)據(jù)主要解決的是海量數(shù)據(jù)存儲、計算、挖掘和利用的問題。其特點(diǎn)可概括為“ 4V”，一是規(guī)模性（Volume），數(shù)據(jù)容量巨大，大型數(shù)據(jù)集合一般在幾十TB至PB級的數(shù)據(jù)量；二是多樣性（Variety），數(shù)據(jù)類別繁多，數(shù)據(jù)來自多種數(shù)據(jù)源，數(shù)據(jù)種類和格式日漸豐富；三是高速性（Velocity），數(shù)據(jù)處理速度快，在數(shù)據(jù)量龐大的情況下，實(shí)現(xiàn)數(shù)據(jù)的實(shí)時處理；四是價值性（Value），數(shù)據(jù)真實(shí)性高，愈發(fā)需要有效的信息資源確保其真實(shí)性與安全性[3]。可以說，大數(shù)據(jù)時代是一個數(shù)據(jù)資源更加豐富的時代，是一個信息技術(shù)更加先進(jìn)的時代。

災(zāi)害檔案數(shù)據(jù)資源主要來自災(zāi)害管理和科研活動產(chǎn)生的電子文件，按照來源和形成方式不同，可以分為數(shù)據(jù)庫文件、電子數(shù)據(jù)表、字處理文檔、電子郵件、掃描圖像、地理空間數(shù)字記錄、數(shù)字照片、網(wǎng)站及其相關(guān)文檔。災(zāi)害檔案數(shù)據(jù)具有分布性、多源性、異構(gòu)性等特點(diǎn)。從災(zāi)害檔案管理部門來看，災(zāi)害檔案資源主要集中在民政、水利、氣象、地震、國土、環(huán)保、測繪、軍隊(duì)、海洋等部門，檔案數(shù)據(jù)源分散在不同部門、不同地點(diǎn)，并由不同行業(yè)、不同單位和組織機(jī)構(gòu)所擁有。從災(zāi)害檔案內(nèi)容來看，包括災(zāi)情、氣象、遙感影像、基礎(chǔ)地理、專題地圖、涉災(zāi)行業(yè)、經(jīng)濟(jì)統(tǒng)計、現(xiàn)場多媒體等多種數(shù)據(jù)。近年來，災(zāi)害檔案數(shù)據(jù)管理有了較大提高，但由于缺乏強(qiáng)有力的技術(shù)支持，檔案信息服務(wù)水平還比較落后，普遍存在管理意識薄弱、數(shù)字化建設(shè)不足、服務(wù)方式被動、開發(fā)利用欠缺等一系列的不足，利用信息技術(shù)進(jìn)行檔案數(shù)據(jù)分析、開發(fā)、利用、交換、共享的水平還很低，沒有充分發(fā)揮檔案信息的憑證、參考和情報作用，無法滿足管理部門對災(zāi)害檔案信息的需求。

二、大數(shù)據(jù)技術(shù)在災(zāi)害檔案數(shù)據(jù)管理中的應(yīng)用優(yōu)勢

目前大數(shù)據(jù)研究成果最多的是大數(shù)據(jù)技術(shù)和大數(shù)據(jù)應(yīng)用。大數(shù)據(jù)技術(shù)的特色在于它依托云計算的分布式處理、分布式數(shù)據(jù)庫和云存儲、虛擬化技術(shù)對海量數(shù)據(jù)進(jìn)行分布式數(shù)據(jù)挖掘，在金融、醫(yī)療、教育、軍事、電子商務(wù)甚至政府決策等幾乎所有的領(lǐng)域都有非常廣闊的應(yīng)用空間。隨著大數(shù)據(jù)時代的到來，應(yīng)用大數(shù)據(jù)技術(shù)讓災(zāi)害檔案數(shù)據(jù)獲取、儲存、搜索、共享、分析，乃至可視化地呈現(xiàn)，成為了可能，為災(zāi)害檔案數(shù)據(jù)管理提供新思路和新方法。

1.大數(shù)據(jù)技術(shù)對實(shí)現(xiàn)災(zāi)害檔案智能管理提供強(qiáng)大保障。大數(shù)據(jù)技術(shù)具有的可靠安全的數(shù)據(jù)存儲、方便快捷的云服務(wù)、超強(qiáng)的計算能力、諸多技術(shù)的集合體、良好的經(jīng)濟(jì)效益以及以用戶為中心的個性化服務(wù)等優(yōu)勢，對實(shí)現(xiàn)災(zāi)害檔案“存儲數(shù)字化、管理自動化、利用網(wǎng)絡(luò)化”智能管理提供保障。應(yīng)用大數(shù)據(jù)技術(shù)對分散于不同部門、不同地理位置的檔案數(shù)據(jù)資源進(jìn)行管理、傳輸、檢索和提供利用，滿足用戶對檔案信息的遠(yuǎn)程訪問操作，包括信息查詢、檢索、統(tǒng)計、提取等，實(shí)現(xiàn)檔案數(shù)據(jù)資源的互聯(lián)互通和共享利用，將檔案“藏”和“用”的功能都提高到一個新的水平，對于充分發(fā)揮檔案數(shù)據(jù)資源的價值具有前所未有的推動作用。

2.大數(shù)據(jù)技術(shù)對實(shí)現(xiàn)災(zāi)害檔案數(shù)據(jù)挖掘提供有力支持。數(shù)據(jù)越來越多。傳統(tǒng)的檔案管理以文檔管理為主，檔案基本處于被動利用，沉淀的檔案沒有人去分析利用，也沒有技術(shù)工具去支撐挖掘和分析。大數(shù)據(jù)最核心的價值就在于對海量數(shù)據(jù)進(jìn)行存儲和分析，只有通過分析，才能獲取更多智能的、深入的、有價值的信息。在大數(shù)據(jù)時代，檔案系統(tǒng)中除了大量的文檔之外，還有海量結(jié)構(gòu)化數(shù)據(jù)，并且數(shù)據(jù)利用的效果要大于文檔利用效果。檔案部門在收集大數(shù)據(jù)之后，通過主動調(diào)查利用者的需求，建立各種數(shù)據(jù)模型，對海量數(shù)據(jù)進(jìn)行聚類、分類、相關(guān)性分析，找到數(shù)據(jù)之間的關(guān)系，提高檔案價值，將原來的“死檔案”變成“活信息”，為災(zāi)害管理決策提供參考。

3.大數(shù)據(jù)技術(shù)對實(shí)現(xiàn)災(zāi)害檔案知識服務(wù)提供解決途徑，解決災(zāi)害檔案如何實(shí)現(xiàn)知識服務(wù)，如何從浩如煙海的檔案數(shù)據(jù)中快速識別、選擇和有效利用檔案信息，為災(zāi)害管理部門提供知識服務(wù)和智力支持，發(fā)揮檔案的參考憑證、決策咨詢、評估依據(jù)作用。應(yīng)用大數(shù)據(jù)智能識別、傳感與適配等技術(shù)，構(gòu)建基于基礎(chǔ)框架體系、大數(shù)據(jù)處理體系、過程管理體系、大數(shù)據(jù)分析與決策體系、交互體系的大數(shù)據(jù)知識服務(wù)平臺[4]將成為有效的解決辦法和途徑。災(zāi)害檔案大數(shù)據(jù)知識服務(wù)平臺搭建的是一個大數(shù)據(jù)獲取、存儲、組織、分析和決策服務(wù)資源和服務(wù)能力共享、交易和協(xié)作的智慧平臺，依據(jù)災(zāi)害管理不同行業(yè)、不同領(lǐng)域、不同需求的大數(shù)據(jù)處理需求，在平臺上實(shí)現(xiàn)數(shù)據(jù)、知識、資源、能力、服務(wù)、過程和任務(wù)等資源和能力的共享和協(xié)作。

三、大數(shù)據(jù)時代下災(zāi)害檔案數(shù)據(jù)管理的應(yīng)對策略

當(dāng)前，我國經(jīng)濟(jì)發(fā)展已進(jìn)入新常態(tài)，認(rèn)識新常態(tài)、適應(yīng)新常態(tài)、引領(lǐng)新常態(tài)，是當(dāng)前和今后一個時期中國經(jīng)濟(jì)發(fā)展的大邏輯，也是發(fā)展檔案事業(yè)的基本遵循。災(zāi)害檔案工作主動適應(yīng)新常態(tài)，需要分析發(fā)展新變化，順應(yīng)發(fā)展新趨勢，這既是經(jīng)濟(jì)社會發(fā)展對災(zāi)害檔案管理提出的更高要求，也是檔案事業(yè)深化改革和持續(xù)發(fā)展的內(nèi)在需要。在大數(shù)據(jù)時代背景下，災(zāi)害檔案的產(chǎn)生主體、利用群體、生態(tài)環(huán)境都發(fā)生著新變化，災(zāi)害檔案數(shù)據(jù)管理應(yīng)用大數(shù)據(jù)技術(shù)分析、挖掘出龐大的檔案數(shù)據(jù)獨(dú)有的價值，從“被動服務(wù)”向“主動服務(wù)”轉(zhuǎn)變，還面臨著諸多挑戰(zhàn)，需要從以下方面加以完善和提高。

1.建立高效有序的運(yùn)行機(jī)制。大數(shù)據(jù)建設(shè)是一項(xiàng)有序的、動態(tài)的、可持續(xù)發(fā)展的系統(tǒng)工程，必須建立良好的運(yùn)行機(jī)制，以促進(jìn)建設(shè)過程中各個環(huán)節(jié)的正規(guī)有序，實(shí)現(xiàn)統(tǒng)籌協(xié)調(diào)，搞好頂層設(shè)計。應(yīng)當(dāng)增強(qiáng)災(zāi)害檔案數(shù)據(jù)管理意識，做好災(zāi)害檔案數(shù)據(jù)發(fā)展規(guī)劃，并將其納入國家綜合防災(zāi)減災(zāi)規(guī)劃中，建立災(zāi)害檔案數(shù)據(jù)標(biāo)準(zhǔn)與規(guī)范，構(gòu)建檔案數(shù)據(jù)管理系統(tǒng)，實(shí)現(xiàn)災(zāi)害檔案數(shù)據(jù)有效組織、集中存儲、共享與服務(wù)。

2.制定科學(xué)規(guī)范的建設(shè)標(biāo)準(zhǔn)。災(zāi)害管理涉及部門多、領(lǐng)域多、專業(yè)復(fù)雜，各部門都是按照各自定義的內(nèi)部數(shù)據(jù)標(biāo)準(zhǔn)進(jìn)行信息系統(tǒng)建設(shè)，因此存在災(zāi)害檔案數(shù)據(jù)資源結(jié)構(gòu)不統(tǒng)一、標(biāo)準(zhǔn)不配套等問題。沒有標(biāo)準(zhǔn)就沒有系統(tǒng)，應(yīng)建立面向不同主題、覆蓋各個領(lǐng)域、不斷動態(tài)更新的大數(shù)據(jù)建設(shè)標(biāo)準(zhǔn)，為實(shí)現(xiàn)各級各類信息系統(tǒng)的網(wǎng)絡(luò)互連、信息互通、資源共享奠定基礎(chǔ)。

3.搭建共享利用的服務(wù)平臺。我國的災(zāi)害管理涉及多個部門，通過幾十年的努力，已經(jīng)積累了海量與防災(zāi)減災(zāi)相關(guān)的專題數(shù)據(jù)，并建立了一些信息網(wǎng)絡(luò)系統(tǒng)，部分開展了信息共享，但絕大多數(shù)災(zāi)害管理相關(guān)數(shù)據(jù)還沒有實(shí)現(xiàn)有效共享和利用。數(shù)據(jù)只有不斷流動和充分共享，才有生命力，所以應(yīng)在各專用數(shù)據(jù)庫建設(shè)的基礎(chǔ)上，通過數(shù)據(jù)集成，實(shí)現(xiàn)各級各類信息系統(tǒng)的數(shù)據(jù)交換和數(shù)據(jù)共享。

4.培養(yǎng)高素質(zhì)的專業(yè)隊(duì)伍。災(zāi)害檔案大數(shù)據(jù)建設(shè)的每個環(huán)節(jié)都需要依靠專業(yè)人員完成。一方面，需要培養(yǎng)和造就一支懂指揮、懂技術(shù)、懂管理的大數(shù)據(jù)建設(shè)專業(yè)隊(duì)伍；另一方面，需要加強(qiáng)檔案管理人員對信息技術(shù)的掌握，加強(qiáng)檔案管理人員大數(shù)據(jù)相關(guān)知識的培訓(xùn)和輔導(dǎo)，做好大數(shù)據(jù)背景下檔案管理的人才儲備。

篇4

關(guān)鍵詞: 交通管理數(shù)據(jù)挖掘平臺

中圖分類號： N37文獻(xiàn)標(biāo)識碼：A

一、引言

目前公安交通機(jī)關(guān)為方便交通管理業(yè)務(wù)的開展，創(chuàng)建了四個基本數(shù)據(jù)庫：道路交通事故信息數(shù)據(jù)庫、駕駛員(即駕駛證)管理信息數(shù)據(jù)庫、交通違法行為信息數(shù)據(jù)庫、車輛登記管理信息數(shù)據(jù)庫，當(dāng)前交通管理部門的應(yīng)用系統(tǒng)、平臺均以此四個基本數(shù)據(jù)庫為基礎(chǔ)獲取各類信息。數(shù)據(jù)庫自創(chuàng)建以來經(jīng)過幾十年數(shù)據(jù)的存儲，已積累了海量的交通相關(guān)數(shù)據(jù)，隨著車輛和駕駛?cè)嗽龆嘁约跋嚓P(guān)業(yè)務(wù)的復(fù)雜化，數(shù)據(jù)更是成爆發(fā)式增長。這些數(shù)據(jù)已成為交通部門的重要的數(shù)據(jù)財富。

然而面對大量數(shù)據(jù)，顯然已不能再滿足于只是簡單地查詢和修改數(shù)據(jù)，而是進(jìn)一步希望能夠發(fā)現(xiàn)數(shù)據(jù)之間的潛在關(guān)系，并隨著現(xiàn)實(shí)中交通管理中“人、車、路、環(huán)境”和諧發(fā)展的迫切期望以及緩解交通堵塞、預(yù)防交通事故的職責(zé)所在，交通管理部門急切地希望通過快速處理這些數(shù)據(jù)獲得進(jìn)一步有利于科學(xué)管理的決策依據(jù)。特別是以往的交通管理規(guī)律常常不是基于數(shù)據(jù)庫中信息豐富的數(shù)據(jù)，而是基于決策者的直覺，因?yàn)闆Q策者缺乏從海量數(shù)據(jù)中提取有價值知識的工具，即使當(dāng)前的專家系統(tǒng)技術(shù)，通常這種系統(tǒng)依賴于用戶或交通管理領(lǐng)域?qū)＜胰斯さ貙⒅R輸入知識庫，因此這一過程可能會產(chǎn)生偏差和錯誤，并且耗時、費(fèi)用也高。如何才能對大量數(shù)據(jù)進(jìn)行分析，發(fā)現(xiàn)數(shù)據(jù)之間的潛在聯(lián)系，為交通管理提供自動決策支持呢，運(yùn)用數(shù)據(jù)挖掘技術(shù)從交通管理數(shù)據(jù)庫中尋找知識發(fā)現(xiàn)給交通管理部門帶來了希望。

在這些海量交通數(shù)據(jù)中存在著大量的有著潛在關(guān)聯(lián)和規(guī)則的數(shù)據(jù)，因此將數(shù)據(jù)挖掘技術(shù)中的關(guān)聯(lián)規(guī)則算法應(yīng)用在交通領(lǐng)域，通過關(guān)聯(lián)規(guī)則挖掘發(fā)現(xiàn)交通數(shù)據(jù)之間的潛在關(guān)系，為交通管理提供自動決策支持有著重要的意義。本文設(shè)計了一個交通管理數(shù)據(jù)挖掘平臺方案，并對平臺架構(gòu)和挖掘流程進(jìn)行了詳細(xì)分析和討論。

二、交通管理數(shù)據(jù)挖掘平臺架構(gòu)

在交通數(shù)據(jù)庫中，所涉及的違章信息、駕駛員信息、機(jī)動車信息比較繁瑣。交通數(shù)據(jù)的特點(diǎn)是：交通數(shù)據(jù)庫的核心業(yè)務(wù)表較多、表的定義復(fù)雜、表中的數(shù)據(jù)量大、表數(shù)據(jù)的實(shí)時更新速度快。數(shù)據(jù)間的潛在關(guān)系和規(guī)則未被發(fā)現(xiàn)和利用，目前的處理還是停留在見到的統(tǒng)計報表，沒有智能性的分析處理。這些交通的原始數(shù)據(jù)對于交通管理決策支持有限，需要設(shè)計一個基于數(shù)據(jù)挖掘的交通管理數(shù)據(jù)挖掘平臺對交通數(shù)據(jù)進(jìn)行有效的挖掘和分析，對交通決策提供有力的支持。圖1給出了我們所設(shè)計的交通管理數(shù)據(jù)挖掘平臺框架，該平臺主要由三部分組成：數(shù)據(jù)倉庫模塊、數(shù)據(jù)分析處理模塊和接口與會話管理模塊。

1、數(shù)據(jù)倉庫。在輔助決策方面，數(shù)據(jù)倉庫能為其提供高質(zhì)量、純凈、集成的數(shù)據(jù)，從而極大地提高決策支持系統(tǒng)的性能與信息分析能力，因此，數(shù)據(jù)倉庫業(yè)已成為進(jìn)行數(shù)據(jù)分析與挖掘的基礎(chǔ)平臺。構(gòu)建交通信息數(shù)據(jù)倉庫是本系統(tǒng)結(jié)構(gòu)的核心，其實(shí)現(xiàn)形式包括：數(shù)據(jù)采集與ECTL（數(shù)據(jù)抽取、轉(zhuǎn)換和裝載）、數(shù)據(jù)倉庫管理系統(tǒng)、元數(shù)據(jù)管理系統(tǒng)三部分。本系統(tǒng)采取星型模型建模，其中，主題是其基本組成單位，每個主題由多個事實(shí)表和維表組成，而一個事實(shí)表可以關(guān)聯(lián)多個維表，構(gòu)成一個以事實(shí)表為中心的星型結(jié)構(gòu)，多個星型結(jié)構(gòu)共同組成一個主題。在建模過程中，考慮到智能交通領(lǐng)域涵蓋范圍廣泛，要求數(shù)據(jù)倉庫具有很強(qiáng)的可伸縮性：既可以集成智能交通領(lǐng)域交通流采集系統(tǒng)、信號控制系統(tǒng)、電視監(jiān)控系統(tǒng)、違章取證系統(tǒng)、公路車輛監(jiān)測系統(tǒng)、122接處警系統(tǒng)、GPS車輛定位系統(tǒng)、可變情報板顯示系統(tǒng)等各個應(yīng)用系統(tǒng)提供的交通信息，又可以針對特定應(yīng)用系統(tǒng)。

圖1 交通管理數(shù)據(jù)挖掘平臺框架

2、數(shù)據(jù)分析處理模塊。在數(shù)據(jù)倉庫基礎(chǔ)上直接采用的智能化分析技術(shù)主要有：聯(lián)機(jī)分析處理、數(shù)據(jù)挖掘和知識發(fā)現(xiàn)技術(shù)。聯(lián)機(jī)分析技術(shù)的主要功能是進(jìn)行多維數(shù)據(jù)分析和生成報表，專門用于支持復(fù)雜的分析操作，側(cè)重對高層管理人員和決策人員的決策支持，可以應(yīng)分析人員要求快速、靈活地進(jìn)行大數(shù)據(jù)量的復(fù)雜查詢處理，并且以一種直觀易懂的形式將查詢結(jié)果提供給決策人員。本模型將數(shù)據(jù)倉庫中建立的多維邏輯視圖直接映射到數(shù)據(jù)立方體結(jié)構(gòu)上，以方便對預(yù)計算產(chǎn)生的數(shù)據(jù)進(jìn)行快速索引，當(dāng)數(shù)據(jù)集稀疏時，采用稀疏矩陣壓縮技術(shù)提高存儲效率。通過對數(shù)據(jù)立方體(DataCube)進(jìn)行下鉆(Drill-down)、上卷(Roll-up)、切分(SliceandDice)以及旋轉(zhuǎn)(Pivot)等操作，實(shí)現(xiàn)不同角度、不同層次的數(shù)據(jù)分析，例如：對交通負(fù)荷時空分布信息運(yùn)用聯(lián)機(jī)分析技術(shù)處理，通過切片、切塊、旋轉(zhuǎn)細(xì)剖低級別的詳細(xì)數(shù)據(jù)和統(tǒng)攬較高級別的概括性數(shù)據(jù)，快速地響應(yīng)查詢。數(shù)據(jù)挖掘與知識發(fā)現(xiàn)技術(shù)是從海量數(shù)據(jù)中抽取隱含的、潛在的有用知識的過程。許多專家學(xué)者傾向于把數(shù)據(jù)挖掘視為知識發(fā)現(xiàn)過程中的一個步驟，在本系統(tǒng)模型中，為強(qiáng)調(diào)這兩種技術(shù)各自特點(diǎn)和側(cè)重點(diǎn)的差異，將它們分別列出。知識發(fā)現(xiàn)的基本步驟為：第一步，數(shù)據(jù)的準(zhǔn)備；第二步，數(shù)據(jù)挖掘；第三步模式評估；如果評價人員不滿意，重復(fù)執(zhí)行上述步驟，否則，轉(zhuǎn)下一步；第四步，知識表示。

3、接口與會話管理模塊。該模塊通過可視化技術(shù)，提供易于被用戶理解和使用的，具有智能糾錯、自我學(xué)習(xí)的界面系統(tǒng)，并提供自然語言和人類思維方式與計算機(jī)之間進(jìn)行轉(zhuǎn)換的功能。當(dāng)系統(tǒng)在產(chǎn)生相應(yīng)的決策后，該模塊可以按照有關(guān)智能交通應(yīng)用子系統(tǒng)的指令格式生成相應(yīng)的指令供決策者直接調(diào)用。

三、交通管理數(shù)據(jù)的挖掘流程

交通數(shù)據(jù)挖掘的過程大致上可分為五層：底層為交通管理數(shù)據(jù)庫，包括違章信息庫、駕駛員信息庫、機(jī)動車信息庫等等，在這些庫里存在許多交通信息，直接對這些數(shù)據(jù)進(jìn)行挖掘是不現(xiàn)實(shí)和不可取的，因此，構(gòu)建了上一層主要是數(shù)據(jù)預(yù)處理層，這一層是對交通數(shù)據(jù)庫進(jìn)行適當(dāng)?shù)挠羞x擇的篩選和處理，將少量主題相關(guān)和用戶感興趣的數(shù)據(jù)提取出來組成二維表，然后在此基礎(chǔ)上得到第三層概化后的數(shù)據(jù)，在這一層上我們可以利用這些概化的數(shù)據(jù)構(gòu)建我們的數(shù)據(jù)倉庫。對交通數(shù)據(jù)的具體挖掘就是在這一層上進(jìn)行的，最上面兩層是知識發(fā)現(xiàn)的過程，通過具體挖掘之后的得出的模式和分析后找到對于交通決策有效的模式。圖2給出了交通管理數(shù)據(jù)的挖掘過程。

圖2 交通數(shù)據(jù)挖掘流程圖

參考文獻(xiàn)

[1] 朱建秋,數(shù)據(jù)挖掘平臺及其關(guān)鍵技術(shù)研究[D],上海:復(fù)旦大學(xué)博士學(xué)位論文,2002.5.

篇5

關(guān)鍵詞：云計算；數(shù)據(jù)管理；查詢技術(shù)；系統(tǒng)框架

中圖分類號：TP311 文獻(xiàn)標(biāo)識碼：A 文章編號：1009-3044（2013）12-2761-03

隨著計算機(jī)信息技術(shù)的不斷發(fā)展與應(yīng)用，越來越多的互聯(lián)網(wǎng)應(yīng)用技術(shù)被研發(fā)應(yīng)用，極大的改善了人們的生活觀念與工作習(xí)慣，促進(jìn)社會快速進(jìn)入一種全新的信息化時代。云計算技術(shù)就是這樣一種具有跨時代性質(zhì)的新興互聯(lián)網(wǎng)應(yīng)用技術(shù)，實(shí)現(xiàn)了高效海量、存取方便的數(shù)據(jù)云端管理，極大的提高了信息查詢速度和數(shù)據(jù)存儲能力，為互聯(lián)網(wǎng)的進(jìn)一步發(fā)展提供了更大的空間。

云計算是一種具有可擴(kuò)展性、海量性、高可用性、種類多樣性、按需服務(wù)性等諸多優(yōu)點(diǎn)的高性價比的計算技術(shù)，可以實(shí)現(xiàn)異地備份，隨時隨地存取數(shù)據(jù)，因而節(jié)省了大量的存儲設(shè)備投資，具有很大的經(jīng)濟(jì)性。但需要注意的是云計算是為了能夠?qū)崿F(xiàn)快速高效的為用戶提供信息資源而服務(wù)的，因而其所需的云數(shù)據(jù)管理系統(tǒng)以及查詢技術(shù)是與傳統(tǒng)的計算機(jī)管理與查詢技術(shù)有著很大區(qū)別的。云數(shù)據(jù)管理系統(tǒng)需要一個能夠靈活運(yùn)用數(shù)據(jù)模型來進(jìn)行高效多樣化管理的數(shù)據(jù)管理與查詢技術(shù)，以實(shí)現(xiàn)按需索取、快速高效可靠的數(shù)據(jù)存取與查詢服務(wù)。

1 云數(shù)據(jù)管理系統(tǒng)的基本框架構(gòu)成

為了能夠更好的體現(xiàn)出云計算技術(shù)的優(yōu)越性能，就需要對云數(shù)據(jù)管理系統(tǒng)的管理技術(shù)與查詢技術(shù)進(jìn)行全面優(yōu)化升級，改進(jìn)傳統(tǒng)數(shù)據(jù)庫中存在的諸多問題，使云數(shù)據(jù)管理系統(tǒng)的整體架構(gòu)更加合理健全。在此，我們來簡要概述云數(shù)據(jù)管理系統(tǒng)的基本框架構(gòu)成主要包含哪些內(nèi)容。一般認(rèn)為，云數(shù)據(jù)管理系統(tǒng)的基本構(gòu)架應(yīng)當(dāng)含有應(yīng)用接口層、查詢處理層、數(shù)據(jù)控制層以及數(shù)據(jù)存儲層等四部分。具體分析如下所示：

1.1 應(yīng)用接口層

這個環(huán)節(jié)主要是為了接收用戶上傳的信息數(shù)據(jù)請求，并將這些信息數(shù)據(jù)轉(zhuǎn)交給查詢處理層進(jìn)行一定處理，從而提供云數(shù)據(jù)管理中所需的查詢語言接口、用戶自定義接口、數(shù)據(jù)分析以及在線聚集等諸多應(yīng)用，這樣就可以使用戶不但能夠通過查詢接口和用戶自定義接口操作數(shù)據(jù)，也能夠以可視化工具來對數(shù)據(jù)進(jìn)行分析，或者在線聚集。

1.2 查詢處理層

這個環(huán)節(jié)主要是為了將應(yīng)用接口層中所提交的用戶數(shù)據(jù)信息做出解析處理和邏輯優(yōu)化之后再將其轉(zhuǎn)變?yōu)椴僮鞣麡?，以促使其生成MapReduce執(zhí)行計劃。但若應(yīng)用接口在提交信息數(shù)據(jù)時是以用戶自定義操作的模式來實(shí)現(xiàn)的，那么就可以無須處理直接生成MapReduce執(zhí)行計劃。除此之外，查詢處理層還具有依照查詢類型與數(shù)據(jù)的分布特點(diǎn)將信息數(shù)據(jù)做成查詢計劃并對計劃作出邏輯性優(yōu)化的重要任務(wù)。

1.3 數(shù)據(jù)控制層

這個環(huán)節(jié)主要起到三個作用，即通過全局索引以及原數(shù)據(jù)信息將數(shù)據(jù)進(jìn)行定位處理，備份數(shù)據(jù)以及數(shù)據(jù)遷移。并在在線聚集的環(huán)節(jié)中將數(shù)據(jù)信息做出統(tǒng)一采樣收集，并對進(jìn)程進(jìn)行估計。由于數(shù)據(jù)層是至直接影響到查詢執(zhí)行與在線聚集的重要環(huán)節(jié)，因此做好數(shù)據(jù)控制層的管理技術(shù)改進(jìn)是非常重要的。

1.4 數(shù)據(jù)存儲層

顧名思義，數(shù)據(jù)存儲層就是對數(shù)據(jù)信息進(jìn)行存儲的主要環(huán)節(jié)，并負(fù)責(zé)將每個節(jié)點(diǎn)范圍中的所有數(shù)據(jù)進(jìn)行索引設(shè)計，對緩沖區(qū)及日志進(jìn)行管理。其中存儲層的節(jié)點(diǎn)是能夠通過以多種形式組合形成的。但不管是利用哪種形式結(jié)構(gòu)，其所含的數(shù)據(jù)都是要被分區(qū)到各個節(jié)點(diǎn)進(jìn)行存儲的，因此，保證數(shù)據(jù)分布的均勻合理，提高節(jié)點(diǎn)的數(shù)據(jù)存取效率是當(dāng)前數(shù)據(jù)存儲層發(fā)展中的重點(diǎn)問題。

2 云數(shù)據(jù)查詢處理技術(shù)的目標(biāo)特點(diǎn)

目前，在云數(shù)據(jù)的管理系統(tǒng)中，若要促使云數(shù)據(jù)管理的服務(wù)更方便快捷，就需要不斷提高其查詢處理技術(shù)，在此，我們來詳細(xì)分析云數(shù)據(jù)查詢處理技術(shù)需要達(dá)到的目標(biāo)特點(diǎn)，即可擴(kuò)展性、可用性、異構(gòu)環(huán)境的運(yùn)行能力以及豐富靈活的用戶接口、高效的數(shù)據(jù)存取性能。

2.1 可擴(kuò)展性

由于不同的云系統(tǒng)其所具有的云平臺是有很大不同的，無論是從規(guī)模大小方面，還是服務(wù)應(yīng)用方面都是有著一定的差異。一般小規(guī)模的個人或者私有云平臺只具有十幾個節(jié)點(diǎn)，而一些規(guī)模較大的公有的云平臺則可以有幾千個之多的節(jié)點(diǎn)。另外，由于云計算技術(shù)是一種以用戶需求為依據(jù)來實(shí)現(xiàn)服務(wù)的技術(shù)，因此其必須要根據(jù)用戶的需要來進(jìn)行不同的云平臺規(guī)模變換，這些都給云數(shù)據(jù)管理系統(tǒng)提出了良好擴(kuò)展性的要求。這種擴(kuò)展性不但要體現(xiàn)在查詢處理的性能方面，還體現(xiàn)在優(yōu)化算法方面。要使信息資源不但能擴(kuò)展到云平臺上，還要能夠最大程度的實(shí)現(xiàn)資源的可動態(tài)增長，提高其所帶來的良好性能。

2.2 可用性

由于云平臺主要是通過普通的計算機(jī)為基本硬件來構(gòu)成的，因此其與其他性能較高的服務(wù)器相比，硬件設(shè)備性能較差，因而云平臺的硬件較易出現(xiàn)錯誤。而云數(shù)據(jù)管理系統(tǒng)則要將這一錯誤看做常態(tài)，在發(fā)生硬件錯誤時，也要保證所有的數(shù)據(jù)都完整無缺，以確保數(shù)據(jù)的正常操作。

2.3 在異構(gòu)環(huán)境中運(yùn)行能力較強(qiáng)

就目前的計算機(jī)互聯(lián)網(wǎng)技術(shù)的發(fā)展來看，會有越來越的數(shù)據(jù)需要被儲存與管理，這就給云平臺提出了更高的要求，如增多節(jié)點(diǎn)來提升云數(shù)據(jù)系統(tǒng)的存儲能力。所以，要確保同一云平臺所有的計算機(jī)硬件都達(dá)到同樣的配置顯然是不可能的，這樣就要求云數(shù)據(jù)的查詢技術(shù)必須要具備一定的異構(gòu)環(huán)境運(yùn)行能力，只有這樣才能有效的減少性能差的節(jié)點(diǎn)對整個云數(shù)據(jù)管理系統(tǒng)運(yùn)行效率的影響。

2.4 豐富靈活的用戶接口

為了滿足用戶的不同需求和不同階段與層次的用戶要求，云數(shù)據(jù)管理系統(tǒng)需要不斷增多用戶接口的種類，要做到能夠滿足所有的用戶對數(shù)據(jù)庫的上傳與下載需求。因此除了要對SQL接口要進(jìn)行改進(jìn)外，還要對UDF接口進(jìn)行增多種類，以滿足用戶自行操作需求。

2.5 高效的數(shù)據(jù)存取性能

由于云數(shù)據(jù)管理系統(tǒng)的優(yōu)良特性，其在成本維護(hù)方面要遠(yuǎn)遠(yuǎn)低于傳統(tǒng)的數(shù)據(jù)管理成本，而其海量的數(shù)據(jù)處理效率也成為用戶最關(guān)心的問題，因而實(shí)現(xiàn)高效的數(shù)據(jù)存取性能與處理查詢能力是非常重要的。

3 云數(shù)據(jù)管理系統(tǒng)的查詢技術(shù)

在對云數(shù)據(jù)管理系統(tǒng)的基本框架與查詢處理技術(shù)的目標(biāo)特點(diǎn)進(jìn)行分析后，可以看出在云計算的技術(shù)應(yīng)用中，基于云計算海量、高效、異構(gòu)等特點(diǎn)，其查詢技術(shù)必須要具備強(qiáng)大的功能方能滿足云計算查詢需求。在此，筆者介紹兩種常用的云數(shù)據(jù)管理系統(tǒng)的查詢管理技術(shù)，具體介紹如下所示：

3.1 BigTable技術(shù)

Google提出的BigTable技術(shù)是建立在GFS和MapReduce之上的一個大型的分布式數(shù)據(jù)庫，BigTable實(shí)際上的確是一個很龐大的表，它的規(guī)?？梢猿^1PB（1024TB），它將所有數(shù)據(jù)都作為對象來處理，形成一個巨大的表格。

BigTable就是一個稀疏的、多維的和排序的Map，每個Cell（單元格）由行關(guān)鍵詞、列關(guān)鍵詞和時間戳來進(jìn)行三維定位。BigTable使用一個3層的、類似B+樹的結(jié)構(gòu)存儲Tablet的位置信息。

第1層是一個存儲在Chubby中的文件，它包含了Root Tablet的位置信息，Root Tablet包含了一個特殊的METADATA表里所有的Tablet的位置信息。METADATA表的每個Tablet包含了一個用戶Tablet的集合。Root Tablet實(shí)際上是METADATA表的第1個Tablet，只不過對它的處理比較特殊（Root Tablet永遠(yuǎn)不會被分割）這就保證了Tablet的位置信息存儲結(jié)構(gòu)不會超過3層。其中在Chubby中存儲著多個Root Tablet的位置信息。Metadata Tables中存儲著許多User Table的位置信息。因此當(dāng)用戶讀取數(shù)據(jù)時，需先從Chubby中讀取Root Tablet的位置信息然后逐層往下讀取直至找到所需數(shù)據(jù)為止。

BigTable的負(fù)載均衡采用的是傳統(tǒng)的方式，BigTable在執(zhí)行任務(wù)時，在任意時刻每個Tablet只被分配到一個Tablet服務(wù)器。依靠一個master服務(wù)器監(jiān)視子表server的負(fù)載情況，根據(jù)所有子表服務(wù)器的負(fù)載情況進(jìn)行數(shù)據(jù)遷移的，比如將訪問很熱的列表遷移到壓力輕的子表服務(wù)器上，以調(diào)節(jié)Tablet服務(wù)器的負(fù)載平衡。

3.2 Dynamo技術(shù)

Dynamo是一個高可用，專有的鍵值結(jié)構(gòu)化存儲系統(tǒng)，或分布式存儲系統(tǒng).它同時具有數(shù)據(jù)庫和分布式Hash表（DHT）的特征，并不直接暴露在外網(wǎng)，而是為Amazon Web Services（AWS）提供底層支持。目前Dynamo已經(jīng)有很多實(shí)現(xiàn)，典型的有：Apache Cassandra，Project Voldemort，Riak。

Dynamo是采用DHT作為基本存儲架構(gòu)和理念，這個架構(gòu)最大特點(diǎn)是能讓數(shù)據(jù)在環(huán)中“存儲”均勻，各存儲點(diǎn)相互能感知（因數(shù)據(jù)需要在環(huán)內(nèi)轉(zhuǎn)發(fā)，以及相互之間進(jìn)行故障探測，因此需要節(jié)點(diǎn)之間的通信），自我管理性強(qiáng)，因?yàn)樗恍枰狹aster主控點(diǎn)控制，無單點(diǎn)故障危險。

此外，Dynamo的主要優(yōu)點(diǎn)是，它提供了使用3個參數(shù)（N，R，W），根據(jù)自己的需要來調(diào)整它們的實(shí)例。Dynamo支持對對象的不同版本進(jìn)行記錄和處理，并且可以將不同版本提供給應(yīng)用，供應(yīng)用自己更靈活地進(jìn)行合并。對象的副本數(shù)遵循（N，R，W）的規(guī)則，N個副本，如果R個讀取的一致則確定讀取成功，如果W個寫入成功則認(rèn)為寫入成功，不要求全部N個都成功完成，只要R+W>N，數(shù)據(jù)的最終一致性就可以得到保障。這里，讀取比一次寫多次讀的系統(tǒng)（如HDFS）麻煩，但寫入變簡單了，這反映了應(yīng)用的需求。

4 結(jié)束語

隨著科技的進(jìn)步與計算機(jī)信息技術(shù)的不斷推廣發(fā)展，信息產(chǎn)業(yè)對數(shù)據(jù)的存儲、處理、查詢功能提出了更高的要求，這樣就使得計算機(jī)的傳統(tǒng)數(shù)據(jù)庫已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足需求。而云數(shù)據(jù)管理系統(tǒng)的應(yīng)用很好的解決了數(shù)據(jù)的存儲難題。但由于云數(shù)據(jù)管理系統(tǒng)還處于初期應(yīng)用階段，其在索引管理、查詢處理、查詢優(yōu)化和在線聚集等諸多方面都還存在著很大的進(jìn)步空間。尤其是云數(shù)據(jù)管理系統(tǒng)中的查詢技術(shù)，更是需要加大研究力度，進(jìn)一步提高查詢技術(shù)水平，以促使云計算以及云數(shù)據(jù)管理系統(tǒng)能夠更好的為用戶提供服務(wù)。

參考文獻(xiàn)：

[1] 吉義，傅建慶，張明西，等.云數(shù)據(jù)管理研究綜述[J].電信科學(xué)， 2010.

篇6

 

數(shù)字正射影像圖是對航空或航天像片進(jìn)行數(shù)字微分糾正和鑲嵌，按一定圖幅范圍裁剪成的數(shù)字影像集，它是同時具有地圖幾何精度和影像特征的圖像。正射影像的制作過程:利用像片范圍內(nèi)的數(shù)字高程模型對像片進(jìn)行傾斜改正和投影改正 ,像片重采樣后生成正射影像 ,并將多個單幅影像拼接到一起 ,按規(guī)定的圖幅進(jìn)行裁切 ,進(jìn)行色彩調(diào)整。利用JX4數(shù)字?jǐn)z影測量工作站制作DOM的基本流程如圖1所示。

 

圖1基于JX-4 DOM的制作流程

 

1數(shù)字空三加密

 

影像掃描必須確定掃描分辨率，掃描分辨率是由成圖比例尺、航測比例尺來計算。收集外業(yè)控制數(shù)據(jù)，相機(jī)數(shù)據(jù)，使用Geolord-AT平差軟件加密。該空三軟件由數(shù)字影像處理、框標(biāo)量測內(nèi)定向、加密點(diǎn)自動匹配、加密點(diǎn)人工修側(cè)、相對定向模型連接、旁向連接點(diǎn)自動轉(zhuǎn)點(diǎn)、旁向連接點(diǎn)人工修側(cè)、多項(xiàng)式整體平差、光束法整體平差、區(qū)域網(wǎng)接邊、加密成果最終檢定等十幾個模塊組成。

 

2 DEM的生產(chǎn)

 

在JX4測圖模式下調(diào)出需要匹配的像對，設(shè)置好參數(shù)對影像進(jìn)行自動匹配。匹配完成后對匹配的點(diǎn)進(jìn)行編輯，保證DEM點(diǎn)切準(zhǔn)地面，能真實(shí)的反映地貌形態(tài)。利用匹配點(diǎn)構(gòu)建不規(guī)則三角網(wǎng)(TIN),再利用TIN內(nèi)插規(guī)則正方形格網(wǎng)DEM，DEM的間隔根據(jù)作業(yè)要求設(shè)置。生成的DEM必須套合到立體模型下進(jìn)行檢查，觀察DEM的點(diǎn)位是否全部切準(zhǔn)地面，如果DEM與地面模型的高程差超過作業(yè)要求中誤差，則需要進(jìn)行修側(cè)和編輯，保證DEM符合精度要求。DEM鑲嵌時要調(diào)入圖幅內(nèi)所有像對的DEM文件，將DEM拼接起來并在屏幕上顯示，目視判斷如果發(fā)現(xiàn)漏洞區(qū)域則應(yīng)該進(jìn)行修側(cè)。

 

3DOM的生產(chǎn)

 

在DEM成果達(dá)到所需精度要求后創(chuàng)建像對正射影像，像元大小根據(jù)成圖比例尺確定。為了保證影像的完整和質(zhì)量，一般情況下左右像片的正射影像都要生成，并將合并后的正射影像作為像對成果進(jìn)行DOM鑲嵌。在DEM的質(zhì)量達(dá)到要求后，DOM在數(shù)學(xué)精度方面是有保證的，主要問題是對影像質(zhì)量的控制。

 

DOM是根據(jù)DEM，利用數(shù)字微分糾正技術(shù)，改正原始影像的幾何變形。要得到一幅標(biāo)準(zhǔn)圖幅DOM，一般需要多個像對的正射影像進(jìn)行拼接鑲嵌，為保證影像的協(xié)調(diào)性，DOM的鑲嵌之前應(yīng)該調(diào)整每個像對的正射影像，使它們達(dá)到接近一致色調(diào)。鑲嵌之后還應(yīng)該在Photoshop等圖像處理軟件下進(jìn)行灰度、反差、色調(diào)的調(diào)整，對于局部區(qū)域也可使用平滑功能進(jìn)行平滑和濾波，但是必須注意參數(shù)的設(shè)置，以免影響影像的精度和視覺效果。理想的影像數(shù)據(jù)應(yīng)該反差適中、色調(diào)飽滿，灰度在0到255之間，其直方圖呈正態(tài)分布。

 

在JX4系統(tǒng)中有正射影像的拼接和裁切環(huán)境，要注意的是鑲嵌線的選取，在選取鑲嵌線時應(yīng)注意盡量避開大型建筑物和影像差異較大的地方，一般可選擇河邊、路邊、溝、渠等地方。DOM成果的裁切按照標(biāo)準(zhǔn)圖幅裁切，依內(nèi)圖廓裁切影像數(shù)據(jù)，不作外擴(kuò)，圖內(nèi)不作任何整飾，這樣是為了便于用戶的拼接。

 

4DOM的質(zhì)量控制

 

DOM的接邊精度主要體現(xiàn)在像對間的接邊，圖幅之間通常是由一個像對裁切而成，因此沒有誤差?？稍谄聊簧夏恳暀z查相鄰像對DOM接邊線兩側(cè)接邊處是否有影像錯位，發(fā)現(xiàn)異常時用量測工具進(jìn)行定性分析，其次是觀察影像是否模糊，色彩是否均衡等。

 

DOM圖幅影像質(zhì)量主要檢查影像是否清晰易讀、反差是否適中、色調(diào)是否均勻一致，對于彩色DOM還要檢查色彩的真實(shí)性，影像的清晰度，色彩的鮮明度以及連續(xù)色調(diào)的變化。必要時利用圖像分析工具進(jìn)行量測，使用曲線、彩色平衡、亮度、對比度、色相、飽和度等工具進(jìn)行調(diào)整。

 

DOM的外業(yè)檢查,平面精度最直接的檢測是采用明顯地物點(diǎn)外業(yè)實(shí)測坐標(biāo)與數(shù)字正射影像上同名像點(diǎn)坐標(biāo)相比較，每幅圖的檢測點(diǎn)數(shù)量視具體情況而定，一般不少于30個點(diǎn)。

 

5DOM影像數(shù)據(jù)管理

 

DOM數(shù)據(jù)庫管理系統(tǒng)，完成DOM數(shù)據(jù)輸入、DOM數(shù)據(jù)管理、系統(tǒng)維護(hù)、DOM查詢分析、DOM數(shù)據(jù)輸出等功能。具體功能如下：

 

(1)數(shù)據(jù)庫用戶管理：負(fù)責(zé)數(shù)據(jù)庫用戶的增加、刪除和用戶權(quán)限的修改。

 

(2)DOM數(shù)據(jù)輸入：交互方式單幅影像入庫，系統(tǒng)提供對話框，在對話框中輸入要入庫的圖像的文件名及所在路徑，并準(zhǔn)確輸入入庫后對應(yīng)的各種屬性及元數(shù)據(jù)，確定后系統(tǒng)則將該幅影像入庫;交互方式批量影像入庫，將批量影像及其屬性和元數(shù)據(jù)置于同一目錄下，系統(tǒng)提供對話框，在對話框中輸入該目錄，確定后系統(tǒng)則將該目錄下所有影像入庫。

 

(3)DOM數(shù)據(jù)顯示和瀏覽：任意放大、縮小、平移

 

按比例尺顯示DOM：在對話框中輸入比例尺，確定后系統(tǒng)則按照該比例尺顯示DOM。

 

按坐標(biāo)范圍顯示：在對話框中輸入構(gòu)成一定范圍的一組X,Y坐標(biāo)，確定后系統(tǒng)則顯示該范圍的DOM。

 

按區(qū)域顯示：在對話框中輸入行政區(qū)域名稱，確定后系統(tǒng)則顯示該區(qū)域的DOM?；蛘呦仍趫D書選定一定行政區(qū)域，系統(tǒng)則顯示選定區(qū)域的DOM。

 

導(dǎo)航窗口：導(dǎo)航窗口顯示影像范圍的略圖，導(dǎo)航窗口和人地圖主窗口實(shí)現(xiàn)互動，與矢量要素疊加顯示功能。

 

(4)DOM的查詢分為地理范圍查詢、行政區(qū)域查詢、圖幅號查詢?nèi)N方式，可以根據(jù)進(jìn)行不同的查詢。按地理范圍查詢時給定地理范圍，系統(tǒng)將查詢出地理范圍對應(yīng)的影像并將影像顯示在地圖窗口上;按行政區(qū)域查詢給定區(qū)域名稱，系統(tǒng)將查詢出該行政區(qū)域?qū)?yīng)的影像并將影像顯示在地圖窗口上;按圖號查詢給定標(biāo)準(zhǔn)圖幅號，系統(tǒng)將查詢出該圖號對應(yīng)的影像并將影像顯示在地圖窗口上;歷史數(shù)據(jù)查詢給定地理范圍和時間，系統(tǒng)將查詢出此地理范圍在該時間的影像并將影像顯示在地圖窗口上。

 

(5)DOM數(shù)據(jù)輸出分為按地理范圍輸出、按行政區(qū)域輸出、按圖幅號輸出三種方式，用戶可以根據(jù)需要進(jìn)行輸出

 

(6)元數(shù)據(jù)查詢

 

查詢屏幕上圖像任意一點(diǎn)的元數(shù)據(jù)信息：點(diǎn)擊地圖上任意一點(diǎn)，系統(tǒng)彈出該點(diǎn)影像的元數(shù)據(jù)信息列表;

 

按照圖幅號查詢元數(shù)據(jù)信息：輸入一個標(biāo)準(zhǔn)圖幅號，系統(tǒng)彈出該圖幅影像的元數(shù)據(jù)信息列表;

 

(7)系統(tǒng)維護(hù)

 

DOM數(shù)據(jù)庫的備份與恢復(fù)：利用數(shù)據(jù)庫的備份功能，將DOM數(shù)據(jù)庫異地備份。利用數(shù)據(jù)庫的恢復(fù)功能，恢復(fù)DOM數(shù)據(jù)庫。

 

DOM數(shù)據(jù)庫的更新：利用最新的影像更新DOM數(shù)據(jù)庫，并將更新前的影像及其屬性和元數(shù)據(jù)存入歷史庫中。

 

作者：張麗娟 來源：城市建設(shè)理論研究 2014年31期

篇7

關(guān)鍵詞：安防領(lǐng)域；數(shù)據(jù)管理；技術(shù)

前言

不同領(lǐng)域?qū)?shù)據(jù)運(yùn)用存在差異性，但無論哪類行業(yè)運(yùn)用數(shù)據(jù)，均應(yīng)提升數(shù)據(jù)管理技術(shù)，以確保數(shù)據(jù)更好的在所用領(lǐng)域中發(fā)揮價值。現(xiàn)如今，安防領(lǐng)域面臨較多的數(shù)據(jù)管理難點(diǎn)，并在一定程度上影響安防領(lǐng)域的發(fā)展，本文針對安防領(lǐng)域數(shù)據(jù)管理技術(shù)及發(fā)展展開探究，具有重要意義。

1 安防領(lǐng)域中數(shù)據(jù)管理的積極作用

所謂數(shù)據(jù)管理技術(shù)，即人們針對大量數(shù)據(jù)運(yùn)用相關(guān)技術(shù)對其整理分類、有序組織、合理編碼、有效存儲、全面檢索和及時維護(hù)，該技術(shù)主要經(jīng)歷了三個發(fā)展階段，第一階段為人工管理階段，第二階段為文件管理階段，第三階段為數(shù)據(jù)庫管理階段。這一技術(shù)所經(jīng)歷的三個發(fā)展階段，代表著該技術(shù)已經(jīng)趨向完善和成熟。

數(shù)據(jù)管理技術(shù)應(yīng)用于安防領(lǐng)域，能夠促進(jìn)安防工作有序進(jìn)行、順利開展。例如，部分企業(yè)針對道路車輛運(yùn)行情況分析時，主要是在相關(guān)數(shù)據(jù)搜集、整理、圖片歸納、視頻播放等方式來開展，以此掌握交通情況，并對易發(fā)生交通事故的地點(diǎn)進(jìn)行針對性預(yù)防，并且還能利用該技術(shù)對違規(guī)車牌跟蹤，在適合路段報警。數(shù)據(jù)管理技術(shù)在快速路或者高架橋中同樣適用，對大型車輛在數(shù)據(jù)分析的基礎(chǔ)上，做好充分的預(yù)案。又如，公安部門在實(shí)際執(zhí)法工作中，利用數(shù)據(jù)管理技術(shù)來對犯罪嫌疑人進(jìn)行人臉識別，能夠成功抓捕罪犯，以此提高辦案效率。此外，該技術(shù)同樣適用于公共場合，像火車站、機(jī)場等，在客流量較大的場合對有意違法之人進(jìn)行預(yù)測，進(jìn)而減少安防領(lǐng)域的犯罪率，提高安防領(lǐng)域的安全性[1]。

2 安防領(lǐng)域存在的數(shù)據(jù)管理技術(shù)難點(diǎn)

從上述分析中可知，安防領(lǐng)域應(yīng)用數(shù)據(jù)管理技術(shù)能夠起到積極的促進(jìn)作用，但是該領(lǐng)域的不同行業(yè)中同樣表現(xiàn)出了差異性的技術(shù)難點(diǎn)。

2.1 行業(yè)差異性

IT行業(yè)中，數(shù)據(jù)管理技術(shù)的發(fā)展相對完善，并且可供選擇技術(shù)類型和技術(shù)途徑具有多樣性，但是由于這一行業(yè)與安防領(lǐng)域仍存在差異性，進(jìn)而IT行業(yè)適用的技術(shù)未能在安防領(lǐng)域同樣適用。這主要是因?yàn)槎叩臄?shù)據(jù)類型不同，安防行業(yè)主要處理文字、圖片、音（視）頻等等數(shù)據(jù)，然而IT行業(yè)主要處理計算便捷的瀏覽記錄、網(wǎng)頁搜索等。并且，安防行業(yè)接觸的內(nèi)存量較大，無論是視頻，還是圖像均需高清晰度。此外，二者所要求的數(shù)據(jù)存在實(shí)時性差異，相對來說，IT行業(yè)的實(shí)時性較弱[2]。

2.2 技術(shù)難點(diǎn)

一方面，存在小文件存儲方面的問題。安防領(lǐng)域中數(shù)據(jù)管理技術(shù)存在的這一難點(diǎn)較為明顯，這一領(lǐng)域的小文件即指圖片。由于這部分文件與多元數(shù)據(jù)管理之間的聯(lián)系較密切，進(jìn)而要對這類小文件妥善存儲，以便在安防應(yīng)用中及時發(fā)揮小文件數(shù)據(jù)的價值，制定合理的解決方案。另一方面，存在存儲成本方面的問題。上述IT行業(yè)主要利用分布式存儲系統(tǒng)來實(shí)施數(shù)據(jù)管理和存儲，同時，還會針對數(shù)據(jù)重復(fù)備份，并不同位置保存。在安防領(lǐng)域中，由于存儲對象內(nèi)存較大，進(jìn)而備份存儲時，需加大資金和技術(shù)投入，進(jìn)而應(yīng)重新制定適用性方針，將技術(shù)難點(diǎn)有效攻破。

3 優(yōu)化安防領(lǐng)域數(shù)據(jù)管理技術(shù)的措施

首先，合理建立索引，文件整合式存儲。應(yīng)用分布式存儲技術(shù)將單機(jī)存儲困難數(shù)據(jù)進(jìn)行不同位置存儲，并將眾多小文件合理整合，以大文件的形式來規(guī)范化、統(tǒng)一化管理[3]。

其次，融入擦除碼技術(shù)，優(yōu)化利用存儲空間。所謂擦除碼，即指獨(dú)立信息由M個符號組成，這一信息經(jīng)過數(shù)學(xué)放映后進(jìn)行發(fā)送，最終形成（M+N）個符號組成的信息，由于信道具備的可靠性較小，當(dāng)信息被傳送后，傳送過程中會出現(xiàn)符號丟失的現(xiàn)象，如果丟失符號能夠被控制在N個范圍之內(nèi)，那么信息接受方能在數(shù)學(xué)變換的作用下，將M符號的原始信息合理還原。

然后，實(shí)施數(shù)據(jù)管理技術(shù)與云計算和物聯(lián)網(wǎng)有機(jī)統(tǒng)一、融合發(fā)展。數(shù)據(jù)管理技術(shù)和移動互聯(lián)、社會計算、物聯(lián)網(wǎng)等當(dāng)下流行技術(shù)融合性發(fā)展，能夠提升這一技術(shù)在安防領(lǐng)域的應(yīng)用范圍，擴(kuò)大該技術(shù)的應(yīng)用率。現(xiàn)如今，互聯(lián)網(wǎng)信息技術(shù)的發(fā)展空間越來越大，熱點(diǎn)技術(shù)的有機(jī)融合能夠促進(jìn)數(shù)據(jù)管理技術(shù)持續(xù)進(jìn)步，同時，提升該技術(shù)的數(shù)據(jù)計算能力，在未來的發(fā)展當(dāng)中，數(shù)據(jù)管理技術(shù)會向綜合應(yīng)用的方向發(fā)展。數(shù)據(jù)管理處理模式與時俱進(jìn)創(chuàng)新的同時，還應(yīng)不斷促進(jìn)軟硬件基礎(chǔ)設(shè)施扎實(shí)、鞏固、穩(wěn)定發(fā)展。與此同時，將數(shù)據(jù)管理技術(shù)的發(fā)展重點(diǎn)轉(zhuǎn)向內(nèi)存計算，以此豐富多樣性數(shù)據(jù)的處理模式，促進(jìn)安防領(lǐng)域數(shù)據(jù)處理實(shí)現(xiàn)一體化發(fā)展。數(shù)據(jù)管理技術(shù)在未來的發(fā)展中還會實(shí)現(xiàn)不同領(lǐng)域、不同學(xué)科的交叉性發(fā)展，并且這也將成為日后發(fā)展的主要方向。數(shù)據(jù)管理技術(shù)主要以參與實(shí)際應(yīng)用為主要發(fā)展目標(biāo)，從中可知，安防領(lǐng)域應(yīng)用數(shù)據(jù)管理技術(shù)時，應(yīng)主動跳出數(shù)據(jù)計算本身。目前，大多數(shù)數(shù)據(jù)平臺僅限于形式主義，平臺的實(shí)際應(yīng)用價值較低，但所運(yùn)用的數(shù)據(jù)分析會緊密聯(lián)系于相關(guān)行業(yè)，會間接運(yùn)用到行業(yè)知識及模型，此外，數(shù)據(jù)分析過程中應(yīng)用到的數(shù)據(jù)技術(shù)少之又少，數(shù)據(jù)技術(shù)不能更好的輔助數(shù)據(jù)分析。因此，為了上述現(xiàn)狀有效緩解，上述問題有效處理，應(yīng)加強(qiáng)不同領(lǐng)域和學(xué)科之間的聯(lián)系，促進(jìn)安防領(lǐng)域的數(shù)據(jù)真正被應(yīng)用于實(shí)踐，在行業(yè)應(yīng)用中盡可能多的發(fā)揮數(shù)據(jù)價值[4]。

最后，積極利用數(shù)據(jù)可視化技術(shù)。該技術(shù)與數(shù)據(jù)表現(xiàn)形式――視覺化表現(xiàn)形式之間存在直接聯(lián)系，這一表現(xiàn)形式在進(jìn)行信息提出時，主要應(yīng)用概括形式，并且這一方式提取出的信息包括相應(yīng)的單位和基本變量。在安防領(lǐng)域的數(shù)據(jù)管理技術(shù)中應(yīng)用這一先進(jìn)技術(shù)進(jìn)行分析，不僅能夠?qū)⑸鲜黾夹g(shù)難點(diǎn)有效解決，而且還能優(yōu)化數(shù)據(jù)分析結(jié)果，詳細(xì)分析數(shù)據(jù)內(nèi)容。在正式分析之前，應(yīng)針對所要分析的安防數(shù)據(jù)全面、詳細(xì)考察，在此基礎(chǔ)上實(shí)施數(shù)據(jù)分析工作。在數(shù)據(jù)分析期間，應(yīng)及時發(fā)揮可視化作用，并將這一作用應(yīng)用于數(shù)據(jù)分析之后，這不僅能夠方便客戶理解，而且還能將數(shù)據(jù)結(jié)果直觀展示。此外，將已獲結(jié)果與模型數(shù)據(jù)進(jìn)行綜合對比，數(shù)據(jù)可視化技術(shù)方法具有應(yīng)用廣泛性。現(xiàn)如今，這一技術(shù)正處于發(fā)展階段，成功運(yùn)用該技術(shù)的案例為數(shù)不多。但是隨著城市化進(jìn)程的不斷加快，市場技術(shù)需要的不斷擴(kuò)大，數(shù)據(jù)可視化處理技術(shù)會取得越來越多的關(guān)注度，并且該技術(shù)能夠獲得廣闊的發(fā)展空間。

4 結(jié)束語

綜上所述，安防領(lǐng)域數(shù)據(jù)管理技術(shù)在實(shí)際發(fā)展中面臨較多的技術(shù)難點(diǎn)，采取有效措施解Q這一技術(shù)難點(diǎn)，能夠?qū)⒁汛娴募夹g(shù)問題合理解決，并且還會促進(jìn)數(shù)據(jù)管理技術(shù)向技術(shù)融合性發(fā)展和數(shù)據(jù)可視化發(fā)展。同時，這還會促進(jìn)社會經(jīng)濟(jì)、科技水平不斷提升。

參考文獻(xiàn)

[1]陳子平.基于物聯(lián)網(wǎng)技術(shù)的安防定位管理系統(tǒng)研究和設(shè)計[D].復(fù)旦大學(xué)，2014.

[2]葉飛.BL公司大數(shù)據(jù)安防技術(shù)的應(yīng)用效益分析與發(fā)展路徑研究

[D].浙江工業(yè)大學(xué)，2014.

[3]張曲銘.淺析云存儲在安防領(lǐng)域的應(yīng)用與發(fā)展[J].中國安防，

2014，16：51-53.

篇8

CATIA軟件以其強(qiáng)大的自由曲面造型和逆向功能，成為航空和汽車行業(yè)的主流CAD平臺[1]。CATIA軟件為兼顧用戶的不同需求，預(yù)留了二次開發(fā)接口。在CATIA平臺下進(jìn)行零件庫的開發(fā)主要有3種方法[2]：第1，使用CATIA的Formula、DesignTable和Catalog功能建立三維標(biāo)準(zhǔn)件庫，但其格式固定，不能有效和國家及企業(yè)標(biāo)準(zhǔn)結(jié)合起來，且操作繁瑣、更新性較差、零件存儲的數(shù)據(jù)冗余、不易操作[3]。第2，可以利用CATIA提供的組件應(yīng)用架構(gòu)（ComponentApplicationArchitec⁃ture，CAA）接口和二次開發(fā)工具快速應(yīng)用開發(fā)環(huán)境（RapidApplicationDevelopmentEnvironment,RADE）進(jìn)行CATIA的二次開發(fā)，創(chuàng)建零件庫的應(yīng)用程序。此方法入門困難，但實(shí)現(xiàn)的功能強(qiáng)大，開發(fā)的程序效率高，能夠滿足用戶深層次專業(yè)化的要求[4]。第3，使用自動化接口（AutomationAPI），在VB環(huán)境下引用CATIA的類對象、函數(shù)進(jìn)行二次開發(fā)。此種方法入門容易，但功能限制大[5]，且所開發(fā)的零件庫系統(tǒng)只能在特定模塊下使用，靈活性較差[6]。本文從車身關(guān)鍵數(shù)據(jù)管理的實(shí)際問題出發(fā)，結(jié)合CATIA平臺下3種開發(fā)零件庫方法的優(yōu)缺點(diǎn)，利用和MySL建立車身關(guān)鍵數(shù)據(jù)管理系統(tǒng)，采用CA⁃TIA/CAA技術(shù)，實(shí)現(xiàn)了數(shù)據(jù)庫系統(tǒng)與CATIA的無縫連接，應(yīng)用Automation技術(shù)實(shí)現(xiàn)了數(shù)據(jù)庫系統(tǒng)與CATIA的數(shù)據(jù)通信。該數(shù)據(jù)管理系統(tǒng)可以完成關(guān)鍵數(shù)據(jù)的管理、預(yù)覽、對比以及模型輸出，為提高對標(biāo)設(shè)計效率、縮短車身開發(fā)周期提供了支持。

2車身關(guān)鍵數(shù)據(jù)管理系統(tǒng)總體設(shè)計

該系統(tǒng)以Windows和CATIAV5為操作平臺，使用作為開發(fā)語言，通過MySL作為底層數(shù)據(jù)庫進(jìn)行數(shù)據(jù)存儲。圖1為系統(tǒng)的體系結(jié)構(gòu)框圖，可分為集成層、用戶層和數(shù)據(jù)存儲層。集成層使用RADE和CAAAPI實(shí)現(xiàn)用戶層與CATIA的集成。用戶層體現(xiàn)了系統(tǒng)功能，目前可分為3個基礎(chǔ)模塊（分別為系統(tǒng)管理模塊、車型管理模塊、材料管理模塊）和1個關(guān)鍵數(shù)據(jù)模塊，關(guān)鍵數(shù)據(jù)管理模塊作為車身關(guān)鍵數(shù)據(jù)的載體，根據(jù)用戶對不同零件的需求，可進(jìn)行實(shí)時擴(kuò)展。數(shù)據(jù)存儲層為用戶層的各模塊提供相應(yīng)的數(shù)據(jù)支持，其和用戶層通過接口和Automation進(jìn)行數(shù)據(jù)交流與更新。系統(tǒng)的工作流程可描述為：進(jìn)入CATIA，點(diǎn)擊開發(fā)工具條上的車身關(guān)鍵數(shù)據(jù)管理系統(tǒng)命令按鈕，打開已加載到CATIA內(nèi)部的車身關(guān)鍵數(shù)據(jù)管理系統(tǒng)，通過訪問數(shù)據(jù)庫，進(jìn)行車身關(guān)鍵數(shù)據(jù)的功能性操作。

3系統(tǒng)關(guān)鍵結(jié)構(gòu)的實(shí)現(xiàn)本系統(tǒng)關(guān)鍵結(jié)構(gòu)包括集成層的實(shí)現(xiàn)和用戶層的開發(fā)。

3.1基于CAA的集成層開發(fā)

采用組件應(yīng)用架構(gòu)CAA完成數(shù)據(jù)庫系統(tǒng)在CATIA下的入口設(shè)計，要在CATIA中創(chuàng)建一個全新的work⁃bench，以便將基于CAA二次開發(fā)的車身關(guān)鍵數(shù)據(jù)輔助設(shè)計模塊進(jìn)行集中顯示，也要將開發(fā)的工具條嵌入到其他相關(guān)工作臺中，以利于實(shí)際操作。集成層的開發(fā)框架（圖2）分為兩個步驟：第1步，插入新工作臺；第2步，在新工作臺中開發(fā)新工具條并將工具條關(guān)聯(lián)到CATIA的創(chuàng)成式、零件設(shè)計和裝配設(shè)計工作臺。a.工作臺的插入在CAA中創(chuàng)建新的工作臺流程。b.工具條及命令按鈕開發(fā)工具條在新建工作臺和創(chuàng)成式設(shè)計、零件設(shè)計以及裝配設(shè)計下可用，因此需要將工具條描述類與這4項(xiàng)的接口建立聯(lián)系。以新建工作臺為例，通過以下兩個語句，可實(shí)現(xiàn)工具條與新建工作臺的連接。#include"TIE_IBATVBDCreationWbenchAddin.h"TIE_IBATVBDCreationWbenchAddin（BATDataAd⁃din）工具條描述類作為對系統(tǒng)接口的擴(kuò)展，會重載Cre⁃ateToolbars和CreateCommands兩個函數(shù)，CreateToolbars用以創(chuàng)建一個按鈕容器，即工具條。圖4是創(chuàng)建工具條及添加按鈕的過程。4標(biāo)準(zhǔn)工具條及按鈕的創(chuàng)建流程函數(shù)CreateCommands()的作用是關(guān)聯(lián)工具條按鈕的響應(yīng)命令。在該命令中添加調(diào)用外部程序的響應(yīng)，可實(shí)現(xiàn)對外部程序調(diào)用的API函數(shù)有Shell、ShellExecute、ShellExecuteEx、Winexec、CreateProcess等，本文采用使用率較高的ShellExecute函數(shù)。

3.2車身關(guān)鍵數(shù)據(jù)管理系統(tǒng)

作為車身設(shè)計數(shù)據(jù)的對標(biāo)平臺，也可以作為通用化的基礎(chǔ)平臺，系統(tǒng)的設(shè)計功能如圖6所示。a.用戶權(quán)限劃分：不同用戶權(quán)限使用不同功能。管理員職能涉及對數(shù)據(jù)庫的修改操作，而普通用戶僅對數(shù)據(jù)庫有查詢操作權(quán)限。圖7為系統(tǒng)主界面。b.數(shù)據(jù)存儲：記錄用戶關(guān)注的車身關(guān)鍵數(shù)據(jù)，包括車型、材料、主斷面位置、車門、主斷面、密封條斷面、孔堵和鉸鏈等數(shù)據(jù)的幾何信息及其數(shù)模文件。c.數(shù)據(jù)查詢：實(shí)現(xiàn)對車型、材料、主斷面位置、車門、主斷面、密封條斷面、孔堵和鉸鏈的幾何信息進(jìn)行瀏覽和查詢，同時可以對零件或斷面的形狀進(jìn)行初步預(yù)覽。圖8為關(guān)鍵數(shù)據(jù)的信息展示界面。d.數(shù)據(jù)輸出與對比報表：對于其他程序或腳本來說，CATIA只是一個OLE自動化對象服務(wù)器，因此任何能訪問COM對象的程序或腳本都能訪問CATIA的對象并對其進(jìn)行操作[7]。本文通過Automation技術(shù)實(shí)現(xiàn)了數(shù)據(jù)庫系統(tǒng)與CATIA的通信，使用前在程序框架中引用CATIA的庫文件，在獲取當(dāng)前CATIAApplication對象后，使用Documents的Open方法將數(shù)據(jù)庫中的數(shù)模文件在CATIA中打開。通過Automation技術(shù)實(shí)現(xiàn)數(shù)據(jù)庫與CATIA的通信，將相應(yīng)斷面或零件數(shù)模從數(shù)據(jù)庫中直接導(dǎo)入到CATIA。對比報表的輸出同樣采用支持自動化操作的Excel實(shí)現(xiàn)，用戶根據(jù)自身需要搜索到所需零件或斷面，通過選擇相應(yīng)的參數(shù)，輸出參數(shù)對比報表。圖9為對標(biāo)數(shù)據(jù)參數(shù)對比報表的輸出。

4結(jié)束語

篇9

城市地下管線根據(jù)有關(guān)規(guī)定可以分為綜合管溝管線、人防管線、工業(yè)管線、電信管線、熱力管線、電力管線、燃?xì)夤芫€、給水管線、排水管線等9種主要管線類型，還可以分出很多子類型。[1]由于這些管線以埋在地下的管線為主，因而其并不是全部埋在地下，而是將有些部分分布在地面上。城市的地下空間多被縱橫交錯地埋在了地下，因而在城市的地下構(gòu)成了錯綜復(fù)雜的網(wǎng)絡(luò)，即城市地下管網(wǎng)。由于各類管線在地面上還存有附屬設(shè)施和建筑物等構(gòu)筑物，因而地下管線信息分為屬性信息和空間信息這兩類。其中空間信息包括管線走向、管線埋藏深度、管線所屬和管線具置等；屬性信息主要有管線鋪設(shè)時間、管線斷面、管線的管理單位和部門、管線電纜的根數(shù)和管線傳輸?shù)奈矬w。[2]在對城市地下管線進(jìn)行普查和探測的過程中，測繪人員不僅要準(zhǔn)確探測管線的空間信息，對城市地下管線進(jìn)行實(shí)地調(diào)查，還要采用統(tǒng)一的坐標(biāo)系用文字、數(shù)字以及字符等來表示管線的屬性信息和空間信息，用字母x、y、h表示地下管線高斯-克呂格平面坐標(biāo)系的具體空間信息。

2城市地下管線調(diào)查的方法及要求分析

2.1調(diào)查要求與調(diào)查方法

在探查城市地下管線的過程中一般采用儀器探查和實(shí)地調(diào)查這兩種方法。管線探查的工作主要包括探查管線附屬設(shè)施、電纜條數(shù)、管線規(guī)格、管線性質(zhì)、管線材質(zhì)、管線種類和管線載體，地下管線測繪人員還應(yīng)當(dāng)探查地下管線埋藏深度、地下管線鋪設(shè)的地理位置和鋪設(shè)狀況等。為了保證城市地下管線探查的準(zhǔn)確性和完整性，應(yīng)當(dāng)積極采用地下管線探測儀、測地雷達(dá)等先進(jìn)的設(shè)備做好管線物理探測方面的技術(shù)。隨著人們對城市地下管線的測繪集數(shù)據(jù)管理要求的不斷提高以及工程物探技術(shù)的不斷發(fā)展，物探技術(shù)成為了城市地下管線資料收集的一種重要手段。城市地下管線的測繪集數(shù)據(jù)管理的調(diào)查方法主要有高精度磁法、地面測溫法、淺層地震法、探地雷達(dá)法、高密度電阻率法和電磁感應(yīng)法。探測技術(shù)人員在進(jìn)行具體的探測工作時，要綜合考慮城市的實(shí)際情況，采用靈活全面的地下管線探測解決方案，并通過地下管線定位儀來對地下管線進(jìn)行精確的探測，實(shí)現(xiàn)地下管線物理探測的經(jīng)濟(jì)合理性。

2.2各種管線編號數(shù)據(jù)管理

在進(jìn)行數(shù)據(jù)探測的過程中，城市地下各類管線在進(jìn)行調(diào)查時應(yīng)當(dāng)做好管線編號的數(shù)據(jù)管理工作，以號區(qū)專業(yè)管線進(jìn)行科學(xué)的分區(qū)。城市地下管線編號主要分為主管線和支管線兩級。在對城市地下管線進(jìn)行具體編號時，堅持線號在前面，點(diǎn)號在后面的原則。一定要表達(dá)清楚每一條地下管線的起點(diǎn)、終點(diǎn)、分支、折點(diǎn)、變徑、變坡等點(diǎn)標(biāo)。在對街道管線進(jìn)行編號時，也要嚴(yán)格按照線號在前、點(diǎn)號在后的順序。對于南北走向的街道，自西向東的街道采用奇數(shù)進(jìn)行編號，對于東西走向的街道，自北向南的街道采用偶數(shù)編號。在進(jìn)行點(diǎn)號編輯時，應(yīng)當(dāng)嚴(yán)格按照自北向南、自西向東的順序進(jìn)行編號管理。對于交叉的管線，一般只編輯一個號；在編輯分支管線時，應(yīng)當(dāng)按照地下管道的主干線管線點(diǎn)進(jìn)行順向編號。比如，倘若城市地下主干管線的排水井編號是W9-7，那么支管線的編號是WZ9-1。在編輯點(diǎn)號時應(yīng)遵循方便識別和記憶的原則，可以適當(dāng)?shù)暮喕幪柮Q。

3完善城市地下管線圖繪制的策略

3.1科學(xué)使用地下管線數(shù)字測繪系統(tǒng)

在進(jìn)行城市地下管線的測繪集數(shù)據(jù)管理過程中，應(yīng)當(dāng)嚴(yán)格審核地下管線數(shù)字測繪系統(tǒng)的成圖，采用先進(jìn)的測繪軟件進(jìn)行城市地下管線的成圖作業(yè)，仔細(xì)分析經(jīng)轉(zhuǎn)換后的野外采集基本數(shù)據(jù)，整理好連線文件和坐標(biāo)文件的繪圖數(shù)據(jù)。由于測繪軟件集傳輸功能、電子平板、數(shù)據(jù)處理、平差計算、圖形生成、數(shù)字化編輯、數(shù)據(jù)報表生成、數(shù)據(jù)表格輸出等優(yōu)點(diǎn)于一體，因而具有較強(qiáng)的系統(tǒng)性。在繪制管線圖前，應(yīng)當(dāng)對外業(yè)數(shù)據(jù)進(jìn)行有效的處理，提取相應(yīng)的繪圖信息，做好數(shù)據(jù)計算和數(shù)據(jù)結(jié)構(gòu)的存儲工作，建立起適合地下管線鋪設(shè)的數(shù)據(jù)繪圖和編輯處理工作，建立完備的管線編號數(shù)據(jù)庫，根據(jù)數(shù)據(jù)庫內(nèi)的空間數(shù)據(jù)和屬性數(shù)據(jù)，及時繪制可生成數(shù)字管網(wǎng)圖，以此方便城市地下管線的設(shè)置。

3.2對地下管線圖進(jìn)行合理分類

地下管線工作者將地下管線圖分為綜合管線圖和專業(yè)管線圖這兩大類。綜合管線圖主要是指合理展現(xiàn)測區(qū)內(nèi)所有探測過的附屬設(shè)施和各種管線，將有關(guān)地面的建構(gòu)筑物清楚展現(xiàn)在管線圖上。采用線畫的黑色背景作為地形圖，按照規(guī)定做好各種專業(yè)管線的顏色繪制工作，尤其要用文字標(biāo)明管線的路名、屬性和單位名稱，對不能壓蓋圖上的其它要素進(jìn)行注記。專業(yè)管線圖和綜合管線圖應(yīng)當(dāng)采用相同背景的地形圖，繪制專業(yè)管線和屬性注記圖，專業(yè)管線要素的顏色及注記方式與綜合管線一致。

3.3優(yōu)化城市地下管線分層管理機(jī)制

城市地下管網(wǎng)作為城市市政工程的重要組成部分，完善城市地下管線的測繪集數(shù)據(jù)的科學(xué)管理工作是進(jìn)一步優(yōu)化城市地下空間的科學(xué)有效的途徑。隨著測繪技術(shù)的不斷發(fā)展和數(shù)據(jù)管理工作的不斷完善，測繪管網(wǎng)應(yīng)當(dāng)對出圖、出表進(jìn)行有效存儲，在網(wǎng)絡(luò)平臺上對管網(wǎng)信息進(jìn)行有效的科學(xué)管理工作，建立全面的城市地理信息系統(tǒng)數(shù)據(jù)庫，擴(kuò)寬地下管網(wǎng)圖的適用范圍，同時完善數(shù)字化的管網(wǎng)測繪系統(tǒng)。一般將同一類管線和附屬設(shè)施放置在一層，將背景地形圖放置在另一層，同時做好編碼編輯工作和背景地形圖的繪制工作，對不同的對層進(jìn)行開關(guān)控制和顏色定義工作，要對編碼元素和注記進(jìn)行顏色設(shè)定,為地下管線圖的專業(yè)應(yīng)用提供方便。

4結(jié)論

篇10

1.1物聯(lián)網(wǎng)

物聯(lián)網(wǎng)是可將物與物、人與人、人與物相互關(guān)聯(lián)，實(shí)現(xiàn)智能控制的一種網(wǎng)絡(luò)技術(shù)。就是利用局部網(wǎng)絡(luò)或互聯(lián)網(wǎng)等通信技術(shù)把自來水廠既有的傳感控制器、機(jī)器、人員等通過新的方式聯(lián)在一起，實(shí)現(xiàn)信息化、遠(yuǎn)程管控和智能化的網(wǎng)絡(luò)。

1.2大數(shù)據(jù)

大數(shù)據(jù)技術(shù)可將水廠內(nèi)一系列的數(shù)據(jù)庫集成化，抽取挖掘數(shù)據(jù)信息，并轉(zhuǎn)換成指導(dǎo)企業(yè)生產(chǎn)管理的有效信息。大數(shù)據(jù)，主要就是指數(shù)據(jù)量巨大、種類多、產(chǎn)生速度快、有創(chuàng)造價值潛力的數(shù)據(jù)庫。被譽(yù)為“大數(shù)據(jù)時代的預(yù)言家”的牛津大學(xué)維克托·邁爾-舍恩伯格教授解釋：大數(shù)據(jù)分析就是分析全體數(shù)據(jù)不要抽樣數(shù)據(jù)，要接受數(shù)據(jù)的復(fù)雜多樣性不要追求個別類型數(shù)據(jù)的精確，要事物相關(guān)關(guān)系不要難以捉摸的因果關(guān)系［2］。

1.3機(jī)器人

傳統(tǒng)一線工人是通過對設(shè)備的看、觸、聽、嗅、測等感觀進(jìn)行巡視判斷。而設(shè)備巡檢機(jī)器人一旦投運(yùn)，將不受環(huán)境影響，實(shí)現(xiàn)24小時不間斷高強(qiáng)度的自動巡檢，甚至還可以將每次巡檢的內(nèi)容上傳大數(shù)據(jù)庫進(jìn)行儲存，方便以后查閱。

2面向智慧水廠的大數(shù)據(jù)管理理論

對于智慧水廠而言，其大數(shù)據(jù)往往是從各種復(fù)雜系統(tǒng)中得到的，每一個系統(tǒng)都有著獨(dú)立的數(shù)據(jù)集和分散的鏈接，數(shù)據(jù)的共性和網(wǎng)絡(luò)的整體特征隱藏在這些數(shù)據(jù)網(wǎng)絡(luò)的集合中，但通過大數(shù)據(jù)可以將這些反映相互關(guān)系的鏈接整合起來，構(gòu)成一張完整的大數(shù)據(jù)關(guān)系網(wǎng)。分析大數(shù)據(jù)也就是分析大數(shù)據(jù)后面的網(wǎng)絡(luò)，大數(shù)據(jù)面臨的科學(xué)問題本質(zhì)上可能就是網(wǎng)絡(luò)科學(xué)問題，一些網(wǎng)絡(luò)參數(shù)和性質(zhì)也許能刻畫大數(shù)據(jù)背后網(wǎng)絡(luò)的共性［5］。智慧水廠部分大數(shù)據(jù)及這些數(shù)據(jù)之間可能的聯(lián)系，其中包含了來自水廠自身、調(diào)度及外部的諸多數(shù)據(jù)，這些不同數(shù)據(jù)之間彼此關(guān)聯(lián)、交織成網(wǎng)，以一種現(xiàn)階段看來無比混雜并且難以準(zhǔn)確描述的方式支撐和推動著配水廠的運(yùn)行與發(fā)展。

3面向智慧水廠的大數(shù)據(jù)分析前景