大數(shù)據(jù)時(shí)代數(shù)據(jù)的特征范文
時(shí)間:2023-12-28 17:49:29
導(dǎo)語(yǔ):如何才能寫(xiě)好一篇大數(shù)據(jù)時(shí)代數(shù)據(jù)的特征,這就需要搜集整理更多的資料和文獻(xiàn),歡迎閱讀由公務(wù)員之家整理的十篇范文,供你借鑒。
篇1
關(guān)鍵詞:大數(shù)據(jù);時(shí)代特征;研發(fā)大數(shù)據(jù);分析平臺(tái);具體策略
中圖分類(lèi)號(hào):TP391 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1009-3044(2016)27-0003-02
正是互聯(lián)網(wǎng)技術(shù)的應(yīng)用,為整個(gè)社會(huì)發(fā)展轉(zhuǎn)型奠定了重要基礎(chǔ)。尤其是在大數(shù)據(jù)應(yīng)用日益成熟的今天,完善構(gòu)建大數(shù)據(jù)分析平臺(tái),結(jié)合大數(shù)據(jù)分析的具體功能屬性和應(yīng)用價(jià)值,從而實(shí)現(xiàn)企業(yè)經(jīng)營(yíng)發(fā)展與大數(shù)據(jù)應(yīng)用的體系性融入。當(dāng)然,想要用好大數(shù)據(jù)平臺(tái),就必須了解大數(shù)據(jù)平臺(tái)有哪些應(yīng)用特征,同時(shí)也要了解其具體應(yīng)用要求和內(nèi)涵,從而適應(yīng)大數(shù)據(jù)時(shí)代特征,為企業(yè)發(fā)展提供科學(xué)決策。
1 大數(shù)據(jù)時(shí)代特征分析
大數(shù)據(jù)時(shí)代的到來(lái),標(biāo)志著人類(lèi)對(duì)計(jì)算機(jī)互聯(lián)網(wǎng)技術(shù)的應(yīng)用實(shí)現(xiàn)了實(shí)質(zhì)性進(jìn)步,與以往時(shí)代所不同的是,大數(shù)據(jù)時(shí)代具有自身特征,其主要表現(xiàn)為:首先,其整體數(shù)據(jù)量極大,與以往信息時(shí)代不同的是,大數(shù)據(jù)應(yīng)用的前提就是收集龐大的數(shù)據(jù)信息,因此,其存儲(chǔ)數(shù)據(jù)的計(jì)算量遠(yuǎn)超過(guò)了當(dāng)前的計(jì)量,其基本上使用的都是P/E/Z做計(jì)量單位,起碼存儲(chǔ)在1000T以上,甚至高達(dá)10億T。
其次,其特征主要表現(xiàn)為種類(lèi)繁多、內(nèi)容多樣。尤其是整個(gè)大數(shù)據(jù)體系中不僅包含了各個(gè)行業(yè)的信息,同時(shí)其收集形式也極為多樣,從文字、圖片到音頻、視頻等等,基本上囊括了整個(gè)時(shí)代的各個(gè)信息鏈條和內(nèi)涵。正是數(shù)據(jù)信息的多樣化和多元化決定了我們可以通過(guò)使用大數(shù)據(jù)實(shí)現(xiàn)對(duì)整個(gè)數(shù)據(jù)資源的體系化認(rèn)知,同時(shí)這也從根本上提升了我們對(duì)數(shù)據(jù)的處理和應(yīng)用能力,使得整個(gè)數(shù)據(jù)分析更有參考價(jià)值和意義。
此外,隨著當(dāng)前大數(shù)據(jù)應(yīng)用不斷成熟,如今數(shù)據(jù)價(jià)值密度相對(duì)較低,尤其是在物聯(lián)網(wǎng)廣泛應(yīng)用影響下,信息感知應(yīng)用極為廣泛。雖然當(dāng)前大數(shù)據(jù)時(shí)代,整個(gè)數(shù)據(jù)量大,但是有價(jià)值的數(shù)據(jù)較少,其整體價(jià)值密度不大,因此如何才能有效完善數(shù)據(jù)篩選,優(yōu)化其價(jià)值應(yīng)用,就是當(dāng)前利用大數(shù)據(jù)平臺(tái)過(guò)程中所不可忽視的內(nèi)容。
最后,我們應(yīng)該認(rèn)識(shí)到大數(shù)據(jù)時(shí)代的重要特征還表現(xiàn)為數(shù)據(jù)處理深度快,且對(duì)數(shù)據(jù)處理有較高的時(shí)效性要求。正是高速的數(shù)據(jù)處理速度和處理時(shí)間要求,決定了當(dāng)前大數(shù)據(jù)開(kāi)發(fā)應(yīng)用不同于傳統(tǒng)數(shù)據(jù)篩選應(yīng)用。但是我們應(yīng)該辯證看待大數(shù)據(jù)平臺(tái)的優(yōu)缺點(diǎn),尤其是當(dāng)前我們所具備的技術(shù)和設(shè)施已經(jīng)無(wú)法滿足海量信息數(shù)據(jù)的處理,可以說(shuō)正是快速發(fā)展的時(shí)代要求決定了我們必須優(yōu)化信息數(shù)據(jù)利用方式,構(gòu)建完善的數(shù)據(jù)應(yīng)用平臺(tái)和機(jī)制。
2 當(dāng)前大數(shù)據(jù)分析平臺(tái)應(yīng)用內(nèi)涵及具體狀況分析
想要對(duì)大數(shù)據(jù)分析平臺(tái)應(yīng)用要求進(jìn)行體系化認(rèn)知,就必須清楚大數(shù)據(jù)分析的定義內(nèi)涵、應(yīng)用過(guò)程中存在的問(wèn)題和不足以及其具體的解決對(duì)策。只有對(duì)其形成體系化了解,才能從根本上服務(wù)大數(shù)據(jù)分析平臺(tái)建設(shè)、應(yīng)用。
2.1 大數(shù)據(jù)分析的定義
結(jié)合大數(shù)據(jù)結(jié)構(gòu)復(fù)雜,數(shù)據(jù)更新速度快、價(jià)值密度低、整體數(shù)據(jù)量大等一系列特點(diǎn),當(dāng)前我們?cè)趹?yīng)用大數(shù)據(jù)時(shí),存在較大難度,而全面應(yīng)用大數(shù)據(jù)的關(guān)鍵就是實(shí)施大數(shù)據(jù)分析,通過(guò)完善大數(shù)據(jù)分析的具體定義認(rèn)知,從而構(gòu)建合理的大數(shù)據(jù)分析平臺(tái)。實(shí)際上,大數(shù)據(jù)分析指的是在數(shù)據(jù)密集的環(huán)境下,通過(guò)使用科學(xué)分析的方法,對(duì)數(shù)據(jù)應(yīng)用進(jìn)行重新思考,并完善構(gòu)建全新數(shù)據(jù)分析應(yīng)用模式。大數(shù)據(jù)分析認(rèn)為其分析應(yīng)用過(guò)程并非技術(shù)上的應(yīng)用,而是一種具體的使用策略,其核心內(nèi)涵指的是通過(guò)使用一種相對(duì)以往更有效分析方式來(lái)管理、獲取海量數(shù)據(jù)的方式,并且在這一過(guò)程中獲取有價(jià)值的信息。結(jié)合當(dāng)前大數(shù)據(jù)應(yīng)用實(shí)際狀況,我們可以認(rèn)為,大數(shù)據(jù)分析指的是:依據(jù)數(shù)據(jù)生成理論,通過(guò)構(gòu)建大數(shù)據(jù)分析模型,從而結(jié)合集成化大數(shù)據(jù)分析平臺(tái),使用云計(jì)算技術(shù)完善分析數(shù)據(jù)資源,并且最終探究出大數(shù)據(jù)模式背后規(guī)律的過(guò)程。
2.2 大數(shù)據(jù)分析方法闡述
目前大數(shù)據(jù)分析的重要內(nèi)容是可視化分析,通過(guò)集成交互可視化和自動(dòng)化分析,從而提升大數(shù)據(jù)分析方法的應(yīng)用效果。從大數(shù)據(jù)分析系統(tǒng)架構(gòu)層面看,整個(gè)大數(shù)據(jù)分析具有9層架構(gòu)體系,尤其是其中的復(fù)雜結(jié)構(gòu)處理技術(shù)、平臺(tái)應(yīng)用標(biāo)準(zhǔn)規(guī)范和虛擬化接入技術(shù)以及其知識(shí)服務(wù)交易模型和大數(shù)據(jù)知識(shí)服務(wù)質(zhì)量評(píng)價(jià)體系等共同組成了大數(shù)據(jù)分析服務(wù)的關(guān)鍵技術(shù)應(yīng)用機(jī)制。在傳統(tǒng)數(shù)據(jù)分析過(guò)程中,其更多針對(duì)的是原始數(shù)據(jù)進(jìn)行抽樣、過(guò)濾,并結(jié)合數(shù)據(jù)樣本分析,從而探究其中存在的具體規(guī)律和特點(diǎn)。因此,其中最重要的特點(diǎn)在于通過(guò)使用復(fù)雜算法能夠從體系化的數(shù)據(jù)中尋找到更多有價(jià)值的數(shù)據(jù)信息。在當(dāng)前計(jì)算水平和存儲(chǔ)能力大大提升過(guò)程中,大數(shù)據(jù)分析所面臨的對(duì)象是整個(gè)動(dòng)態(tài)變化的數(shù)據(jù)群體,而不是客觀不變的數(shù)據(jù)樣本,因此其大數(shù)據(jù)分析的應(yīng)用重點(diǎn)從高效解決收集到的信息入手,只有提升數(shù)據(jù)運(yùn)算的準(zhǔn)確性,才能夠沒(méi)滿足大數(shù)據(jù)分析的應(yīng)用要求。
2.3 大數(shù)據(jù)分析過(guò)程中存在的問(wèn)題闡述
正是因?yàn)楫?dāng)前大數(shù)據(jù)時(shí)代的迅猛發(fā)展,整個(gè)大數(shù)據(jù)分析過(guò)程中存在著一系列問(wèn)題和不足,其大大制約了大數(shù)據(jù)分析的應(yīng)用效果,其問(wèn)題集中反映為:首先,想要實(shí)現(xiàn)精準(zhǔn)的大數(shù)據(jù)分析,需要解決其大數(shù)據(jù)存儲(chǔ)問(wèn)題,與以往相比,大數(shù)據(jù)時(shí)代,其整體數(shù)據(jù)存儲(chǔ)遠(yuǎn)遠(yuǎn)超過(guò)了傳統(tǒng)數(shù)據(jù)時(shí)代,而想要實(shí)現(xiàn)其數(shù)據(jù)分析目的,就必須完善數(shù)據(jù)存儲(chǔ)。而目前在大數(shù)據(jù)時(shí)代,整個(gè)數(shù)據(jù)存儲(chǔ)并不是靜態(tài)的,而是動(dòng)態(tài)發(fā)展的,因此只有探索完善適應(yīng)大數(shù)據(jù)存儲(chǔ)的具體機(jī)制,才能實(shí)現(xiàn)其最終目的。其次,大數(shù)據(jù)質(zhì)量不高,分析利用難度大。因此,需要探究增強(qiáng)數(shù)據(jù)可用性的方法。此外,大數(shù)據(jù)分析的核心在與數(shù)據(jù)建模。但是當(dāng)前由于建模水平較差,暫時(shí)很難結(jié)合大數(shù)據(jù)時(shí)代特征,完善建模應(yīng)用。最后,缺乏專(zhuān)業(yè)的大數(shù)據(jù)分析工具。在傳統(tǒng)數(shù)據(jù)分析過(guò)程中,經(jīng)常使用SPSS等軟件進(jìn)行數(shù)據(jù)分析,但是在大數(shù)據(jù)時(shí)代,缺乏能夠完善有效的數(shù)據(jù)分析工具。因此,結(jié)合大數(shù)據(jù)時(shí)代特征,構(gòu)建大數(shù)據(jù)分析平臺(tái),對(duì)于整個(gè)大數(shù)據(jù)時(shí)代應(yīng)用發(fā)展來(lái)說(shuō),極為必要。
3 構(gòu)建研發(fā)大數(shù)據(jù)分析平臺(tái)的具體策略
在大數(shù)據(jù)分析過(guò)程中,最需要探究的就是其分析方法。分析方法的好壞直接關(guān)系到大數(shù)據(jù)分析應(yīng)用的具體結(jié)果是否合理有效,同時(shí)也關(guān)系到其數(shù)據(jù)分析結(jié)果是否切實(shí)有用。而不同類(lèi)型的大數(shù)據(jù)則需要截然不同的分析方法。而在構(gòu)建大數(shù)據(jù)分析平臺(tái)過(guò)程中,需要從以下方面入手:
首先,要結(jié)合大數(shù)據(jù)分析應(yīng)用的具體要求,完善數(shù)據(jù)存儲(chǔ)技術(shù)。當(dāng)前增速驚人的大數(shù)據(jù)決定了我們想要實(shí)現(xiàn)大數(shù)據(jù)分析目的,就必須探索完善的數(shù)據(jù)存儲(chǔ)方式。通過(guò)應(yīng)用云存儲(chǔ)技術(shù),能夠確保其存儲(chǔ)容量以及數(shù)據(jù)整體的可用性和安全性等等,從而解決大數(shù)據(jù)分析平臺(tái)的數(shù)據(jù)存儲(chǔ)問(wèn)題。而通過(guò)提升大數(shù)據(jù)分析存儲(chǔ)技術(shù),必然也能夠有效提升其具體應(yīng)用技術(shù)。同時(shí)優(yōu)化數(shù)據(jù)存儲(chǔ),能夠有效提升大數(shù)據(jù)的應(yīng)用效果,實(shí)現(xiàn)大數(shù)據(jù)分析的良好效果。
其次,大數(shù)據(jù)分析是大數(shù)據(jù)應(yīng)用的核心,而實(shí)施大數(shù)據(jù)分析模式則需要針對(duì)當(dāng)前類(lèi)型多樣、迅速增長(zhǎng)的信息數(shù)據(jù)進(jìn)行分析,并且通過(guò)合理分析,從龐大的數(shù)據(jù)體系中尋找到有價(jià)值的信息內(nèi)涵,進(jìn)而為整個(gè)決策活動(dòng)提供相關(guān)依據(jù)的模式。在大數(shù)據(jù)分析過(guò)程中,數(shù)據(jù)庫(kù)、知識(shí)庫(kù)和模擬庫(kù)是整個(gè)數(shù)據(jù)分析模型構(gòu)建的主要要素,通過(guò)在構(gòu)建現(xiàn)有知識(shí)庫(kù)和數(shù)據(jù)庫(kù)模型基礎(chǔ)上,進(jìn)行數(shù)據(jù)分析,其得到相應(yīng)結(jié)果,一方面優(yōu)化模型構(gòu)造,另一方面也實(shí)現(xiàn)對(duì)數(shù)據(jù)的具體應(yīng)用。通過(guò)優(yōu)化數(shù)據(jù)模型應(yīng)用,能夠有效提升大數(shù)據(jù)分析能力和應(yīng)用實(shí)效。
最后,大數(shù)據(jù)分析系統(tǒng)作為當(dāng)前數(shù)據(jù)平臺(tái)應(yīng)用的核心,其主要應(yīng)用功能在于為數(shù)據(jù)挖掘應(yīng)用提供完善基礎(chǔ),同時(shí)使用分布式存儲(chǔ)法和并行計(jì)算體系,通過(guò)使用多重分布計(jì)算,從而實(shí)現(xiàn)對(duì)各類(lèi)信息資源進(jìn)行有效計(jì)算和分析,通過(guò)提供關(guān)聯(lián)、分類(lèi)、預(yù)算等一系列方法,結(jié)合各種數(shù)據(jù)挖掘分析機(jī)制的應(yīng)用,從而實(shí)現(xiàn)整個(gè)大數(shù)據(jù)平臺(tái)價(jià)值效用的體系化發(fā)揮。
4 結(jié)語(yǔ)
在當(dāng)前互聯(lián)網(wǎng)技術(shù)對(duì)各行各業(yè)發(fā)展的具體影響推動(dòng)下,通過(guò)使用大數(shù)據(jù)技術(shù),能夠?yàn)楦餍袠I(yè)發(fā)展奠定重要基礎(chǔ),尤其是大數(shù)據(jù)分析的科學(xué)性,能夠?yàn)槠髽I(yè)發(fā)展提供重要決策依據(jù)。而對(duì)各企業(yè)來(lái)說(shuō),尋找大數(shù)據(jù)應(yīng)用與企業(yè)自身經(jīng)營(yíng)的結(jié)合點(diǎn),則能夠從根本上提升大數(shù)據(jù)應(yīng)用效率。而想要構(gòu)建符合實(shí)際經(jīng)營(yíng)需要的大數(shù)據(jù)分析平臺(tái),就必須從大數(shù)據(jù)時(shí)代特征分析入手,通過(guò)具體了解和體系化融入,從而實(shí)現(xiàn)大數(shù)據(jù)分析平臺(tái)的具體研發(fā)。而構(gòu)建大數(shù)據(jù)分析平臺(tái)將從根本上發(fā)揮大數(shù)據(jù)技術(shù)優(yōu)勢(shì)。
參考文獻(xiàn):
[1] 馬新莉.面向服務(wù)的大數(shù)據(jù)分析平臺(tái)解決方案[J].科技創(chuàng)業(yè),2013(10):72-74.
[2] 韓晶晶.大數(shù)據(jù)時(shí)代下數(shù)據(jù)分析理念的辨析[J].管理信息,2014(5):33-35.
篇2
關(guān)鍵詞:大數(shù)據(jù);統(tǒng)計(jì)學(xué);教學(xué)改革
中圖分類(lèi)號(hào):C829.29 文獻(xiàn)識(shí)別碼:A 文章編號(hào):1001-828X(2015)024-000-01
一、引言
最早提出“大數(shù)據(jù)”時(shí)代到來(lái)的是全球知名咨詢公司麥肯錫,現(xiàn)在的社會(huì)是一個(gè)高速發(fā)展的社會(huì),科技發(fā)達(dá),信息流通,人們之間的交流越來(lái)越密切,生活也越來(lái)越方便,大數(shù)據(jù)就是這個(gè)高科技時(shí)代的產(chǎn)物。大數(shù)據(jù)具有以下的鮮明特點(diǎn):第一個(gè)特征是數(shù)據(jù)量大。第二個(gè)特征是數(shù)據(jù)類(lèi)型繁多,多類(lèi)型的數(shù)據(jù)對(duì)數(shù)據(jù)的處理能力提出了更高的要求。第三個(gè)特征是數(shù)據(jù)價(jià)值密度相對(duì)較低,如何通過(guò)強(qiáng)大的機(jī)器算法更迅速地完成數(shù)據(jù)的價(jià)值“提純”,是大數(shù)據(jù)時(shí)代亟待解決的難題。第四個(gè)特征是處理速度快,時(shí)效性要求高,這是大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)挖掘最顯著的特征。
統(tǒng)計(jì)學(xué)專(zhuān)業(yè)是與數(shù)據(jù)分析處理聯(lián)系最為緊密的學(xué)科之一。大數(shù)據(jù)時(shí)代的到來(lái)不僅為統(tǒng)計(jì)學(xué)專(zhuān)業(yè)的發(fā)展帶來(lái)的前所未有的機(jī)遇,同時(shí)也帶來(lái)了巨大挑戰(zhàn)。傳統(tǒng)的統(tǒng)計(jì)學(xué)專(zhuān)業(yè)已不再適應(yīng)大數(shù)據(jù)時(shí)代的信息爆發(fā)式增長(zhǎng)的要求,這就要求我們應(yīng)該對(duì)統(tǒng)計(jì)學(xué)專(zhuān)業(yè)進(jìn)行重新定位,并在此基礎(chǔ)上調(diào)整相關(guān)課程,改革傳統(tǒng)的教學(xué)手段以及完善教學(xué)評(píng)價(jià)體系,以適應(yīng)大數(shù)據(jù)時(shí)代的到來(lái)。
二、統(tǒng)計(jì)學(xué)專(zhuān)業(yè)改革的建議
(一)人才培養(yǎng)目標(biāo)的重新定位
如果說(shuō)以往的統(tǒng)計(jì)學(xué)專(zhuān)業(yè)是以培養(yǎng)簡(jiǎn)單的“應(yīng)用型”人才為目標(biāo),那么隨著大數(shù)據(jù)時(shí)代的到來(lái),社會(huì)不僅僅需要會(huì)應(yīng)用基礎(chǔ)統(tǒng)計(jì)知識(shí)處理相關(guān)領(lǐng)域的問(wèn)題的單一的應(yīng)用型人才,而是對(duì)人才提出了更高的要求:大數(shù)據(jù)時(shí)代下的統(tǒng)計(jì)學(xué)專(zhuān)業(yè)的人才除了應(yīng)該具備基礎(chǔ)的數(shù)據(jù)收集,處理和分析的能力之外,還應(yīng)該了解相關(guān)應(yīng)用領(lǐng)域的背景知識(shí),而且應(yīng)具備很強(qiáng)的自我學(xué)習(xí)能力,以適應(yīng)大數(shù)據(jù)時(shí)代數(shù)據(jù)量大,總類(lèi)繁多,時(shí)效性高等發(fā)展特點(diǎn)。因此,統(tǒng)計(jì)學(xué)人才培養(yǎng)目標(biāo)應(yīng)該重新作出調(diào)整,應(yīng)該以培養(yǎng)全新的“復(fù)合型”統(tǒng)計(jì)人才為新的目標(biāo)。
(二)課程設(shè)置的調(diào)整
隨著人才培養(yǎng)目標(biāo)的重新定位,隨之而來(lái)的就是應(yīng)該對(duì)不再適應(yīng)時(shí)展要求的課程進(jìn)行必要的調(diào)整。
首先,大數(shù)據(jù)的分析和處理與以往的經(jīng)典分析方法有很大不同,以往的統(tǒng)計(jì)分析方法主要是建立在抽樣基礎(chǔ)之上,而大數(shù)據(jù)時(shí)代信息處理迅速,信息獲得途徑廣泛,而且信息價(jià)值密度低,這就要求數(shù)據(jù)處理時(shí),可以以全體作為樣本,而不是進(jìn)行抽樣;分析時(shí)必須考慮所有數(shù)據(jù)而不是剔除所謂的異常數(shù)據(jù)。因此,以往的經(jīng)典統(tǒng)計(jì)分析方法已不再適應(yīng)大數(shù)據(jù)的處理和分析,必須適當(dāng)?shù)恼{(diào)整經(jīng)典分析方法的課程設(shè)置,增加新的適用于大數(shù)據(jù)分析的課程。
其次,隨著數(shù)據(jù)量的爆發(fā)式增長(zhǎng),所有的統(tǒng)計(jì)工作對(duì)計(jì)算機(jī)的依賴程度越來(lái)越高,這就要求統(tǒng)計(jì)學(xué)專(zhuān)業(yè)的學(xué)生不僅掌握統(tǒng)計(jì)學(xué)專(zhuān)業(yè)的基礎(chǔ)知識(shí),同時(shí)應(yīng)該熟練掌握計(jì)算機(jī)專(zhuān)業(yè)知識(shí)相關(guān)知識(shí),因此,在課程安排時(shí),應(yīng)注意計(jì)算機(jī)相關(guān)課程的適當(dāng)增加。
基于上述原因,可以考慮增加如下課程:機(jī)器學(xué)習(xí),模擬算法,數(shù)據(jù)挖掘,R語(yǔ)言軟件分析等課程,同時(shí)適當(dāng)降低傳統(tǒng)分析方法課程的學(xué)時(shí)比重。此外,為了使學(xué)生能夠?qū)ο嚓P(guān)應(yīng)用領(lǐng)域的背景知識(shí)有所了解,可適當(dāng)增設(shè)與應(yīng)用領(lǐng)域相關(guān)的通識(shí)課程。
(三)教學(xué)模式與手段的創(chuàng)新
以往的教學(xué)模式,通常是以課堂教學(xué),掌握書(shū)本經(jīng)典理論為主。雖然,傳統(tǒng)教學(xué)手段有著學(xué)生理論基礎(chǔ)扎實(shí)等諸多優(yōu)點(diǎn),但是同時(shí)也存才學(xué)生過(guò)于偏重理論知識(shí)的掌握,動(dòng)手能力不足,理論與實(shí)踐脫節(jié)等缺點(diǎn)。隨著社會(huì)的發(fā)展,尤其統(tǒng)計(jì)學(xué)專(zhuān)業(yè)自身具有鮮明的應(yīng)用專(zhuān)業(yè)特點(diǎn)。只采用傳統(tǒng)的教學(xué)模式和手段顯然不再適合大數(shù)據(jù)時(shí)代的需要;同時(shí),隨著大數(shù)據(jù)時(shí)代的到來(lái),多媒體手段日益豐富多彩,為傳統(tǒng)教學(xué)的創(chuàng)新提供了必要的支持。因此,為了適應(yīng)大數(shù)據(jù)時(shí)代人才的要求,必須改革傳統(tǒng)的教學(xué)手段和模式,在傳統(tǒng)教學(xué)基礎(chǔ)上,加大實(shí)驗(yàn)教學(xué)的比重,在傳統(tǒng)教學(xué)外,增加社會(huì)實(shí)踐環(huán)節(jié),引入微課慕課,翻轉(zhuǎn)課堂等全新教學(xué)模式,以提高學(xué)生的學(xué)習(xí)興趣,鍛煉學(xué)生理論應(yīng)用于實(shí)踐的能力,從而為以后使用大數(shù)據(jù)時(shí)代的工作打下堅(jiān)實(shí)的基礎(chǔ)。
(四)教學(xué)評(píng)價(jià)體系的完善
傳統(tǒng)的教學(xué)評(píng)價(jià)體系,通常是采用書(shū)面考核的方式對(duì)學(xué)生的學(xué)習(xí)進(jìn)行評(píng)價(jià),隨著時(shí)代的發(fā)著,單純的筆試評(píng)價(jià)不足以衡量學(xué)生的全面能力,最后導(dǎo)致出現(xiàn)高分低能的情況的出現(xiàn)。
為了適應(yīng)大數(shù)據(jù)時(shí)代對(duì)人才多方面能力的需求,必須對(duì)傳統(tǒng)的考核評(píng)價(jià)體系做出適當(dāng)?shù)恼{(diào)整,以評(píng)價(jià)學(xué)生的多方面能力,尤其是動(dòng)手能力,學(xué)習(xí)能力和應(yīng)用相關(guān)理論處理實(shí)際問(wèn)題的能力。具體可以采用多種考核方法相結(jié)合的方式。如:增加平時(shí)的考核力度,增加實(shí)踐項(xiàng)目的考核,通過(guò)布置適當(dāng)?shù)捻?xiàng)目論文,采用答辯的形式,以鍛煉學(xué)生適應(yīng)以后工作,獨(dú)立分析解決問(wèn)題的能力。
此外,傳統(tǒng)教學(xué)評(píng)價(jià)體系通常是單方面的,只有對(duì)學(xué)生成績(jī)的評(píng)價(jià),為了適應(yīng)大數(shù)據(jù)時(shí)代的到來(lái),全面提高教學(xué)質(zhì)量,可采取雙向教學(xué)評(píng)價(jià)體系,如:增加學(xué)生對(duì)教學(xué)環(huán)節(jié)的評(píng)價(jià)體系。以及教師間同行間的評(píng)價(jià)體系等。
篇3
“用手機(jī)上網(wǎng),搜索簡(jiǎn)單的四個(gè)漢字,可能就需要消耗60個(gè)15瓦燈泡的能量。數(shù)據(jù)的產(chǎn)生是需要用電的。在云時(shí)代,一個(gè)數(shù)據(jù)中心所要耗費(fèi)的能量是驚人的。”這是記者在在日前召開(kāi)的2013施耐德電氣云計(jì)算數(shù)據(jù)中心創(chuàng)新峰會(huì)上聽(tīng)到的一個(gè)觀點(diǎn),由此產(chǎn)生的一個(gè)問(wèn)題擺在我們面前:云時(shí)代數(shù)據(jù)中心應(yīng)該如何進(jìn)行能效管理?
能量的邏輯
施耐德電氣全球高級(jí)副總裁、APC大中華區(qū)總裁黃陳宏指出:“我們正處在一個(gè)‘大數(shù)據(jù)’引領(lǐng)的智慧科技時(shí)代?!焖倩?、‘大量化’和‘多樣化’作為‘大數(shù)據(jù)’的顯著特征,從部署速度的實(shí)時(shí)性,部署量級(jí)的規(guī)?;腿轿坏闹悄芑芾矸矫鎸?duì)數(shù)據(jù)中心提出了新的要求。在如今這個(gè)以“澤”(Zettabytes)為衡量數(shù)據(jù)量的時(shí)代,隨著數(shù)據(jù)量的爆發(fā)式增長(zhǎng),大型、超大型數(shù)據(jù)中心的可擴(kuò)展性也越來(lái)越受到關(guān)注?!?/p>
有數(shù)據(jù)顯示,在2013年,全球有50%的數(shù)據(jù)中心邁向云計(jì)算。云時(shí)代大數(shù)據(jù)的特征,也使得未來(lái)數(shù)據(jù)中心的規(guī)模過(guò)去不可同日而語(yǔ)。施耐德電氣IT事業(yè)部大中華區(qū)副總裁、數(shù)據(jù)中心業(yè)務(wù)總經(jīng)理曲穎告訴我們,過(guò)去一個(gè)銀行的數(shù)據(jù)中心約在500到幾千平方米左右,但是現(xiàn)在,“我們接觸到的越來(lái)越多的銀行,都在規(guī)劃建設(shè)5000到20000平方米的數(shù)據(jù)中心。據(jù)統(tǒng)計(jì),一個(gè)20000平方米的數(shù)據(jù)中心,一年需要耗費(fèi)20兆瓦的電量?,F(xiàn)在有越來(lái)越多的萬(wàn)米數(shù)據(jù)中心建設(shè)在中國(guó)的北方地區(qū),比如,這是一個(gè)應(yīng)時(shí)而生的變化?!?/p>
對(duì)于整個(gè)行業(yè)而言,如何在云時(shí)代數(shù)據(jù)中心的規(guī)劃設(shè)計(jì)、建設(shè)運(yùn)行中更多地節(jié)約能效,積極地面對(duì)能源的消耗和碳排放的控制,對(duì)于這些數(shù)據(jù)中心的所有者而言,既是一個(gè)未來(lái)發(fā)展的趨勢(shì),也會(huì)是要面對(duì)的一個(gè)巨大挑戰(zhàn)。
一個(gè)大型數(shù)據(jù)中心在規(guī)劃建設(shè)之始,居然也要“看風(fēng)水”。在北京建數(shù)據(jù)中心,東北風(fēng)和西北風(fēng)吹來(lái)的方向,決定了數(shù)據(jù)中心窗戶的朝向。因?yàn)橐獙?duì)一個(gè)數(shù)據(jù)中心進(jìn)行能效管理的話,首先就要盡可能地利用自然冷卻,以減少空調(diào)所帶來(lái)的耗電量。所謂“風(fēng)水”,就是在規(guī)劃數(shù)據(jù)中心之初,把是否能夠最大程度利用地理?xiàng)l件帶來(lái)的便利放在首要位置上考慮。
曲穎說(shuō):“在數(shù)據(jù)中心里,我們不講節(jié)能,而講能效。因?yàn)槟芰渴怯羞壿嫷?,?dāng)我們把能源的邏輯理順,能源效率得到提高后,不僅達(dá)到了節(jié)能的目的,還使數(shù)據(jù)中心變得更可靠、更優(yōu)化了?!?/p>
數(shù)據(jù)中心基因的作用
大數(shù)據(jù)時(shí)代,數(shù)據(jù)庫(kù)的內(nèi)容不僅海量,而且結(jié)構(gòu)也發(fā)生了極大變化。大量非結(jié)構(gòu)化數(shù)據(jù)的涌入,不僅對(duì)數(shù)據(jù)中心基礎(chǔ)設(shè)施帶來(lái)壓力,也使數(shù)據(jù)中心管理平臺(tái)從“設(shè)備級(jí)監(jiān)控”、“被動(dòng)級(jí)管理”、“主動(dòng)級(jí)管理”、“自動(dòng)化管理”逐步向“智能化管理”邁進(jìn)。同時(shí),數(shù)據(jù)中心的規(guī)模也在不斷地?cái)U(kuò)大,可能是幾千平米。但是現(xiàn)在,越來(lái)越多的數(shù)據(jù)中心已經(jīng)突破了一萬(wàn),甚至幾萬(wàn)平方米。這在能效管理與建設(shè)規(guī)劃方面都提出了更高的要求。
黃陳宏進(jìn)一步提出數(shù)據(jù)中心的“基因”一說(shuō),他認(rèn)為數(shù)據(jù)中心擁有業(yè)務(wù)基因和技術(shù)基因,“要讓我們的數(shù)據(jù)中心能夠跟上云時(shí)代的發(fā)展,我們必需依靠數(shù)據(jù)中心的‘基因’?!?/p>
國(guó)內(nèi)的通信運(yùn)營(yíng)商在全國(guó)有幾萬(wàn),甚至幾十萬(wàn)個(gè)規(guī)模不一的基站,如果要把這些基站進(jìn)行智能化整合,應(yīng)該怎么做?
曲穎說(shuō):“這就要求我們對(duì)數(shù)據(jù)中心的‘基因’有著更深入的認(rèn)識(shí)。如果將企業(yè)、或是一個(gè)智能機(jī)構(gòu)比作成是一個(gè)生命體,那么它的特點(diǎn)由其基因來(lái)決定。不同的基因有不同的特征使得數(shù)據(jù)中心有著不同的特質(zhì)。舉個(gè)例子,如何滿足客戶在兩周之內(nèi)要完成移入一萬(wàn)片刀片服務(wù)器的要求,這就需要你能夠掌握數(shù)據(jù)中心的基因密碼,然后在此基礎(chǔ)上實(shí)現(xiàn)快速重組。通信企業(yè)在并購(gòu)后,存在不同組織結(jié)構(gòu)下的IT設(shè)施如何進(jìn)行更有效整合的問(wèn)題。這對(duì)于數(shù)據(jù)中心的建設(shè)與運(yùn)行,也是一個(gè)很大的課題。這個(gè)時(shí)候,只有充分了解掌握了這些IT設(shè)施的“基因”,并進(jìn)行重組,才有可能達(dá)成目的,組合成一個(gè)全新模式。”
事實(shí)上,在數(shù)據(jù)中心的規(guī)劃、建設(shè)過(guò)程中,也無(wú)時(shí)不刻需要考慮到“基因”問(wèn)題。在能效管理環(huán)節(jié),“基因”更是關(guān)鍵點(diǎn)。據(jù)了解,在北京上地的IBM數(shù)據(jù)中心項(xiàng)目中,施耐德通過(guò)重組基因的方式,復(fù)制優(yōu)質(zhì)基因,幫IBM實(shí)現(xiàn)了PUE從1.77下降到1.5以下,每年節(jié)約運(yùn)行成本約100萬(wàn)人民幣;位于北京經(jīng)濟(jì)技術(shù)開(kāi)發(fā)區(qū)(BDA)的Telehouse北京數(shù)據(jù)中心,施耐德電氣可幫助其實(shí)現(xiàn)高達(dá)25%的節(jié)能目標(biāo),并達(dá)到Telehouse在中國(guó)大陸地區(qū)的最低PUE值,實(shí)現(xiàn)最高能效水平。
“經(jīng)過(guò)這樣優(yōu)化之后的數(shù)據(jù)中心,才有可能是最優(yōu)質(zhì)的、最賺錢(qián)的數(shù)據(jù)中心?!鼻f說(shuō)。
軟件定義數(shù)據(jù)中心
在云時(shí)代,對(duì)數(shù)據(jù)中心的設(shè)計(jì)師建設(shè)、基礎(chǔ)設(shè)施的管理控制也有新要求,黃陳宏進(jìn)一步提出:“由軟件來(lái)定義數(shù)據(jù)中心會(huì)是將來(lái)的一個(gè)必然趨勢(shì)?!?/p>
篇4
隨著我國(guó)互聯(lián)網(wǎng)的發(fā)展,云計(jì)算、物聯(lián)網(wǎng)已成為耳熟能詳?shù)脑~匯;但是對(duì)大多數(shù)人只是聽(tīng)過(guò)這些詞匯但是卻不能理解他們的含義。大數(shù)據(jù)時(shí)代已成為一個(gè)不可阻擋的趨勢(shì),對(duì)于圖書(shū)館服務(wù)行業(yè)來(lái)說(shuō)是一種機(jī)遇也是一種挑戰(zhàn),圖書(shū)館行業(yè)的發(fā)展應(yīng)該主動(dòng)面對(duì)這一現(xiàn)狀,應(yīng)該主動(dòng)面對(duì)大數(shù)據(jù)時(shí)代所帶來(lái)的挑戰(zhàn),積極應(yīng)對(duì)。我們都知道現(xiàn)階段數(shù)據(jù)的發(fā)展以冪指數(shù)方程的趨勢(shì)發(fā)展,大數(shù)據(jù)時(shí)代將成為圖書(shū)館行業(yè)發(fā)展的核心,因?yàn)樗沃鴪D書(shū)館在新時(shí)期下的發(fā)展。但是面對(duì)這一大數(shù)字時(shí)代帶來(lái)挑戰(zhàn),應(yīng)如何積極的面對(duì),成為圖書(shū)館發(fā)展行業(yè)首要考慮的問(wèn)題。本文主要針對(duì)這一問(wèn)題進(jìn)行討論,望能夠找到有效的解決方案,促進(jìn)圖書(shū)館行業(yè)的發(fā)展。
1 什么是大數(shù)據(jù)時(shí)代
1.1 大數(shù)據(jù)時(shí)代的概念
對(duì)于很多人來(lái)說(shuō),大數(shù)據(jù)時(shí)代這一詞匯是很熟悉的,但是對(duì)于它的含義確是很陌生的。大數(shù)據(jù)時(shí)代其實(shí)很難用一個(gè)完整的定義,我們通??山忉尀椋捍髷?shù)據(jù)(Big data)通常用來(lái)形容一個(gè)公司創(chuàng)造的大量非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù),這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫(kù)用于分析時(shí)會(huì)花費(fèi)過(guò)多時(shí)間和金錢(qián)。大數(shù)據(jù)分析常和云計(jì)算聯(lián)系到一起,因?yàn)閷?shí)時(shí)的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來(lái)向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。從這大數(shù)據(jù)時(shí)代的解析我們能夠看到,大數(shù)據(jù)時(shí)代不是單單的一種技術(shù),但是各種信息的綜合體,是一個(gè)巨型的資料庫(kù)。
最早提出“大數(shù)據(jù)”這一詞匯的是一個(gè)全球知名咨詢公司麥肯錫,他表示到:數(shù)據(jù)已滲透到各個(gè)領(lǐng)域,成為促進(jìn)社會(huì)發(fā)展的重要因素。面對(duì)這樣的形式,人們加以合理的利用海量的數(shù)據(jù)資源,將會(huì)把世界的發(fā)展推向一個(gè)新紀(jì)元。
1.2 大數(shù)據(jù)時(shí)代的特點(diǎn)
我們由大數(shù)據(jù)的概念很容易的了解到,它是一個(gè)多種數(shù)據(jù)庫(kù)的聚合體。有些人就根據(jù)大數(shù)據(jù)的概念將其特點(diǎn)歸結(jié)為一下三點(diǎn):量大、多樣、實(shí)時(shí),有人直接將這三點(diǎn)簡(jiǎn)單的成為3V特征(三個(gè)特征的首字母都是V開(kāi)頭,簡(jiǎn)稱為3V)。但是我認(rèn)為大數(shù)據(jù)時(shí)代的特點(diǎn)除了這三點(diǎn)外還其他的,諸如數(shù)據(jù)價(jià)值密度高、處理數(shù)據(jù)快的特點(diǎn)。因此大數(shù)據(jù)時(shí)代特點(diǎn)我們可以總結(jié)為:①數(shù)據(jù)量大,也就是說(shuō)數(shù)據(jù)的體量大,對(duì)于體量的衡量我們已經(jīng)不能用傳統(tǒng)的衡量方式了。②種類(lèi)的多樣性,大數(shù)據(jù)庫(kù)的種類(lèi)包含眾多的行業(yè),多個(gè)領(lǐng)域,而且具有文本、圖像、影視等多種樣式,這一特點(diǎn)尤其適用于圖書(shū)館的發(fā)展;③更新速度快,也就是我們說(shuō)的實(shí)時(shí)性,大數(shù)據(jù)的更新每時(shí)每刻都在發(fā)生,保證了數(shù)據(jù)的實(shí)時(shí)性。④數(shù)據(jù)的價(jià)值密度高,涉及到傳輸、決策、感知、控制開(kāi)放式循環(huán)的大數(shù)據(jù),大量的不相關(guān)信息對(duì)未來(lái)發(fā)展模式和趨勢(shì)的可預(yù)測(cè)性分析起著至關(guān)重要的作用。⑤處理速度快,數(shù)據(jù)持續(xù)到達(dá),數(shù)據(jù)分析要求實(shí)時(shí)處理而非批量式分析。
2 大數(shù)據(jù)時(shí)代下圖書(shū)館面臨的機(jī)遇與挑戰(zhàn)
我們由大數(shù)據(jù)時(shí)代的特點(diǎn)可知,隨著大數(shù)據(jù)時(shí)代的發(fā)展,處理速度和更新速度使得其利用價(jià)值在不斷地上升,在大時(shí)代數(shù)據(jù)對(duì)圖書(shū)館行業(yè)的發(fā)展有著很大的影響。
2.1 大數(shù)據(jù)時(shí)代下圖書(shū)館面臨著挑戰(zhàn)
在新的時(shí)代下要求圖書(shū)館服務(wù)行業(yè)要對(duì)其圖書(shū)館內(nèi)部資料有一個(gè)充分的了解,而且這種了解要緊緊跟隨著圖書(shū)館內(nèi)部資料的更新不斷改變。傳統(tǒng)的圖書(shū)館服務(wù)行業(yè)的特點(diǎn)就是人工管理占很大一部分,數(shù)據(jù)更新速度差,管理效率低下,比較浪費(fèi)時(shí)間;由于人們對(duì)知識(shí)的渴望,圖書(shū)館的作用越來(lái)越大;圖書(shū)館場(chǎng)地的局限也是一個(gè)重要的問(wèn)題;大數(shù)據(jù)時(shí)代的高效性、實(shí)時(shí)性是傳統(tǒng)的圖書(shū)館服務(wù)行業(yè)所不能比擬的,如何在大數(shù)據(jù)時(shí)代下更好的發(fā)展圖書(shū)館服務(wù)行業(yè)成為一個(gè)重要的問(wèn)題。
2.2 大數(shù)據(jù)時(shí)代下圖書(shū)館面臨著機(jī)遇
其實(shí)在大數(shù)據(jù)時(shí)代下圖書(shū)館的發(fā)展,機(jī)遇與挑戰(zhàn)而言,機(jī)遇所占的比例不少于挑戰(zhàn)的比例。大數(shù)據(jù)時(shí)代下數(shù)據(jù)形式有多樣化、信息更新的實(shí)時(shí)性、快速的處理速度,大數(shù)據(jù)這些特點(diǎn)都將會(huì)促進(jìn)者圖書(shū)館服務(wù)行業(yè)的發(fā)展,未來(lái)會(huì)成為圖書(shū)館服務(wù)行業(yè)發(fā)展的核心部分。
3 圖書(shū)館行業(yè)應(yīng)該如何應(yīng)對(duì)大數(shù)據(jù)時(shí)代下的影響
面對(duì)大數(shù)據(jù)時(shí)代下的機(jī)遇與挑戰(zhàn),圖書(shū)館服務(wù)不能坐以待斃,應(yīng)該積極的面對(duì)挑戰(zhàn),勇于創(chuàng)先,實(shí)現(xiàn)機(jī)遇利用率的最大化。
3.1 創(chuàng)新圖書(shū)館管理方式,提高圖書(shū)館的智能化管理水平
傳統(tǒng)圖書(shū)館管理模式已不能適應(yīng)快速發(fā)展的社會(huì),對(duì)于圖書(shū)館的管理,我們應(yīng)該做到與時(shí)俱進(jìn)。創(chuàng)新圖書(shū)館的管理方式是適應(yīng)社會(huì)發(fā)展的必然趨勢(shì)。我們可以充分利用大數(shù)據(jù)時(shí)代量大、快速、實(shí)時(shí)的特點(diǎn),提高圖書(shū)館的智能化管理水平。數(shù)字化時(shí)代,文獻(xiàn)資源等進(jìn)行數(shù)字化、語(yǔ)義化處理是圖書(shū)館進(jìn)行數(shù)據(jù)處理的主要模式,在此基礎(chǔ)上借助網(wǎng)絡(luò)服務(wù),實(shí)現(xiàn)數(shù)據(jù)共享,從而最大程度滿足用戶需要。
大數(shù)據(jù)時(shí)代的到來(lái)可以快速的提升圖書(shū)館的服務(wù)水平,大數(shù)據(jù)可以以最快的速度更新圖書(shū)館的資源,并對(duì)資源進(jìn)行分類(lèi),讓人們根據(jù)自己的喜好可以快速的篩選出所需要的種類(lèi),節(jié)約借書(shū)人時(shí)間的同時(shí)也減少了圖書(shū)館行業(yè)的壓力。
3.2 高度關(guān)注圖書(shū)館用戶數(shù)據(jù)和信息
為了迎接大數(shù)據(jù)時(shí)代下挑戰(zhàn),要提升圖書(shū)館服務(wù)質(zhì)量;我們首先要注重的就是用戶的需求。我們都知道大數(shù)據(jù)內(nèi)的資料很多,但不一定都是客戶們需要的資源。因此我們要做到盡可能的滿足用戶們的需求。
做好用戶們的需求我們就要做好以下幾點(diǎn):①根據(jù)用戶們的網(wǎng)頁(yè)訪問(wèn)數(shù)量,統(tǒng)計(jì)、整理出哪些資源是比較受歡迎的,對(duì)其M行大量的收集。②了解用戶的愛(ài)好和價(jià)值取向,根據(jù)其不同的喜好可以向不同的人群進(jìn)行資料的推薦。
4 總結(jié)
在大數(shù)據(jù)時(shí)代下,雖然圖書(shū)館服務(wù)行業(yè)受到了很多的挑戰(zhàn),但是同時(shí)也遇到了很多的機(jī)遇,我們要相信,隨著圖書(shū)館服務(wù)行業(yè)的不斷發(fā)展和創(chuàng)新,一定能跟隨時(shí)代的潮流,為我們提供更優(yōu)質(zhì)的服務(wù)。
參考文獻(xiàn)
[1]韓翠峰.大數(shù)據(jù)時(shí)代圖書(shū)館的服務(wù)創(chuàng)新與發(fā)展[J].圖書(shū)館.2013(01)
篇5
關(guān)鍵詞: 數(shù)字音樂(lè);傳播模型;大數(shù)據(jù);云存儲(chǔ)
0 引言
大數(shù)據(jù)時(shí)代的來(lái)臨極大地改變了整個(gè)人類(lèi)社會(huì),為我們的生活帶來(lái)了全方位的革新,包括傳播技術(shù)和模式。作為對(duì)傳播技術(shù)高度依賴的音樂(lè)產(chǎn)業(yè),是率先深受大數(shù)據(jù)時(shí)代傳播技術(shù)革命影響的領(lǐng)域之一。
音樂(lè)不僅是藝術(shù)品,也是在個(gè)層次受眾中廣泛傳播和消費(fèi)的文化消費(fèi)品。因此,音樂(lè)作為一種特殊形式的商品,有著巨大的市場(chǎng)需求空間。在社會(huì)發(fā)展的的不同歷史時(shí)期,隨著技術(shù)的發(fā)展,音樂(lè)承載形式一直在進(jìn)化。事實(shí)上數(shù)字音樂(lè)并不是一個(gè)新興產(chǎn)物,其存在和發(fā)展已經(jīng)有幾十年了。但是,在大數(shù)據(jù)和云計(jì)算成為主流信息處理技術(shù)的新時(shí)代,數(shù)字音樂(lè)的傳播亟待新的傳播模型。
1 大數(shù)據(jù)的特征
大數(shù)據(jù)首先意味著數(shù)據(jù)量極為龐大。2011年5月麥肯錫全球研究中心將“大數(shù)據(jù)”定義為“數(shù)據(jù)的量超過(guò)典型數(shù)據(jù)庫(kù)軟件工具擷取、存儲(chǔ)、管理和分析能力的數(shù)據(jù)”。這個(gè)定義還不夠全面。更準(zhǔn)確的說(shuō),大數(shù)據(jù)意味著從各個(gè)方面全方位盡可能多的收集不同的變量,用以描述人、事、物以及現(xiàn)象的各種特征。面對(duì)不斷增長(zhǎng)的記錄這些變量的需要,擷取數(shù)據(jù)的數(shù)量也相應(yīng)的快速增長(zhǎng),因此數(shù)據(jù)庫(kù)容量越來(lái)越大,最終接近無(wú)限大。處理如此海量的數(shù)據(jù)需要新技術(shù)和模型進(jìn)行存儲(chǔ)、計(jì)算和傳輸,從而帶給我們很多意想不到的應(yīng)用。大數(shù)據(jù)的主要特征可概括為:①海量與數(shù)字化:所有的數(shù)據(jù)均以數(shù)字化的形式存在。(姚遠(yuǎn),2013)。②云存儲(chǔ):通俗地說(shuō),云存儲(chǔ)是指通過(guò)網(wǎng)絡(luò)技術(shù)將數(shù)據(jù)存放在遠(yuǎn)端虛擬空間中。③基于數(shù)據(jù)總體的計(jì)算:傳統(tǒng)統(tǒng)計(jì)學(xué)通常采用抽樣統(tǒng)計(jì)的方法。而在大數(shù)據(jù)時(shí)代,我們是通過(guò)分析與話題相關(guān)的全部已有數(shù)據(jù)來(lái)分析事物之間的聯(lián)系。④智能應(yīng)用:當(dāng)數(shù)據(jù)總量大到一定程度時(shí),隱藏在數(shù)據(jù)背后的事物的其他特征就會(huì)顯現(xiàn)出來(lái),就可以發(fā)現(xiàn)事物之間更多的聯(lián)系。這些發(fā)現(xiàn)可以衍生許多智能應(yīng)用。
2 數(shù)字音樂(lè)的數(shù)據(jù)化與云存儲(chǔ)
數(shù)字化并不意味著數(shù)據(jù)化。將一個(gè)對(duì)象數(shù)據(jù)化就是將其置身于量化形式,可以制成表格并加以分析。這與數(shù)字化大相徑庭,數(shù)字化僅僅是將相似信息進(jìn)行二進(jìn)制編碼處理供計(jì)算機(jī)處理。
從二十世紀(jì)九十年代起,人們就開(kāi)始用數(shù)字化的形式記錄和傳播音樂(lè)作品(馮毅,2008)。但在大數(shù)據(jù)時(shí)代,僅靠對(duì)音樂(lè)內(nèi)容的數(shù)字化處理方式遠(yuǎn)遠(yuǎn)不能滿足有效的傳播音樂(lè)需求,還需要更加便于管理和計(jì)算的傳播方式,即數(shù)據(jù)化。
采用知識(shí)本體論方法將音樂(lè)作品數(shù)據(jù)化不失為一種行之有效的方法。我們?cè)谥暗难芯恐幸呀?jīng)構(gòu)建了音樂(lè)領(lǐng)域知識(shí)本體,其中定義了5個(gè)子本體描述上級(jí)概念結(jié)構(gòu),分別是音樂(lè)事件、音樂(lè)作品、音樂(lè)人物、音樂(lè)地點(diǎn)、音樂(lè)技術(shù)。在這些子知識(shí)本體中,通過(guò)定義子類(lèi)的概念、特征以及各類(lèi)別和實(shí)例之間的關(guān)系,我們建立了一個(gè)完整的系統(tǒng)描述音樂(lè)的各項(xiàng)特征。(楊立,2011)
作為新型的網(wǎng)絡(luò)個(gè)人應(yīng)用,一些數(shù)據(jù)服務(wù)供應(yīng)商開(kāi)始提供音樂(lè)云服務(wù)。數(shù)據(jù)服務(wù)提供商提供設(shè)備和服務(wù),允許用戶建立個(gè)人音樂(lè)庫(kù),在設(shè)備間同步更新音樂(lè)和向臺(tái)式電腦、筆記本、平板、智能手機(jī)和其他的數(shù)碼播放器等傳遞音樂(lè)。
這些音樂(lè)云偏向于私有云,主要針對(duì)個(gè)人客戶。這種云存儲(chǔ)模式對(duì)于數(shù)字音樂(lè)傳播的有效性還遠(yuǎn)遠(yuǎn)不夠。我們需要一個(gè)更加開(kāi)放的平臺(tái)和機(jī)制,允許所有在傳播鏈上的參與者都能在版權(quán)法的保護(hù)下合法地分享他們的作品、產(chǎn)品和服務(wù)。
3 數(shù)字音樂(lè)傳播鏈上的參與者
這里所說(shuō)的參與者指的是在數(shù)字音樂(lè)傳播鏈涉及的所有的個(gè)人或組織。他們共同組成了如下傳播鏈:音樂(lè)制作者指音樂(lè)作品內(nèi)容最初的創(chuàng)作者,包括作曲家、歌詞作者和表演者。音樂(lè)要想突破時(shí)間和空間的限制進(jìn)行傳播,首先就需要將音樂(lè)記錄下來(lái)進(jìn)行處理,因此我們需要音樂(lè)內(nèi)容處理者,包括:錄音棚、演出機(jī)構(gòu)和數(shù)據(jù)處理商。數(shù)字音樂(lè)內(nèi)容供應(yīng)商擁有自己特殊的傳播渠道或者營(yíng)銷(xiāo)網(wǎng)絡(luò),通常和網(wǎng)絡(luò)運(yùn)營(yíng)商或云服務(wù)提供商關(guān)系密切。他們提供在線數(shù)字音樂(lè)交易平臺(tái),在數(shù)字音樂(lè)的傳播發(fā)揮著重要作用。此外,還需要云服務(wù)提供商提供包括存儲(chǔ)、搜索、上傳、分享,甚至是交易的公有或者私有數(shù)字音樂(lè)云服務(wù)。除此之外,還需要網(wǎng)絡(luò)運(yùn)營(yíng)商為傳播鏈上所有參與者提供網(wǎng)絡(luò)連接服務(wù)。數(shù)字音樂(lè)可預(yù)裝載諸如MP3播放器、手機(jī)等設(shè)備中捆綁式銷(xiāo)售,因此這些相關(guān)硬件生產(chǎn)商也與數(shù)字音樂(lè)傳播直接相關(guān)。傳播鏈的終端端是數(shù)字音樂(lè)消費(fèi)者,包括個(gè)人消費(fèi)者、公眾媒體和娛樂(lè)行業(yè)。
4 數(shù)字音樂(lè)傳播模型
數(shù)字音樂(lè)傳播涉及三個(gè)層次,分別是制作層、存儲(chǔ)層和交易服務(wù)層。如圖2所示。
①制作層:制作層描述數(shù)字音樂(lè)作品由最初創(chuàng)作到最終數(shù)據(jù)化的過(guò)程。②存儲(chǔ)層:為了更為便利和有效的傳播,數(shù)字音樂(lè)作品基本儲(chǔ)存在云端。經(jīng)過(guò)第一層次的數(shù)據(jù)化過(guò)程,數(shù)字音樂(lè)實(shí)現(xiàn)轉(zhuǎn)化,儲(chǔ)存在不同的云端中。③交易服務(wù)層,即為用戶服務(wù)層,數(shù)字音樂(lè)交易發(fā)生在該層次。該層次可為電子商務(wù)平臺(tái),在符合版權(quán)保護(hù)的前提下,允許混合電子商務(wù)模型B2C,C2C,B2B和O2O等。
5 結(jié)語(yǔ)
數(shù)字音樂(lè)作為一種特殊的信息產(chǎn)品,消費(fèi)十分廣泛。不同與實(shí)物產(chǎn)品和虛擬產(chǎn)品,數(shù)字音樂(lè)介于兩者之間。音樂(lè)創(chuàng)作過(guò)程是物理過(guò)程,但是最終制作和傳播可以徹底數(shù)字化。一個(gè)適合的傳播模型對(duì)整個(gè)產(chǎn)業(yè)的發(fā)展是大有裨益的,值得深入研究。限于篇幅,本文呈現(xiàn)的模型僅僅是一個(gè)框架,更多細(xì)節(jié)問(wèn)題,比如技術(shù)、運(yùn)作策略以及產(chǎn)業(yè)鏈等有待將進(jìn)一步深入研究。
參考文獻(xiàn):
[1]馮毅.音樂(lè)的革命:從電子音樂(lè)到數(shù)字音樂(lè)[J].藝術(shù)評(píng)論,2008,10:59,70-74.
篇6
關(guān)鍵詞:大數(shù)據(jù)時(shí)代;大學(xué)英語(yǔ)聽(tīng)力教學(xué);教學(xué)改革
一、引言
當(dāng)前,在全球信息化快速發(fā)展的大背景下,信息技術(shù)對(duì)教育的革命性影響日趨顯著,教育大數(shù)據(jù)的研究和應(yīng)用已經(jīng)引起我國(guó)政府的高度重視。國(guó)務(wù)院2015年8月印發(fā)《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》(國(guó)發(fā)〔2015〕50號(hào)),指出:“探索發(fā)揮大數(shù)據(jù)對(duì)變革教育方式、促進(jìn)教育公平、提升教育質(zhì)量的支撐作用。”[1]教育部2016年6月印發(fā)《教育信息化“十三五”規(guī)劃》(教技[2016]2號(hào)),強(qiáng)調(diào):“積極發(fā)揮教育大數(shù)據(jù)在教育管理平臺(tái)建設(shè)和學(xué)習(xí)空間應(yīng)用等方面的重要作用。”[2]這表明推動(dòng)大數(shù)據(jù)在教育中的改革,已經(jīng)納入國(guó)家的發(fā)展戰(zhàn)略,對(duì)大學(xué)英語(yǔ)聽(tīng)力教學(xué)的改革具有重大的影響。
二、大數(shù)據(jù)時(shí)代的背景
“大數(shù)據(jù)時(shí)代”概念由一家咨詢公司麥肯錫提出,“大數(shù)據(jù)”主要體現(xiàn)在數(shù)據(jù)已經(jīng)滲透到當(dāng)今每一個(gè)業(yè)務(wù),每一個(gè)行業(yè),數(shù)據(jù)已經(jīng)成為一個(gè)行業(yè)甚至一個(gè)國(guó)家的重要因素。隨著互聯(lián)網(wǎng)和信息產(chǎn)業(yè)的不斷發(fā)展進(jìn)步,海量的數(shù)據(jù)被挖掘和運(yùn)用,它們構(gòu)成了“大數(shù)據(jù)時(shí)代”的要素,推動(dòng)著人們的生活節(jié)奏和思維方式。大數(shù)據(jù)時(shí)代的特征可以用五個(gè)V來(lái)概括:更大的數(shù)據(jù)容量(Volume)、種類(lèi)的多樣性(Variety)、更快的生成速度(Velocity)、更加分散的價(jià)值密度(Value)、可視化的呈現(xiàn)(Visualization)。[3]這些特征將給我們的社會(huì)生活及思維方式帶來(lái)重大的轉(zhuǎn)變,主要體現(xiàn)在三個(gè)方面:一是整體大于離散。海量數(shù)據(jù)總體的特性大于離散的特性;第二,混雜大于精確。大數(shù)據(jù)時(shí)代數(shù)據(jù)繁多,不能一味追求精確,要接受混雜,掌握事物總體的發(fā)展趨勢(shì);最后的特性是,關(guān)聯(lián)大于因果。在大數(shù)據(jù)時(shí)代,事物之間的因果關(guān)系已不能再成為我們關(guān)注的唯一,而事物之間的相關(guān)關(guān)系才是我們最需要注重的方面。[4]在大數(shù)據(jù)時(shí)代海量數(shù)據(jù)流通且容易獲取的背景下,大學(xué)英語(yǔ)聽(tīng)力教學(xué)有了一個(gè)新的平臺(tái),如何正確地使用這個(gè)大平臺(tái),促進(jìn)教學(xué)改革?本文將從大數(shù)據(jù)的本質(zhì)和特點(diǎn),結(jié)合大學(xué)英語(yǔ)聽(tīng)力教學(xué)的現(xiàn)狀和不足,研究在這大數(shù)據(jù)時(shí)代,大學(xué)英語(yǔ)聽(tīng)力教學(xué)應(yīng)該做出怎樣的變革。
三、大數(shù)據(jù)時(shí)代對(duì)傳統(tǒng)大學(xué)英語(yǔ)聽(tīng)力教學(xué)的沖擊
(一)大學(xué)英語(yǔ)聽(tīng)力教學(xué)的現(xiàn)狀
傳統(tǒng)的聽(tīng)力教學(xué)模式是訓(xùn)練學(xué)生對(duì)一段英語(yǔ)反復(fù)、機(jī)械地訓(xùn)練,這種訓(xùn)練容易造成課程乏味,學(xué)習(xí)效率極低的情況。許多教師意識(shí)到這種不足,開(kāi)始嘗試新的以學(xué)生為主體的教學(xué)模式。但這種模式對(duì)自制力差,不自信的學(xué)生存在不確定性,也不能保證每位學(xué)生都能在“聽(tīng)”和“說(shuō)”這兩項(xiàng)技能上得到有效的訓(xùn)練。同時(shí)這種模式也無(wú)法提供給學(xué)生課本以外的聽(tīng)力資源和實(shí)踐機(jī)會(huì),和隨時(shí)對(duì)學(xué)生的學(xué)習(xí)特征、學(xué)習(xí)時(shí)長(zhǎng)及頻率、交互行為和作業(yè)情況等做出數(shù)據(jù)記錄、分析和反饋。而這些難以滿足的方面,正需要大數(shù)據(jù)時(shí)代的優(yōu)越性來(lái)補(bǔ)充。
(二)大學(xué)英語(yǔ)聽(tīng)力教學(xué)資源的立體多元化轉(zhuǎn)變
傳統(tǒng)的大學(xué)英語(yǔ)聽(tīng)力教學(xué),多傾向機(jī)械訓(xùn)練,不注重聽(tīng)力資源的輸入多樣化。這種教學(xué)方式往往是事倍功半,學(xué)生的學(xué)習(xí)主動(dòng)性和聽(tīng)力理解應(yīng)用能力未得到顯著提高。大數(shù)據(jù)時(shí)代為英語(yǔ)聽(tīng)力教學(xué)提供了豐富的學(xué)習(xí)資源,拓展學(xué)生們的視野,提高學(xué)生們對(duì)聽(tīng)英語(yǔ)的積極性和對(duì)英語(yǔ)的興趣。[5]擁有一個(gè)海量數(shù)據(jù)的大數(shù)據(jù)庫(kù)能把數(shù)據(jù)、影音、圖像等資源巧妙地與英語(yǔ)聽(tīng)力教學(xué)融合在一起,提高學(xué)生聽(tīng)英語(yǔ)的積極性。大數(shù)據(jù)時(shí)代,大學(xué)英語(yǔ)聽(tīng)力教學(xué)資源在不斷豐富,從只能從書(shū)本課堂學(xué)習(xí)固定資源到收聽(tīng)國(guó)外紀(jì)錄片,人物訪談等英語(yǔ)國(guó)家本土聽(tīng)力視頻。大數(shù)據(jù)把英語(yǔ)聽(tīng)力教學(xué)與社會(huì)相結(jié)合,豐富拓展了學(xué)習(xí)手段和聽(tīng)力材料。大數(shù)據(jù)時(shí)代里豐富有效的學(xué)習(xí)資源極大地沖擊變革著傳統(tǒng)英語(yǔ)聽(tīng)力教學(xué)。
(三)慕課、微課、翻轉(zhuǎn)課堂對(duì)傳統(tǒng)課堂的沖擊
MOOC、微課、翻轉(zhuǎn)課堂是大數(shù)據(jù)變革教育的體現(xiàn),這些教學(xué)平臺(tái)利用海量數(shù)據(jù)將學(xué)生集合于一個(gè)課堂,其中師生間的互動(dòng),學(xué)生間的互動(dòng),學(xué)生與機(jī)器人的互動(dòng)能更加頻繁、有效和高效。大數(shù)據(jù)時(shí)代高效技術(shù)手段支持下的多種教學(xué)平臺(tái)已經(jīng)有明顯的成效,且在大數(shù)據(jù)的教學(xué)平臺(tái)下,學(xué)生不但是這海量數(shù)據(jù)的使用者,還是這些數(shù)據(jù)的提供者。[6]筆者2017年對(duì)本校藝術(shù)加林學(xué)學(xué)院、公管學(xué)院、食品學(xué)院和人文學(xué)院的大一和大二學(xué)生共900人,分別進(jìn)行了兩項(xiàng)問(wèn)卷調(diào)查:1.教學(xué)者(你老師)是否經(jīng)常還是非⁄很少使用大數(shù)據(jù)支持多媒體教學(xué)?2.學(xué)習(xí)者(你自己)對(duì)大數(shù)據(jù)支持多媒體教學(xué)十分積極還是無(wú)所謂?共獲得852份有效數(shù)據(jù)。其中分析到兩組數(shù)據(jù):教學(xué)者使用兩種教學(xué)模式的人數(shù)比例;以及英語(yǔ)學(xué)習(xí)者對(duì)兩種教學(xué)模式的學(xué)習(xí)積極性比較,如表一和表二所示。表一:共852份有效數(shù)據(jù)中,反映教學(xué)者經(jīng)常使用大數(shù)據(jù)支持多媒體教學(xué)的學(xué)習(xí)者為604人,約占70.90%,反映教學(xué)者非或很少使用大數(shù)據(jù)支持多媒體教學(xué)的學(xué)習(xí)者為248人,約占29.10%。問(wèn)卷表明:當(dāng)前英語(yǔ)教學(xué)中,非或較少使用大數(shù)據(jù)支持多媒體教學(xué)的教學(xué)者還占有一定比例。表二:學(xué)習(xí)者在兩種教學(xué)模式下的積極性明顯不同。針對(duì)經(jīng)常使用大數(shù)據(jù)支持多媒體教學(xué),十分積極的學(xué)習(xí)態(tài)度人數(shù)明顯高于無(wú)所謂的學(xué)習(xí)態(tài)度人數(shù);針對(duì)非或很少使用大數(shù)據(jù)支持多媒體教學(xué),除去不接受的學(xué)習(xí)者750人,102名學(xué)習(xí)者中十分積極的學(xué)習(xí)態(tài)度人數(shù)明顯低于無(wú)所謂的學(xué)習(xí)態(tài)度人數(shù)。可以看出:學(xué)生們對(duì)于更新鮮、更具活力的大數(shù)據(jù)支持教學(xué)模式具有更大的興趣與學(xué)習(xí)動(dòng)力。以上數(shù)據(jù)表明:大數(shù)據(jù)支持下,融合數(shù)據(jù)、影音圖像等資源的線上立體化,多媒體教學(xué)無(wú)疑能為老師和學(xué)生帶來(lái)更多的幫助與新鮮感。因此,推動(dòng)大數(shù)據(jù)支持下的先進(jìn)有活力的教學(xué)方式是大學(xué)英語(yǔ)教學(xué)改革所要注重的部分。
(四)英語(yǔ)聽(tīng)力教學(xué)手段的多元化轉(zhuǎn)變
傳統(tǒng)聽(tīng)力教學(xué)中,兩周一次的聽(tīng)力短時(shí)訓(xùn)練遠(yuǎn)不能提高學(xué)生的聽(tīng)說(shuō)應(yīng)用能力。隨著大數(shù)據(jù)時(shí)代的推進(jìn),學(xué)生學(xué)習(xí)英語(yǔ)的手段和工具日益多元化。除了登陸英語(yǔ)聽(tīng)力學(xué)習(xí)平臺(tái)和網(wǎng)站外,各種智能手機(jī)、平板電腦等移動(dòng)設(shè)備的普及,實(shí)現(xiàn)了學(xué)生們能在移動(dòng)終端上,結(jié)合老師指導(dǎo),在各種學(xué)習(xí)軟件上隨時(shí)隨地進(jìn)行英語(yǔ)聽(tīng)力訓(xùn)練,這種多元化的聽(tīng)力教學(xué)手段也成為大數(shù)據(jù)時(shí)代下的一大特色。比較常見(jiàn)的聽(tīng)力學(xué)習(xí)軟件有“可可英語(yǔ)”“VOA每日英語(yǔ)”“每日英語(yǔ)聽(tīng)力”等。大數(shù)據(jù)時(shí)代,老師可以借助這些大數(shù)據(jù)平臺(tái)進(jìn)行網(wǎng)上教學(xué),使英語(yǔ)聽(tīng)力學(xué)習(xí)不再局限于課堂,學(xué)習(xí)的時(shí)間和空間更加靈活多變。
四、大數(shù)據(jù)時(shí)代下大學(xué)英語(yǔ)聽(tīng)力教學(xué)改革的幾點(diǎn)對(duì)策
(一)構(gòu)建英語(yǔ)聽(tīng)力訓(xùn)練平臺(tái)和英語(yǔ)聽(tīng)力評(píng)估系統(tǒng)
大數(shù)據(jù)時(shí)代海量數(shù)據(jù)的記錄及分析能將大學(xué)英語(yǔ)聽(tīng)力教學(xué)與各方數(shù)據(jù)信息相互結(jié)合起來(lái)。為提高學(xué)生們的學(xué)習(xí)效率和積極性,需要構(gòu)建一個(gè)隨時(shí)隨地訓(xùn)練學(xué)生聽(tīng)說(shuō)的平臺(tái),和一個(gè)能夠?yàn)橹峁┰u(píng)估測(cè)定的系統(tǒng)。一個(gè)完善的英語(yǔ)聽(tīng)力訓(xùn)練平臺(tái),不但要有大量的英語(yǔ)聽(tīng)力素材,更需要提供學(xué)生模擬場(chǎng)景訓(xùn)練,比如開(kāi)發(fā)學(xué)生與英語(yǔ)國(guó)家朋友進(jìn)行網(wǎng)上口語(yǔ)聊天的軟件平臺(tái),讓學(xué)生們能更切實(shí)地運(yùn)用所學(xué)知識(shí),從實(shí)踐中獲得聽(tīng)說(shuō)交際能力的提高。還需構(gòu)建一個(gè)完善的評(píng)估系統(tǒng),對(duì)學(xué)生的不足之處及時(shí)反饋建議。
(二)提高教師信息技術(shù)能力
在信息不斷更新,不斷填充的大數(shù)據(jù)時(shí)代,世界的變化速度之快超乎想象。這一大背景下,更需要教師們提高自身的信息技術(shù)能力,學(xué)習(xí)掌握基本的數(shù)據(jù)分析和統(tǒng)計(jì)軟件,如Excel、SPSS、Clementine、Visio和SwiffChart軟件等,以更好地記錄分析學(xué)生學(xué)習(xí)行為和特征,適時(shí)進(jìn)行學(xué)生英語(yǔ)聽(tīng)力能力評(píng)估和反饋。教師在教學(xué)過(guò)程中也應(yīng)充分挖掘大數(shù)據(jù)平臺(tái)上學(xué)生感興趣的題材和內(nèi)容數(shù)據(jù),及時(shí)提供給學(xué)生融合社會(huì)熱點(diǎn)的學(xué)習(xí)資源,掃清聽(tīng)力材料中的背景知識(shí)障礙。教師們還可以利用這些軟件對(duì)學(xué)生學(xué)習(xí)過(guò)程的記錄進(jìn)行分析,及時(shí)調(diào)整教學(xué)模式,進(jìn)一步完善大學(xué)英語(yǔ)聽(tīng)力教學(xué)系統(tǒng)。
五、結(jié)束語(yǔ)
綜上所述,大數(shù)據(jù)時(shí)代的豐富資源和海量學(xué)習(xí)平臺(tái)全面地改變著大學(xué)英語(yǔ)聽(tīng)力教學(xué)的學(xué)習(xí)手段和教學(xué)方式。大數(shù)據(jù)時(shí)代要求聽(tīng)力教學(xué)改革應(yīng)該是數(shù)據(jù)驅(qū)動(dòng)教學(xué),促進(jìn)大學(xué)英語(yǔ)聽(tīng)力教學(xué)手段平臺(tái)多樣化,教學(xué)資源多元信息化,提高教師信息技術(shù)能力。正因如此,我們需要利用好大數(shù)據(jù)時(shí)代的特點(diǎn),利用這些海量的數(shù)據(jù),完善大學(xué)英語(yǔ)聽(tīng)力教學(xué)的改革。
參考文獻(xiàn):
[1]國(guó)務(wù)院關(guān)于印發(fā)《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》的通知.
[2]教育部關(guān)于印發(fā)《教育信息化“十三五”規(guī)劃》的通知.
[3]維克托•邁爾——舍恩伯格,肯尼思•庫(kù)克耶.大數(shù)據(jù)時(shí)代——生活、工作與思維的大變革[M].周濤,譯.杭州:浙江人民出版社,2013:27-96.
[4]麥紅宇.大學(xué)英語(yǔ)聽(tīng)力教學(xué)改革與定位[J].廣西民族大學(xué)學(xué)報(bào):哲學(xué)社會(huì)科學(xué)版,2009,(11):189-192.
篇7
關(guān)鍵詞:陳四樓煤礦;大數(shù)據(jù);安全管理
1大數(shù)據(jù)的概述
大數(shù)據(jù)是信息化建設(shè)發(fā)展到新高度的產(chǎn)物,是指無(wú)法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合,是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。大數(shù)據(jù)具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類(lèi)型和價(jià)值密度低的特征。
2大數(shù)據(jù)在陳四樓煤礦應(yīng)用于安全管理中的策略研究
煤礦安全管理作為長(zhǎng)期以來(lái)困擾煤炭行業(yè)安全高效發(fā)展的嚴(yán)峻課題,改革開(kāi)放以來(lái),雖然我國(guó)煤炭百萬(wàn)噸死亡率已經(jīng)下降到0.083,但對(duì)比國(guó)外先進(jìn)國(guó)家煤礦安全管理水平仍有不小差距。煤礦大數(shù)據(jù)技術(shù)的引入為持續(xù)推動(dòng)礦井安全管理注入了強(qiáng)大動(dòng)力,并且煤礦安全生產(chǎn)和安全管理過(guò)程中所積累的海量數(shù)據(jù)也與大數(shù)據(jù)特性有所交集。相比傳統(tǒng)的信息處理技術(shù)而言,大數(shù)據(jù)更符合當(dāng)前信息時(shí)代數(shù)據(jù)爆炸的現(xiàn)狀。同時(shí)大數(shù)據(jù)強(qiáng)調(diào)數(shù)據(jù)的快速流轉(zhuǎn)與價(jià)值,提高對(duì)數(shù)據(jù)的“加工能力”,并在最短的時(shí)間內(nèi)通過(guò)“加工”實(shí)現(xiàn)海量數(shù)據(jù)的分析處理和增值,其客觀存在的依據(jù)是洞察力。隨著綜合信息化的高速發(fā)展,大數(shù)據(jù)勢(shì)必成為礦井豐富安全管理的重要手段,是推動(dòng)煤炭行業(yè)安全發(fā)展的必然之舉。
3陳四樓煤礦安全管理現(xiàn)狀、信息數(shù)據(jù)特征
3.1礦井安全管理現(xiàn)狀
(1)近年來(lái),礦井雖然加大了改革創(chuàng)新、先進(jìn)生產(chǎn)力和自動(dòng)化、智能化設(shè)備的引進(jìn)力度,采掘工作面現(xiàn)場(chǎng)機(jī)械化、自動(dòng)化和智能化生產(chǎn)水平不斷提升,且技術(shù)改造持續(xù)完善,但受開(kāi)采深度不斷增加的影響,礦井重大致災(zāi)因素逐步凸顯且種類(lèi)逐漸增多,同時(shí)作為煤與瓦斯突出礦井,受其生產(chǎn)本質(zhì)的制約,井下現(xiàn)場(chǎng)生產(chǎn)作業(yè)期間仍不能完全擺脫人工勞動(dòng)強(qiáng)度大、作業(yè)環(huán)節(jié)較多、作業(yè)流程較復(fù)雜等不利因素。(2)對(duì)于煤礦安全生產(chǎn)事故,尤其是重特大傷亡事故是各煤礦企業(yè)談聲色變和不愿談及的家丑,其事故相關(guān)的寶貴經(jīng)驗(yàn)和數(shù)據(jù)也是不愿自行共享的,且就目前煤礦安全事故分析仍偏向于事后分析,未能真正有效地實(shí)現(xiàn)超前預(yù)警、事前防控的最佳效果,導(dǎo)致安全管理效能未能完全得到釋放,與此同時(shí)全面有效且有深度的事故分析工具在煤礦中應(yīng)用較少。(3)陳四樓煤礦作為井工煤礦,開(kāi)采深度較深,且作為煤與瓦斯突出礦井,采掘工作面受瓦斯賦存異常、地質(zhì)構(gòu)造條件、重大災(zāi)害和開(kāi)采條件復(fù)雜等多方面不利因素的影響,同時(shí)現(xiàn)場(chǎng)安全生產(chǎn)較難控制。
3.2陳四樓煤礦信息數(shù)據(jù)特征
(1)信息數(shù)據(jù)體量大。礦井井下現(xiàn)場(chǎng)生產(chǎn)是動(dòng)態(tài)變化、瞬息萬(wàn)變的過(guò)程,期間所積累的大量數(shù)據(jù)體量是龐大而繁雜的,并且這些數(shù)據(jù)也都將作為礦井現(xiàn)場(chǎng)安全生產(chǎn)和日常安全動(dòng)態(tài)管理重要數(shù)據(jù)。(2)信息數(shù)據(jù)多樣化。礦井生產(chǎn)過(guò)程是實(shí)時(shí)變化的,其現(xiàn)場(chǎng)各類(lèi)傳感器及相關(guān)安全監(jiān)測(cè)監(jiān)控設(shè)備所采集和監(jiān)測(cè)到的數(shù)據(jù)也同步實(shí)時(shí)更新和變化,且圖像數(shù)據(jù)等半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)所占數(shù)據(jù)密度呈逐步增大趨勢(shì)。(3)信息數(shù)據(jù)價(jià)值密度低。礦井在用各類(lèi)安全監(jiān)測(cè)監(jiān)控設(shè)備及傳感器在生產(chǎn)過(guò)程中能夠?qū)崿F(xiàn)實(shí)時(shí)同步運(yùn)行,實(shí)時(shí)變化的過(guò)程中,持續(xù)不斷地傳輸和生成大量信息數(shù)據(jù),但所產(chǎn)生的這些數(shù)據(jù)和信息較從中獲取的知識(shí)成反比。(4)信息數(shù)據(jù)生成和增長(zhǎng)速度快。礦井信息綜合化和自動(dòng)化的聯(lián)合應(yīng)用,在安全生產(chǎn)過(guò)程中起到了至關(guān)重要的作用,也覆蓋了礦井瓦斯監(jiān)測(cè)等系統(tǒng),通過(guò)設(shè)備實(shí)時(shí)監(jiān)測(cè)產(chǎn)生的大量數(shù)據(jù),并能夠保持快速增長(zhǎng)。
4大數(shù)據(jù)在陳四樓煤礦安全管理中的實(shí)施與研究
4.1大數(shù)據(jù)改變思路,全面提升安全理念
要有效解決礦井生產(chǎn)過(guò)程中繁雜生產(chǎn)系統(tǒng)所帶來(lái)的問(wèn)題和出現(xiàn)的異常信息,就必須轉(zhuǎn)變思路,降低數(shù)據(jù)精確性需求,接受大數(shù)據(jù)時(shí)代下混雜而體量龐大的數(shù)據(jù),獲得更全面的信息數(shù)據(jù),降低人為主觀意識(shí)失誤,從而指導(dǎo)礦井重大安全決策。
4.2大數(shù)據(jù)超前監(jiān)視設(shè)備運(yùn)行,提高設(shè)備運(yùn)行可靠性
以往煤礦設(shè)備管理理念大都是“事后管理”,即在設(shè)備出現(xiàn)故障后進(jìn)行應(yīng)急性搶修,這種應(yīng)急狀態(tài)下的設(shè)備搶修既影響正規(guī)作業(yè)循環(huán)也給設(shè)備搶修過(guò)程中人的不安全行為、物的不安全狀態(tài)等方面帶來(lái)安全風(fēng)險(xiǎn),埋下安全隱患。大數(shù)據(jù)為消除此風(fēng)險(xiǎn)隱患提供了堅(jiān)實(shí)的基礎(chǔ)和保障。通過(guò)大量數(shù)據(jù)的收集,并進(jìn)行合理化分析、對(duì)比,并結(jié)合現(xiàn)場(chǎng)生產(chǎn)實(shí)際情況,實(shí)現(xiàn)超前預(yù)判生產(chǎn)過(guò)程中存在的風(fēng)險(xiǎn)和即將產(chǎn)生隱患問(wèn)題和異常信息,確保安排檢修人員在設(shè)備發(fā)生故障前進(jìn)行調(diào)整和檢修維護(hù),降低設(shè)備損耗、生產(chǎn)影響和風(fēng)險(xiǎn)隱患,提升設(shè)備安全管理水平。
4.3大數(shù)據(jù)技術(shù)建立事故分析新方向,實(shí)現(xiàn)“雙重預(yù)防”超前防范
運(yùn)用大數(shù)據(jù)技術(shù)分析則更全面,通過(guò)收集國(guó)內(nèi)外煤礦提升運(yùn)輸事故現(xiàn)場(chǎng)數(shù)據(jù),包括提升機(jī)與作業(yè)現(xiàn)場(chǎng)匹配、斜巷坡?lián)踉O(shè)施設(shè)計(jì)參數(shù)、現(xiàn)場(chǎng)作業(yè)環(huán)境等數(shù)據(jù)。運(yùn)用大數(shù)據(jù)分析可以深度挖掘以上3個(gè)主要因素外的相關(guān)要素,設(shè)置提升運(yùn)輸教學(xué)模型,指導(dǎo)礦井提升運(yùn)輸安全生產(chǎn)。大數(shù)據(jù)分析技術(shù)能夠從更多方面考慮事故的預(yù)防舉措,真正實(shí)現(xiàn)“雙重預(yù)防”在安全管理中“防火墻”作用,具有深遠(yuǎn)的意義。
4.4大數(shù)據(jù)強(qiáng)化技術(shù)認(rèn)知,轉(zhuǎn)變管理思維
機(jī)械化、自動(dòng)化、信息化和智能化建設(shè)是煤礦企業(yè)順應(yīng)時(shí)展的重要舉措,陳四樓煤礦經(jīng)過(guò)多年孜孜不倦的努力,礦井已與華為公司合作打造了F5G工業(yè)光環(huán)網(wǎng)技術(shù),并實(shí)施取得初步成效,使礦井實(shí)現(xiàn)了對(duì)環(huán)境、設(shè)備和人員狀態(tài)的實(shí)時(shí)感知;萬(wàn)兆工業(yè)環(huán)網(wǎng)和F5G通信技術(shù)的應(yīng)用,讓礦井開(kāi)通了信息傳輸?shù)母咚俟贰M瑫r(shí)基于大數(shù)據(jù)的智能應(yīng)用,積累了大量的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù),而這其中又以非結(jié)構(gòu)數(shù)據(jù)占主導(dǎo)地位。礦井安全生產(chǎn)管理人員必須轉(zhuǎn)變以往傳統(tǒng)和落后的管理思維,將抽樣分析向全樣本數(shù)據(jù)分析蛻變,相比抽樣分析而言,盡管在數(shù)據(jù)精確性上有所缺陷,但就數(shù)據(jù)分析情況而言卻全面增強(qiáng),并且大數(shù)據(jù)能進(jìn)一步發(fā)掘不同數(shù)據(jù)之間的關(guān)聯(lián)性,有效地捕捉傳統(tǒng)分析工具所被疏漏的細(xì)枝末節(jié),逐步降低煤礦安全管理過(guò)程中人為意識(shí)失誤。
5結(jié)束語(yǔ)
篇8
隨著科學(xué)技術(shù)的不斷發(fā)展,全世界已經(jīng)進(jìn)入大數(shù)據(jù)時(shí)代,大數(shù)據(jù)的應(yīng)用給電力系統(tǒng)的運(yùn)營(yíng)帶來(lái)了極大的便利和優(yōu)勢(shì),但是隨之而來(lái)的就是信息安全問(wèn)題。本文主要介紹了電力大數(shù)據(jù)的應(yīng)用特征,電力大數(shù)據(jù)給企業(yè)帶來(lái)的好處以及存在的問(wèn)題,同時(shí)詳細(xì)闡述了安全防護(hù)技術(shù)與管理方法,如何加強(qiáng)信息安全管理,加強(qiáng)安全防護(hù)工作,這樣才可以從根本上解決電力企業(yè)的信息安全問(wèn)題。
【關(guān)鍵詞】
電力大數(shù)據(jù);信息安全;技術(shù)
1引言
大數(shù)據(jù)技術(shù)是未來(lái)信息社會(huì)發(fā)展的一個(gè)大方向,它為人類(lèi)全面、深刻地認(rèn)識(shí)世界、認(rèn)識(shí)自身提供了新的方式、新視角,這在此前的時(shí)代是無(wú)法辦到的,大數(shù)據(jù)是未來(lái)技術(shù)發(fā)展的一片藍(lán)海。大量的數(shù)據(jù)處理無(wú)疑給現(xiàn)在的信息技術(shù)提出了新的挑戰(zhàn),而這一問(wèn)題在信息化程度不斷提高的電力企業(yè)中同樣正在凸顯出來(lái)。隨著信息技術(shù)的推進(jìn)和發(fā)展,電力企業(yè)的數(shù)據(jù)也會(huì)成爆炸式增長(zhǎng)。大數(shù)據(jù)不是洪水猛獸,而是可供利用的信息資產(chǎn)。如何使用好大數(shù)據(jù),充分活化企業(yè)數(shù)據(jù)資產(chǎn),更好地服務(wù)電力事業(yè)發(fā)展和廣大電力客戶將成為擺在電力企業(yè)面前值得思考的課題。電力行業(yè)應(yīng)當(dāng)在大力推廣信息化建設(shè)的同時(shí),認(rèn)識(shí)到數(shù)據(jù)背后的價(jià)值,搞好數(shù)據(jù)治理,并積極投入到數(shù)據(jù)挖掘與分析運(yùn)用工作中,實(shí)踐大數(shù)據(jù)戰(zhàn)略,挖掘數(shù)據(jù)價(jià)值,為電力行業(yè)發(fā)、輸、配、變、用電各環(huán)節(jié)建設(shè),以及電力營(yíng)銷(xiāo)等業(yè)務(wù)發(fā)展提供科學(xué)指導(dǎo),及有效解決方案,重視提升電力行業(yè)信息化系統(tǒng)輔助決策能力。
2電力大數(shù)據(jù)的應(yīng)用特征
大數(shù)據(jù)本身具有4個(gè)典型特征:容量巨大;數(shù)據(jù)類(lèi)型多樣;價(jià)值密度低;處理速度快,對(duì)此業(yè)界已基本達(dá)成共識(shí),但還沒(méi)有統(tǒng)一的定義。電力大數(shù)據(jù)的應(yīng)用主要是以業(yè)務(wù)應(yīng)用為主,實(shí)現(xiàn)面向典型業(yè)務(wù)場(chǎng)景的模式創(chuàng)新及應(yīng)用提升。電力大數(shù)據(jù)應(yīng)用于大規(guī)劃,主要是針對(duì)電網(wǎng)趨勢(shì)進(jìn)行預(yù)測(cè),通過(guò)用電量預(yù)測(cè)、空間負(fù)荷預(yù)測(cè)以及多項(xiàng)指標(biāo)關(guān)聯(lián)分析,進(jìn)行綜合分析,從而支持規(guī)劃設(shè)計(jì);電力大數(shù)據(jù)應(yīng)用于大檢修,通過(guò)視頻監(jiān)測(cè)變電站,準(zhǔn)確識(shí)別多種表計(jì)、刀閘、開(kāi)關(guān)與隔離開(kāi)關(guān)的位置、狀態(tài)或讀數(shù),利用大數(shù)據(jù)技術(shù),智能分析視頻數(shù)據(jù),從而代替?zhèn)鹘y(tǒng)的傳感器;電力大數(shù)據(jù)應(yīng)用于大運(yùn)行,通過(guò)對(duì)電網(wǎng)調(diào)度的電網(wǎng)設(shè)備臺(tái)賬信息、設(shè)備拓?fù)湫畔ⅰ⒃O(shè)備遙信遙測(cè)的相關(guān)信息的歷史時(shí)刻查詢,預(yù)測(cè)分析未來(lái)狀態(tài),為設(shè)備狀態(tài)管理提供完善建議,為電網(wǎng)調(diào)度提供輔助決策;電力大數(shù)據(jù)應(yīng)用于大營(yíng)銷(xiāo),拓展面向智能化、互動(dòng)化的服務(wù)能力,面向用電信息采集、計(jì)量、收費(fèi)和服務(wù)資源,開(kāi)展用電互動(dòng)服務(wù),實(shí)時(shí)反饋用電、購(gòu)電信息,例如營(yíng)銷(xiāo)微信平臺(tái)、營(yíng)銷(xiāo)手機(jī)、營(yíng)銷(xiāo)支付寶等。隨著居民用電信息采集的表記終端數(shù)量達(dá)到上億只,供電電壓自動(dòng)采集接入電壓監(jiān)測(cè)點(diǎn)達(dá)到上萬(wàn)個(gè),輸變電狀態(tài)監(jiān)測(cè)裝置接入上萬(wàn)個(gè),監(jiān)測(cè)數(shù)據(jù)達(dá)到上千萬(wàn)條,電力大數(shù)據(jù)的應(yīng)用也具有數(shù)據(jù)量大、數(shù)據(jù)類(lèi)型多、實(shí)時(shí)性強(qiáng)等大數(shù)據(jù)的典型應(yīng)用特征。
3電力大數(shù)據(jù)給企業(yè)帶來(lái)的好處
電力大數(shù)據(jù)屬于一項(xiàng)綜合型數(shù)據(jù)信息,涵蓋了企業(yè)的生產(chǎn)、運(yùn)營(yíng)、銷(xiāo)售與服務(wù)等多個(gè)方面。大數(shù)據(jù)在電力企業(yè)的應(yīng)用,有效提高了企業(yè)工作效率,并科學(xué)判斷企業(yè)運(yùn)營(yíng)狀況和未來(lái)發(fā)展方向,從而制定并調(diào)整科學(xué)的營(yíng)銷(xiāo)政策與方針,促進(jìn)電力企業(yè)朝著正確的軌道運(yùn)營(yíng)與發(fā)展。正是因?yàn)楦咝实臎Q策、運(yùn)營(yíng)與服務(wù),降低了企業(yè)經(jīng)營(yíng)成本。通過(guò)大數(shù)據(jù)的分析、監(jiān)測(cè)功能,企業(yè)建立起同客戶間的緊密聯(lián)系,實(shí)現(xiàn)了對(duì)客戶的在線服務(wù),全面提升了客戶服務(wù)水平,從而贏得了更廣闊的市場(chǎng)空間,為企業(yè)發(fā)展創(chuàng)造了預(yù)期的經(jīng)濟(jì)效益。
4電力大數(shù)據(jù)給信息安全帶來(lái)的風(fēng)險(xiǎn)
大數(shù)據(jù)背景下,信息數(shù)據(jù)的運(yùn)行主要依賴于計(jì)算機(jī)網(wǎng)絡(luò)系統(tǒng),多方數(shù)據(jù)參與各方共享統(tǒng)一的互聯(lián)網(wǎng),勢(shì)必會(huì)帶來(lái)信息安全問(wèn)題,這主要體現(xiàn)在:
4.1數(shù)據(jù)運(yùn)行風(fēng)險(xiǎn)
大數(shù)據(jù)系統(tǒng)時(shí)刻需要承擔(dān)數(shù)據(jù)存儲(chǔ)、分析與處理等工作,需要管理者適時(shí)更新技術(shù),緩解數(shù)據(jù)處理的負(fù)擔(dān)。若技術(shù)更新不及時(shí),就可能導(dǎo)致數(shù)據(jù)運(yùn)行風(fēng)險(xiǎn),如:數(shù)據(jù)丟失、信息失真等。其他的運(yùn)行故障,如:軟硬件兼容性差、系統(tǒng)異常及管理人員操作失誤、設(shè)備更新不及時(shí)等也可能引發(fā)數(shù)據(jù)失真。
4.2黑客攻擊風(fēng)險(xiǎn)
黑客攻擊問(wèn)題成為大數(shù)據(jù)時(shí)代信息安全的大問(wèn)題,黑客攻擊通常是專(zhuān)業(yè)性較強(qiáng)、有組織、有預(yù)謀的攻擊,通過(guò)竊取大數(shù)據(jù)、非法獲得信息等來(lái)進(jìn)行非法交易,其破壞性較大,甚至可能造成整個(gè)大數(shù)據(jù)系統(tǒng)的癱瘓,為電力企業(yè)帶來(lái)不可估量的經(jīng)濟(jì)損失。
4.3電力企業(yè)隱私的泄露
電力企業(yè)引入大數(shù)據(jù)系統(tǒng)的同時(shí),需要將企業(yè)信息、員工信息以及其他方面的相關(guān)信息到網(wǎng)絡(luò)數(shù)據(jù)平臺(tái)中,信息一旦進(jìn)入互聯(lián)網(wǎng)就可能面臨著泄密的危險(xiǎn),這些數(shù)據(jù)若得不到有效管控,很容易造成信息的泄露,從而引發(fā)多方面的風(fēng)險(xiǎn),如:非法分子利用電力企業(yè)信息、個(gè)人隱私信息等從事非法交易、謀取暴利等,無(wú)疑會(huì)為企業(yè)的發(fā)展與運(yùn)營(yíng)帶來(lái)風(fēng)險(xiǎn)。
5信息安全防護(hù)技術(shù)措施與管理方法
5.1信息安全防護(hù)技術(shù)措施
面對(duì)大數(shù)據(jù)給電力信息安全帶來(lái)的風(fēng)險(xiǎn),電力部門(mén)必須加大風(fēng)險(xiǎn)管控力度,采用先進(jìn)的技術(shù)積極規(guī)避信息安全問(wèn)題,其中隱私保護(hù)技術(shù)成為一項(xiàng)關(guān)鍵技術(shù),它包括:加密與密鑰管理技術(shù)、數(shù)字簽名技術(shù)、身份認(rèn)證技術(shù)等,不同的隱私保護(hù)技術(shù)發(fā)揮著不同的安全保護(hù)功能,并形成了一個(gè)有機(jī)的架構(gòu)系統(tǒng)。
5.1.1數(shù)據(jù)擾亂技術(shù)
數(shù)據(jù)擾亂技術(shù)是一項(xiàng)重要的隱私保護(hù)技術(shù),它主要是通過(guò)擾亂、替換、添加隨機(jī)變量等來(lái)混淆視線,替代重要的數(shù)據(jù)信息,并對(duì)應(yīng)生成不確定的信息數(shù)據(jù),再開(kāi)展相關(guān)的計(jì)算操作。
5.1.2加密與密匙技術(shù)
眾多的數(shù)據(jù)信息安全保護(hù)技術(shù)中,加密與密匙技術(shù)成為被認(rèn)可的標(biāo)準(zhǔn)數(shù)據(jù)保護(hù)技術(shù),此技術(shù)依托于科學(xué)的加密算法與密鑰安全,能夠有效確保電力數(shù)據(jù)信息的安全。
5.1.3安全多方計(jì)算技術(shù)
該技術(shù)的運(yùn)行原理為:在各個(gè)參與方之間進(jìn)行協(xié)作計(jì)算函數(shù),參與方的輸入信息保密,不向彼此公開(kāi)。遇到需要解決的問(wèn)題時(shí),設(shè)計(jì)一個(gè)函數(shù),相互配合計(jì)算此函數(shù),再引入安全多方計(jì)算模塊來(lái)解決問(wèn)題。此技術(shù)能夠發(fā)揮對(duì)數(shù)據(jù)信息的安全保護(hù)功能,防止信息泄露,其隱私保護(hù)也有級(jí)別劃分。
5.1.4數(shù)字簽名技術(shù)
數(shù)字簽名技術(shù),就是只有信息的發(fā)送者才能產(chǎn)生的別人無(wú)法偽造的一段數(shù)字串,這段數(shù)字串同時(shí)也是對(duì)信息的發(fā)送者發(fā)送信息真實(shí)性的一個(gè)有效證明,該技術(shù)可以確保信息傳輸?shù)耐暾浴?/p>
5.1.5秘密共享技術(shù)
秘密共享,是將秘密分割存儲(chǔ)的密碼技術(shù),目的是阻止秘密過(guò)于集中,以達(dá)到分散風(fēng)險(xiǎn)和容忍入侵的目的,該技術(shù)是信息安全和數(shù)據(jù)保密中的重要手段。
5.1.6身份認(rèn)證與訪問(wèn)控制技術(shù)
所謂身份認(rèn)證技術(shù),就是對(duì)用戶的身份信息進(jìn)行驗(yàn)證與識(shí)別的過(guò)程,以防范非法用戶的非法登錄行為。最常見(jiàn)的身份認(rèn)證技術(shù)主要包括:口令核對(duì)、識(shí)別用戶生理特征等。認(rèn)證成功后,再參照用戶具體的身份信息、職能信息等來(lái)限制數(shù)據(jù)的訪問(wèn)范圍。通過(guò)對(duì)各類(lèi)訪問(wèn)的控制,最終實(shí)現(xiàn)對(duì)信息的安全保護(hù)目標(biāo).
5.2信息安全防護(hù)管理方法
大數(shù)據(jù)時(shí)代數(shù)據(jù)的安全防護(hù)不僅要依賴于技術(shù),更重要的是要加強(qiáng)管理,具體應(yīng)從風(fēng)險(xiǎn)管理系統(tǒng)建設(shè)、防護(hù)技術(shù)的運(yùn)用和監(jiān)管等做起。①創(chuàng)建并完善大數(shù)據(jù)信息安全管理系統(tǒng)。電力企業(yè)應(yīng)認(rèn)識(shí)到大數(shù)據(jù)安全管理工作的重要性,創(chuàng)建安全管理系統(tǒng),培養(yǎng)信息技術(shù)人才,打造一支先進(jìn)的信息安全管理工作隊(duì)伍,及時(shí)更新大數(shù)據(jù)技術(shù),加大平臺(tái)建設(shè)力度,做好風(fēng)險(xiǎn)評(píng)估等多方面工作,打造一個(gè)標(biāo)準(zhǔn)的安全防護(hù)管理系統(tǒng),發(fā)揮對(duì)信息數(shù)據(jù)的保護(hù)功能。②重視安全防護(hù)技術(shù)的研發(fā)。電力企業(yè)為了維護(hù)自身的信息安全,必須與時(shí)俱進(jìn),積極研發(fā)信息安全防護(hù)技術(shù),加大在信息安全防護(hù)方面的投入,鼓勵(lì)信息技術(shù)人員深入研究新技術(shù),時(shí)刻保持自身信息防護(hù)技術(shù)的先進(jìn)性,發(fā)揮技術(shù)措施的保護(hù)作用。③健全完善信息安全法律法規(guī)。解決數(shù)據(jù)安全的問(wèn)題,需要政府加大對(duì)信息安全的重視程度,制定并實(shí)施信息安全方面的法律法規(guī),利用法律法規(guī)來(lái)約束、控制一些不法行為,從而達(dá)到對(duì)信息安全的保護(hù)作用。
6結(jié)束語(yǔ)
大數(shù)據(jù)技術(shù)的深入發(fā)展與廣泛運(yùn)用,極大地推動(dòng)著時(shí)代的發(fā)展與進(jìn)步,各行各業(yè)進(jìn)入信息數(shù)據(jù)新時(shí)代,大數(shù)據(jù)系統(tǒng)的運(yùn)用有利有弊。電力行業(yè)作為關(guān)系國(guó)計(jì)民生的重要行業(yè),需要信任并利用大數(shù)據(jù)技術(shù),然而,信息安全問(wèn)題成為時(shí)代關(guān)注的問(wèn)題,應(yīng)該加強(qiáng)數(shù)據(jù)信息安全管理,掌握先進(jìn)的數(shù)據(jù)安全防護(hù)技術(shù),提高信息防護(hù)水平,進(jìn)而從整體上支持并促進(jìn)電力企業(yè)的發(fā)展與進(jìn)步。
作者: 單位:四川省電力公司運(yùn)營(yíng)監(jiān)控中心
參考文獻(xiàn)
[1]王倩,朱宏峰,劉天華.大數(shù)據(jù)安全的現(xiàn)狀與發(fā)展[J].計(jì)算機(jī)與網(wǎng)絡(luò),2013(16):67~69.
篇9
早在2012年,GE就已將目光瞄準(zhǔn)工業(yè)互聯(lián)網(wǎng)和大數(shù)據(jù),率先提出要依靠機(jī)器與設(shè)備間的互聯(lián)互通及分析軟件,打造智能機(jī)器,實(shí)現(xiàn)人、機(jī)器和數(shù)據(jù)的無(wú)縫協(xié)作。
同年,麥肯錫報(bào)告也揭示了一個(gè)相關(guān)事實(shí),即在虛擬經(jīng)濟(jì)占據(jù)主導(dǎo)地位的美國(guó),其工業(yè)界蘊(yùn)含的數(shù)據(jù)總量卻是最大,也最具價(jià)值。
那么如何解讀工業(yè)大數(shù)據(jù),可從產(chǎn)生背景、價(jià)值創(chuàng)造和工程實(shí)踐三方面考量。
“跨界”整合數(shù)據(jù)
工業(yè)大數(shù)據(jù)已成為新一輪產(chǎn)業(yè)革命的重要?jiǎng)恿Α?/p>
為什么提出工業(yè)大數(shù)據(jù),源于四個(gè)方面:一是數(shù)字化裝備和產(chǎn)品的普及,二是裝備和產(chǎn)品網(wǎng)絡(luò)化聯(lián)接的普及,三是企業(yè)向服務(wù)型制造的轉(zhuǎn)型,四是“從搖籃到搖籃”再制造的必然要求。
無(wú)論是德國(guó)提出的“工業(yè)4.0”,還是美國(guó)定義的“工業(yè)互聯(lián)網(wǎng)”,大數(shù)據(jù)在其中都發(fā)揮著重要作用。IBM認(rèn)為,工業(yè)4.0是大數(shù)據(jù)驅(qū)動(dòng)的智能制造,無(wú)數(shù)據(jù)不智能。GE表示,工業(yè)互聯(lián)網(wǎng)最重要的就是數(shù)據(jù)分析,未來(lái)每一家工業(yè)企業(yè)也必須是一家軟件企業(yè),有了軟件必然會(huì)有數(shù)據(jù)。
工業(yè)大數(shù)據(jù)是以工業(yè)、工業(yè)產(chǎn)品為主體,這些數(shù)據(jù)源于產(chǎn)品生命周期的各個(gè)環(huán)節(jié),涵蓋三個(gè)重要階段――開(kāi)發(fā)制造階段(即 Beginning of Life )、使用維護(hù)階段(即 Middle of Life )及回收利用階段(即 End of Life )。其中,第一階段和第二階段的分離點(diǎn)是產(chǎn)品交付用戶的時(shí)刻,第二階段和第三階段的分離點(diǎn)則是產(chǎn)品退役時(shí)刻。
在產(chǎn)品生命周期中,包括市場(chǎng)、設(shè)計(jì)、制造、服務(wù)、再利用等各個(gè)環(huán)節(jié)都會(huì)產(chǎn)生數(shù)據(jù),“全”生命周期匯合起來(lái)的數(shù)據(jù)更大。當(dāng)然,企業(yè)外、產(chǎn)業(yè)鏈外的“跨界”數(shù)據(jù)也是工業(yè)大數(shù)據(jù)不可忽視的重要來(lái)源。
認(rèn)識(shí)工業(yè)大數(shù)據(jù)必須從信息時(shí)展變遷的視角去權(quán)衡。從傳統(tǒng)工業(yè)IT到GE強(qiáng)調(diào)的OT(Operation Technology)概念,再到DT(Data Technology)時(shí)代,工業(yè)大數(shù)據(jù)實(shí)際是三流合一,整合的是IT時(shí)代信息系統(tǒng)中的數(shù)據(jù)、OT時(shí)代以機(jī)器為主體的數(shù)據(jù),及DT時(shí)代網(wǎng)絡(luò)環(huán)境下的互聯(lián)網(wǎng)數(shù)據(jù)。
數(shù)據(jù)驅(qū)動(dòng)價(jià)值創(chuàng)造
拉力戰(zhàn)神――Rally Fighter這款車(chē)的誕生就是工業(yè)大數(shù)據(jù)應(yīng)用的一個(gè)典型實(shí)例。這款車(chē)的制造商Local Motors是一家規(guī)模不大的網(wǎng)站,之所以能夠生產(chǎn)出這樣一款跑車(chē)與越野車(chē)完美融合的產(chǎn)品,依靠的是來(lái)自全球約三萬(wàn)多個(gè)研發(fā)人員提供的一萬(wàn)多個(gè)設(shè)計(jì)方案,從中尋找最優(yōu)方案,繼而生產(chǎn)制造。這種模式正是馬云當(dāng)年稱之為C2B的制造模式。
這個(gè)案例可以窺得互聯(lián)網(wǎng)時(shí)代數(shù)據(jù)的力量。
制造業(yè)采購(gòu)環(huán)節(jié)的大數(shù)據(jù)應(yīng)用也能夠幫忙企業(yè)提升其供應(yīng)鏈體系競(jìng)爭(zhēng)力。以長(zhǎng)安汽車(chē)為例,其對(duì)生產(chǎn)供應(yīng)鏈的高標(biāo)準(zhǔn)建設(shè)、格把控,使其在2015年躍居中國(guó)品牌價(jià)值評(píng)價(jià)汽車(chē)行業(yè)第一名。
長(zhǎng)安汽車(chē)總裁朱華榮在多個(gè)場(chǎng)合多次強(qiáng)調(diào),采購(gòu)工作要嚴(yán)格成本管控,做好資源儲(chǔ)備,杜絕零部件保供風(fēng)險(xiǎn)。而在采購(gòu)環(huán)節(jié)真正的貨比三家,依靠的是數(shù)據(jù),是來(lái)自網(wǎng)絡(luò)渠道更廣泛的數(shù)據(jù),基于長(zhǎng)安汽車(chē)強(qiáng)大的云計(jì)算平臺(tái)操作控件。
運(yùn)行大數(shù)據(jù)的應(yīng)用也已有了成功實(shí)例。澳大利亞力拓集團(tuán)通過(guò)持續(xù)監(jiān)測(cè)位于澳大利亞、蒙古和美國(guó)礦井,集成20個(gè)系統(tǒng)進(jìn)行專(zhuān)業(yè)分析,同時(shí)通過(guò)管理實(shí)驗(yàn)數(shù)據(jù)、操作日志、控制系統(tǒng)、視頻數(shù)據(jù)以及維護(hù)日志,獲得大量數(shù)據(jù)。這些運(yùn)行數(shù)據(jù)可用于優(yōu)化礦石篩分過(guò)程,提高銅礦和金礦產(chǎn)量;識(shí)別異常情況,輔助現(xiàn)場(chǎng)決策;加快物流效率,減少成本損失。每年可為一個(gè)礦井帶來(lái)一百萬(wàn)美元以上的年收益。
工況大數(shù)據(jù)實(shí)踐
目前,我國(guó)在裝備工況大數(shù)據(jù)平臺(tái)應(yīng)用方面已經(jīng)初有成效?!笆濉逼陂g,國(guó)內(nèi)裝備龍頭企業(yè)已經(jīng)開(kāi)始建設(shè)裝備工況大數(shù)據(jù)平臺(tái)。隨著應(yīng)用的深入,需將工況數(shù)據(jù)的處理分析結(jié)果,向企業(yè)服務(wù)、制造甚至設(shè)計(jì)系統(tǒng)進(jìn)行反饋,因此需要替換部分原有的關(guān)系數(shù)據(jù)管理系統(tǒng)。
與遺留系統(tǒng)進(jìn)行集成,甚至替換“舊”系統(tǒng),是工業(yè)大數(shù)據(jù)項(xiàng)目區(qū)別于互聯(lián)網(wǎng)大數(shù)據(jù)項(xiàng)目的重要內(nèi)容,因?yàn)榛ヂ?lián)網(wǎng)業(yè)務(wù)往往是“全新的”。在具體實(shí)踐中,我們形成了 “ 四階段 ” 切換方案――即切入準(zhǔn)備、寫(xiě)入接口切換、查詢接口切換、原數(shù)據(jù)庫(kù)切出。
以三一工業(yè)大數(shù)據(jù)平臺(tái)為例,我們現(xiàn)已真正解決了生產(chǎn)系統(tǒng)與其他業(yè)務(wù)系統(tǒng)的關(guān)聯(lián)和切換問(wèn)題。目前,有將近二十萬(wàn)臺(tái)設(shè)備(六萬(wàn)臺(tái)活躍設(shè)備)已實(shí)現(xiàn)接入,其監(jiān)控?cái)?shù)據(jù)都可傳到我們的工況大數(shù)據(jù)平臺(tái)上來(lái)。
在得到工況數(shù)據(jù)以后,首先我們可對(duì)裝備運(yùn)營(yíng)進(jìn)行監(jiān)管,不同于傳統(tǒng)的運(yùn)營(yíng)監(jiān)管,在大數(shù)據(jù)技術(shù)支持下,運(yùn)營(yíng)是成套設(shè)備互相協(xié)同的運(yùn)營(yíng),例如:以攪拌站為例,通過(guò)收集位置數(shù)據(jù)、油位數(shù)據(jù)可以對(duì)攪拌車(chē)運(yùn)輸?shù)倪^(guò)程進(jìn)行優(yōu)化調(diào)度,從而避免擁堵、減少等待、降低能耗。
再舉個(gè)例子,我們知道液壓系統(tǒng)是工程機(jī)械的核心系統(tǒng)之一,導(dǎo)致故障的原因很多,如密封套腐蝕、內(nèi)壁刮花、密封環(huán)損壞,閥塊受損等。有了工況大數(shù)據(jù)就可以尋找更深層次的原因。
我們可以通過(guò)大規(guī)模比對(duì)開(kāi)工指標(biāo),從典型取值、波動(dòng)幅度、回傳密度多個(gè)維度進(jìn)行分析,自動(dòng)搜索推薦與故障車(chē)輛關(guān)系密切的特征工況,發(fā)現(xiàn)這些故障車(chē)輛的每分鐘換向次數(shù)在變化幅度上高度相關(guān)。
再通過(guò)引入互聯(lián)網(wǎng)上的行政區(qū)劃數(shù)據(jù)和歷年高鐵建設(shè)數(shù)據(jù)(企業(yè)外部數(shù)據(jù)),可以得出這樣一個(gè)結(jié)論:這些典型故障均發(fā)生在2012年~2013年期間在建重大工程“杭深高鐵”沿線,這為我們尋找更深層次的原因提供了重要線索。此外,通過(guò)大規(guī)模工況數(shù)據(jù)我們還可透視宏觀裝備應(yīng)用情況,根據(jù)這些信息進(jìn)行易損配件需求的預(yù)測(cè),優(yōu)化調(diào)配我們的服務(wù)資源。當(dāng)然,裝備開(kāi)工情況,也反映了各地區(qū)宏觀經(jīng)濟(jì)情況。
總之,工業(yè)大數(shù)據(jù)是推動(dòng)工業(yè)產(chǎn)品創(chuàng)新的重要途徑,在我國(guó)工業(yè)大數(shù)據(jù)剛剛起步階段,需冷靜思考,堅(jiān)持應(yīng)用驅(qū)動(dòng),邁向中國(guó)制造強(qiáng)國(guó)之路。
相關(guān)鏈接
工業(yè)大數(shù)據(jù)不是“交鑰匙”工程
王建民指出,目前工業(yè)大數(shù)據(jù)不存在“交鑰匙”工程,原因如下所述。
篇10
2015年9月5日,《國(guó)務(wù)院關(guān)于印發(fā)促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要的通知》正式,在全社會(huì)引起廣泛影響。在此前后,社會(huì)上的大數(shù)據(jù)浪潮洶涌澎湃,推動(dòng)和裹挾著每一個(gè)行業(yè)、部門(mén)和企業(yè)。一些單位和部門(mén)急于“搶占大數(shù)據(jù)制高點(diǎn)”,紛紛出臺(tái)了一系列政策、措施、機(jī)構(gòu)和項(xiàng)目;氣象部門(mén)也未能例外,以氣象大數(shù)據(jù)為名上項(xiàng)目、搞工程的苗頭已經(jīng)出現(xiàn)。如何認(rèn)識(shí)大數(shù)據(jù),大數(shù)據(jù)是否適用于氣象部門(mén),以及適用于哪些領(lǐng)域,是氣象部門(mén)決策機(jī)構(gòu)需要思考、分析和綜合歸納的問(wèn)題,因?yàn)檫@些問(wèn)題的厘清有助于盡可能避免工作中的盲目性并減少失誤。
(一) 大數(shù)據(jù)時(shí)代的背景
所謂“大數(shù)據(jù)時(shí)代”的到來(lái),是水到渠成的必然結(jié)果,歸納起來(lái)有以下幾個(gè)方面:
1. 數(shù)據(jù)源泛在化
移動(dòng)智能設(shè)備、可穿戴設(shè)備、互聯(lián)網(wǎng)應(yīng)用等設(shè)備和系統(tǒng)應(yīng)用的普及,使得數(shù)據(jù)的采集不再停留在專(zhuān)業(yè)部門(mén)的業(yè)務(wù)系統(tǒng)范疇:手機(jī)、身份證、交通卡、銀行卡、門(mén)禁卡、網(wǎng)上查詢、網(wǎng)上聊天、網(wǎng)購(gòu)、網(wǎng)游、GPS定位、視頻監(jiān)控、ETC等一切智能設(shè)備都是數(shù)據(jù)設(shè)備,只要人跡所至,就有數(shù)據(jù)產(chǎn)生。較之上世紀(jì),數(shù)據(jù)源已極大地泛在化了。
2. 網(wǎng)絡(luò)廣泛連接
在數(shù)據(jù)源極大泛在化的同時(shí),互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)及物聯(lián)網(wǎng)將所有數(shù)據(jù)源連接在一起,人類(lèi)歷史上首次實(shí)現(xiàn)了人與人、人與物、物與物之間廣泛的連接和自由交換數(shù)據(jù)。從而將單臺(tái)設(shè)備的數(shù)據(jù)能力升級(jí)到全球網(wǎng)的層次上,極大地提升了系統(tǒng)的智能潛力。梅特卡夫定律指出:“網(wǎng)絡(luò)的價(jià)值與參與者的平方成正比”,網(wǎng)絡(luò)的廣泛連接極大增加了互聯(lián)網(wǎng)的應(yīng)用價(jià)值,其中包括全社會(huì)數(shù)據(jù)利用能力的增加,以及提高生產(chǎn)力機(jī)會(huì)的增加。
3. 軟件的普及和智能化
軟件是人類(lèi)知識(shí)和智慧的外在形態(tài)和應(yīng)用載體,軟件將硬件設(shè)備、網(wǎng)絡(luò)資源、傳感器、控制器與數(shù)據(jù)組織成為能夠?qū)崿F(xiàn)目標(biāo)的智能系統(tǒng),軟件是智能系統(tǒng)的靈魂,也是大數(shù)據(jù)應(yīng)用的核心。數(shù)據(jù)只有在被處理和應(yīng)用之時(shí),方才成其為資源,否則只能是垃圾;所擁有數(shù)據(jù)是廢是寶,最終由軟件的能力決定。
4. 生態(tài)環(huán)境的形成
“四個(gè)無(wú)處不在”以及數(shù)據(jù)源的泛在化,體現(xiàn)了包括傳感器、智能終端、高速網(wǎng)絡(luò)、移動(dòng)互聯(lián)網(wǎng)、云平臺(tái)、大數(shù)據(jù)處理技術(shù)、地理系統(tǒng)技術(shù)等多種信息技術(shù)共生的新生態(tài)環(huán)境,所有這一切構(gòu)成了大數(shù)據(jù)生長(zhǎng)的肥沃土壤。這些基礎(chǔ)技術(shù)的出現(xiàn)和普及應(yīng)用為新技術(shù)、新應(yīng)用的集成創(chuàng)新提供了良好的機(jī)會(huì)。大數(shù)據(jù)時(shí)代是數(shù)據(jù)大爆發(fā)的時(shí)代,也是智能系統(tǒng)大爆發(fā)的時(shí)代。
5. 互聯(lián)網(wǎng)巨頭的推動(dòng)
互聯(lián)網(wǎng)將所有數(shù)據(jù)源連接在一起,網(wǎng)上業(yè)務(wù)量的激增導(dǎo)致互聯(lián)網(wǎng)企業(yè)的業(yè)務(wù)數(shù)據(jù)呈指數(shù)倍激增,使得那些成功的互聯(lián)網(wǎng)企業(yè)在迅速成為互聯(lián)網(wǎng)巨頭(如:谷歌、亞馬遜、百度、阿里、騰訊等)的同時(shí),其原有的數(shù)據(jù)存儲(chǔ)系統(tǒng)也被一一撐爆,以至于這些互聯(lián)網(wǎng)巨頭們始終在馬不停蹄地瘋狂擴(kuò)充自身的存儲(chǔ)和處理能力。面對(duì)這些每天都在剜心割肉地消耗著不菲的維護(hù)資金的龐大業(yè)務(wù)數(shù)據(jù),如何將其進(jìn)一步變現(xiàn),以變廢為寶、變閑為寶,發(fā)掘這些業(yè)務(wù)數(shù)據(jù)在業(yè)務(wù)應(yīng)用之外的新的價(jià)值,便成為這些互聯(lián)網(wǎng)巨頭們迫切需要解決的新課題――此即為何大數(shù)據(jù)概念的出現(xiàn)以及大數(shù)據(jù)技術(shù)的發(fā)展均來(lái)自互聯(lián)網(wǎng)巨頭及業(yè)務(wù)的推動(dòng)的主要原因。拋開(kāi)商業(yè)目的,互聯(lián)網(wǎng)巨頭們對(duì)大數(shù)據(jù)技術(shù)及應(yīng)用的推動(dòng),客觀上改變了人們從數(shù)據(jù)中獲取信息的理念,促成了大數(shù)據(jù)應(yīng)用理念的革命。
(二) 觀察大數(shù)據(jù)的視角
大數(shù)據(jù)時(shí)代是信息技術(shù)發(fā)展的必然結(jié)果,它的到來(lái)不可抗拒。現(xiàn)象的出現(xiàn)和應(yīng)用的需要,必然導(dǎo)致理論的產(chǎn)生。而大數(shù)據(jù)理論的主要基礎(chǔ),是考察該事物的視角。
1. 提取和應(yīng)用信息的視角(關(guān)注于數(shù)據(jù)處理理念和方法的改變)
從數(shù)據(jù)本身的角度出發(fā)考察大數(shù)據(jù),是大數(shù)據(jù)浪潮發(fā)端時(shí)最初的公認(rèn)視角。其最具代表性的理念更新當(dāng)屬《大數(shù)據(jù)時(shí)代》一書(shū)的作者邁爾.舍恩伯格,該作者將大數(shù)據(jù)理念的精髓概括為三點(diǎn):不是隨機(jī)樣本,而是全體數(shù)據(jù);不是精確性,而是混雜性;不是因果關(guān)系,而是相關(guān)關(guān)系。作者在書(shū)中雄辯滔滔地論述此三味真火的背后,有其內(nèi)心深處對(duì)世界本質(zhì)的認(rèn)識(shí)做支撐。但無(wú)論如何,作者對(duì)大數(shù)據(jù)應(yīng)用歸納的新理念,對(duì)于利用大數(shù)據(jù)資源獲取信息的應(yīng)用提供了一種新思路,其新穎的大數(shù)據(jù)思維也為科技探索提供了一種新的模式。
《大數(shù)據(jù)時(shí)代》作者在書(shū)中關(guān)注的是如何從大數(shù)據(jù)中挖掘出更加準(zhǔn)確和豐富的信息,以便指導(dǎo)和改進(jìn)人們的工作、提高決策水平等等,其視角是大數(shù)據(jù)的信息提取和應(yīng)用。氣象部門(mén)的大數(shù)據(jù)應(yīng)用既屬此范圍,即:從數(shù)據(jù)中提取信息供決策使用。
2. 信息和內(nèi)容價(jià)值的視角(關(guān)注連接范圍的是否全面)
大數(shù)據(jù)產(chǎn)生信息的價(jià)值并不取決于其所產(chǎn)自的數(shù)據(jù)集的規(guī)模大小,而在于該數(shù)據(jù)集內(nèi)容的豐富與否。用一架高分辨率攝像機(jī)對(duì)準(zhǔn)一面空白墻面連續(xù)拍攝數(shù)周,也能產(chǎn)生PB級(jí)的數(shù)據(jù),但其應(yīng)用價(jià)值卻極低,原因很簡(jiǎn)單:雖然其體量甚大,但其中所含信息內(nèi)容卻極度貧乏。無(wú)人駕駛汽車(chē)的研制之所以難度甚高,除需要處理的周邊環(huán)境的信息量巨大外,還在于無(wú)法全部獲取周?chē)渌旭傑?chē)輛駕駛?cè)藛T當(dāng)前及將要采取措施的信息。
此外,大數(shù)據(jù)的應(yīng)用價(jià)值除了其內(nèi)容的是否豐富以外,還取決于對(duì)本應(yīng)用是否適用。阿里電商大數(shù)據(jù)可以用來(lái)分析宏觀經(jīng)濟(jì)形勢(shì),卻無(wú)法用來(lái)分析火星地表是否存在液態(tài)水,因?yàn)檫@些大數(shù)據(jù)內(nèi)容雖然豐富,但卻不包含任何有關(guān)火星方面的信息內(nèi)容。
因此,一個(gè)應(yīng)用廣泛的大數(shù)據(jù),一定是一個(gè)內(nèi)容十分豐富――換句話說(shuō),就是連接面十分廣泛、全面――的數(shù)據(jù)集,與體量沒(méi)有必然關(guān)系。就價(jià)值而言,連接比規(guī)模更重要。
3. 行政決策和國(guó)家治理的視角(關(guān)注社會(huì)治理能力的提升)
國(guó)家宏觀經(jīng)濟(jì)形勢(shì)、百姓的消費(fèi)熱點(diǎn)、民眾對(duì)某一重大事件的反應(yīng)、流行疾病的爆發(fā)預(yù)警乃至反恐維穩(wěn)的目標(biāo)鎖定等等,這些涉及政府行政決策的信息,以及這些信息的全面、準(zhǔn)確和及時(shí),都是政府在國(guó)家治理層面迫切需要的。雖然這些信息大多也有一定的正規(guī)獲取渠道(甚至設(shè)有專(zhuān)業(yè)部門(mén)負(fù)責(zé)),但種種原因?qū)е铝诉@些渠道所采集和匯集的信息往往或不精細(xì)、或不準(zhǔn)確、或不完整、或不及時(shí),使得國(guó)家行政決策因之而難以達(dá)到預(yù)期效果。改造完善這些渠道需要耗費(fèi)大量成本和時(shí)間,于是在現(xiàn)有的、沉睡在各部門(mén)和企業(yè)系統(tǒng)中的業(yè)務(wù)數(shù)據(jù)中提取相關(guān)信息,以彌補(bǔ)現(xiàn)有信息渠道的各種不足,便成為信息獲取的新途徑和新思路。從目前業(yè)界所熱傳的所有大數(shù)據(jù)應(yīng)用成功案例看,絕大部分屬于人文社會(huì)領(lǐng)域,從一個(gè)側(cè)面印證了大數(shù)據(jù)對(duì)于改善國(guó)家宏觀治理的重要意義。有效開(kāi)發(fā)互聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用,可以顯著提升政府的國(guó)家治理能力和決策的科學(xué)性,這是許多國(guó)家政府和智庫(kù)的共識(shí)。因此,不少發(fā)達(dá)國(guó)家紛紛制訂本國(guó)的國(guó)家大數(shù)據(jù)戰(zhàn)略,我國(guó)也不例外。
4. 簡(jiǎn)單的事實(shí):所有大數(shù)據(jù)應(yīng)用成果都是業(yè)務(wù)數(shù)據(jù)的副產(chǎn)品
分析目前已有的大數(shù)據(jù)應(yīng)用成功案例,可以發(fā)現(xiàn)一個(gè)事實(shí):所有大數(shù)據(jù)應(yīng)用的數(shù)據(jù)源,都來(lái)自于非專(zhuān)屬于本應(yīng)用目標(biāo)的業(yè)務(wù)數(shù)據(jù)。換言之,所有大數(shù)據(jù)應(yīng)用的數(shù)據(jù)來(lái)源,都不是專(zhuān)為本應(yīng)用而特設(shè)的:啤酒和嬰兒尿布的關(guān)聯(lián)關(guān)系產(chǎn)自于對(duì)沃爾瑪超市結(jié)算柜臺(tái)的貨品銷(xiāo)售日志分析;阿里巴巴對(duì)2008年全球宏觀經(jīng)濟(jì)形勢(shì)的準(zhǔn)確預(yù)測(cè)來(lái)源于對(duì)淘寶網(wǎng)采購(gòu)單數(shù)量、規(guī)模和內(nèi)容的變化、以及變化的地理分布特征分析;美國(guó)國(guó)家安全部門(mén)對(duì)的鎖定,相當(dāng)部分來(lái)自于對(duì)互聯(lián)網(wǎng)巨頭所掌握的電郵的內(nèi)容分析,等等。原因很簡(jiǎn)單,由于成本或難度太高,人們不可能為了某項(xiàng)大數(shù)據(jù)應(yīng)用而專(zhuān)門(mén)去采集原始數(shù)據(jù)。大數(shù)據(jù)應(yīng)用大多只能使用那些已經(jīng)存在的、非為本應(yīng)用所特設(shè)的業(yè)務(wù)系統(tǒng)所積累的數(shù)據(jù)資源,且收集和維護(hù)這些數(shù)據(jù)的成本是由這些業(yè)務(wù)系統(tǒng)所屬單位承擔(dān)的。因此,大數(shù)據(jù)應(yīng)用是業(yè)務(wù)數(shù)據(jù)的副產(chǎn)品。
蓋緣于此,大數(shù)據(jù)應(yīng)用的數(shù)據(jù)源(即:合適的業(yè)務(wù)數(shù)據(jù))的尋找,本身就是一個(gè)難題。
(三) 大數(shù)據(jù)的辨識(shí)
1. 從應(yīng)用的視角觀察大數(shù)據(jù)
數(shù)據(jù)是服務(wù)于應(yīng)用的,大數(shù)據(jù)也不例外。
當(dāng)一個(gè)新的應(yīng)用出現(xiàn),現(xiàn)有業(yè)務(wù)數(shù)據(jù)無(wú)法滿足其數(shù)據(jù)需求時(shí),必須尋找新的數(shù)據(jù)源。在尋找過(guò)程中,如果自行采集數(shù)據(jù)能夠滿足需求,且成本能夠接受,則采取該方式是最好的選擇,因?yàn)椴杉倪^(guò)程和方法受需求者控制,所采集的數(shù)據(jù)最接近需求(如:十一五、十二五氣象部門(mén)建設(shè)的全國(guó)天氣雷達(dá)站網(wǎng)及遍布全國(guó)所有鄉(xiāng)鎮(zhèn)的地面自動(dòng)氣象站等)。而當(dāng)自行采集的成本過(guò)于昂貴、以致無(wú)法承受時(shí),選用替代數(shù)據(jù)便是將工作繼續(xù)進(jìn)行下去的唯一選擇了。以往信息相對(duì)貧乏的年代,可供選擇的合適的替代數(shù)據(jù)不多,許多工作因之而無(wú)法開(kāi)展?;ヂ?lián)網(wǎng)時(shí)代信息量暴增,替代數(shù)據(jù)的選擇范圍有了很大改善,使得許多過(guò)去無(wú)法開(kāi)展的工作,現(xiàn)在有可能開(kāi)展起來(lái)了。然而,由于這些替代數(shù)據(jù)自身不是因本需求而產(chǎn)生的,故不可避免地存在諸如:體量雖大但針對(duì)本需求所需的信息稀薄,信息質(zhì)量不高、故難以得到確切結(jié)論,許多現(xiàn)象和結(jié)論難以解釋等痼疾。于是,“是全體數(shù)據(jù)而不是樣本數(shù)據(jù)、是模糊結(jié)論而不是精確結(jié)論、是相關(guān)關(guān)系而不是因果關(guān)系”的大數(shù)據(jù)的理念和方法由此產(chǎn)生。
從應(yīng)用的角度評(píng)價(jià)大數(shù)據(jù),可以得出以下結(jié)論:
雖然就數(shù)據(jù)血統(tǒng)而言,大數(shù)據(jù)在實(shí)際應(yīng)用中往往不屬于專(zhuān)為本應(yīng)用采集的血統(tǒng)純正的數(shù)據(jù),但它的存在和被使用卻是使得眾多創(chuàng)新應(yīng)用得以實(shí)現(xiàn)。因此大數(shù)據(jù)是資源。
當(dāng)今新的時(shí)代已經(jīng)進(jìn)入信息經(jīng)濟(jì)和知識(shí)經(jīng)濟(jì)的新時(shí)代,這是一個(gè)以信息和知識(shí)為基礎(chǔ)的經(jīng)濟(jì),是一個(gè)在更大程度上依賴于在生產(chǎn)、分配和使用等各個(gè)環(huán)節(jié)中知識(shí)和信息所作貢獻(xiàn)的新的經(jīng)濟(jì)。因此大數(shù)據(jù)是新的生產(chǎn)力要素。
2. 大數(shù)據(jù)的可能與不能
大數(shù)據(jù)可能提供有價(jià)值的參考信息,包括:
大數(shù)據(jù)可能為政府的科學(xué)決策提供有價(jià)值的參考信息。
大數(shù)據(jù)可能對(duì)企業(yè)的業(yè)務(wù)改進(jìn)提供數(shù)據(jù)支持和信息支持。
大數(shù)據(jù)可能為一些社會(huì)科學(xué)領(lǐng)域的學(xué)科研究提供有價(jià)值的信息。
大數(shù)據(jù)甚至有可能對(duì)自然科學(xué)研究中的一些新的科學(xué)機(jī)理的發(fā)現(xiàn)提供參考信息。
與此同時(shí),不能指望單靠大數(shù)據(jù)就能全面提高政府決策水平。因?yàn)闆Q策依賴于多方面信息的綜合,大數(shù)據(jù)只是提供信息的途徑之一,僅靠它是無(wú)法解決政府決策的諸多問(wèn)題的。高層決策主要面對(duì)的是諸多不確定性環(huán)境,需要廣闊的視野與豐富的經(jīng)驗(yàn)。深厚的歷史背景、細(xì)微的地緣差異、復(fù)雜的宗教派系之爭(zhēng)以及民族間的矛盾等等,這些因素交織在一起,關(guān)系復(fù)雜而頭緒繁多,遠(yuǎn)非數(shù)據(jù)統(tǒng)計(jì)分析那樣簡(jiǎn)單。大數(shù)據(jù)能夠?yàn)樾姓Q策提供一項(xiàng)或多項(xiàng)較為準(zhǔn)確的參考信息,改善影響決策的信息的質(zhì)量,但信息的綜合和最終的決策必須依靠人。
其次,大數(shù)據(jù)不可能直接解決科學(xué)機(jī)理問(wèn)題。從大數(shù)據(jù)“模糊而非精確”、“只求相關(guān)而非探究因果”的理念可以看出,大數(shù)據(jù)只關(guān)注于現(xiàn)象之間的關(guān)聯(lián)性,但不探究這些關(guān)聯(lián)背后的因果關(guān)系,但求知其然,而不愿(甚至不屑)探究其所以然。之所以如此,是與大數(shù)據(jù)的理論構(gòu)建者所固有的對(duì)世界的認(rèn)知:“混亂構(gòu)成了世界的本質(zhì),也構(gòu)成了人腦的本質(zhì)”的哲學(xué)觀所決定的。本文無(wú)意探討哲學(xué)問(wèn)題,但由此可以推斷:就認(rèn)識(shí)論而言,大數(shù)據(jù)屬于經(jīng)驗(yàn)主義范疇,它無(wú)法直接解決科學(xué)問(wèn)題,尤其是以科學(xué)機(jī)理(即所謂因果關(guān)系)為核心的氣象預(yù)報(bào)科學(xué)問(wèn)題。在氣象理論研究領(lǐng)域,大數(shù)據(jù)可能的貢獻(xiàn)在于提供參考信息(如:具有一定關(guān)聯(lián)度的氣象要素組合等),以供氣象科學(xué)家們分析研究。
二、氣象大數(shù)據(jù)辨析
(一) 氣象大數(shù)據(jù)的內(nèi)涵
就數(shù)據(jù)本身而言,氣象大數(shù)據(jù)是指所有與氣象工作相關(guān)的數(shù)據(jù)總和;從來(lái)源渠道劃分,氣象大數(shù)據(jù)可分為“行業(yè)大數(shù)據(jù)”和“互聯(lián)網(wǎng)大數(shù)據(jù)”兩類(lèi)。其中:
“氣象行業(yè)大數(shù)據(jù)”由與氣象部門(mén)各項(xiàng)工作相關(guān)、且產(chǎn)生自氣象部門(mén)內(nèi)部的所有數(shù)據(jù)組成,包括:由氣象部門(mén)建設(shè)的、具有國(guó)內(nèi)最高專(zhuān)業(yè)水準(zhǔn)的氣象探測(cè)體系所產(chǎn)生的氣象專(zhuān)業(yè)探測(cè)數(shù)據(jù),其它部門(mén)自行采集、通過(guò)數(shù)據(jù)共享/交換等方式匯聚到氣象部門(mén)、且經(jīng)過(guò)氣象部門(mén)嚴(yán)格質(zhì)量控制的氣象要素探測(cè)數(shù)據(jù),由氣象業(yè)務(wù)部門(mén)和業(yè)務(wù)系統(tǒng)產(chǎn)生的各類(lèi)氣象服務(wù)產(chǎn)品數(shù)據(jù)、派生數(shù)據(jù)及中間產(chǎn)品數(shù)據(jù),職能部門(mén)各管理系統(tǒng)(如:財(cái)務(wù)系統(tǒng)、人力資源系統(tǒng)、項(xiàng)目管理系統(tǒng)等)所產(chǎn)生和管理的數(shù)據(jù),各業(yè)務(wù)和管理系統(tǒng)的狀態(tài)數(shù)據(jù)和日志數(shù)據(jù),等等。
“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”由互聯(lián)網(wǎng)上與氣象相關(guān)的所有數(shù)據(jù)所組成,包括:移動(dòng)終端搭載的氣象要素傳感設(shè)備的探測(cè)數(shù)據(jù),網(wǎng)友隨手拍并上傳的天氣狀態(tài)照片,搜索引擎對(duì)氣象相關(guān)敏感詞的統(tǒng)計(jì)分析數(shù)據(jù),其它所有可供氣象部門(mén)業(yè)務(wù)和服務(wù)應(yīng)用的互聯(lián)網(wǎng)數(shù)據(jù)等等。
“氣象行業(yè)大數(shù)據(jù)”與“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”間存在很大差異,限于篇幅,難以在此做詳細(xì)分析。簡(jiǎn)言之,“氣象行業(yè)大數(shù)據(jù)”屬于氣象業(yè)務(wù)數(shù)據(jù),其生成的直接目標(biāo)是服務(wù)于氣象業(yè)務(wù)和工作的,故其氣象信息濃度高、各種技術(shù)指標(biāo)亦最為符合氣象業(yè)務(wù)和工作的各項(xiàng)要求。“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”則不然,它不是專(zhuān)為氣象工作而生成的,它產(chǎn)自于其它非氣象部門(mén)的行業(yè)、企業(yè),是為滿足這些行業(yè)和企業(yè)自身業(yè)務(wù)目標(biāo)而生成的。這些數(shù)據(jù)之所以被納入“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”的范圍,是因?yàn)檫@些數(shù)據(jù)包含有與特定氣象應(yīng)用相關(guān)的信息內(nèi)容,而這些內(nèi)容是氣象行業(yè)大數(shù)據(jù)所缺乏的;亦即,這些數(shù)據(jù)是為彌補(bǔ)氣象行業(yè)大數(shù)據(jù)在內(nèi)容和時(shí)空密度等方面的不足而從互聯(lián)網(wǎng)上收集來(lái)的;故其氣象信息的濃度、數(shù)據(jù)質(zhì)量等參差不齊,各項(xiàng)技術(shù)指標(biāo)也往往差強(qiáng)人意。即便就氣象要素而言,兩者之間存在的差異也是很明顯的,見(jiàn)表1:
表1、氣象行業(yè)/互聯(lián)網(wǎng)大數(shù)據(jù)中氣象要素之間的差異
從內(nèi)容上劃分,氣象行業(yè)大數(shù)據(jù)大致有:氣象觀測(cè)原始數(shù)據(jù)、氣象觀測(cè)產(chǎn)品數(shù)據(jù)、氣象業(yè)務(wù)產(chǎn)品數(shù)據(jù)、氣象服務(wù)產(chǎn)品數(shù)據(jù)、業(yè)務(wù)日志數(shù)據(jù)、設(shè)備及系統(tǒng)狀態(tài)數(shù)據(jù)、氣象管理數(shù)據(jù)等等。需要說(shuō)明的是,目前對(duì)氣象數(shù)據(jù)范疇的界定,只包含前四項(xiàng),即:氣象觀測(cè)原始數(shù)據(jù)、氣象觀測(cè)產(chǎn)品數(shù)據(jù)、氣象業(yè)務(wù)產(chǎn)品數(shù)據(jù)、氣象服務(wù)產(chǎn)品數(shù)據(jù)。其后的業(yè)務(wù)日志數(shù)據(jù)、設(shè)備及系統(tǒng)狀態(tài)數(shù)據(jù)、氣象管理數(shù)據(jù)等尚未正式納入氣象數(shù)據(jù)的定義范圍。
從性質(zhì)上考察,氣象行業(yè)大數(shù)據(jù)屬于“氣象業(yè)務(wù)數(shù)據(jù)”范疇,即:每類(lèi)數(shù)據(jù)都有其特定的使用目的、使用對(duì)象及數(shù)據(jù)形態(tài),且所有數(shù)據(jù)的初始目的都是圍繞滿足氣象部門(mén)自身運(yùn)轉(zhuǎn)所特有的數(shù)據(jù)需求的。
從體量上衡量,“氣象行業(yè)大數(shù)據(jù)”雖可勉強(qiáng)躋身大數(shù)據(jù)行列(PB級(jí)),但較之互聯(lián)網(wǎng)公司而言,仍有至少2~4個(gè)數(shù)量級(jí)之間的差距。以目前業(yè)界現(xiàn)有處理技術(shù),完全可以滿足“氣象行業(yè)大數(shù)據(jù)”在分析處理方面的時(shí)效要求(數(shù)值預(yù)報(bào)除外)。因此對(duì)于“氣象行業(yè)大數(shù)據(jù)”而言,單純的管理和處理技術(shù)不是問(wèn)題所在。
(二) 氣象大數(shù)據(jù)與預(yù)報(bào)準(zhǔn)確率
將大數(shù)據(jù)理念和方法全面應(yīng)用到氣象部門(mén),在部門(mén)內(nèi)開(kāi)展氣象大數(shù)據(jù)工作,能否有效提高預(yù)報(bào)準(zhǔn)確率,這是本文首先必須正面回答的問(wèn)題。
1. 大數(shù)據(jù)理念和方法探究
《大數(shù)據(jù)時(shí)代》一書(shū)的作者將大數(shù)據(jù)理念的精髓概括為三點(diǎn):“不是隨機(jī)樣本,而是全體數(shù)據(jù);不是精確性,而是混雜性;不是因果關(guān)系,而是相關(guān)關(guān)系”。深究下去,不免使人產(chǎn)生質(zhì)疑:首先,如果通過(guò)分析少量的樣本數(shù)據(jù)就可以得到事物的準(zhǔn)確本質(zhì)(如:適用于數(shù)學(xué)歸納法的數(shù)據(jù)集),是否還有必要花費(fèi)巨大成本去收集和處理全體數(shù)據(jù)?其次,如果能夠得到準(zhǔn)確數(shù)據(jù)或結(jié)論(如:臺(tái)風(fēng)路徑和登陸地點(diǎn)、暴雨的落區(qū)),是否還有必要刻意去追求混雜不準(zhǔn)確的數(shù)據(jù)或結(jié)論;第三,如果能夠了解并掌握因果關(guān)系(如:人類(lèi)活動(dòng)與氣候變暖之間的關(guān)系),是否還要放棄對(duì)因果關(guān)系的探尋,而只去分析相關(guān)關(guān)系?
答案顯然都是否定的。
所以,不能生搬硬套大數(shù)據(jù)的理念和方法,否則可能會(huì)出現(xiàn)有違基本常識(shí)的舉措和結(jié)果。對(duì)于大數(shù)據(jù)理念和方法,其合理的解釋?xiě)?yīng)該是:如果通過(guò)分析少量的樣本數(shù)據(jù)無(wú)法得到事物的本質(zhì),則人們將不得不花費(fèi)更多成本去搜集和處理全體數(shù)據(jù),以求得到事物的真實(shí)本質(zhì)。如果得不到準(zhǔn)確的數(shù)據(jù)或結(jié)論,則人們將不得不接受那些差強(qiáng)人意的不十分準(zhǔn)確的數(shù)據(jù)或結(jié)論。如果無(wú)法了解到事物之間的因果關(guān)系,則人們將退而求其次,通過(guò)分析相關(guān)關(guān)系來(lái)了解事物。
因此,由《大數(shù)據(jù)時(shí)代》作者所定義的大數(shù)據(jù)方法,不應(yīng)該是刻意為之的,而應(yīng)該是不得已而為之的:當(dāng)現(xiàn)有的觀測(cè)數(shù)據(jù)無(wú)法滿足業(yè)務(wù)需求、且布設(shè)新的探測(cè)設(shè)備代價(jià)太高或無(wú)法布設(shè)時(shí),只能尋找其它代用數(shù)據(jù),以彌補(bǔ)現(xiàn)有觀測(cè)數(shù)據(jù)的某些不足。當(dāng)無(wú)法做出準(zhǔn)確預(yù)報(bào)時(shí),概率預(yù)報(bào)是退而求其次的預(yù)報(bào)方法。當(dāng)氣候變化規(guī)律目前無(wú)法完全掌握時(shí),氣候統(tǒng)計(jì)預(yù)測(cè)方法便是填補(bǔ)氣候預(yù)測(cè)方法空白的可接受的選擇之一了,如此等等。
2. 觀測(cè)數(shù)據(jù)和科學(xué)研究是氣象學(xué)科的主要支撐
上世紀(jì)二、三十年代,無(wú)線電通信技術(shù)引入到氣象地面和高空觀測(cè)信息通信,人們能夠獲得大范圍的大氣立體觀測(cè)資料,在此背景下,科學(xué)家們通過(guò)對(duì)觀測(cè)資料的深入分析,并根據(jù)流體力學(xué)、動(dòng)力學(xué)/熱力學(xué)定律等物理學(xué)原理,構(gòu)建起了氣象學(xué)科的基本框架,并在日后的歲月里不斷豐富完善。因此,氣象學(xué)科是建立在觀測(cè)資料基礎(chǔ)之上,并由氣象學(xué)家們通過(guò)深入的科學(xué)分析研究,發(fā)現(xiàn)其中的內(nèi)在機(jī)理,進(jìn)而形成相應(yīng)的理論體系而最終構(gòu)建的。隨著資料的不斷豐富,科學(xué)家們不斷發(fā)現(xiàn)著新的天氣/氣候變化內(nèi)在科學(xué)機(jī)理,氣象學(xué)科因此得以成長(zhǎng)發(fā)展。如果沒(méi)有氣象科學(xué)家天才卓越的分析研究成果,氣象觀測(cè)資料便僅僅是一堆天氣現(xiàn)象的記錄數(shù)據(jù)。因此對(duì)于氣象學(xué)科而言,觀測(cè)數(shù)據(jù)/產(chǎn)品和科學(xué)分析研究,二者缺一不可。而在人工智能達(dá)到能夠具有科學(xué)家們深厚的知識(shí)背景、敏銳的捕捉現(xiàn)象的本能、嚴(yán)謹(jǐn)?shù)耐蒲菁记珊吞觳诺木C合分析判斷能力之前,這些科學(xué)分析研究工作就只能由科學(xué)家們承擔(dān)并完成。
氣象業(yè)務(wù)的現(xiàn)代化水平最終體現(xiàn)在氣象預(yù)報(bào)的準(zhǔn)確率,所追求的恰恰就是精確和及時(shí)。如果不掌握天氣變化的內(nèi)在規(guī)律(即所謂因果關(guān)系),單憑現(xiàn)象要素之間相關(guān)性的強(qiáng)弱,是很難達(dá)到及時(shí)精確預(yù)報(bào)的要求的。地震前許多動(dòng)物的行為舉止往往異常,但動(dòng)物舉止異常卻不見(jiàn)得預(yù)示著地震的即將發(fā)生。止步于天氣現(xiàn)象與氣象要素之間相關(guān)性的統(tǒng)計(jì)分析,不對(duì)其做進(jìn)一步的機(jī)理分析研究,對(duì)氣象學(xué)科而言,不是科學(xué)的態(tài)度。
3. 統(tǒng)計(jì)分析是氣象部門(mén)常用的方法
探究科學(xué)機(jī)理是十分艱難的。在尚未掌握科學(xué)機(jī)理的情況下,統(tǒng)計(jì)分析是常用的預(yù)報(bào)方法,如氣候領(lǐng)域里的氣候統(tǒng)計(jì)預(yù)測(cè)。這種通過(guò)對(duì)長(zhǎng)時(shí)間序列氣象觀測(cè)資料進(jìn)行統(tǒng)計(jì)分析,以歷史上相似天氣現(xiàn)象所發(fā)生的天氣(或氣候)變化的概率為依據(jù),進(jìn)行氣候預(yù)測(cè)的方法,自氣候?qū)W科發(fā)端之日起,便一直在采用,已達(dá)數(shù)十年之久。因此“大數(shù)據(jù)”所推崇的統(tǒng)計(jì)分析方法,氣象部門(mén)早在數(shù)十年前便已悉數(shù)使用,并不陌生。
但這并不意味著氣象部門(mén)在該領(lǐng)域的科學(xué)研究止步于此。事實(shí)上,目前基于動(dòng)力框架的氣候數(shù)值預(yù)報(bào)模式(尤其是集合預(yù)報(bào)模式等)等方法一直在積極地試驗(yàn)和嘗試使用之中,目的就在于探索能夠有效發(fā)現(xiàn)氣候變化規(guī)律(即所謂因果關(guān)系)的路徑和方法――雖然氣候統(tǒng)計(jì)預(yù)測(cè)方法仍在使用之中。目前數(shù)值天氣預(yù)報(bào)和數(shù)值氣候預(yù)測(cè)中所大量采用的集合預(yù)報(bào)方法,就是“因果”與“相關(guān)”、機(jī)理與統(tǒng)計(jì)之間有機(jī)結(jié)合的一種嘗試。
4. 氣象觀測(cè)數(shù)據(jù)是所有數(shù)據(jù)中最重要的貢獻(xiàn)者
從上文“氣象大數(shù)據(jù)的內(nèi)涵”中的分析可得知,與一般大數(shù)據(jù)所使用的數(shù)據(jù)源不同,氣象行業(yè)大數(shù)據(jù)中的氣象觀測(cè)數(shù)據(jù)及產(chǎn)品是專(zhuān)門(mén)為氣象預(yù)報(bào)業(yè)務(wù)工作而采集的,其時(shí)空分布、數(shù)據(jù)質(zhì)量及其它各種技術(shù)指標(biāo)最符合氣象業(yè)務(wù)的各項(xiàng)要求,氣象業(yè)務(wù)所需信息的濃度也最高。比較而言,氣象互聯(lián)網(wǎng)大數(shù)據(jù)的氣象信息密度不高,數(shù)據(jù)質(zhì)量也難以保證,其它技術(shù)指標(biāo)更是難以保證滿足氣象應(yīng)用的需求。因此,從氣象行業(yè)大數(shù)據(jù)中的氣象觀測(cè)數(shù)據(jù)和產(chǎn)品產(chǎn)生出來(lái)的統(tǒng)計(jì)分析結(jié)論以及學(xué)科科學(xué)機(jī)理的發(fā)現(xiàn)是具有權(quán)威性的。就預(yù)報(bào)準(zhǔn)確率而言,氣象觀測(cè)數(shù)據(jù)/產(chǎn)品是所有數(shù)據(jù)中最重要的貢獻(xiàn)者,氣象互聯(lián)網(wǎng)大數(shù)據(jù)是它的補(bǔ)充而絕非替代者。
5. 大數(shù)據(jù)并非提高預(yù)報(bào)準(zhǔn)確率的終南捷徑
綜上所述,氣象預(yù)報(bào)對(duì)準(zhǔn)確率永遠(yuǎn)的追求決定了,氣象學(xué)科必須以探究并最終掌握大氣運(yùn)動(dòng)的內(nèi)在機(jī)理為工作目標(biāo)。而大數(shù)據(jù)方法是在特定的、理想狀態(tài)無(wú)法滿足情況下的退而求其次的方法,即:在尚未完全掌握大氣運(yùn)動(dòng)規(guī)律、無(wú)法通過(guò)理論推演和方程計(jì)算準(zhǔn)確預(yù)報(bào)天氣或氣候的情況下,統(tǒng)計(jì)分析方法也許是一種補(bǔ)充完善的途徑。在無(wú)法斷定抽樣分析所得結(jié)論的正確性時(shí),分析全體數(shù)據(jù)也許是一種最終解決方案。在無(wú)法提供準(zhǔn)確預(yù)報(bào)時(shí),概率預(yù)報(bào)也是一種不錯(cuò)的選擇。但是,如果通過(guò)努力有可能達(dá)到理想狀態(tài),人們便不應(yīng)該盲目的生搬硬套大數(shù)據(jù)方法;因?yàn)閷?duì)氣象預(yù)報(bào)而言,因果關(guān)系的掌握遠(yuǎn)比相關(guān)關(guān)系的發(fā)現(xiàn)更為重要,后者是為前者提供線索而非取代前者的。同樣,精確的分析和預(yù)報(bào)結(jié)論永遠(yuǎn)比模糊的分析和預(yù)報(bào)結(jié)論更加滿足預(yù)報(bào)需求,收集和處理樣本數(shù)據(jù)永遠(yuǎn)比收集和處理全體數(shù)據(jù)更為高效和節(jié)省資源。
所以,大數(shù)據(jù)理念和方法并非提高預(yù)報(bào)準(zhǔn)確率的終南捷徑。
當(dāng)然,筆者并不否認(rèn)大數(shù)據(jù)方法在客觀預(yù)報(bào)產(chǎn)品解釋?xiě)?yīng)用方面對(duì)預(yù)報(bào)效果的改善有所幫助等正面作用,但這終究是輔、修飾性的,不是提高預(yù)報(bào)準(zhǔn)確率的根本途徑,且效果難以具體量化。
尤其需要強(qiáng)調(diào)的是,以在預(yù)報(bào)準(zhǔn)確率方面趕上世界先進(jìn)水平為目標(biāo)的氣象工作者,絕不能因擁有了大數(shù)據(jù)這種退而求其次的方法而放棄對(duì)掌握氣象規(guī)律這一理想事業(yè)的追求。而且,這一追求的最終實(shí)現(xiàn),只能靠觀測(cè)數(shù)據(jù)和產(chǎn)品在時(shí)空密度和質(zhì)量上的不斷提高,以及科學(xué)家們辛勤的分析研究。由于就數(shù)據(jù)而言,對(duì)提高預(yù)報(bào)準(zhǔn)確率貢獻(xiàn)價(jià)值最高的仍然是氣象觀測(cè)數(shù)據(jù)及產(chǎn)品,因此研制出高質(zhì)量、高時(shí)空密度的氣象觀測(cè)產(chǎn)品數(shù)據(jù),便仍將是提高預(yù)報(bào)準(zhǔn)確率以及氣象科學(xué)研究最重要的基礎(chǔ)性工作。至于科學(xué)研究工作,沒(méi)有捷徑可走,在這里“工匠精神”永遠(yuǎn)不會(huì)過(guò)時(shí)。
(三) 氣象大數(shù)據(jù)的價(jià)值分析
上文“氣象大數(shù)據(jù)與預(yù)報(bào)準(zhǔn)確率”的分析并非意味著大數(shù)據(jù)在氣象部門(mén)無(wú)所作為,而只是想說(shuō)明,大數(shù)據(jù)并非包治百病的靈丹妙藥,而是一個(gè)宏觀上可在全社會(huì)產(chǎn)生巨大正面效益、但也存在一些效益不甚顯著區(qū)域的、實(shí)實(shí)在在的思維理念和工作方法。說(shuō)到底,氣象部門(mén)之所以引進(jìn)大數(shù)據(jù)理念和方法,并非為了大數(shù)據(jù)而大數(shù)據(jù),而是為了解決實(shí)際工作中存在的問(wèn)題。因此,氣象大數(shù)據(jù)必須以業(yè)務(wù)和工作需求為引領(lǐng)。當(dāng)業(yè)務(wù)或工作中出現(xiàn)的問(wèn)題沒(méi)有合適的數(shù)據(jù)信息,或者雖有數(shù)據(jù)但常規(guī)處理方法無(wú)助于問(wèn)題的解決時(shí),氣象大數(shù)據(jù)也許是一種可以嘗試的解決途徑。通過(guò)“氣象行業(yè)大數(shù)據(jù)”中的各類(lèi)數(shù)據(jù),在履行其各自的直接業(yè)務(wù)目標(biāo)之外,使各類(lèi)數(shù)據(jù)間彼此有機(jī)融合并協(xié)同分析,是能夠發(fā)掘出新的數(shù)據(jù)價(jià)值、信息價(jià)值和知識(shí)價(jià)值,從而推動(dòng)業(yè)務(wù)的發(fā)展和管理的進(jìn)步,不斷提高氣象部門(mén)的工作品質(zhì)的。氣象部門(mén)內(nèi)層級(jí)堆疊、工作效率不高的問(wèn)題長(zhǎng)期以來(lái)有目共睹,“智慧氣象”中“精細(xì)的科學(xué)管理”,即可從打通部門(mén)藩籬、消除管理信息孤島開(kāi)始。通過(guò)管理信息的整合,優(yōu)化管理流程,增強(qiáng)職能部門(mén)間的工作協(xié)同,提高管理效率。通過(guò)充分挖掘和發(fā)揮出管理信息應(yīng)用的價(jià)值來(lái)提高管理工作效率,進(jìn)而提高氣象部門(mén)整體的工作效率,通過(guò)大幅提高工作效率來(lái)創(chuàng)造價(jià)值,等等。
“氣象行業(yè)大數(shù)據(jù)”產(chǎn)生自氣象部門(mén),是氣象部門(mén)賴以運(yùn)轉(zhuǎn)的最主要資源,同時(shí)也是氣象部門(mén)各項(xiàng)工作的記錄載體,在所有數(shù)據(jù)資源中,它所含有的氣象信息最濃;故其應(yīng)用領(lǐng)域首先應(yīng)在于氣象部門(mén)業(yè)務(wù)工作的有效運(yùn)轉(zhuǎn),其次才是社會(huì)服務(wù)?!皻庀笮袠I(yè)大數(shù)據(jù)”潛在價(jià)值的挖掘和發(fā)揮,也應(yīng)當(dāng)以提高氣象部門(mén)工作能力為首要目標(biāo)。用好“氣象行業(yè)大數(shù)據(jù)”,是開(kāi)展氣象大數(shù)據(jù)工作的重要內(nèi)容和檢驗(yàn)指標(biāo)。
與此同時(shí),“氣象行業(yè)大數(shù)據(jù)”與“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”之間的有效融合,有可能大幅提高氣象觀探測(cè)的時(shí)空密度。物聯(lián)網(wǎng)技術(shù)的有效應(yīng)用,可以使“氣象行業(yè)大數(shù)據(jù)”中專(zhuān)業(yè)氣象探測(cè)的時(shí)空分辨率變得富有彈性,以更加有效地應(yīng)對(duì)各種業(yè)務(wù)需求和社會(huì)服務(wù)需求。此外,高時(shí)空分辨率的探測(cè)數(shù)據(jù)也可為氣象科學(xué)家發(fā)現(xiàn)新的大氣運(yùn)動(dòng)機(jī)理和客觀規(guī)律提供前所未有的數(shù)據(jù)資源。
就應(yīng)用對(duì)象及范圍而言,“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”中氣象要素?cái)?shù)據(jù)的產(chǎn)生是與搭載傳感儀器的擁有者――人――密切相關(guān)的,其所沉積下來(lái)的信息中包含有珍貴的人類(lèi)活動(dòng)痕跡。凡人跡所至且移動(dòng)通信可覆蓋之地,均有可能成為“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”的數(shù)據(jù)源。雖然其傳感器搭載體的形式各異,探測(cè)環(huán)境也很不規(guī)范,但也正因?yàn)槠浯钶d體擁有者是人,可放置或出入于各種人類(lèi)活動(dòng)場(chǎng)所,從餐廳到曠野、從巷道到影院、從居所到河畔,皆可隨時(shí)對(duì)各種場(chǎng)所進(jìn)行氣象基本要素探測(cè),這為氣象服務(wù)的精細(xì)化、專(zhuān)業(yè)化和個(gè)性化提供了“氣象行業(yè)大數(shù)據(jù)”所難以甚至無(wú)法提供的現(xiàn)場(chǎng)氣象要素?cái)?shù)據(jù)。此外,利用已廣泛布設(shè)的非氣象監(jiān)測(cè)設(shè)備所采集的信息,通過(guò)分析得出所需要的氣象要素,以彌補(bǔ)專(zhuān)業(yè)氣象探測(cè)設(shè)備無(wú)法獲得的探測(cè)信息,是一條值得深入探索的途徑,GPS/MET的發(fā)掘和廣泛應(yīng)用就是一個(gè)典型的成功事例。可以預(yù)期,“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”與“氣象行業(yè)大數(shù)據(jù)”以及其它行業(yè)大數(shù)據(jù)之間的有效融合,可在氣象社會(huì)服務(wù)領(lǐng)域開(kāi)辟出空前繁榮的氣象服務(wù)新局面。
總之,數(shù)據(jù)是為應(yīng)用服務(wù)的,氣象大數(shù)據(jù)必須將業(yè)務(wù)和工作做為最主要的引領(lǐng)。氣象大數(shù)據(jù)戰(zhàn)略的首要內(nèi)容,不是數(shù)據(jù)的收集、數(shù)據(jù)源的拓展以及海量數(shù)據(jù)的管理技術(shù),而是氣象工作的持續(xù)創(chuàng)新。在技術(shù)創(chuàng)新、原理創(chuàng)新、概念創(chuàng)新和思想創(chuàng)新的氛圍中,不斷涌現(xiàn)出新的應(yīng)用,根據(jù)新應(yīng)用在信息和數(shù)據(jù)需求方面的特點(diǎn),充分發(fā)掘現(xiàn)有數(shù)據(jù)資源的價(jià)值,同時(shí)有針對(duì)性地尋找并拓展新的數(shù)據(jù)資源,合理運(yùn)用大數(shù)據(jù)有關(guān)技術(shù),處理并提煉出新的有價(jià)值的信息,以推進(jìn)創(chuàng)新的不斷實(shí)現(xiàn)。與此同時(shí),由于創(chuàng)新本身是不同概念之間的有機(jī)連接和融合,多角度的觀察會(huì)增加概念連接的機(jī)會(huì),大數(shù)據(jù)所固有的關(guān)聯(lián)分析以及由此產(chǎn)生的相關(guān)事物的現(xiàn)象信息,對(duì)開(kāi)拓概念連接的范圍會(huì)有所幫助,對(duì)氣象部門(mén)在新形勢(shì)下的創(chuàng)新當(dāng)有所裨益。于是,初始創(chuàng)新啟動(dòng)大數(shù)據(jù)應(yīng)用,大數(shù)據(jù)應(yīng)用促進(jìn)新的創(chuàng)新――這應(yīng)該是氣象大數(shù)據(jù)戰(zhàn)略的基本輪廓。
三、開(kāi)展氣象大數(shù)據(jù)工作的前提條件
(一) 現(xiàn)有氣象數(shù)據(jù)的梳理
長(zhǎng)期以來(lái),人們普遍將氣象觀測(cè)數(shù)據(jù)及產(chǎn)品、以及少量的氣象服務(wù)產(chǎn)品做為氣象數(shù)據(jù)的全部,以現(xiàn)代信息化理論和實(shí)踐來(lái)考量,這無(wú)疑是片面的。氣象部門(mén)是一個(gè)整體,其有效運(yùn)轉(zhuǎn)除需要觀測(cè)數(shù)據(jù)外,財(cái)務(wù)、人事、績(jī)效、資產(chǎn)甚至設(shè)備狀態(tài)信息等數(shù)據(jù),都是不可或缺的重要信息資源,應(yīng)當(dāng)無(wú)一遺漏地納入氣象數(shù)據(jù)的范疇。事實(shí)上,由于長(zhǎng)期以來(lái)對(duì)氣象數(shù)據(jù)內(nèi)涵理解的局限性,使得部門(mén)內(nèi)對(duì)氣象數(shù)據(jù)的關(guān)注點(diǎn)長(zhǎng)期聚焦在氣象觀測(cè)數(shù)據(jù),相應(yīng)的規(guī)范標(biāo)準(zhǔn)亦多以觀測(cè)數(shù)據(jù)為對(duì)象,其它類(lèi)別的數(shù)據(jù)則所涉甚少,甚至沒(méi)有涉及。這種不平衡導(dǎo)致了這些其它類(lèi)別數(shù)據(jù)在管理上的各自為政、規(guī)格上的無(wú)章可循、信息間的彼此隔離、質(zhì)量上的參差不齊、以及使用上的困難無(wú)序和低效。即便是長(zhǎng)期受到關(guān)注的氣象觀測(cè)數(shù)據(jù),存在問(wèn)題亦不可忽視,以數(shù)據(jù)質(zhì)量為例,眾所周知,在周邊環(huán)境未發(fā)生非氣象因素改變的情況下,探測(cè)數(shù)據(jù)的質(zhì)量直接取決于傳感設(shè)備自身狀態(tài)的正常與否。然而到目前為止,除氣象衛(wèi)星和天氣雷達(dá)等高端探測(cè)儀器外,其它如地面自動(dòng)氣象站等,沒(méi)有探測(cè)設(shè)備自身狀態(tài)信息的獲取途徑,探測(cè)設(shè)備狀態(tài)的判定需要依靠其所采集的氣象要素是否合理、是否超出理論極限范疇等被動(dòng)式手段來(lái)完成,于是出現(xiàn)兩個(gè)問(wèn)題:其一,對(duì)于真實(shí)的極端天氣事件(如局地特大暴雨)數(shù)據(jù),有可能因其數(shù)值超出氣候極值而導(dǎo)致數(shù)據(jù)正確性的誤判;其二,故障設(shè)備從開(kāi)始發(fā)生故障到被檢測(cè)出來(lái)的這段時(shí)間難以確定,從而導(dǎo)致這段時(shí)間內(nèi)觀測(cè)數(shù)據(jù)的質(zhì)量無(wú)法保證。由此亦可推論,探測(cè)設(shè)備狀態(tài)信息是相當(dāng)重要的業(yè)務(wù)數(shù)據(jù),但遺憾的是,該類(lèi)數(shù)據(jù)至今既無(wú)相關(guān)標(biāo)準(zhǔn),也未正式納入氣象數(shù)據(jù)的管理范疇。
需要指出的是,不少技術(shù)人士將所有氣象數(shù)據(jù)納入統(tǒng)一管理平臺(tái)(如:Cimiss)視為氣象數(shù)據(jù)治理的完成,這無(wú)疑也是片面的。事實(shí)上,如果上述諸如數(shù)據(jù)定義、數(shù)據(jù)分類(lèi)/分級(jí)、數(shù)據(jù)分布、數(shù)據(jù)操作等諸多問(wèn)題沒(méi)有解決,氣象數(shù)據(jù)沒(méi)有經(jīng)過(guò)科學(xué)的梳理和配置,所有氣象數(shù)據(jù)在形式上的匯聚便起不到高效管理、有效應(yīng)用和長(zhǎng)期支持業(yè)務(wù)發(fā)展(包括業(yè)務(wù)變更)的作用。
(二) 氣象數(shù)據(jù)的規(guī)劃和治理
要搞好氣象大數(shù)據(jù),首先要管理好做為氣象部門(mén)核心資源的“氣象行業(yè)大數(shù)據(jù)”(亦即所謂“氣象數(shù)據(jù)”)。在此,一個(gè)極為重要的基礎(chǔ)性工作――對(duì)氣象數(shù)據(jù)的全面規(guī)劃和治理――是無(wú)法跨越的。
氣象部門(mén)的所有各項(xiàng)工作中,無(wú)時(shí)無(wú)刻不充滿著信息的產(chǎn)生、流動(dòng)和使用。要使每個(gè)單位內(nèi)部、單位之間、單位與外部門(mén)單位的頻繁、復(fù)雜的信息流暢通,充分發(fā)揮信息資源的作用,不進(jìn)行統(tǒng)一的、全面的規(guī)劃是不可能的。氣象數(shù)據(jù)規(guī)劃,實(shí)質(zhì)上就是氣象部門(mén)的信息資源規(guī)劃,是對(duì)氣象部門(mén)日常運(yùn)轉(zhuǎn)所需要的各種信息,從采集、處理、傳輸?shù)绞褂玫壬芷诟鱾€(gè)環(huán)節(jié)的全面規(guī)劃。其目的,是通過(guò)有效管理氣象數(shù)據(jù),實(shí)現(xiàn)氣象部門(mén)內(nèi)外數(shù)據(jù)流的暢通以及數(shù)據(jù)資源的有效利用,進(jìn)而達(dá)到工作的流暢、業(yè)務(wù)的融合和整體的協(xié)同,從而提高氣象部門(mén)的工作效率和效益。通過(guò)氣象數(shù)據(jù)規(guī)劃,可以梳理業(yè)務(wù)流程和管理流程,厘清信息需求、建立部門(mén)行業(yè)的信息標(biāo)準(zhǔn)和信息系統(tǒng)模型,并據(jù)此來(lái)繼承、整合、優(yōu)化、改進(jìn)乃至再造業(yè)務(wù)流程及業(yè)務(wù)系統(tǒng),從而積極穩(wěn)步地推進(jìn)氣象大數(shù)據(jù)戰(zhàn)略。該項(xiàng)工作的長(zhǎng)時(shí)期缺位,已經(jīng)給氣象部門(mén)各項(xiàng)工作造成了十分被動(dòng)的局面。
在這里,氣象數(shù)據(jù)規(guī)劃是整體梳理、謀劃和設(shè)計(jì),氣象數(shù)據(jù)治理則是具體實(shí)施執(zhí)行。
所謂數(shù)據(jù)治理,就是使氣象數(shù)據(jù)自產(chǎn)生的那一刻開(kāi)始,經(jīng)歷的采集、傳輸、處理、存儲(chǔ)、操作以及質(zhì)量和安全保障等生命周期諸多環(huán)節(jié)中的每一個(gè)環(huán)節(jié),都處在一個(gè)統(tǒng)一、自洽、協(xié)同的規(guī)則之中,以使得氣象數(shù)據(jù)這一部門(mén)和全社會(huì)寶貴資產(chǎn)始終處于正確有效的管理之下。換句話說(shuō),氣象數(shù)據(jù)的治理就是治理氣象數(shù)據(jù)的政策、方法、措施和具體落實(shí)。
貫徹氣象數(shù)據(jù)治理,除先進(jìn)的理念外,還需要有配套的組織架構(gòu)、原則、過(guò)程和規(guī)則,以確保數(shù)據(jù)管理的各項(xiàng)職能得到正確的履行。
氣象大數(shù)據(jù)的工作形態(tài)就是數(shù)據(jù)資源的開(kāi)發(fā)利用,做為良好的數(shù)據(jù)資源開(kāi)發(fā)利用的基礎(chǔ),數(shù)據(jù)規(guī)劃是綱領(lǐng),而數(shù)據(jù)治理則是貫徹?cái)?shù)據(jù)規(guī)劃的具體進(jìn)程。
(三) 數(shù)據(jù)意識(shí)的逐步培育
提高全部門(mén)的數(shù)據(jù)意識(shí),是開(kāi)展氣象大數(shù)據(jù)的基礎(chǔ)。
數(shù)據(jù)是精準(zhǔn)文化的核心,精準(zhǔn)靠數(shù)據(jù)來(lái)表述。對(duì)創(chuàng)新而言,所有的成功都是小概率事件,唯有每一步都追求精確方才可能達(dá)到。同時(shí),科學(xué)和精準(zhǔn)使得思維邏輯得以嚴(yán)謹(jǐn),以嚴(yán)謹(jǐn)邏輯表述的思維成果,確保了推理的可靠性,使后人可在前人思想成果的基礎(chǔ)上進(jìn)一步思考和拓展;嚴(yán)謹(jǐn)?shù)乃季S成果成為可組織、可利用的資源,科學(xué)成果因之而得以積累,并最終發(fā)展成長(zhǎng)。技術(shù)的精準(zhǔn)和步驟的嚴(yán)謹(jǐn)使得成熟技術(shù)的品質(zhì)更高,也使得這些技術(shù)得以方便地利用和重組,而成熟技術(shù)的再重組是科技創(chuàng)新的重要形態(tài)之一。此外,思維的嚴(yán)謹(jǐn)性還決定了人們科學(xué)研究的深度。在信息時(shí)代,鮮見(jiàn)有采用粗放、籠統(tǒng)、馬虎和粗枝大葉方式能夠持久成功的事例。沒(méi)有數(shù)據(jù)意識(shí)就沒(méi)有現(xiàn)代科技,在全氣象部門(mén)培養(yǎng)數(shù)據(jù)與精準(zhǔn)意識(shí)已是當(dāng)務(wù)之急,科學(xué)與精確應(yīng)當(dāng)成為氣象部門(mén)的工作信條和文化素養(yǎng),是實(shí)現(xiàn)氣象現(xiàn)代化最根本的基礎(chǔ)條件。
(四) 必要的人才基礎(chǔ)條件
所有的工作,都是以人的思維成果而指導(dǎo)的。大數(shù)據(jù)技術(shù)只是眾多工具中的一類(lèi),工具沒(méi)有自行主動(dòng)解決問(wèn)題的能力,工具不可能解決連人都沒(méi)有想清楚的問(wèn)題,解決問(wèn)題的辦法必須靠人的思維;人想清楚了,則相應(yīng)的處理流程可由信息系統(tǒng)重復(fù)運(yùn)作,以提高工作效率。如果一項(xiàng)工作,連人自己都還沒(méi)有想清楚,則此時(shí)的大數(shù)據(jù)非但不能幫忙,反而可能會(huì)把事情搞得一團(tuán)糟。因此,氣象大數(shù)據(jù)應(yīng)用的開(kāi)展,人才條件是決定其成敗的要素之一。
具體地說(shuō),實(shí)施氣象大數(shù)據(jù)應(yīng)用,除上述幾項(xiàng)基礎(chǔ)工作外,在人才隊(duì)伍方面還需具備以下2個(gè)基礎(chǔ)條件:
1. 建立起對(duì)應(yīng)于大數(shù)據(jù)管理運(yùn)營(yíng)的數(shù)據(jù)管理中心的組織架構(gòu)。沒(méi)有一個(gè)相對(duì)完整和專(zhuān)業(yè)的數(shù)據(jù)管理團(tuán)隊(duì),是難以發(fā)揮出大數(shù)據(jù)分析的功效的。
2. 建立起一支精干的數(shù)據(jù)分析團(tuán)隊(duì),并擁有一個(gè)靈活適用的數(shù)據(jù)分析技術(shù)平臺(tái)。
此外,開(kāi)展氣象大數(shù)據(jù)工作,可能會(huì)遇到許多意想不到的困難,如:算法和數(shù)據(jù)來(lái)源問(wèn)題。如前所述,所有大數(shù)據(jù)應(yīng)用的數(shù)據(jù)來(lái)源都是來(lái)自于互聯(lián)網(wǎng)的替代數(shù)據(jù),而由于數(shù)據(jù)源非針對(duì)該應(yīng)用所采集,該應(yīng)用所需要的內(nèi)容可能同時(shí)存在于不同的數(shù)據(jù)源之中,且存在的形態(tài)和格式各異:同樣是分析輿情,騰訊微信大數(shù)據(jù)和百度大數(shù)據(jù)的分析方法可能完全不同。面對(duì)不同的數(shù)據(jù)源,需要不同的信息提取算法。因此,合適的數(shù)據(jù)源和合適的分析算法,是開(kāi)展氣象大數(shù)據(jù)應(yīng)用首先需要解決的問(wèn)題。而氣象部門(mén)在這方面,目前尚缺乏相應(yīng)的專(zhuān)業(yè)人才和團(tuán)隊(duì)。因此,對(duì)于氣象部門(mén)而言,利用他人的數(shù)據(jù)開(kāi)展大數(shù)據(jù)應(yīng)用,對(duì)可能面臨的困難,需要做好一定的心理準(zhǔn)備。
四、氣象大數(shù)據(jù)中心建設(shè)問(wèn)題
(一) 應(yīng)當(dāng)是氣象行業(yè)大數(shù)據(jù)中心
開(kāi)展氣象大數(shù)據(jù)工作,基礎(chǔ)設(shè)施環(huán)境(即:氣象大數(shù)據(jù)中心)的建設(shè)問(wèn)題,是本文必須正面回答的另一個(gè)問(wèn)題,因?yàn)楹A繑?shù)據(jù)的處理需要相當(dāng)規(guī)模的存儲(chǔ)和計(jì)算資源予以支持。
上文已述,氣象大數(shù)據(jù)由“行業(yè)”和“互聯(lián)網(wǎng)”兩部分來(lái)源構(gòu)成。筆者認(rèn)為,氣象大數(shù)據(jù)中心應(yīng)當(dāng)是以存儲(chǔ)管理行業(yè)大數(shù)據(jù)為主要目標(biāo),即:氣象大數(shù)據(jù)中心應(yīng)當(dāng)是氣象行業(yè)大數(shù)據(jù)中心。理由如下:
氣象行業(yè)大數(shù)據(jù)中的各類(lèi)數(shù)據(jù),都是由氣象部門(mén)業(yè)務(wù)或管理系統(tǒng)產(chǎn)生,以服務(wù)于氣象業(yè)務(wù)或工作為首要目標(biāo)的。根據(jù)屬地化管理原則,規(guī)范管理這些數(shù)據(jù),并負(fù)責(zé)這些數(shù)據(jù)的社會(huì)化共享服務(wù),是氣象部門(mén)的職責(zé)。因此氣象大數(shù)據(jù)中心所管轄的數(shù)據(jù)中,必須包含氣象行業(yè)大數(shù)據(jù)。同理,由于氣象互聯(lián)網(wǎng)大數(shù)據(jù)中的所有數(shù)據(jù)皆非產(chǎn)自氣象部門(mén),同樣根據(jù)屬地化管理原則,氣象部門(mén)沒(méi)有職責(zé)和義務(wù)存儲(chǔ)管理這些非氣象部門(mén)產(chǎn)生的數(shù)據(jù)。
在目前數(shù)據(jù)量急劇爆發(fā)的背景下,輕率地將體量碩大的互聯(lián)網(wǎng)大數(shù)據(jù)整體搬移到自己的屬地后再進(jìn)行處理,不是明智的舉動(dòng)。按照業(yè)界“算法找數(shù)據(jù)”的原則,應(yīng)盡可能采用諸如與數(shù)據(jù)源擁有方建立協(xié)作聯(lián)盟、租用對(duì)方一定規(guī)?;A(chǔ)資源等方法,達(dá)到在數(shù)據(jù)源近旁完成處理工作的目的,以減少海量數(shù)據(jù)整體搬遷所造成的高昂代價(jià),并提高工作時(shí)效。即:對(duì)于互聯(lián)網(wǎng)大數(shù)據(jù)的應(yīng)用而言,應(yīng)盡可能采取“就近處理”的方法;在無(wú)法就近完成所有處理的情況下,也應(yīng)盡量設(shè)法采用“提取”的方法,將有用的信息從數(shù)據(jù)源中提取回自己的屬地分析處理,切不可輕易采用“數(shù)據(jù)找算法”的陳規(guī)陋習(xí),將數(shù)據(jù)源整體復(fù)制到自己的屬地,除非萬(wàn)不得已。這方面的工作需要慎重籌劃,以免被昂貴的數(shù)據(jù)搬遷和數(shù)據(jù)更新成本所壓垮。
總之,由于氣象互聯(lián)網(wǎng)大數(shù)據(jù)與氣象行業(yè)大數(shù)據(jù)相比,無(wú)論在規(guī)模上,還是在管理時(shí)段上都難以較為準(zhǔn)確地預(yù)估,將其納入氣象大數(shù)據(jù)中心的管理內(nèi)容之一,會(huì)對(duì)大數(shù)據(jù)中心的設(shè)計(jì)和管理帶來(lái)一系列極其復(fù)雜的不確定因素。因此,氣象大數(shù)據(jù)中心在建設(shè)和使用初期,應(yīng)以氣象行業(yè)大數(shù)據(jù)為主要管理對(duì)象,并在氣象互聯(lián)網(wǎng)大數(shù)據(jù)的應(yīng)用中盡可能避免海量數(shù)據(jù)的搬遷。與此同時(shí),大數(shù)據(jù)中心在設(shè)計(jì)和實(shí)際操作過(guò)程中可以預(yù)留一定規(guī)模的基礎(chǔ)資源,為在極端情況下互聯(lián)網(wǎng)大數(shù)據(jù)的載入和處理預(yù)留一定的管理空間和能力。
綜上所述,第一,管理氣象行業(yè)大數(shù)據(jù)是氣象大數(shù)據(jù)中心的職責(zé)。第二,對(duì)于互聯(lián)網(wǎng)大數(shù)據(jù)而言,大數(shù)據(jù)中心既沒(méi)有義務(wù)、也應(yīng)盡可能避免對(duì)其進(jìn)行長(zhǎng)時(shí)間管理。所以,氣象大數(shù)據(jù)中心應(yīng)當(dāng)是氣象行業(yè)大數(shù)據(jù)中心。
(二) 氣象大數(shù)據(jù)中心的形態(tài)和分布
1. 氣象行業(yè)大數(shù)據(jù)中心同時(shí)應(yīng)當(dāng)是氣象云中心
就應(yīng)用效果而言,在資源充沛且數(shù)據(jù)處于規(guī)范管理的前提下,數(shù)據(jù)的集約化程度越高,應(yīng)用的效果越理想。因此,氣象大數(shù)據(jù)中心應(yīng)當(dāng)是氣象數(shù)據(jù)匯聚、規(guī)范化管理且資源十分充沛的數(shù)據(jù)中心。云計(jì)算中心是大數(shù)據(jù)中心最好的物理形態(tài),大數(shù)據(jù)中心應(yīng)以云計(jì)算中心為基礎(chǔ)平臺(tái),這在業(yè)界已形成共識(shí),氣象大數(shù)據(jù)中心也不例外。所以,氣象大數(shù)據(jù)中心應(yīng)當(dāng)是一個(gè)組織機(jī)構(gòu)概念,邏輯上相對(duì)獨(dú)立,而其實(shí)際的物理基礎(chǔ)設(shè)施應(yīng)當(dāng)是氣象云中心,是氣象云中心上的一個(gè)具體業(yè)務(wù)應(yīng)用。
需要進(jìn)一步說(shuō)明的是,對(duì)氣象大數(shù)據(jù)中心的規(guī)模而言,其中的行業(yè)數(shù)據(jù)的增長(zhǎng)規(guī)模處在氣象部門(mén)掌控之中,基本上可以預(yù)估。但如果將互聯(lián)網(wǎng)大數(shù)據(jù)的應(yīng)用場(chǎng)景也考慮在內(nèi),預(yù)留可充分應(yīng)對(duì)極端情況下互聯(lián)網(wǎng)數(shù)據(jù)源大舉載入時(shí)的支撐資源,由于數(shù)據(jù)源對(duì)象的未知性,其相應(yīng)的規(guī)模是難以預(yù)先測(cè)算的,偏大則可能導(dǎo)致資源的長(zhǎng)時(shí)間閑置,偏小則可能屆時(shí)無(wú)法發(fā)揮支撐作用。較為可行的解決方案之一是采用專(zhuān)有云形式,即:選擇資源規(guī)模大、公共安全措施完備、專(zhuān)業(yè)水平高、服務(wù)信譽(yù)好且價(jià)格相對(duì)合理的云計(jì)算中心,在其上長(zhǎng)期租賃相應(yīng)規(guī)模的基礎(chǔ)設(shè)施資源作為氣象云的基礎(chǔ)設(shè)施,其中氣象大數(shù)據(jù)中心的資源需求規(guī)??苫緟⒄諝庀笮袠I(yè)大數(shù)據(jù)的存儲(chǔ)管理規(guī)模來(lái)進(jìn)行預(yù)估。與此同時(shí),與該云計(jì)算中心簽訂相應(yīng)的服務(wù)合同,承諾在氣象大數(shù)據(jù)中心遇到特殊情況(如極端情況下海量互聯(lián)網(wǎng)數(shù)據(jù)的大批載入)時(shí),該云中心可及時(shí)擴(kuò)充氣象大數(shù)據(jù)中心的基礎(chǔ)資源租賃規(guī)模,并在應(yīng)用結(jié)束后收回這些臨時(shí)租賃的基礎(chǔ)資源。
2. 大數(shù)據(jù)中心的分布
筆者于前文已討論過(guò),未來(lái)的氣象云中心最終將以1+2或1+3等數(shù)量有限、地理分布相對(duì)合理的形式長(zhǎng)期存在。且專(zhuān)有云較之私有云而言,是更為合理的氣象云形態(tài)。限于篇幅,其理由不再重復(fù)闡述。
(三) 盡早開(kāi)展應(yīng)用研究工作
應(yīng)及早開(kāi)展針對(duì)互聯(lián)網(wǎng)大數(shù)據(jù)在氣象部門(mén)各領(lǐng)域創(chuàng)新應(yīng)用的研究工作。目前這項(xiàng)工作在氣象部門(mén)除個(gè)別先行單位(如公共氣象服務(wù)中心)外,基本處于空白狀態(tài),是一片未開(kāi)墾的處女地。盡早進(jìn)行大數(shù)據(jù)基礎(chǔ)知識(shí)和技能的儲(chǔ)備,對(duì)工作的順利開(kāi)展有益無(wú)損。同時(shí),應(yīng)積極籌備組建相關(guān)的專(zhuān)業(yè)化團(tuán)隊(duì),以期盡早具備如下能力:
數(shù)據(jù)資源發(fā)現(xiàn)能力:熟悉互聯(lián)網(wǎng)上各種數(shù)據(jù)資源以及數(shù)據(jù)交易市場(chǎng)的業(yè)務(wù)動(dòng)態(tài),熟悉數(shù)據(jù)資產(chǎn)的價(jià)值評(píng)估,可在部門(mén)用戶提出數(shù)據(jù)資源需求時(shí),及時(shí)提供互聯(lián)網(wǎng)數(shù)據(jù)資源的咨詢服務(wù),推薦合適的數(shù)據(jù)資源,以及資源的基本情況。
數(shù)據(jù)獲取能力:具備在正常情況下,通過(guò)正規(guī)途徑,以技術(shù)手段及時(shí)獲取指定數(shù)據(jù)源中所有數(shù)據(jù)的能力。
數(shù)據(jù)分析能力:具備在收集互聯(lián)網(wǎng)數(shù)據(jù)的基礎(chǔ)上,針對(duì)應(yīng)用目標(biāo)以及數(shù)據(jù)源的特點(diǎn),提出相應(yīng)的分析模型,指導(dǎo)并最終完成對(duì)互聯(lián)網(wǎng)數(shù)據(jù)的整理和分析,以完成應(yīng)用目標(biāo)中各項(xiàng)研究、評(píng)估和預(yù)測(cè)的能力。
數(shù)據(jù)算法實(shí)現(xiàn):根據(jù)分析模型及數(shù)據(jù)源特點(diǎn),形成數(shù)據(jù)分析處理軟件,并完成數(shù)據(jù)處理。
分析平臺(tái):擁有分析模型建立、處理軟件生成以及分析結(jié)果可視化展現(xiàn)的技術(shù)平臺(tái)。
應(yīng)適時(shí)成立相應(yīng)機(jī)構(gòu)(如:氣象互聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用研究中心等),專(zhuān)門(mén)從事這方面的研究和應(yīng)用工作。
五、穩(wěn)步推進(jìn)氣象大數(shù)據(jù)戰(zhàn)略
(一) 全面認(rèn)識(shí)氣象大數(shù)據(jù)
在積極探索創(chuàng)新應(yīng)用的同時(shí),應(yīng)冷靜分析氣象大數(shù)據(jù)的特點(diǎn)和可能的適用范圍,基本明了其能力邊界,做到心中有數(shù)。既不被外界過(guò)度宣傳所裹挾,也不被內(nèi)部守舊力量所羈絆。積極而穩(wěn)妥,慎重而不裹足不前。應(yīng)當(dāng)明白,目前國(guó)家所倡導(dǎo)的大數(shù)據(jù)戰(zhàn)略,與其說(shuō)是為了推行充分挖掘數(shù)據(jù)資源價(jià)值的工作方法,不如說(shuō)是一種工作思維和工作方式的改進(jìn)和補(bǔ)充,是一場(chǎng)全社會(huì)文化素養(yǎng)的改良和變革。通過(guò)對(duì)大數(shù)據(jù)不斷深入的應(yīng)用,持續(xù)改進(jìn)全社會(huì)的生產(chǎn)質(zhì)量、產(chǎn)品質(zhì)量、服務(wù)質(zhì)量和生活質(zhì)量。
因此,不必過(guò)度介意氣象大數(shù)據(jù)在某些特定領(lǐng)域內(nèi)(如提高預(yù)報(bào)準(zhǔn)確率等)作用的有限。大數(shù)據(jù)不是萬(wàn)能的,正如信息化不是萬(wàn)能的一樣,不可能指望單憑推行大數(shù)據(jù)就能解決所有問(wèn)題。充分利用一切可以利用的數(shù)據(jù)資源,不斷創(chuàng)新、不斷改進(jìn)氣象部門(mén)各項(xiàng)工作,倡導(dǎo)和發(fā)揚(yáng)工匠精神,使各項(xiàng)工作更加科學(xué)化和精細(xì)化,就已達(dá)到了氣象大數(shù)據(jù)戰(zhàn)略的基本目標(biāo)。
此外,氣象大數(shù)據(jù)應(yīng)當(dāng)以應(yīng)用為主導(dǎo),以業(yè)務(wù)為主導(dǎo),以改善各項(xiàng)工作為主導(dǎo),更應(yīng)該以技術(shù)、業(yè)務(wù)、服務(wù)和管理創(chuàng)新為主導(dǎo)。應(yīng)當(dāng)使全部門(mén)明了:開(kāi)展氣象大數(shù)據(jù)工作不等于在各地開(kāi)展數(shù)據(jù)中心基礎(chǔ)建設(shè),更不等于在各地開(kāi)展數(shù)據(jù)庫(kù)建設(shè)。此外,開(kāi)展氣象大數(shù)據(jù)工作,應(yīng)力求基礎(chǔ)工作先行、專(zhuān)業(yè)團(tuán)隊(duì)建設(shè)先行和應(yīng)用研究先行。
(二) 保持清醒、力戒浮躁
我國(guó)政府多年前便已開(kāi)始倡導(dǎo)科學(xué)發(fā)展的理念,但目前全社會(huì)急于求成的心理依然非常普遍,似是而非且激動(dòng)人心的宣傳口號(hào)此起彼伏,反映出一些人的浮躁心態(tài)。氣象大數(shù)據(jù)工作的開(kāi)展,不宜采用運(yùn)動(dòng)的方式,而應(yīng)該在充分營(yíng)造創(chuàng)新氛圍的前提下,由創(chuàng)新引導(dǎo)氣象大數(shù)據(jù)的具體應(yīng)用,循序漸進(jìn),待深入到一定程度后,再由大數(shù)據(jù)應(yīng)用逐步推動(dòng)創(chuàng)新,從而形成創(chuàng)新引導(dǎo)大數(shù)據(jù)應(yīng)用,大數(shù)據(jù)應(yīng)用進(jìn)一步推動(dòng)創(chuàng)新的彼此互動(dòng)的良性循環(huán)局面。從過(guò)程上看,氣象大數(shù)據(jù)的開(kāi)展應(yīng)當(dāng)水到渠成,過(guò)度的宣傳、強(qiáng)力的行政推動(dòng)和盲目魯莽的基礎(chǔ)建設(shè)無(wú)異于揠苗助長(zhǎng),對(duì)大數(shù)據(jù)的應(yīng)用發(fā)展有損無(wú)益。切勿被“搶占制高點(diǎn)”等宣傳口號(hào)所蠱惑,在被某些善良單純的記者以及別有用心的企業(yè)家鼓動(dòng)得顯然有些過(guò)熱的大數(shù)據(jù)風(fēng)潮中,保持頭腦的冷靜,力戒內(nèi)心的浮躁,顯得尤為可貴。
六、結(jié)語(yǔ)
熱門(mén)標(biāo)簽
相關(guān)文章
2大數(shù)據(jù)技術(shù)在工業(yè)經(jīng)濟(jì)中的應(yīng)用
3大數(shù)據(jù)在農(nóng)村金融機(jī)構(gòu)的運(yùn)用
4大數(shù)據(jù)背景下企業(yè)財(cái)務(wù)風(fēng)險(xiǎn)管理及思考