監(jiān)測數(shù)據(jù)范文
時間:2023-03-30 01:30:38
導(dǎo)語:如何才能寫好一篇監(jiān)測數(shù)據(jù),這就需要搜集整理更多的資料和文獻(xiàn),歡迎閱讀由公務(wù)員之家整理的十篇范文,供你借鑒。
篇1
關(guān)鍵詞:ADO;數(shù)據(jù)格式;SPLIT函數(shù)
中圖分類號:D922.3 文獻(xiàn)標(biāo)識碼: A
1 引言
沉降監(jiān)測中,對一般性的高層建(構(gòu))筑物,采用二等水準(zhǔn)測量的觀測方法就能滿足要求,儀器多采用精密的電子水準(zhǔn)儀,本文以天寶DINI03為例,全面闡述一下其數(shù)據(jù)的導(dǎo)入和處理過程。
2 數(shù)據(jù)導(dǎo)入的設(shè)計
本程序是利用VB語言讀取電子水準(zhǔn)儀的輸出文件,然后利用Microsoft ActivX Data Object 2.6 Library ADO對象庫的引用,把數(shù)據(jù)導(dǎo)入到access數(shù)據(jù)庫中。例如,天寶DINI03電子水準(zhǔn)儀輸出的數(shù)據(jù)如1-1圖,其第一行是文件名,第二行是開始觀測行,因?yàn)槭堑谝徽荆ㄆ鏀?shù)站)所以用后、前、前、后方式觀測,第三行是水準(zhǔn)起點(diǎn),第四行到第七行是前、后視高,前、后視距,第八行是第一站高程,第十九行到三十四行是無用的數(shù)據(jù)(銦鋼尺沒有扶正等原因造成的)第四十一、四十二行是間視點(diǎn),每行分六個字段。因而首先用VB的函數(shù)SPLIT :S=SPLIT((textline1, "|"),把每行分成六個數(shù)組進(jìn)行處理,然后用INSTR以及MID函數(shù):InStr(1, s(3), QSHiSHiGaoZIDuan),作為條件,剔除無用的數(shù)據(jù),把視距,視高等有用的數(shù)據(jù)導(dǎo)進(jìn)access數(shù)據(jù)庫,以備下一步進(jìn)行數(shù)據(jù)處理。數(shù)據(jù)導(dǎo)入的部分代碼如下:
adodblianjie1
rs1.Source = "select * from 水準(zhǔn)表 "
rs1.ActiveConnection = conn1
rs1.Open
Do While Not EOF(1)
'For i = 1 To 45
Line Input #1, textline1
s = Split(textline1, "|")
If InStr(11, s(2), "#") Or InStr(11, s(2), WeiJianMing) Or InStr(1, s(2), KaiSHiHang) Or InStr(1, s(2), CHongFuCeZHan) Or InStr(1, s(2), KaiSHiJianSHiDian) Or InStr(1, s(2), JieSHUJianSHiDian) Or InStr(1, s(2), JieSHuHang) Or InStr(1, s(3), SHiJuCHa) Or InStr(1, s(3), QianSHiJuHe) Then
Else
rs1.AddNew
QHdianMing = Trim(Mid(s(2), 4, 15))
rs1.Fields("測量時間") = Calendar1.Value
If InStr(1, s(3), QSHiSHiGaoZIDuan) Then
ChangDu = Len(s(3))
QianSHiSHiGao = Val(Trim(Mid(s(3), 3, ChangDu - 5)))
SJChangDu = Len(s(4))
QianSHiJu = Val(Trim(Mid(s(4), 3, SJChangDu - 5)))
If Rf Then
rs1.Fields("前視視高1") = QianSHiSHiGao
rs1.Fields("前視視距1") = QianSHiJu
rs1.Fields("測站點(diǎn)") = "前" & QHdianMing
Else
rs1.Fields("前視視高2") = QianSHiSHiGao
rs1.Fields("前視視距2") = QianSHiJu
rs1.Fields("測站點(diǎn)") = "前" & QHdianMing
End If
Rf = Not Rf
End If
If InStr(1, s(3), HSHiSHiGaoZiDuan) Then
ChangDu = Len(s(3))
HouSHiSHiGao = Val(Trim(Mid(s(3), 3, ChangDu - 5)))
SJChangDu = Len(s(4))
HouSHiJu = Val(Trim(Mid(s(4), 3, SJChangDu - 5)))
If Rb Then
rs1.Fields("后視視高1") = HouSHiSHiGao
rs1.Fields("后視視距1") = HouSHiJu
rs1.Fields("測站點(diǎn)") = "后" & QHdianMing
Else
rs1.Fields("后視視高2") = HouSHiSHiGao
rs1.Fields("后視視距2") = HouSHiJu
rs1.Fields("測站點(diǎn)") = "后" & QHdianMing
End If
Rb = Not Rb
End If
If InStr(1, s(3), JianSHiSHiGaoZiDuan) Then '間視點(diǎn)
ChangDu = Len(s(3))
JianShiSHiGao = Val(Trim(Mid(s(3), 3, ChangDu - 5)))
SJChangDu = Len(s(4))
JianSHiju = Val(Trim(Mid(s(4), 3, SJChangDu - 5)))
SJChangDu = Len(s(5))
JianSHiDianGaoCHeng = Val(Trim(Mid(s(5), 2, SJChangDu - 5)))
rs1.Fields("間視點(diǎn)視高") = JianShiSHiGao
rs1.Fields("間視點(diǎn)視距") = JianSHiju
rs1.Fields("間視點(diǎn)高程") = JianSHiDianGaoCHeng
rs1.Fields("測站點(diǎn)") = QHdianMing
End If
If Trim(s(3)) = "" And Trim(s(4)) = "" Then
ChangDu = Len(s(5))
QianSHiDianGaoCHeng = Val(Trim(Mid(s(5), 3, ChangDu - 5)))
'QHdianMing = Trim(Mid(s(2), 4, 15))
rs1.Fields("前視點(diǎn)高程") = QianSHiDianGaoCHeng
rs1.Fields("測站點(diǎn)") = "高程" & QHdianMing
End If
rs1.Update
End If
Loop
rs1.Close
conn1.Close
Close
MsgBox "導(dǎo)入成功!"
1-1
3 數(shù)據(jù)的處理
數(shù)據(jù)進(jìn)入access數(shù)據(jù)庫后,充分利用ADO對象模型的數(shù)據(jù)訪問策略 ,可以任意輸出成多種格式,例如輸出成EXCEL的格式。首先充分利用了microsoft office 11.0 object library進(jìn)行EXCEL對象的定義:
Dim SHuiZHunexcel1 As Object '定義Excel對象
Dim SHuiZHunbook1As Object '定義工作簿對象
Dim SHuiZHunsheet1 As Object '定義工作表對象
Set SHuiZHunexcel1 = CreateObject("excel.application") '創(chuàng)建Excel應(yīng)用程序?qū)ο?/p>
Set SHuiZHunbook1 = SHuiZHunexcel1.Workbooks.Add '添加工作簿
Set SHuiZHunsheet1 = SHuiZHunbook1.Worksheets(1) '操作的工作表1
然后利用Microsoft ActivX Data Object 2.6 Library ADO進(jìn)行數(shù)據(jù)庫的連接:
adodblianjie1
rs1.Source = "select * from 水準(zhǔn)表 "
rs1.ActiveConnection = conn1
rs1.Open
最后輸出成EXCEL格式的文件:
For i = 0 To rs1.Fields.Count - 1
SHuiZHunsheet1.Cells(1, i + 1) = rs1.Fields(i).Name
Next
If rs1.RecordCount > 0 Then
rs1.MoveFirst
For i = 1 To rs1.RecordCount
SHuiZHunsheet1.Cells(i + 1, 1).Value = rs1.Fields("測站點(diǎn)")
SHuiZHunsheet1.Cells(i + 1, 2).Value = rs1.Fields("前視視高1")
SHuiZHunsheet1.Cells(i + 1, 3).Value = rs1.Fields("前視視高2")
SHuiZHunsheet1.Cells(i + 1, 4).Value = rs1.Fields("前視視距1")
SHuiZHunsheet1.Cells(i + 1, 5).Value = rs1.Fields("前視視距2")
SHuiZHunsheet1.Cells(i + 1, 6).Value = rs1.Fields("后視視高1")
SHuiZHunsheet1.Cells(i + 1, 7).Value = rs1.Fields("后視視高2")
SHuiZHunsheet1.Cells(i + 1, 8).Value = rs1.Fields("后視視距1")
SHuiZHunsheet1.Cells(i + 1, 9).Value = rs1.Fields("后視視距2")
SHuiZHunsheet1.Cells(i + 1, 10).Value = rs1.Fields("前視點(diǎn)高程")
SHuiZHunsheet1.Cells(i + 1, 11).Value = rs1.Fields("間視點(diǎn)視高")
SHuiZHunsheet1.Cells(i + 1, 12).Value = rs1.Fields("間視點(diǎn)視距")
SHuiZHunsheet1.Cells(i + 1, 13).Value = rs1.Fields("間視點(diǎn)高程")
rs1.MoveNext
Next
End If
SHuiZHunexcel1.Visible = True '決定excel是否可見
4 使用效果及結(jié)論
沉降監(jiān)測是一項(xiàng)精密的工程測量,由于工作多,任務(wù)重,時間要求緊,如果利用常規(guī)方法,保質(zhì)保量按時完成任務(wù),難度很大。限于此因,我做了這個與沉降監(jiān)測工作配套的程序,極大提高了工作效率。此軟件已在工作中使用很長時間了,迄今為止運(yùn)行穩(wěn)定,性能、效果良好。由于篇幅所限只能列舉天寶DINI03的儀器數(shù)據(jù),把數(shù)據(jù)導(dǎo)入,部分?jǐn)?shù)據(jù)處理與同行分享,以此共勉。
參考文獻(xiàn)Visual Basic函數(shù)參考大全 人民郵電出版社賽奎春 李俊民編著
ISBN 978-7-115-15387-6 2007.4
測量學(xué)(第四版)同濟(jì)大學(xué)出版社顧孝烈等編著
ISBN 978-7-5608-4458-8 2012.2
篇2
一是數(shù)據(jù)體量巨大(Volume)。百度資料表明,其新首頁導(dǎo)航每天需要提供的數(shù)據(jù)超過1.5PB(1PB=1024TB),這些數(shù)據(jù)如果打印出來將超過5千億張A4紙。有資料證實(shí),到目前為止,人類生產(chǎn)的所有印刷材料的數(shù)據(jù)量僅為200PB。二是數(shù)據(jù)類型多樣(Variety)?,F(xiàn)在的數(shù)據(jù)類型不僅是文本形式,更多的是圖片、視頻、音頻、地理位置信息等多類型的數(shù)據(jù),個性化數(shù)據(jù)占絕對多數(shù)(見圖1)。三是處理速度快(Velocity)。數(shù)據(jù)處理遵循“1秒定律”,可從各種類型的數(shù)據(jù)中快速獲得高價值的信息。四是價值密度低(Value)。以視頻為例,一小時的視頻在不間斷的監(jiān)控過程中,可能有用的數(shù)據(jù)只有一兩秒。大數(shù)據(jù)不僅僅是海量數(shù)據(jù),更是一種技術(shù)。大數(shù)據(jù)核心是業(yè)務(wù)模式,本質(zhì)是數(shù)據(jù)處理技術(shù)。數(shù)據(jù)是資產(chǎn),如何盤活數(shù)據(jù)資產(chǎn),使其為國家治理、企業(yè)決策乃至個人生活服務(wù),是大數(shù)據(jù)的核心議題,大數(shù)據(jù)技術(shù)是IT領(lǐng)域新一代的技術(shù)與架構(gòu),將幫助人們從大體量、高復(fù)雜度的數(shù)據(jù)中提取價值。用以分析的數(shù)據(jù)越全面,分析的結(jié)果就越接近于真實(shí)。大數(shù)據(jù)分析意味著能夠從這些新的數(shù)據(jù)中獲取新的洞察力,并將其與已知業(yè)務(wù)的各個細(xì)節(jié)相融合。各種研究表明,大數(shù)據(jù)是與智能制造、無線網(wǎng)絡(luò)革命并行的又一次顛覆性的技術(shù)變革。其具體內(nèi)容包括:海量數(shù)據(jù)分析技術(shù)、大數(shù)據(jù)處理技術(shù)、分布式計算技術(shù)和數(shù)據(jù)可視化技術(shù)。如圖2所示,大數(shù)據(jù)技術(shù)主要包含三個部分:大數(shù)據(jù)產(chǎn)品、大數(shù)據(jù)管理、大數(shù)據(jù)使用。大數(shù)據(jù)產(chǎn)品主要是指各種數(shù)據(jù)獲取系統(tǒng),包含各種數(shù)據(jù)庫、RFID、sensors等等。在無線電頻譜監(jiān)測中,其最明顯的數(shù)據(jù)產(chǎn)品就是各種傳感器、監(jiān)測站設(shè)備等等。大數(shù)據(jù)管理主要是指大數(shù)據(jù)的存儲、處理、過濾等各種關(guān)鍵技術(shù),涉及各種電磁感知數(shù)據(jù)的整合和質(zhì)量控制等,這個環(huán)節(jié)是大數(shù)據(jù)技術(shù)關(guān)鍵環(huán)節(jié)。大數(shù)據(jù)使用是挖掘、分析、搜索、擴(kuò)充,是大數(shù)據(jù)技術(shù)的核心之處,即如何將數(shù)據(jù)轉(zhuǎn)化為有用的信息。大數(shù)據(jù)發(fā)展催生大數(shù)據(jù)時代。大數(shù)據(jù)發(fā)展之快,已遠(yuǎn)遠(yuǎn)超出人們的想象。特別值得關(guān)注的是,2012年3月,奧巴馬政府了“大數(shù)據(jù)研究與開發(fā)計劃”,并宣布先期投資超過2億美元的資金,用于研發(fā)大數(shù)據(jù)關(guān)鍵技術(shù),以搶占數(shù)據(jù)資源開發(fā)利用的制高點(diǎn)。將“大數(shù)據(jù)戰(zhàn)略”上升為國家意志。奧巴馬政府將數(shù)據(jù)定義為“未來的新石油”,并表示一個國家擁有數(shù)據(jù)的規(guī)模、活性及解釋運(yùn)用的能力將成為綜合國力的重要組成部分。未來,對數(shù)據(jù)的占有和控制甚至將成為陸權(quán)、海權(quán)、空權(quán)之外的另一種國家核心資產(chǎn)。2012年5月,聯(lián)合國“全球脈動”計劃了《大數(shù)據(jù)開發(fā):機(jī)遇與挑戰(zhàn)》報告,英國、德國、法國、日本、加拿大等發(fā)達(dá)國家積極響應(yīng)。我國也于2012年10月成立了中國通信學(xué)會大數(shù)據(jù)專家委員會。種種跡象表明,世界各國特別是發(fā)達(dá)國家都把大數(shù)據(jù)的發(fā)展擺到國家戰(zhàn)略層面加以推動,使大數(shù)據(jù)正在成為世界新的戰(zhàn)略資源爭奪的一個焦點(diǎn)。對于大數(shù)據(jù)的發(fā)展,全球知名咨詢公司麥肯錫研究認(rèn)為,數(shù)據(jù)已經(jīng)滲透到每一個行業(yè)和業(yè)務(wù)職能領(lǐng)域,逐漸成為重要的生產(chǎn)因素;而人們對于海量數(shù)據(jù)的運(yùn)用將預(yù)示著新一波生產(chǎn)率增長浪潮的到來,在政府公共服務(wù)、民生醫(yī)療服務(wù)、維護(hù)社會安定、動態(tài)安全監(jiān)管等領(lǐng)域的廣泛應(yīng)用,將產(chǎn)生巨大的社會價值和產(chǎn)業(yè)空間。有機(jī)構(gòu)預(yù)測,大數(shù)據(jù)應(yīng)用將使美國零售業(yè)凈利潤增長實(shí)現(xiàn)60%,可使制造業(yè)的產(chǎn)品開發(fā)和組裝成本降低50%。這種影響和變化是革命性的,說明大數(shù)據(jù)蘊(yùn)含著大價值。大數(shù)據(jù)應(yīng)用也開拓了軍革新境界。大數(shù)據(jù)在當(dāng)今世界科技、經(jīng)濟(jì)、文化等領(lǐng)域的應(yīng)用是廣泛的,在軍事領(lǐng)域也是如此。如當(dāng)前的美軍信息系統(tǒng),運(yùn)行的數(shù)據(jù)中心超過772個,服務(wù)器超過7萬臺,還有約700萬個計算機(jī)終端。2011年,美軍戰(zhàn)略司令部司令官羅伯特·科勒上將曾指出:“不斷增長的數(shù)據(jù)搜集能力和有限的數(shù)據(jù)處理能力之間的鴻溝正在擴(kuò)大?!币虼?,美軍正在加緊推進(jìn)大數(shù)據(jù)研發(fā)計劃,確定了“從數(shù)據(jù)到?jīng)Q策、網(wǎng)絡(luò)科技、電子戰(zhàn)與電子防護(hù)、工程化彈性系統(tǒng)、大規(guī)模殺傷性武器防御、自主系統(tǒng)和人機(jī)互動”等7個重點(diǎn)研究領(lǐng)域。美軍應(yīng)對大數(shù)據(jù)的基本策略,是不斷提高“從數(shù)據(jù)到?jīng)Q策的能力”,實(shí)現(xiàn)由數(shù)據(jù)優(yōu)勢向決策優(yōu)勢的轉(zhuǎn)化。大數(shù)據(jù)已經(jīng)滲透到每一個行業(yè)和業(yè)務(wù)職能領(lǐng)域。作為國家頻譜資源的管理者,無線電管理機(jī)構(gòu)要準(zhǔn)確把握形勢,積極應(yīng)對挑戰(zhàn),重視數(shù)據(jù)的潛在價值,關(guān)注大數(shù)據(jù)前沿技術(shù),加快推進(jìn)其實(shí)際應(yīng)用,使大數(shù)據(jù)技術(shù)早日應(yīng)用于無線電頻譜監(jiān)管領(lǐng)域,推動無線電管理事業(yè)發(fā)展。
2無線電頻譜監(jiān)測進(jìn)入大數(shù)據(jù)時代
隨著無線電業(yè)務(wù)的迅猛發(fā)展、無線電設(shè)備的日益增多,以及無線電監(jiān)測設(shè)施的不斷建設(shè),無線電監(jiān)測正逐步呈現(xiàn)出大數(shù)據(jù)特征。(1)監(jiān)測數(shù)據(jù)量巨大。截至2013年年底,全國已經(jīng)建成1千多個固定監(jiān)測站、上千個移動站、1千多個可搬移設(shè)備。利用這些監(jiān)測設(shè)備,開展的頻譜掃描、信號測量、占用度分析等工作產(chǎn)生了大量的監(jiān)測數(shù)據(jù),而網(wǎng)格化監(jiān)測方式將產(chǎn)生更加海量的數(shù)據(jù)。(2)數(shù)據(jù)類型復(fù)雜多樣。監(jiān)測設(shè)備除了產(chǎn)生頻譜掃描數(shù)據(jù),還可以提供IQ數(shù)據(jù)、AD采樣數(shù)據(jù)及音頻、測向和定位數(shù)據(jù)等。(3)沙里淘金,價值密度低。大量的監(jiān)測數(shù)據(jù)并不提供現(xiàn)成的有價值的信息。如何通過強(qiáng)大的機(jī)器算法更迅速地完成數(shù)據(jù)的價值“提純”,為無線電管理提供管用、有用的信息,是目前大數(shù)據(jù)背景下無線電監(jiān)測亟待解決的難題。(4)處理效率的要求高。大量的數(shù)據(jù)不能僅僅是存儲為“數(shù)據(jù)檔案”,需要及時、高效分析綜合,為無線電管理提供快速的技術(shù)支撐,很多情況下需要實(shí)時或者準(zhǔn)實(shí)時。大數(shù)據(jù)時代無線電監(jiān)測要圍繞新時期無線電管理工作“管資源、管臺站、管秩序,服務(wù)經(jīng)濟(jì)社會發(fā)展、服務(wù)國防建設(shè)、服務(wù)黨政機(jī)關(guān),突出做好重點(diǎn)無線電安全保障工作”總體目標(biāo),切實(shí)解決資源是否摸清、臺站是否管好、干擾查處是否及時有效、到底能提供哪些服務(wù)、保障工作有什么亮點(diǎn)這5個方面的問題。而大數(shù)據(jù)技術(shù)和網(wǎng)格化監(jiān)測為解決上述問題提供了有效途徑。
3網(wǎng)格化監(jiān)測是以平臺大數(shù)據(jù)處理為核心的新架構(gòu)
如果監(jiān)測數(shù)據(jù)是財富,那么網(wǎng)格化監(jiān)測數(shù)據(jù)就是寶藏,而大數(shù)據(jù)技術(shù)就是挖掘和利用寶藏的利器。沒有強(qiáng)大的計算能力,數(shù)據(jù)寶藏終究是鏡中花;沒有網(wǎng)格化監(jiān)測數(shù)據(jù)的積淀,大數(shù)據(jù)技術(shù)也只能是殺雞用的宰牛刀。無線電監(jiān)測網(wǎng)是一種典型的傳感網(wǎng),而網(wǎng)格化監(jiān)測的數(shù)據(jù)采集、存儲、處理是一種典型的大數(shù)據(jù)技術(shù)架構(gòu),如圖3所示,實(shí)際上在圖2中大數(shù)據(jù)產(chǎn)品中就有sensors(傳感器)。依靠網(wǎng)格化無線電監(jiān)測設(shè)施,利用大數(shù)據(jù)技術(shù),分析挖掘海量無線電監(jiān)測數(shù)據(jù),從而實(shí)現(xiàn)統(tǒng)計、分析、發(fā)現(xiàn)、預(yù)測等功能,充分發(fā)揮無線電監(jiān)測數(shù)據(jù)效能,為無線電管理提供有用信息。網(wǎng)格化監(jiān)測和大數(shù)據(jù)技術(shù)結(jié)合可以從以下4個方面轉(zhuǎn)變無線電管理工作模式、提升無線電管理水平,如圖4所示。(1)提升資源管理手段。網(wǎng)格化監(jiān)測覆蓋廣、頻段寬、時間長,可以全面掌控頻譜資源使用和演變動態(tài);監(jiān)測“粒度”細(xì),數(shù)據(jù)挖掘深,可以實(shí)現(xiàn)頻譜管理精細(xì)化。(2)強(qiáng)化臺站功能。利用監(jiān)測輔助臺站管理,實(shí)現(xiàn)對在用頻率和發(fā)射設(shè)備的遠(yuǎn)程監(jiān)控;分析監(jiān)測檢測結(jié)果,掌控臺站工作狀態(tài);網(wǎng)格化監(jiān)測提升臺站監(jiān)管的時效性和覆蓋率。(3)主動獲取頻譜態(tài)勢。通過廣域、全時監(jiān)測,實(shí)現(xiàn)多域的統(tǒng)計和深度分析,主動獲取頻譜態(tài)勢。(4)服務(wù)經(jīng)濟(jì)社會發(fā)展。為業(yè)務(wù)使用者提供電磁環(huán)境態(tài)勢,為公眾和企業(yè)提供電磁環(huán)境數(shù)據(jù),打造開放的無線電監(jiān)管平臺,實(shí)現(xiàn)數(shù)據(jù)共享,發(fā)揮無線電管理行業(yè)優(yōu)勢,為國防建設(shè)、社會發(fā)展作貢獻(xiàn)。圖4網(wǎng)格化監(jiān)測和大數(shù)據(jù)技術(shù)結(jié)合提升無線電管理水平無線電監(jiān)測已經(jīng)積累了海量數(shù)據(jù),這些數(shù)據(jù)還在不斷急速增加,給無線電監(jiān)測帶來兩個巨大的變化:一方面,在過去沒有數(shù)據(jù)積累的時代無法實(shí)現(xiàn)的應(yīng)用現(xiàn)在終于可以實(shí)現(xiàn);另一方面,從數(shù)據(jù)匱乏時代到數(shù)據(jù)泛濫時代的轉(zhuǎn)變,給數(shù)據(jù)的應(yīng)用帶來新的挑戰(zhàn)與困擾。如何從海量數(shù)據(jù)中高效獲取數(shù)據(jù),有效深加工并最終得到感興趣的信息變得異常困難。要利用這種架構(gòu)實(shí)現(xiàn)上述4個主要目標(biāo),就需要具備下面4個關(guān)鍵技術(shù):(1)數(shù)據(jù)存儲和預(yù)處理技術(shù)。監(jiān)測節(jié)點(diǎn)采集了很多數(shù)據(jù),如果要將這些海量數(shù)據(jù)全部傳輸?shù)綌?shù)據(jù)中心進(jìn)行有效的分析統(tǒng)計,會給現(xiàn)有通信網(wǎng)的傳輸能力和數(shù)據(jù)中心的處理能力造成很大壓力。利用大數(shù)據(jù)分布式存儲集群概念,可將原始采集數(shù)據(jù)做一些簡單的清洗和預(yù)處理工作,將其暫時緩存在監(jiān)測節(jié)點(diǎn)端。數(shù)據(jù)預(yù)處理有多種方法:數(shù)據(jù)清理、數(shù)據(jù)集成、數(shù)據(jù)變換以及數(shù)據(jù)歸約等。這些數(shù)據(jù)預(yù)處理技術(shù)可以大幅提高數(shù)據(jù)挖掘的質(zhì)量,并減少實(shí)際挖掘所需要的時間。(2)分布式計算技術(shù)。分布式計算是一種把需要進(jìn)行大量計算的工程數(shù)據(jù)分區(qū)成小塊,由多臺計算機(jī)分別計算,再上傳運(yùn)算結(jié)果后,將結(jié)果統(tǒng)一合并得出數(shù)據(jù)結(jié)論的技術(shù)。目前常見的分布式計算項(xiàng)目通常使用世界各地上千萬志愿者計算機(jī)的閑置計算能力,通過互聯(lián)網(wǎng)進(jìn)行數(shù)據(jù)傳輸。如分析計算蛋白質(zhì)的內(nèi)部結(jié)構(gòu)和相關(guān)藥物的Folding@home項(xiàng)目,該項(xiàng)目結(jié)構(gòu)龐大,需要驚人的計算量,由一臺電腦計算是不可能完成的,借助分布式計算可以相對廉價地完成他們的計算任務(wù)。其他還有如模擬百年以來全球氣象變化,并計算未來地球氣象的;主攻醫(yī)藥領(lǐng)域,以尋找抗癌藥物和天花疫苗為主的UnitedDevices等項(xiàng)目。在網(wǎng)格化監(jiān)測中,可利用監(jiān)測節(jié)點(diǎn)的計算功能實(shí)現(xiàn)這一技術(shù)。各個監(jiān)測節(jié)點(diǎn)(任務(wù)服務(wù)器)在監(jiān)測中心(作業(yè)服務(wù)器)的統(tǒng)一調(diào)度下,根據(jù)不同的業(yè)務(wù)類型(客戶端)和工作目標(biāo)(客戶端),分布式計算完成各自的數(shù)據(jù)挖掘任務(wù),將結(jié)果上傳到監(jiān)測中心,再次進(jìn)行高層次的統(tǒng)計,形成有價值的數(shù)據(jù)處理結(jié)果。具體作業(yè)流程如圖5所示。(3)數(shù)據(jù)挖掘技術(shù)。數(shù)據(jù)挖掘(DataMining)是通過分析每個數(shù)據(jù),從大量數(shù)據(jù)中尋找其規(guī)律的技術(shù),主要有數(shù)據(jù)準(zhǔn)備、規(guī)律尋找和規(guī)律表示3個步驟。數(shù)據(jù)挖掘的任務(wù)有關(guān)聯(lián)分析、聚類分析、分類分析、異常分析、特異群組分析和演變分析等。網(wǎng)格化無線電監(jiān)測中的數(shù)據(jù)挖掘主要是通過分析和統(tǒng)計監(jiān)測網(wǎng)中各個監(jiān)測設(shè)備產(chǎn)生的頻譜掃描數(shù)據(jù)、IQ數(shù)據(jù)、解調(diào)結(jié)果數(shù)據(jù)、占用度統(tǒng)計數(shù)據(jù)等,生成各種頻譜資源狀態(tài)和趨勢、臺站工作狀態(tài)、空間信號分布等等。(4)數(shù)據(jù)處理結(jié)果的可視化??梢暬緛韺儆跀?shù)據(jù)挖掘部分中的一個環(huán)節(jié),即解釋和應(yīng)用。在無線電監(jiān)測工作中要將看不見的頻譜資源用可視化手段展現(xiàn)非常重要,所以將無線電監(jiān)測數(shù)據(jù)處理結(jié)果的可視化單獨(dú)討論??梢暬╒isualization)是利用計算機(jī)圖形學(xué)和圖像處理技術(shù),將數(shù)據(jù)轉(zhuǎn)換成圖形或圖像在屏幕上顯示出來,并進(jìn)行交互處理的理論、方法和技術(shù)。無線電監(jiān)測數(shù)據(jù)的可視化能夠把抽象的監(jiān)測數(shù)據(jù),變?yōu)橹庇^的、以圖形圖像信息表示的、隨時間和空間變化的物理現(xiàn)象呈現(xiàn)在管理者面前,使他們能夠觀察、研究。網(wǎng)格化監(jiān)測平臺的可視化重點(diǎn)要做到:報表模板靈活、圖表形式多樣、OA集成展現(xiàn)、移動跨平臺訪問,使管理者看得明白、管得方便,如圖6所示。
4總結(jié)
篇3
關(guān)鍵詞:環(huán)保監(jiān)測;數(shù)據(jù)采集;無線傳輸;HJ/T212協(xié)議
中圖分類號:TE973 文獻(xiàn)標(biāo)識碼:A 文章編號:1007-9599(2011)23-0000-01
Environmental Monitoring Wireless Data Collective Transmission System
Xu Hongning
(Shenyang Ware Digital Technology Co.Ltd.,Shenyang 110015,China)
Abstract:Aiming at a high-function wirelss data collective transmisstion equipment which focuses on all kinds of pollutions to realize the instant monitoring of the instrument and transmit the monitoring data to the monitoring center through transmission network, in the meanwhile receive and carry out the orders from the monitoring center and finally realize distance monitoring,instant monitoring, over-standard alarm.Through analog signal inerface,digital singal interface and all kinds of instrument such as flowmeter,COD,PH device, ammonia antrogen,residual chlorine and smoke monitoring,the environmental monitoring wireless data collective transmission system can monitor the instrument more conveniently and meets the requirements of the contry control,province control and city control.
Keywords:Environmental monitoring;Data collection;Wireless transmission;HJ/T212 agreement
人類不斷的向環(huán)境排放污染物質(zhì),如果排放的物質(zhì)超過了環(huán)境的自凈能力,環(huán)境質(zhì)量就會發(fā)生不良變化,危害人類健康和生存。傳統(tǒng)的環(huán)境監(jiān)測工作主要以人工現(xiàn)場采樣、實(shí)驗(yàn)室儀器分析為主,存在著監(jiān)測頻次低、采樣誤差大、監(jiān)測數(shù)據(jù)分散、不能及時反映污染變化狀況等缺陷,難以滿足政府和企業(yè)進(jìn)行有效環(huán)境管理的需求。如今環(huán)境在線自動監(jiān)測已經(jīng)成為有關(guān)部門及時獲得連續(xù)性的監(jiān)測數(shù)據(jù)的有效手段。只需經(jīng)過幾分鐘的數(shù)據(jù)采集,污染源的環(huán)境狀況信息就可發(fā)送到環(huán)境分析中心的服務(wù)器中。一旦觀察到有某種污染物的濃度發(fā)生異變,環(huán)境監(jiān)測部門就可以立刻采取相應(yīng)的措施,取樣具體分析??梢?,環(huán)保監(jiān)測無線數(shù)據(jù)采集傳輸系統(tǒng)最大的優(yōu)勢便在于可快速而準(zhǔn)確地獲得環(huán)境監(jiān)測數(shù)據(jù),以確定目標(biāo)區(qū)域的環(huán)境狀況和發(fā)展趨勢。
一、系統(tǒng)總體結(jié)構(gòu)
(一)現(xiàn)場數(shù)據(jù)采集終端部分。該終端主要是為了獲取現(xiàn)場各個監(jiān)測儀器的數(shù)據(jù)、上傳并保存原始數(shù)據(jù)。包括:系統(tǒng)設(shè)置、數(shù)據(jù)顯示、數(shù)據(jù)查詢、數(shù)據(jù)傳輸?shù)裙δ?。(二)服?wù)器中心信息分析處理系統(tǒng)。主要包括:數(shù)據(jù)接收,綜合查詢分析,系統(tǒng)維護(hù)和數(shù)據(jù)四大模塊。(三)通訊協(xié)議?,F(xiàn)場數(shù)據(jù)采集終端與信息分析處理系統(tǒng)之間的通訊完全符合HJ/T212-2005《污染源在線自動監(jiān)測(監(jiān)控)系統(tǒng)數(shù)據(jù)傳輸標(biāo)準(zhǔn)》。
二、現(xiàn)場數(shù)據(jù)采集終端硬件設(shè)計
現(xiàn)場數(shù)據(jù)采集終端是基于微處理器的數(shù)據(jù)采集系統(tǒng),主芯片采用的是的Atmel的32位微處理器AT91SAM7X256[2],可處理從各種傳感器和分析儀采集的模擬信號和數(shù)字信號。整個系統(tǒng)由4部分組成,即電源、數(shù)據(jù)采集存儲、鍵盤顯示、GPRS無線傳輸。
(一)電源部分。系統(tǒng)選擇220V交流電輸入模式供電,再由開關(guān)電源轉(zhuǎn)換為12V直流作為系統(tǒng)總電源,再由各個轉(zhuǎn)換芯片為各部分電路供電。備電電源模塊采用12V5Ah的蓄電池,在外部電源切掉的情況下,可持續(xù)工作40小時左右,并且將掉電和上電狀態(tài)上傳給終端供用戶及時進(jìn)行處理。(二)數(shù)據(jù)采集存儲。模擬量通道共11路,每路模擬通道可通過軟件或硬件跳線的方式提供兩種信號輸入方式(4-20mA、0-5V)。所有輸入信號均通過12位A/D轉(zhuǎn)換器每15秒/30秒掃描一次;數(shù)字量通道共5路,按照modbus協(xié)議進(jìn)行通訊;開關(guān)量輸入通道共8路,可以讀取繼電器的工作狀態(tài)以監(jiān)測接入設(shè)施的工作狀態(tài);開關(guān)量輸出通道共4路用來控制相應(yīng)儀器的電子開關(guān)或繼電器的開閉,來完成自動控制儀器的功能。數(shù)據(jù)存儲部分選用可編程閃速存儲器AT45DB321D,數(shù)據(jù)存儲量大,達(dá)到4M左右。(三)按鍵和顯示部分。數(shù)字鍵部分包括0-9,負(fù)號跟小數(shù)點(diǎn),用來輸入數(shù)據(jù);光標(biāo)控制部分包括4個箭頭鍵:其中兩個垂直移動鍵和兩個水平移動鍵,顯示菜單時,垂直光標(biāo)鍵進(jìn)行選擇條目,水平光標(biāo)鍵進(jìn)行選擇類別。除此回車鍵執(zhí)行進(jìn)入子菜單/確定,退出鍵執(zhí)行返回上一級菜單,BK執(zhí)行退格功能。這些按鍵可以實(shí)現(xiàn)全部菜單操作。LCD選用常用的250*64模塊,通信是基于SPI總線。監(jiān)測點(diǎn)相關(guān)信息如監(jiān)測點(diǎn)名稱編號、污染源名稱及量程單位等可在這里進(jìn)行設(shè)置,并且顯示所連接的監(jiān)測儀器的實(shí)時數(shù)據(jù)、小時均值、日均值和月均值,還能顯示污染物的小時總量、日總量、月總量。(四)GPRS無線傳輸部分。本系統(tǒng)采用了Motorola公司高性能工業(yè)級GPRS模塊。這種模塊與UART連接。通過軟件實(shí)現(xiàn)AT命令,可以控制GPRS連網(wǎng),發(fā)送短信,語音通話等,支持固定IP或動態(tài)域名尋址;支持多數(shù)據(jù)中心,自動切換。
三、服務(wù)器中心信息分析處理系統(tǒng)設(shè)計
包括在線監(jiān)測數(shù)據(jù)接收,綜合查詢分析,系統(tǒng)基礎(chǔ)數(shù)據(jù)維護(hù)和數(shù)據(jù)四大模塊。其中數(shù)據(jù)接收是系統(tǒng)的核心,它連接著現(xiàn)場數(shù)據(jù)采集終端,將采集到的監(jiān)測數(shù)據(jù)存儲至數(shù)據(jù)庫Orace10G,更新監(jiān)控站點(diǎn)的在線情況,實(shí)現(xiàn)對數(shù)據(jù)完整性的判斷,發(fā)送補(bǔ)取數(shù)據(jù)指令,最大限度保證數(shù)據(jù)的傳輸率;綜合查詢分析是將各個監(jiān)測終端的實(shí)時數(shù)據(jù)/歷史數(shù)據(jù)經(jīng)過特定的計算,生成管理人員可以參考的數(shù)值,并將這些數(shù)值分類匯總,形成小時均值、日均值和月均值的報表,以便直觀的反映各企業(yè)的排污情況。系統(tǒng)基礎(chǔ)數(shù)據(jù)維護(hù)包括污染源信息維護(hù),監(jiān)測項(xiàng)目類型維護(hù)與管理門戶等功能。數(shù)據(jù)模塊是最終展示在用戶面前的數(shù)據(jù)形式,分為行政區(qū)域,地理信息系統(tǒng),自定義分組,查詢分析,組態(tài)視圖五個部分,集中形象的把監(jiān)測數(shù)據(jù)以不同方式展示給客戶,用戶只需打開瀏覽器即可查看。
參考文獻(xiàn):
篇4
【關(guān)鍵詞】環(huán)境監(jiān)測數(shù)據(jù);分析;重要性
1.環(huán)境監(jiān)測數(shù)據(jù)的特征及重要性
1.1環(huán)境監(jiān)測數(shù)據(jù)的特征
環(huán)境監(jiān)測數(shù)據(jù)規(guī)定了每一次監(jiān)測獲得的數(shù)據(jù)的可使用范圍,超出該范圍得出的數(shù)據(jù)就被視為是不合格的。這是因?yàn)楸O(jiān)測數(shù)據(jù)是具有局限性的,這種局限性是為了保證監(jiān)測數(shù)據(jù)的準(zhǔn)確性與可靠性。同時,對于監(jiān)測獲得的數(shù)據(jù)要求具有完整性,不應(yīng)該有缺失或是遺漏的現(xiàn)象。對于在規(guī)定范圍內(nèi)的監(jiān)測數(shù)據(jù),如果這些數(shù)據(jù)不僅具有代表性,還具備完整性,那么就達(dá)到監(jiān)測的目的了[1]。
1.2環(huán)境監(jiān)測數(shù)據(jù)的重要性
環(huán)境監(jiān)測的重要性在于它能為環(huán)境的管理、規(guī)劃、評價等提供科學(xué)、有力的依據(jù)。出于對我國正處于經(jīng)濟(jì)高速發(fā)展階段的考慮,我們對環(huán)境監(jiān)測應(yīng)給予更高的重視。一般來說,環(huán)境監(jiān)測數(shù)據(jù)的質(zhì)量以及分析能力的高低可以反映出一個監(jiān)測站工作能力,也體現(xiàn)了該監(jiān)測站在環(huán)境保護(hù)工作所處地位的高低。
2.對環(huán)境監(jiān)測數(shù)據(jù)的填制及整理要求
對于監(jiān)測獲取的相關(guān)圖標(biāo)和原始數(shù)據(jù),要進(jìn)行適當(dāng)?shù)恼砗蜌w類,以便后面的工作可以更加有利地開展與進(jìn)行。在填制監(jiān)測數(shù)據(jù)時就應(yīng)該選取標(biāo)準(zhǔn)的記錄表格,在填寫時要盡量的專業(yè)化、規(guī)范化,并且要保證書寫清晰、準(zhǔn)確。對于原始數(shù)據(jù)的檢查,要逐個地進(jìn)行、確認(rèn),將那些不能真實(shí)地反映監(jiān)測情況的數(shù)據(jù)去掉。這樣做的目的是為了將數(shù)據(jù)整理得更有條理,更有實(shí)用性,減免不必要的反復(fù)檢查,影響工作效率的提高。同時,還有一個問題需要注意,那就是作為監(jiān)測數(shù)據(jù)確認(rèn)的負(fù)責(zé)人不可以直接參與監(jiān)測數(shù)據(jù)的采集工作[2]。
3.對環(huán)境監(jiān)測數(shù)據(jù)的分析
環(huán)境監(jiān)測是一種以環(huán)境作為對象,運(yùn)用物理、化學(xué)和生物等技術(shù)手段,對污染物進(jìn)行定性、定量和系統(tǒng)的綜合分析,它是環(huán)境評價中的重要環(huán)節(jié),貫穿環(huán)境影響評價的整個過程。
3.1利用統(tǒng)計規(guī)律進(jìn)行分析
環(huán)境監(jiān)測是以統(tǒng)計學(xué)為基礎(chǔ)的,因此,這種分析方法經(jīng)常被監(jiān)測人員采用。這種分析方法包含了對環(huán)境要素的質(zhì)量進(jìn)行各種數(shù)學(xué)模式評價方法對監(jiān)測數(shù)據(jù)進(jìn)行解剖,利用它的內(nèi)在規(guī)律性進(jìn)行分析和利用,進(jìn)而得出相關(guān)的論斷。這種方法在環(huán)境規(guī)劃、環(huán)境調(diào)查和環(huán)境評價的工作中使用較多[3]。
3.2通過對污染源的監(jiān)測值來分析
監(jiān)測人員可以通過對污染源的監(jiān)測數(shù)據(jù)進(jìn)行分析。其實(shí),對污染物的監(jiān)測對象不僅僅限于空氣、地下水、土壤等,還有一個人們經(jīng)常說的工業(yè)污染源。工業(yè)污染是有多種的,不同行業(yè)的工業(yè)就會有其不同的污染物產(chǎn)生。比如,對于化工行業(yè)來講,它排出的有機(jī)物含量種類就較多多,而金屬物質(zhì)相對就較少一些;金屬行業(yè)排出的污染物是有機(jī)物含量較少而金屬物質(zhì)含量較多等。如果在一個金屬行業(yè)排除的廢棄物中監(jiān)測得出的結(jié)果顯示是具有較多有機(jī)物的,那么對于這組監(jiān)測數(shù)據(jù)應(yīng)該重新考慮和分析,并從中找出原因。這也說明了一個問題,那就是監(jiān)測人員在日常的工作當(dāng)中要對管轄區(qū)內(nèi)的生產(chǎn)企業(yè)相關(guān)情況進(jìn)行了解,要根據(jù)不同的行業(yè)有針對性地選擇相應(yīng)的監(jiān)測項(xiàng)目來監(jiān)測這些污染企業(yè),實(shí)行對他們的有效監(jiān)督[4]。
3.3根據(jù)事物之間的相關(guān)性原理進(jìn)行分析
這種分析法主要是基于事物本身具有的相互關(guān)系的原理來來進(jìn)行的。一般來說,兩個或者兩個以上的監(jiān)測數(shù)據(jù)之間往往會存在某一種的固定聯(lián)系,監(jiān)測人員可以根據(jù)這種固定的聯(lián)系去分析數(shù)據(jù)之間的相關(guān)聯(lián)系,也可以對單個已經(jīng)實(shí)行控制質(zhì)量措施的監(jiān)測數(shù)據(jù)進(jìn)行檢測,驗(yàn)證是否正確。而對于一些例行的監(jiān)測數(shù)據(jù),則可以得出較為直觀的判斷。比如,氟含量跟硬度之間的關(guān)系。由于F與Ca、Mg形成沉淀物得容積度比較小,所以,在中性和弱堿性的水溶液當(dāng)中,如果氟含量是在(mg/ L )級的,那么它的氟含量與Ca、Mg的含量就是呈顯負(fù)相關(guān)的現(xiàn)象,也就是說跟硬度值是負(fù)相關(guān)的。因此,在高氟區(qū)內(nèi)得出的水質(zhì)監(jiān)測結(jié)果顯示的硬度監(jiān)測值一般會比較低。如果獲得的氟含量較高,得出的硬度監(jiān)測值也很高,那么這類監(jiān)測數(shù)據(jù)就需要進(jìn)行重新分析[5]。
4.結(jié)語
隨著我國環(huán)境保護(hù)的不斷深入,監(jiān)測人員要在使用各種分析方法的同時不斷地去提嘗試新的分析方法,要在原來的基礎(chǔ)水平上更進(jìn)一步地提高自己的綜合分析能力,對提供的監(jiān)測數(shù)據(jù)要有一種精益求精的精神,爭取提供的數(shù)據(jù)更可靠更合理,業(yè)務(wù)技能不斷地有新的進(jìn)步。由于獲取的環(huán)境監(jiān)測數(shù)據(jù)與區(qū)域的過去和現(xiàn)在都有密切的聯(lián)系,因此,監(jiān)測人員要對監(jiān)測區(qū)域的過去和現(xiàn)在的環(huán)境狀況都要進(jìn)行深入的了解和分析,在了解的基礎(chǔ)上展開全面的探討,這樣才可以保證獲取的監(jiān)測數(shù)據(jù)更全面,更有說服力,質(zhì)量更有保證。
參考文獻(xiàn)
[1]葉萍.淺論環(huán)境監(jiān)測數(shù)據(jù)的綜合分析方法[J]中國環(huán)境管理干部學(xué)院學(xué)報, 2009, (01) .
[2]郭琦.環(huán)境監(jiān)測在環(huán)境影響評價中的意義與建議[J].科技風(fēng), 2010, (15)
[3]孫曉雷.我國環(huán)境監(jiān)測質(zhì)量管理體系研究[J].科技傳播, 2010, (15)
篇5
Abstract: This paper describes several commonly used in environmental monitoring data analysis method of monitoring data, the comprehensive analysis is very important.
關(guān)鍵詞:環(huán)境監(jiān)測;質(zhì)量濃度;數(shù)據(jù);分析;方法
Key words: environmental monitoring; mass concentration; data analysis; method;
中圖分類號:X83文獻(xiàn)標(biāo)識碼:A 文章編號:2095-2104(2012)
一、監(jiān)測數(shù)據(jù)綜合分析的目的和作用
環(huán)境監(jiān)測是科學(xué)性很強(qiáng)的工作,它的直接產(chǎn)品就是監(jiān)測數(shù)據(jù)。監(jiān)測質(zhì)量好壞集中反映在數(shù)據(jù)上,準(zhǔn)確、可靠、可比的環(huán)境監(jiān)測數(shù)據(jù)是環(huán)境科學(xué)研究工作的基礎(chǔ),是環(huán)境管理的依據(jù)。一個環(huán)境監(jiān)測站每年可提供成千上萬的監(jiān)測數(shù)據(jù),但這些數(shù)據(jù)本身是孤立的、離散的,必須從不同的目的和作用出發(fā),把環(huán)境監(jiān)測所獲得的資料、數(shù)據(jù),通過不同的途徑和方法分類、統(tǒng)計、轉(zhuǎn)化、匯總,找出其本質(zhì)的東西,獲取環(huán)境管理所要求的各種綜合數(shù)據(jù)。環(huán)境監(jiān)測數(shù)據(jù)綜合分析的目的是完成監(jiān)測數(shù)據(jù)、信息資料向環(huán)境質(zhì)量定性和定量結(jié)論的轉(zhuǎn)變,通過監(jiān)測數(shù)據(jù)、信息資料的深加工與自然環(huán)境、社會經(jīng)濟(jì)發(fā)展等諸因素的綜合分析,實(shí)現(xiàn)為污染防治決策和環(huán)境建設(shè)決策的轉(zhuǎn)變。環(huán)境監(jiān)測數(shù)據(jù)綜合分析是環(huán)境監(jiān)測過程中環(huán)節(jié)的重要環(huán)節(jié),也是最終環(huán)節(jié)。一般來說,環(huán)境監(jiān)測綜合分析技術(shù)的水平高低,代表著監(jiān)測站技術(shù)水平的高低,也決定著監(jiān)測站在環(huán)境管理中的地位和作用。
二、監(jiān)測數(shù)據(jù)綜合分析的方法
在對環(huán)境質(zhì)量進(jìn)行綜合評價或?qū)^(qū)域環(huán)境污染狀況進(jìn)行評價時,都是以一定數(shù)量的監(jiān)測數(shù)據(jù)和資料為依據(jù)的。這些數(shù)據(jù)和資料包括環(huán)境要素的監(jiān)測數(shù)據(jù)、環(huán)境條件數(shù)據(jù)、污染源調(diào)查監(jiān)測數(shù)據(jù)、現(xiàn)場調(diào)查數(shù)據(jù)和實(shí)測數(shù)據(jù)等等。環(huán)境監(jiān)測綜合分析采用的方法很多,并在不斷完善和發(fā)展,通常采用的分析方法有統(tǒng)計規(guī)律分析、合理性分析、效益分析等。
2.1 統(tǒng)計規(guī)律分析
統(tǒng)計規(guī)律分析中包括了對環(huán)境要素進(jìn)行質(zhì)量評價的各種數(shù)學(xué)模式評價方法,也就是應(yīng)用數(shù)理統(tǒng)計方法,模糊數(shù)學(xué)方法和適用于不同環(huán)境要素的數(shù)學(xué)、物理方程等方法,對監(jiān)測數(shù)據(jù)資料進(jìn)行剖析,解釋,做出規(guī)律性的分析和評價。該分析方法主要應(yīng)用于環(huán)境調(diào)查、環(huán)境規(guī)劃或課題、環(huán)評等比較大的工作中。
2.2 合理性分析
由于影響環(huán)境要素變化的因素十分復(fù)雜,而用于綜合分析的監(jiān)測數(shù)據(jù)資料有限,所以需要結(jié)合環(huán)境要素的各項(xiàng)條件和污染源參數(shù),理論結(jié)合實(shí)際分析其合理性。應(yīng)考慮到環(huán)境要素之間的相互影響,監(jiān)測項(xiàng)目之間的相關(guān)和對比關(guān)系,全面分析其合理性,這樣才能提供準(zhǔn)確、可靠、合理的監(jiān)測數(shù)據(jù)。如何合理的分析數(shù)據(jù),可以從以下幾個方面判斷:
2.2.1 通過項(xiàng)目之間的相關(guān)性來分析
監(jiān)測項(xiàng)目多種多樣,有機(jī)的、無機(jī)的都有,但是物質(zhì)本身具有相互關(guān)系,兩個或兩個以上的項(xiàng)目監(jiān)測數(shù)據(jù)往往存在一種固定關(guān)系,這就為我們分析單個已實(shí)行質(zhì)量控制措施的監(jiān)測數(shù)據(jù)正確與否提供了依據(jù),對一些例行監(jiān)測數(shù)據(jù),可做出直觀的判定。例如,氟含量與硬度之間的關(guān)系。F與Ca、Mg形成沉淀物容積度較小,因此,在中性、弱堿性水溶液中,如氟含量在(mg/L)級,則其氟含量與Ca、Mg含量呈明顯負(fù)相關(guān),即與硬度值呈負(fù)相關(guān),所以高氟區(qū)內(nèi)的水質(zhì)監(jiān)測結(jié)果中硬度監(jiān)測值一般較低。如果氟含量較高,同樣硬度監(jiān)測值也很高,數(shù)據(jù)就要重新分析。再如CO、BOD5和高錳酸鹽指數(shù)之間的關(guān)系。根據(jù)COD、BOD5和高錳酸鹽指數(shù)的概念,COD是指用強(qiáng)氧化劑,在酸性條件下,將有機(jī)物氧化成CO2 與H2O所消耗的氧量平;BOD5是指在水溫為20℃的條件下,微生物氧化有機(jī)物所消耗的氧量;高錳酸鹽指數(shù)是在一定條件下,用高錳酸鉀氧化水樣中的某些有機(jī)物及無機(jī)物還原性物質(zhì),由消耗的高錳酸鉀量計算相當(dāng)?shù)难趿?;結(jié)合其實(shí)際的測定過程,對于同一份水樣三者的監(jiān)測結(jié)果,應(yīng)存在以下規(guī)律:COD>BOD5,COD>CODMn。三氮與溶解氧也存在一定的關(guān)系。環(huán)境中氮的存在形式根據(jù)環(huán)境條件的變化而發(fā)生變化,尤其受水體中溶解氧的質(zhì)量濃度影響,一般溶解氧高的水體硝酸鹽氮的質(zhì)量濃度高于氨氮質(zhì)量濃度,反之氨氮質(zhì)量濃度高于硝酸鹽氮質(zhì)量濃度,亞硝酸鹽氮質(zhì)量濃度與之無明顯關(guān)系。二氧化硫與氮氧化物之間的關(guān)系:對于以煤為主要燃料的煤煙型污染區(qū)域,其大氣環(huán)境中二氧化硫體積質(zhì)量大于氮氧化物,一般為氮氧化物的2~6倍。在以汽油、柴油為燃料的區(qū)域內(nèi),如馬路邊,交通繁忙而居民少的區(qū)域,氮氧化物體積質(zhì)量則大于二氧化硫。綜上所述,物質(zhì)之間存在的相互關(guān)聯(lián)性對綜合分析監(jiān)測數(shù)據(jù)的合理性起著至關(guān)重要的作用,它直觀的體現(xiàn)出數(shù)據(jù)在分析過程是否存在分析誤差,可以在第一時間分析出數(shù)據(jù)是否合理,為進(jìn)一步綜合分析數(shù)據(jù)提供了準(zhǔn)確依據(jù)。
2.2.2 通過掌握的資料對監(jiān)測值進(jìn)行判定
對現(xiàn)有的數(shù)據(jù)進(jìn)行綜合分析,首先要了解采樣地點(diǎn)的本底值范圍,特別是例行監(jiān)測或者是年度監(jiān)測計劃。這種工作一般情況下都是連續(xù)性的,一年或是幾年,數(shù)據(jù)可比性比較好,對同一點(diǎn)位的數(shù)據(jù),如個別項(xiàng)目變化較大,可以先將該值列為可疑數(shù)值,然后進(jìn)行合理性分析。進(jìn)行合理性分析,首先要了解是否有新的污染源介入,其次是采樣全過程有無異常,包括水質(zhì)的顏色,氣味、流量的大小等。與以往數(shù)據(jù)進(jìn)行比對,采樣是否規(guī)范,采樣的容器是否達(dá)到可用標(biāo)準(zhǔn)等。再次是實(shí)驗(yàn)室分析,如查找顯示劑保存時間是否過期,標(biāo)準(zhǔn)曲線是否及時繪制,分光光度計是否調(diào)零等等。對于氣體來說,還要考慮采樣時的風(fēng)向,采樣儀器是否校準(zhǔn)等。對于可疑值,在分析過程中已經(jīng)知道數(shù)據(jù)是可疑的應(yīng)將可疑值舍去;對復(fù)查結(jié)果時已經(jīng)找出出現(xiàn)可疑值原因的,也應(yīng)將可疑值舍去;對找不出可疑值出現(xiàn)原因的,不應(yīng)隨意舍去或保留,要對留樣重新進(jìn)行實(shí)驗(yàn)室分析或根據(jù)數(shù)理統(tǒng)計原則來處理。
2.2.3 通過監(jiān)測項(xiàng)目的性質(zhì)對監(jiān)測值判定
在同一水樣中有許多項(xiàng)目根據(jù)其性質(zhì)可以判定相關(guān)的監(jiān)測值是否正確。如總氮,是指可溶性及懸浮顆粒中的含氮量,如果同一水樣監(jiān)測結(jié)果出現(xiàn)總氮與氨氮、亞硝酸鹽氮、硝酸鹽氮數(shù)據(jù)倒掛,就表明監(jiān)測結(jié)果是不正確的,需要重新分析找出原因;同樣,還有總磷與可溶性磷以及無機(jī)磷之間數(shù)據(jù)的倒掛;大氣中,氮氧化物與一氧化氮、二氧化氮,總懸浮顆粒物與可吸入顆粒物之間數(shù)據(jù)的倒掛等,都是不合理現(xiàn)象。同樣,在噪聲監(jiān)測中,理論上監(jiān)測數(shù)據(jù)L10 一定大于L50、L90、Leq,在實(shí)際監(jiān)測中如果出現(xiàn)Leq 大于L10,如果不是監(jiān)測數(shù)據(jù)或儀器出現(xiàn)問題,就是由于瞬時之間噪音值的突然增大,應(yīng)當(dāng)修正數(shù)據(jù)使用。以上只是列出部分項(xiàng)目之間的關(guān)系,還有許多項(xiàng)目關(guān)系需要我們在日常生活中不斷總結(jié)和發(fā)現(xiàn),運(yùn)用到日常的環(huán)境監(jiān)測綜合分析中,更好地服務(wù)于環(huán)境管理。
2.2.4 通過了解污染源對監(jiān)測值進(jìn)行判定
監(jiān)測數(shù)據(jù)是多種多樣的,不僅僅包括環(huán)境空氣、地表水、地下水等等,也包括點(diǎn)源,如我們常說的工業(yè)污染源。工業(yè)污染源多種多樣,不同的行業(yè)有不同的污染物產(chǎn)生,多數(shù)行業(yè)都有自己的特殊污染物產(chǎn)生,化學(xué)需氧量和氨氮只是多數(shù)工業(yè)污染源的共性污染物。因此,要在日常工作中對轄區(qū)內(nèi)的污染源或者是重點(diǎn)污染源有所了解,根據(jù)行業(yè)的不同,選擇有針對性的監(jiān)測項(xiàng)目來監(jiān)督污染企業(yè)。如國家最新頒布執(zhí)行的制藥行業(yè)六項(xiàng)標(biāo)準(zhǔn),就是根據(jù)制藥行業(yè)不同工業(yè)生產(chǎn)工藝和污染治理技術(shù)的特點(diǎn),分別制定了《發(fā)酵類制藥工業(yè)水污染物排放標(biāo)準(zhǔn)》、《提取類制藥工業(yè)水污染物排放標(biāo)準(zhǔn)》、《化學(xué)合成類制藥工業(yè)水污染物排放標(biāo)準(zhǔn)》、《中藥類制藥工業(yè)水污染物排放標(biāo)準(zhǔn)》、《生物工程類制藥工業(yè)水污染物排放標(biāo)準(zhǔn)》、《混裝制劑類制藥工業(yè)水污染物排放標(biāo)準(zhǔn)》。國家對這些行業(yè)制定了最多25項(xiàng)污染物監(jiān)測分析排放標(biāo)準(zhǔn),最少11項(xiàng)污染物監(jiān)測分析排放標(biāo)準(zhǔn),其中有共性的污染物,也有特殊的污染物,根據(jù)特殊的污染物是否存在,就可以判定是哪類制藥行業(yè)。又如對化工行業(yè)來說,有機(jī)物含量種類較多,重金屬比較少;對于重金屬行業(yè)來說,有機(jī)物含量較少;造紙行業(yè)主要是有機(jī)污染等。如果在一個生產(chǎn)有機(jī)化工的企業(yè),廢水監(jiān)測出高質(zhì)量濃度的重金屬,則監(jiān)測數(shù)據(jù)應(yīng)重新考慮,需按照綜合分析方法分析其原因。
2.3 效益分析
環(huán)境監(jiān)測數(shù)據(jù)有例行監(jiān)測、環(huán)評監(jiān)測、驗(yàn)收監(jiān)測、監(jiān)督監(jiān)測等等。對于監(jiān)督監(jiān)測來說,分析數(shù)據(jù)相對較少,數(shù)據(jù)合理性比較好判斷;而對于數(shù)據(jù)較多的例行監(jiān)測、環(huán)評監(jiān)測來說,在較短時間內(nèi)判斷數(shù)據(jù)是否準(zhǔn)確、合理、可靠,上述綜合分析方法提供了簡單、明了的依據(jù),在實(shí)際工作中能夠及時為環(huán)境管理提供準(zhǔn)確的監(jiān)測信息,減少企業(yè)不必要的重復(fù)工作,在有效的時間內(nèi)提供更優(yōu)質(zhì)的服務(wù)。
篇6
【關(guān)鍵詞】配網(wǎng)故障搶修流程 監(jiān)測 驗(yàn)證 測試報告 時長
為了提高供電企業(yè)供電的安全性與可靠性,必須提高配網(wǎng)故障的搶修效率,是否能夠順利、高效地完成配網(wǎng)故障的搶修,直接反映出電力企業(yè)的服務(wù)水平。因此,監(jiān)測配網(wǎng)故障搶修流程,可以促進(jìn)制度落實(shí)、業(yè)務(wù)協(xié)同、流程優(yōu)化和效率提升。
1 設(shè)計依據(jù)
公司依據(jù)配網(wǎng)故障搶修流程監(jiān)測的業(yè)務(wù)設(shè)計說明,對其中涉及的《國家電網(wǎng)公司配網(wǎng)故障搶修管理規(guī)定》[國網(wǎng)(運(yùn)檢/4)312-2014]、《國家電網(wǎng)公司電網(wǎng)調(diào)度控制管理通則》[國網(wǎng)(調(diào)/1)93-2014]、《國家電網(wǎng)公司95598故障報修處理規(guī)范》[國網(wǎng)(營銷/4)272-2014]進(jìn)行核實(shí)。經(jīng)驗(yàn)證,其內(nèi)容與設(shè)計說明文檔中設(shè)計依據(jù)的內(nèi)容相符。
2 監(jiān)測要素及監(jiān)測維度情況
在與公司配網(wǎng)搶修指揮班溝通后了解到,按照省客服中心安排,現(xiàn)配網(wǎng)故障搶修流程中工單審核環(huán)節(jié)已經(jīng)取消,地市配網(wǎng)搶修指揮班收到搶修班組的工單回復(fù)后直接向國網(wǎng)客服中心回復(fù),因此建議取消對工單審核環(huán)節(jié)時長的監(jiān)測。主要從配網(wǎng)故障搶修總時長及業(yè)務(wù)受理、接單派工、到達(dá)現(xiàn)場、故障處理、回訪歸檔5個關(guān)鍵環(huán)節(jié)時長開展業(yè)務(wù)驗(yàn)證。
2.1 配網(wǎng)故障搶修總時長監(jiān)測
共梳理相關(guān)數(shù)據(jù)字段10項(xiàng),均為線上數(shù)據(jù),涉及客服工單管控系統(tǒng),包括:供電單位、工單編號,用戶名稱、聯(lián)系電話、電壓等級、故障報修類型、城鄉(xiāng)類別、故障處理部門、業(yè)務(wù)受理時間、回訪歸檔時間。驗(yàn)證結(jié)論:經(jīng)驗(yàn)證,配網(wǎng)故障搶修總時長雖不能從工單管控系統(tǒng)中查出,但可通過數(shù)據(jù)字段業(yè)務(wù)受理時間和回訪歸檔時間計算得出。故涵蓋的10項(xiàng)數(shù)據(jù)字段可滿足配網(wǎng)故障搶修總時長監(jiān)測要求。
2.2 關(guān)鍵環(huán)節(jié)時長監(jiān)測
共梳理相關(guān)數(shù)據(jù)字段16項(xiàng),均為線上數(shù)據(jù),涉及客服工單管控系統(tǒng),包括:供電單位、工單編號,用戶名稱、聯(lián)系電話、電壓等級、故障報修類型、城鄉(xiāng)類別、故障處理部門、業(yè)務(wù)受理時間、派發(fā)時間、接單派工時間(工單到達(dá))、接單派工時間(處理時間)、到達(dá)現(xiàn)場時間、故障處理時間、回訪歸檔時間(工單到達(dá))、回訪歸檔時間(處理時間)。驗(yàn)證結(jié)論:經(jīng)驗(yàn)證,接單派工環(huán)節(jié)時長和工單回訪歸檔時長不能在工單管控系統(tǒng)中查出,但可從相關(guān)時間節(jié)點(diǎn)計算得出。通過對比其余主要環(huán)節(jié)時長與規(guī)定時長,可掌握制度執(zhí)行情況。其他監(jiān)測要素和監(jiān)測維度基本滿足配網(wǎng)故障搶修流程關(guān)鍵環(huán)節(jié)時長監(jiān)測業(yè)務(wù)的預(yù)期要求。
3 業(yè)務(wù)系統(tǒng)及數(shù)據(jù)支撐情況
依據(jù)已確定配網(wǎng)故障搶修總時長和關(guān)鍵環(huán)節(jié)時長兩個監(jiān)測要素,對相關(guān)業(yè)務(wù)系統(tǒng)和業(yè)務(wù)數(shù)據(jù)支撐情況進(jìn)行梳理,確定相關(guān)字段16項(xiàng),均為線上數(shù)據(jù),涉及客服工單管控系統(tǒng)。
3.1 業(yè)務(wù)系統(tǒng)支撐情況
配網(wǎng)故障搶修監(jiān)測業(yè)務(wù)相關(guān)的16項(xiàng)線上數(shù)據(jù),均可從客服工單管控系統(tǒng)中提取。經(jīng)驗(yàn)證,業(yè)務(wù)系統(tǒng)可滿足配網(wǎng)故障搶修監(jiān)測業(yè)務(wù)的系統(tǒng)支撐。
3.2 數(shù)據(jù)支撐及數(shù)據(jù)質(zhì)量情況
經(jīng)驗(yàn)證,線上16項(xiàng)數(shù)據(jù)中,10項(xiàng)數(shù)據(jù)(供電單位、工單編號、用戶名稱、聯(lián)系電話、電壓等級、故障報修類型、城鄉(xiāng)類別、故障處理部門、到達(dá)現(xiàn)場時長和故障處理時長)可通過系統(tǒng)直接提取。業(yè)務(wù)受理時間(工單到達(dá)、工單處理)接單派工時間(工單到達(dá)、工單處理)、回訪歸檔時間(工單到達(dá)、工單處理)系統(tǒng)中可提取數(shù)據(jù),通過這幾項(xiàng)數(shù)據(jù)可計算得到配網(wǎng)故障搶修流程總時長、業(yè)務(wù)受理時長、接單派工時長、回訪歸檔時長。因此,16項(xiàng)線上數(shù)據(jù)可以滿足配網(wǎng)故障搶修監(jiān)測業(yè)務(wù)的系統(tǒng)支撐。詳細(xì)數(shù)據(jù)支撐情況見附件二。
4 監(jiān)測價值
按照業(yè)務(wù)設(shè)計確定的監(jiān)測維度和要素,從國網(wǎng)銅川供電公司2016年4月份配網(wǎng)故障報修工單中按供電單位選取了18份工單,重點(diǎn)對各環(huán)節(jié)涉及數(shù)據(jù)準(zhǔn)確性、完整性、可用性進(jìn)行驗(yàn)證分析。具體情況如下:
4.1 配網(wǎng)故障搶修總時長監(jiān)測
因設(shè)計說明《國家電網(wǎng)公司95595故障報修處理規(guī)范》[國網(wǎng)(營銷/4)272-2014]中未涉及配網(wǎng)故障搶修總時長的時限要求,且配網(wǎng)故障搶修流程中的業(yè)務(wù)受理環(huán)節(jié)和審核歸檔環(huán)節(jié)為國網(wǎng)客服中心完成,時間不受地市公司支配,具有一定監(jiān)測價值。業(yè)務(wù)受理環(huán)節(jié)時長監(jiān)測:經(jīng)驗(yàn)證,18組數(shù)據(jù)的工單到達(dá)時間節(jié)點(diǎn)均與業(yè)務(wù)受理時間節(jié)點(diǎn)一致,在2分鐘的規(guī)定時限之內(nèi),有一定監(jiān)測價值。
4.2 接單派工環(huán)節(jié)時長監(jiān)測
通過客服工單管控系統(tǒng)導(dǎo)出的數(shù)據(jù),接單派工環(huán)節(jié)時長包含工單到達(dá)時間和處理時間,可由這兩個時間節(jié)點(diǎn)計算出接單派工環(huán)節(jié)時長。經(jīng)驗(yàn)證,18份工單的接單派工環(huán)節(jié)平均時長為19秒,遠(yuǎn)小于設(shè)計依據(jù)規(guī)定的3分鐘時限,表明地市配網(wǎng)搶修指揮班對國網(wǎng)工單的接收下達(dá)執(zhí)行情況較好。從監(jiān)測分析結(jié)論看,可促進(jìn)配網(wǎng)故障搶修流程的優(yōu)化和效率提升,具有較高監(jiān)測價值。
4.3 到達(dá)現(xiàn)場環(huán)節(jié)時長監(jiān)測
經(jīng)驗(yàn)證,將18份工單按照供電單位來分,印王分公司6份、耀州分公司6份、宜君分公司6份,分別計算每個單位的到達(dá)現(xiàn)場平均時長,印王分公司為17分41秒、耀州分公司為18分39秒、宜君分公司為16分52秒。對比三個單位的平均時長,可發(fā)現(xiàn)耀州分公司的6份工單中有5份為農(nóng)村用戶,其到達(dá)現(xiàn)場平均時長最長,故到達(dá)現(xiàn)場時長受用戶地理位置影響。但搶修班組可通過建立有效的應(yīng)急機(jī)制等途徑減少到達(dá)現(xiàn)場用時,因此監(jiān)測到達(dá)現(xiàn)場環(huán)節(jié)時長具有較高價值。
4.4 故障處理環(huán)節(jié)時長監(jiān)測
經(jīng)驗(yàn)證,故障處理環(huán)節(jié)時長受現(xiàn)場環(huán)境狀況、備品備件是否齊全、故障修復(fù)難易程度等因素影響。通過對比三個供電分公司的故障處理平均時長,可在不同單位間進(jìn)行橫向比較,促進(jìn)部門間的良性競爭,提高供電服務(wù)水平,因此監(jiān)測價值較高。
4.5 回訪歸檔環(huán)節(jié)時長監(jiān)測
通過客服工單管控系統(tǒng)導(dǎo)出的數(shù)據(jù),接單派工環(huán)節(jié)時長包含工單到達(dá)時間和處理時間,可由這兩個時間節(jié)點(diǎn)計算出工單回訪歸檔環(huán)節(jié)時長。經(jīng)驗(yàn)證,18份工單的回訪歸檔環(huán)節(jié)時長均在規(guī)定時限內(nèi),但由于工單的回訪歸檔是由國網(wǎng)客服中心完成的,時間不受地市公司支配。因此對于地市公司來說,回訪歸檔環(huán)節(jié)時長具有一定監(jiān)測價值。
5 結(jié)論
5.1 驗(yàn)證結(jié)論
優(yōu)化完善監(jiān)測要素和監(jiān)測維度。結(jié)合數(shù)據(jù)獲取和業(yè)務(wù)現(xiàn)狀,建議取消工單審核環(huán)節(jié)時長的監(jiān)測。
5.2 分析結(jié)論
配網(wǎng)故障搶修流程的回訪歸檔時長受國網(wǎng)客服中心掌控,因此建議地市公司將監(jiān)測重點(diǎn)放到接單派工環(huán)節(jié)時長、到達(dá)現(xiàn)場時長和故障處理環(huán)節(jié)時長上,其他項(xiàng)(配網(wǎng)故障搶修總時長、業(yè)務(wù)受理環(huán)節(jié)時長、回訪歸檔環(huán)節(jié)時長)作為一般關(guān)注。通過驗(yàn)證,接單派工環(huán)節(jié)、到達(dá)現(xiàn)場環(huán)節(jié)和故障處理環(huán)節(jié)的用時均在設(shè)計依據(jù)的規(guī)定時限內(nèi),反映出公司對配網(wǎng)故障搶修相關(guān)制度標(biāo)準(zhǔn)執(zhí)行情況較好,部門間工作流程流轉(zhuǎn)順暢。
參考文獻(xiàn)
[1]國家電網(wǎng)公司配網(wǎng)故障搶修管理規(guī)定[國網(wǎng)(運(yùn)檢/4)312-2014.[Z].2014.
篇7
1.1何謂大數(shù)據(jù)
如今大數(shù)據(jù)已經(jīng)不再是個新鮮的詞匯,但是它的熱點(diǎn)與關(guān)注度卻一直很高。因?yàn)閼?yīng)用大數(shù)據(jù)技術(shù)可以顛覆我們目前從事的許多行業(yè),比如即將被顛覆的醫(yī)療、金融和保險這三大行業(yè),因?yàn)檫@幾個行業(yè)的特點(diǎn)是都需要對用戶的數(shù)據(jù)進(jìn)行處理,當(dāng)應(yīng)用了大數(shù)據(jù)技術(shù)后,會縮短處理這些問題的時間和空間,甚至?xí)谟脩舻臄?shù)據(jù)信息分析出他自身存在的問題,醫(yī)療公司會利用基因技術(shù)鎖定你身體中可能出現(xiàn)的病變基因,然后通過數(shù)據(jù)進(jìn)行對比,得出你的病因后就可以主動出擊進(jìn)行治療了。大數(shù)據(jù)的特點(diǎn)之一就是數(shù)據(jù)龐大,它可以解決實(shí)際生活中的許多問題,即使是無線電監(jiān)測問題也不例外。在去年的9月份,美國的互聯(lián)網(wǎng)專家克萊•舍基曾經(jīng)做過一次演講,重點(diǎn)說明了數(shù)據(jù)時代管理信息的重要性,他在演講中提出了一個重要概念,叫做無組織的組織。主要是利用大數(shù)據(jù)技術(shù)對數(shù)據(jù)進(jìn)行分析與管理,在識別與篩選數(shù)據(jù)方面要將內(nèi)容和技術(shù)結(jié)合起來才會形成合力??傊?,大數(shù)據(jù)就是這樣一種利用數(shù)據(jù)進(jìn)行分析與管理的重要技術(shù)。
1.2無線電監(jiān)測的內(nèi)涵和特點(diǎn)
2月16日至17日,國家無線電辦公室在廣西南寧組織召開了2017年全國無線電管理工作座談會。由此可見無線電管理工作的重要性,所以從廣義的無線電監(jiān)測的概念上來說,它主要是指無線電監(jiān)測機(jī)構(gòu)所從事的工作,主要包括一般意義上的無線電監(jiān)測、無線電檢測、電磁兼容分析這幾方面內(nèi)容。從字面上的意思來看,這是一個關(guān)于檢測性的工作,無線電技術(shù)的應(yīng)用發(fā)展和頻譜的高效利用在服務(wù)創(chuàng)新驅(qū)動、推動信息化深入發(fā)展、積極轉(zhuǎn)變經(jīng)濟(jì)發(fā)展方式的過程中發(fā)揮著一定的促進(jìn)作用。無線電監(jiān)測的主要特點(diǎn)之一就是能夠有效利用無線頻率對區(qū)域內(nèi)容進(jìn)行重點(diǎn)監(jiān)測,例如衡水中學(xué)在考試時當(dāng)?shù)氐臒o線電管理局就會啟動無線電管理預(yù)警機(jī)制,出動多輛檢測車為衡水中學(xué)的考試保駕護(hù)航。利用無線電監(jiān)測防高考作弊,這也是無線電管理的一大用途之一。
2大數(shù)據(jù)時代下無線電監(jiān)測業(yè)務(wù)的發(fā)展現(xiàn)狀
身處在大數(shù)據(jù)時代的人們都明白一個非常明確的概念,那就是現(xiàn)在需要處理的信息數(shù)據(jù)非常龐大,企業(yè)內(nèi)部所使用的常規(guī)處理工具已經(jīng)無法滿足數(shù)據(jù)處理的需求了,需要性能穩(wěn)定、處理非??焖俚奶幚砉ぞ邅韺?shù)據(jù)進(jìn)行分析與整合才能保證數(shù)據(jù)處理工作的正常運(yùn)行?,F(xiàn)如今,我國的無線電監(jiān)測業(yè)務(wù)在發(fā)展的過程中,在數(shù)據(jù)的計算與處理方式上也遇到了一些問題,這些問題急需專業(yè)的數(shù)據(jù)技術(shù)處理人才來進(jìn)行解決,這樣在大數(shù)據(jù)時代才能保證無線電監(jiān)測業(yè)務(wù)的順利發(fā)展。
2.1未能保證人工處理后的數(shù)據(jù)準(zhǔn)確性
當(dāng)一個時生變化時,人們是必定能夠有所察覺的,比如新興科技的誕生標(biāo)志著一個新的時代的到來。大數(shù)據(jù)在未快速的進(jìn)入人們的視野范圍內(nèi)時,所有工作都是需要通過人為操作來進(jìn)行分析與處理的。比如無線電監(jiān)測與管理工作,因?yàn)閿?shù)據(jù)的龐大性和不可分辨性,需要多名的技術(shù)人員進(jìn)行相關(guān)的技術(shù)操作處理。無線電監(jiān)測業(yè)務(wù)需要一定的監(jiān)測軟件配合人工來進(jìn)行工作,有時候軟件的信息處理不到位時,就需要大量的人工操作,但是也恰恰正是由于人工處理的緣故,導(dǎo)致一些數(shù)據(jù)的準(zhǔn)確度不夠,這樣就不能很好的對無線電進(jìn)行監(jiān)測。在我國的教育改革中,教師要充分了解教材的基礎(chǔ)內(nèi)容,在保證自己的輸出內(nèi)容學(xué)生能夠準(zhǔn)確接受時才是完整的教學(xué)。為什么說這樣才是完整的教學(xué)呢?因?yàn)榻處煹慕陶n目標(biāo)之一就是要求傳達(dá)知識的準(zhǔn)確性。毫無疑問,我國的無線電監(jiān)測業(yè)務(wù)也是如此,而且對監(jiān)測數(shù)據(jù)的準(zhǔn)確度要求更高。
2.2無線電監(jiān)測數(shù)據(jù)并未得到有效監(jiān)測和挖掘
人的自身基因組成部分中總是帶有一定的惰性,但是當(dāng)突遇外部的阻礙因素后,也會激發(fā)出無限的發(fā)展細(xì)胞來。所以,只有被激活的人類才有可能創(chuàng)造出更加精彩的世界。雖然通過無線電技術(shù)對許多內(nèi)容進(jìn)行監(jiān)測,也儲備了一定數(shù)量的數(shù)據(jù),但是這些監(jiān)測數(shù)據(jù)未得到充分利用和有效分析,這樣的話對于監(jiān)測的結(jié)果來講就不具備可探索性。所以,目前我國無線電監(jiān)測業(yè)務(wù)發(fā)展過程中出現(xiàn)的主要問題之一就是有些監(jiān)測的數(shù)據(jù)未能得到有效的挖掘和分析,總體上會使無線電監(jiān)測的整體效果大打折扣。
2.3人工操作不統(tǒng)一,阻礙了數(shù)據(jù)的分析與整合工作
目前我國已經(jīng)建立了許多的無線電監(jiān)測固定站,通過這些站點(diǎn)的監(jiān)測設(shè)備可以開展頻譜掃描、信號測量、占用度分析等工作,這些工作在進(jìn)行的過程中都會產(chǎn)生大量的監(jiān)測數(shù)據(jù)。那么數(shù)據(jù)產(chǎn)生后自然需要相關(guān)的監(jiān)測人員對數(shù)據(jù)進(jìn)行整合與分析,但是在實(shí)際的數(shù)據(jù)分析與處理過程中,由于人工操作,工作路徑與方式方法都是不同的,不能保證最會得到的數(shù)據(jù)形態(tài)都是統(tǒng)一的,所以說這種通過大多數(shù)人為因素進(jìn)行數(shù)據(jù)監(jiān)測的結(jié)果就會阻礙數(shù)據(jù)的分析與整合。
3大數(shù)據(jù)對無線電監(jiān)測的重要作用
有人在的地方就是一個集體,集體下的生活中不是只有生活的瑣事而已,因?yàn)槿魏问挛锏陌l(fā)展都需要有經(jīng)濟(jì)技術(shù)在其背后運(yùn)作和調(diào)節(jié)。有的人可能認(rèn)為無線電業(yè)務(wù)與我們的實(shí)際生活的聯(lián)系并不密切,甚至沒有太多的關(guān)聯(lián),這樣的想法首先在思想上就是錯誤的認(rèn)知。首先無線電監(jiān)測業(yè)務(wù)在我們的生活中作用很大,比如我們每一個人都在使用的手機(jī)、對講機(jī)、收音機(jī)到無線網(wǎng)卡、GPS、門禁卡、汽車遙控鑰匙、公交一卡通等,都是應(yīng)用了無線電技術(shù)才得以存在的。隨著無線電技術(shù)應(yīng)用日益普及和社會信息化全面推進(jìn),無線電已經(jīng)滲透到國民經(jīng)濟(jì)、社會生活和國防建設(shè)等各個方面,無線城市、物聯(lián)網(wǎng)、車聯(lián)網(wǎng)、智慧地球正逐步變成現(xiàn)實(shí),人類已步入了異彩紛呈的無線時代。而且今年的2月13日是第六個世界無線電日,我國對于無線電的應(yīng)用也越來越多,它正無時無刻的服務(wù)于經(jīng)濟(jì)社會發(fā)展和百姓生活,所以足以見得無線電業(yè)務(wù)發(fā)展的重要性。其次,各種無線電技術(shù)應(yīng)用都離不開頻譜資源,任何無線電業(yè)務(wù)的開展都需要以頻譜資源為載體,頻譜資源就是無線電監(jiān)測發(fā)展的一個重要數(shù)據(jù)來源,一旦這些頻譜資源受到意外干擾的話,就會使人們的正常經(jīng)濟(jì)與生活受到影響。最后,因?yàn)殡S著大數(shù)據(jù)技術(shù)的應(yīng)用與發(fā)展,無線電監(jiān)測業(yè)務(wù)完全可以與大數(shù)據(jù)技術(shù)進(jìn)行結(jié)合,這樣就可以減少人為因素引發(fā)的數(shù)據(jù)不準(zhǔn)確的影響。在具體的無線電監(jiān)測過程中可以把大數(shù)據(jù)處理作為核心進(jìn)行網(wǎng)格化監(jiān)測,這樣就可以借助大數(shù)據(jù)技術(shù)對數(shù)據(jù)進(jìn)行深度加工,實(shí)現(xiàn)數(shù)據(jù)的精準(zhǔn)挖掘。
4結(jié)束語
綜上所述,大數(shù)據(jù)已經(jīng)真正的來到了我們生活的周圍,目前也已經(jīng)應(yīng)用到了一些大的工業(yè)領(lǐng)域。同樣的,大數(shù)據(jù)時代下的無線電監(jiān)測業(yè)務(wù)也在面臨著大數(shù)據(jù)技術(shù)帶來的機(jī)遇與挑戰(zhàn),無論怎樣,面對大數(shù)據(jù),我們都應(yīng)該抱以正確的態(tài)度來看待它,因?yàn)殡S著時間的變化與發(fā)展,它可以為人們的生活帶來質(zhì)的改變。
參考文獻(xiàn)
[1]譚學(xué)治,姜靖,孫洪劍.認(rèn)知無線電的頻譜感知技術(shù)研究[J].信息安全與通信保密,2007(61).
[2]易龍,張虹.部無線電管理局提出“十二五”開局之年工作思路[J].中國無線電,2011(16).
篇8
在雷電監(jiān)測系統(tǒng)使用之前,用于研究雷電的資料主要來源于人工氣象觀測的數(shù)據(jù)。由于雷暴活動受氣候變化及地理環(huán)境影響較大,僅憑人工觀測得到的雷電數(shù)據(jù)已經(jīng)不能滿足現(xiàn)代防雷科研和業(yè)務(wù)需要。探索使用雷電監(jiān)測資料取代傳統(tǒng)人工觀測數(shù)據(jù),客觀高效地進(jìn)行雷電災(zāi)害風(fēng)險評估成為必要。隨著科技的發(fā)展和設(shè)備標(biāo)定水平的提高,雷電定位系統(tǒng)的應(yīng)用使得閃電監(jiān)測數(shù)據(jù)的準(zhǔn)確性得到極大的提高。江西省雷電監(jiān)測系統(tǒng)建成以來,取得大量雷電監(jiān)測數(shù)據(jù),已經(jīng)在雷電監(jiān)測預(yù)警、雷擊風(fēng)險評估和防雷工程設(shè)計中得到了應(yīng)用。文中主要對雷電監(jiān)測資料的地閃數(shù)量、發(fā)生時間、閃擊點(diǎn)定位坐標(biāo)以及雷電流強(qiáng)度等進(jìn)行分析,并應(yīng)用于雷擊風(fēng)險評估。
1計算雷擊大地密度
雷擊大地密度(Ng)是進(jìn)行雷擊災(zāi)害風(fēng)險評估的重要參數(shù)之一。目前,各地在雷擊災(zāi)害風(fēng)險評估中,Ng多采用《建筑物防雷設(shè)計規(guī)范(GB50057—2010)》中提供的計算公式Ng=0.1Td來計算,其中Td是由當(dāng)?shù)貧庀蟛块T提供的所在城市的年平均雷暴日。由此可知,Ng的大小完全依賴于年平均雷暴日的值。眾所周知,雷暴日是由世界氣象組織定義的一個氣象業(yè)務(wù)的觀測項(xiàng)目。其確定是觀測者聽覺判斷的,即氣象觀測人員在一天內(nèi)只要聽到一次雷聲就算一個雷暴日,無論該天發(fā)生多少次雷暴。就南昌而言,目前只有一處觀測點(diǎn),僅僅憑這一處的觀測點(diǎn)來觀測全市的雷暴是遠(yuǎn)遠(yuǎn)不夠的。因此,利用雷電日數(shù)資料計算雷擊大地密度存在一定的局限性。
(1)人工觀測得到的Td資料精確度不高。
首先,人工觀測站轄區(qū)內(nèi)發(fā)生雷暴,如果雷暴的強(qiáng)度較弱或者距離臺站較遠(yuǎn),氣象觀測人員會因?yàn)闆]有聽到雷聲或者看到閃電而發(fā)生漏記的現(xiàn)象。
通常情況下,距離觀測者15km的雷電可以聽到雷聲,一旦超過此范圍,則很難被聽到。其次,由于閃電的種類按照空間位置分為云地閃電、云內(nèi)閃電和云際閃電,所以觀測者聽到的雷聲既有云地閃電發(fā)出的,也有云內(nèi)閃電和云際閃電發(fā)出的,因此,依靠人的聽覺判斷而觀測得到的Td值并不能表征雷擊大地的真實(shí)頻率。
(2)計算得到的Ng值誤差較大。
Td值一般是指這個城市的全年發(fā)生雷電的次數(shù),使用這種方法計算Ng值,存在非常明顯的缺陷,即同一個行政轄區(qū)內(nèi)的Ng值完全相同,這就在很大程度上忽略了一個地區(qū)不同區(qū)域因下墊面性質(zhì)、氣象、建筑結(jié)構(gòu)布局的不同而引起的雷擊次數(shù)不一樣的影響,故利用Td值計算得到的Ng值與雷擊密度實(shí)際分布情況通常有較大的差異。
目前,江西省使用的雷電監(jiān)測系統(tǒng)在南昌地區(qū)探測效率超過90%。根據(jù)雷擊大地的年平均密度的含義,選取南昌地區(qū)2004—2010年雷電數(shù)據(jù),通過MapInfo桌面地理信息系統(tǒng)軟件,加載地圖信息、雷電數(shù)據(jù)信息;根據(jù)被評估對象所在地的經(jīng)、緯度,找到在地圖上的坐標(biāo),在MapInfo上選定半徑r內(nèi)的區(qū)域;將選取區(qū)域的雷電數(shù)據(jù)(依次為地閃發(fā)生的日期、時間、經(jīng)度、緯度、雷電流的強(qiáng)度、陡度)導(dǎo)出進(jìn)行統(tǒng)計。統(tǒng)計記錄的條數(shù)即為被評估對象所在位置的地閃總次數(shù);用得到的地閃總次數(shù)除以該地區(qū)的面積及提供的數(shù)據(jù)的總時間,可以得到精確的雷擊大地的年平均密度(圖1)。計算公式為其中,D為評估項(xiàng)目地點(diǎn)處總的地閃次數(shù),單位:次/a;Y為選取資料的總時間,單位:a;r為選擇區(qū)域的等效半徑,單位:km。
2確定雷電的主導(dǎo)方向和次主導(dǎo)方向
近10年來,我國雷電監(jiān)測技術(shù)有了長足的發(fā)展,閃電定位觀測儀得到不斷改進(jìn),觀測精度不斷提高。閃電監(jiān)測由以前人工觀測的定性結(jié)論“是否有雷暴”,發(fā)展到現(xiàn)在可以準(zhǔn)確記錄一個雷暴日中發(fā)生閃擊的次數(shù)以及每次閃擊的具置的坐標(biāo)等信息。目前雷電監(jiān)測系統(tǒng)對落雷點(diǎn)的定位誤差被限定在500m之內(nèi),比人工觀測的數(shù)據(jù)在精度上更為接近實(shí)際。下面,根據(jù)江西省雷電監(jiān)測系統(tǒng)歷年的閃電數(shù)據(jù)中地閃發(fā)生處的經(jīng)緯度坐標(biāo),判斷落雷點(diǎn)相對于評估對象的方位,統(tǒng)計得到E、NE、N、NW、W、SW、S、SE等8個方向的地閃次數(shù),畫出雷電玫瑰圖,得到評估對象所在地的雷電主導(dǎo)方向和次主導(dǎo)方向。具體步驟如下:
(1)計算地圖上單位經(jīng)(緯)度表示的距離:借助Mapinfo上“標(biāo)尺”功能,在地圖上評估對象所在地和距離l處選擇兩個點(diǎn),單位經(jīng)(緯)度距離=l/兩點(diǎn)經(jīng)(緯)度差。
(2)設(shè)Dx為落雷點(diǎn)和項(xiàng)目所在地的緯度距離,Dy為落雷點(diǎn)和項(xiàng)目所在地的經(jīng)度距離,α為落雷點(diǎn)和零度方位的夾角,則Dx=單位緯度距離×評估點(diǎn)與雷擊點(diǎn)緯度差的絕對值;Dy=單位經(jīng)度距離×評估點(diǎn)與雷擊點(diǎn)經(jīng)度差的絕對值;α=arctan(Dy/Dx)。設(shè)E方向?yàn)?°,區(qū)間(337.5°,22.5°)、(22.5°,67.5°)、(67.5°,112.5°)、(112.5°,157.5°)、(157.5°,202.5°)、(202.5°,247.5°)、(247.5°,292.5°)、(292.5°,337.5°)分別為E、NE、N、NW、W、SW、S、SE方向,根據(jù)夾角α值得到在上述8個象限的落點(diǎn),地閃點(diǎn)所在的方向上取1,其他方向取0,得出各個雷擊點(diǎn)相對于被評估點(diǎn)的方位。
(3)將各個方向的值累加,得出各個值所占的比例,按比例繪制出玫瑰圖。由圖2可以看出,評估點(diǎn)雷擊主導(dǎo)方向N,次主導(dǎo)方向SW,為雷擊風(fēng)險評估提供真實(shí)數(shù)據(jù)。
計算被評估點(diǎn)雷電參數(shù)幅值
在進(jìn)行雷擊風(fēng)險評估時,電源線路上電涌保護(hù)器安裝位置和選型對于評估因子的取值有直接影響。而雷電流幅值是確定電涌保護(hù)器雷電流參數(shù)的一個重要的參數(shù)?!督ㄖ锓览自O(shè)計規(guī)范》附錄中給定了首次正擊雷電流的幅值參考值,第一類、第二類、第三類防雷建筑物對應(yīng)分布為200kA、150kA、100kA。如果評估中采用上述推薦值,得出的計算結(jié)果并不能真正反映評估對象所需要的電涌保護(hù)器的雷電流參數(shù)。
目前江西省的閃電定位系統(tǒng)對雷電強(qiáng)度的測量誤差小于15%,如根據(jù)已經(jīng)取得的雷電監(jiān)測數(shù)據(jù)中閃電流強(qiáng)度值來計算雷電流幅值,則使得電涌保護(hù)器的雷電流參數(shù)更有針對性,也使得雷擊風(fēng)險評估工作更加科學(xué)。具體步驟如下:首先,根據(jù)南昌地區(qū)2004—2010年閃電監(jiān)測資料中的雷電流幅值,根據(jù)IEEE工作組推薦的雷電流幅值累積概率公式,得到與實(shí)際監(jiān)測曲線最為近似的擬合曲線,能反映雷電流幅值概率的分布特征(圖3)。公式為其中,I為雷電流幅值,單位:kA;PI為雷電流幅值大于I的概率;a表示中值電流,即電流幅值大于a的概率為50%;b反應(yīng)曲線的曲率變化程度,當(dāng)b增大時,50%概率點(diǎn)左右側(cè)曲線陡度絕對值均變大。
其次,選擇雷擊概率99%的雷電流幅值I作為依據(jù)。根據(jù)《建筑物防雷設(shè)計規(guī)范》的規(guī)定,低壓電源線路引入總配電箱、配電柜處安裝的電涌保護(hù)器,其每一保護(hù)模式的沖擊電流取值,計算公式:當(dāng)電源線路無屏蔽層時,式(3)、式(4)中,I為雷電流,單位:kA,根據(jù)建筑物防雷類別,第一類取200kA,第二類取150kA,第三類取100kA;n為地下和架空引線引入的外來金屬管道和線路的總數(shù);m為每一線路內(nèi)導(dǎo)體芯線的總根數(shù);Rs為每千米屏蔽層的電阻,單位:Ω/km;Rc為每千米芯線的電阻,單位:Ω/km。
結(jié)束語
利用由江西省閃電監(jiān)測網(wǎng)獲取的南昌地區(qū)2004—2010年雷電監(jiān)測數(shù)據(jù),計算得到評估對象周圍5km范圍的雷擊密度,雷擊主導(dǎo)方向、次主導(dǎo)方向以及雷電幅值參數(shù),分析發(fā)現(xiàn):
(1)利用雷電監(jiān)測網(wǎng)的監(jiān)測數(shù)據(jù)計算得到的雷擊大地的年平均密度,較使用《建筑物防雷設(shè)計規(guī)范(GB50057—2010)》中推薦的公式求得的值更為精確。
(2)通過分析評估對象所在地周邊雷電監(jiān)測數(shù)據(jù),得到評估對象所在地雷擊主導(dǎo)方向、次主導(dǎo)方向,為雷擊風(fēng)險評估提供真實(shí)數(shù)據(jù)。
篇9
關(guān)鍵詞:數(shù)據(jù)監(jiān)測;數(shù)據(jù)控制;數(shù)據(jù)捕獲
中圖分類號:TP393文獻(xiàn)標(biāo)識碼:A文章編號:1009-3044(2009)33-9159-02
The Research of Data Monitoring System based on Network Environment
CHENG Yi-yun
(Nanjing Institute of Politics,Shanghai Branch, Shanghai 200433, China)
Abstract: At first,the paper has specifically introduced the importance of network security.Then the paper has leaded the research significance of data monitoring system.Secondly,the paper has studied the design and implementation of network data's control and capture in order to offers a certain protection for network security.The paper hopes to offers some reference and a similar approach for other research of the data monitor.
Key words: data monitoring; data control; data capture
在開放的網(wǎng)絡(luò)環(huán)境中,相對于過去的主機(jī)環(huán)境、單機(jī)環(huán)境,基于網(wǎng)絡(luò)連接的安全問題變得越來越復(fù)雜和突出。同時,隨著人們對網(wǎng)絡(luò)依賴程度的日漸加深,網(wǎng)絡(luò)安全也表現(xiàn)得越來越重要。由于網(wǎng)絡(luò)的互聯(lián)共享,來自網(wǎng)絡(luò)內(nèi)部和外部的攻擊不可避免[1]。因此,網(wǎng)絡(luò)安全問題日益成為一個關(guān)注焦點(diǎn)。
數(shù)據(jù)監(jiān)測是保障網(wǎng)絡(luò)安全的一個重要措施,通過有效的數(shù)據(jù)監(jiān)測系統(tǒng),可以限制流量、控制網(wǎng)絡(luò)數(shù)據(jù)、并通過捕獲的數(shù)據(jù)包檢測網(wǎng)絡(luò)的安全狀態(tài),有效保證安全數(shù)據(jù)的正常傳輸,在一定程序上阻止了攻擊探測數(shù)據(jù)包的傳輸。本文就是針對網(wǎng)絡(luò)環(huán)境,研究數(shù)據(jù)監(jiān)測系統(tǒng)的設(shè)計與實(shí)現(xiàn)。
1 數(shù)據(jù)監(jiān)測系統(tǒng)的設(shè)計
1.1 網(wǎng)絡(luò)數(shù)據(jù)控制的設(shè)計
數(shù)據(jù)監(jiān)測系統(tǒng)的數(shù)據(jù)控制模塊主要目的是阻止攻擊者利用網(wǎng)絡(luò)系統(tǒng)的管理主機(jī)作為跳板去攻擊別的機(jī)器,但是只是盡量的減少,而不是杜絕這種行為。當(dāng)然,針對網(wǎng)絡(luò)任何的掃描、探測和連接管理主機(jī)是允許的,但是對從主機(jī)出去的掃描、探測、連接,網(wǎng)絡(luò)安全系統(tǒng)卻必須有條件的放行,如果發(fā)現(xiàn)出去的數(shù)據(jù)包有異常,網(wǎng)絡(luò)安全系統(tǒng)或者系統(tǒng)管理員必須加以制止。本文研究的數(shù)據(jù)監(jiān)測系統(tǒng)的數(shù)據(jù)控制設(shè)計原理如圖1所示。
數(shù)據(jù)控制模塊使用兩層來進(jìn)行數(shù)據(jù)控制:防火墻和信息檢測系統(tǒng)(IDS)。防火墻為了防止內(nèi)部網(wǎng)絡(luò)安全系統(tǒng)的管理主機(jī)被作為跳板攻擊其它正常系統(tǒng),我們必須對管理主機(jī)的外部連接數(shù)進(jìn)行控制,如只允許在一定的時一間內(nèi)發(fā)送一定數(shù)量的數(shù)據(jù)包。防火墻的主要功能是:設(shè)定單向地址攔截或雙向地址攔截,在單向地址攔截時,一方到另一方的資料訪問被禁止,但反向的數(shù)據(jù)訪問依然能正常進(jìn)行,不會受到影響;采用先進(jìn)的狀態(tài)監(jiān)測數(shù)據(jù)包過濾技術(shù),不僅僅是依靠單個的IP包來過濾,而是對每一個對話和連接進(jìn)行分析和監(jiān)控,在系統(tǒng)中自動維護(hù)其當(dāng)前狀態(tài),根據(jù)連接的狀態(tài)來對IP包進(jìn)行高效快速安全過濾;對管理主機(jī)的外出連接進(jìn)行控制。當(dāng)外出連接達(dá)到一定數(shù)量時,阻斷以后的連接,防止管理主機(jī)被攻擊者攻破后用來作為發(fā)起攻擊的“跳板”;對所有出入系統(tǒng)的連接進(jìn)行日志記錄。
而網(wǎng)絡(luò)流量由IP信息包組成。這些信息包前面所附帶的一些數(shù)據(jù)位,它們包含有關(guān)信息包的源、目的地和協(xié)議類型的信息,稱之為包頭[2]。防火墻根據(jù)一組規(guī)則檢查這些頭,以確定接受哪個信息包以及拒絕哪個信息包。假如有一些信息包偽造了數(shù)據(jù)頭,通過數(shù)據(jù)本身來攻擊,那我們的防火墻就無能為力了。所以,必須利用某種手段,對通過的數(shù)據(jù)包的內(nèi)容進(jìn)行檢測,如果發(fā)現(xiàn)是異常的數(shù)據(jù)包時,就丟棄或者修改這個數(shù)據(jù)包。
1.2 網(wǎng)絡(luò)數(shù)據(jù)捕獲的設(shè)計
本文設(shè)計了實(shí)現(xiàn)三層數(shù)據(jù)捕獲的安全系統(tǒng),即防火墻日志、嗅探器捕獲的網(wǎng)絡(luò)數(shù)據(jù)包、管理主機(jī)系統(tǒng)日志。捕獲到數(shù)據(jù)后,就可以研究攻擊者的技術(shù)、工具和動機(jī)。
1) 防火墻
所有進(jìn)出系統(tǒng)的網(wǎng)絡(luò)數(shù)據(jù)包必需通過防火墻,所以防火墻捕獲到的數(shù)據(jù)將是最全面的,但是防火墻并不記錄具體的數(shù)據(jù)包內(nèi)容,而只是記錄各個數(shù)據(jù)包的通過情況。如果攻擊者利用半開連接掃描管理主機(jī),則在管理主機(jī)上將看不到任何情況,但是在防火墻上卻可以看到這些SYN數(shù)據(jù)。防火墻記錄四種不同類型的數(shù)據(jù)包:TCP、UDP、ICMP、OTHER[3]。防火墻記錄的日志非常的有價值,因?yàn)樗诳焖贅?biāo)識那些未知的攻擊時非常的關(guān)鍵。
2) 嗅探器
嗅探器記錄各種進(jìn)出內(nèi)部網(wǎng)絡(luò)管理網(wǎng)的數(shù)據(jù)包內(nèi)容,嗅探器可以用各種工具,如Ethereal等,我們使用了Tcpdump。記錄的數(shù)據(jù)以Tcpdump日志的格式進(jìn)行存儲,這些數(shù)據(jù)不僅以后可用通過Tcpreplay進(jìn)行回放,也可以在無法分析數(shù)據(jù)時,發(fā)送給別的研究人員進(jìn)行分析。
3) 系統(tǒng)行為捕獲
防火墻和嗅探器捕獲的是網(wǎng)絡(luò)數(shù)據(jù),還需要捕獲發(fā)生有管理主機(jī)上的所有系統(tǒng)和用戶活動。對于windows系統(tǒng),可以借助第三方應(yīng)用程序來記錄系統(tǒng)日志信息。現(xiàn)在大多數(shù)的攻擊者都會使用加密來與被黑系統(tǒng)進(jìn)行通信。要捕獲擊鍵行為,需要從管理主機(jī)中獲得,如可以通過修改系統(tǒng)庫或者開發(fā)內(nèi)核模塊來修改內(nèi)核從而記錄下攻擊者的行為。
2 數(shù)據(jù)監(jiān)測系統(tǒng)的實(shí)現(xiàn)
2.1 網(wǎng)絡(luò)數(shù)據(jù)控制的實(shí)現(xiàn)
網(wǎng)絡(luò)的數(shù)據(jù)控制主要完成對流經(jīng)系統(tǒng)的數(shù)據(jù)的控制。首先對流入的數(shù)據(jù),由于系統(tǒng)設(shè)計的最初目的就是讓攻擊者順利進(jìn)入并攻擊,所以對于流入的數(shù)據(jù)不進(jìn)行任何限制,而且由于系統(tǒng)本身不提供真正的服務(wù),任何進(jìn)入的流量都被認(rèn)為是有攻擊企圖的;另一方面,對外出的連接要做限制,并且還要分析數(shù)據(jù)包抑制攻擊數(shù)據(jù)包的傳播,防止攻擊者將系統(tǒng)作為跳板對其他正常系統(tǒng)進(jìn)行攻擊。數(shù)據(jù)控制的用例分析,如圖2所示。
網(wǎng)絡(luò)管理員可定制數(shù)據(jù)控制規(guī)則,并反映到防火墻上;入侵檢測系統(tǒng)通過捕獲數(shù)據(jù),對外出的數(shù)據(jù)包的內(nèi)容進(jìn)行檢測,如果發(fā)現(xiàn)是異常的數(shù)據(jù)包時,采取預(yù)先定義的策略,然后再將數(shù)據(jù)包傳回給防火墻進(jìn)行處理。
本文通過IPTables實(shí)現(xiàn)外出連接數(shù)限制。通過IPTables擴(kuò)展選項(xiàng)limit可實(shí)現(xiàn)內(nèi)網(wǎng)外出連接數(shù)限制。利用limit在FORWARD鏈配置規(guī)則,限制對外發(fā)起的連接數(shù)上限,這個限制可以是每秒(或者分、小時、天)多少個連接。根據(jù)要求,本文添加了IPTables規(guī)則來限制對外連接數(shù),下面以限制TCP包為例加以說明,UDP、ICMP和其它數(shù)據(jù)包作同樣處理。本文使用Snort_inline利用特征檢測來發(fā)現(xiàn)有惡意的數(shù)據(jù)包。Snort_inline是入侵檢測系統(tǒng)Snort的修改版,它可以經(jīng)由libipq接收來自IPTables的數(shù)據(jù)包。并根據(jù)Snort的規(guī)則集對數(shù)據(jù)包進(jìn)行檢查,一旦發(fā)現(xiàn)惡意代碼就對該數(shù)據(jù)包采取預(yù)先定義的策略,然后再將數(shù)據(jù)包傳回給IPTables。數(shù)據(jù)控制機(jī)制如圖3所示。
2.2 網(wǎng)絡(luò)數(shù)據(jù)捕獲的實(shí)現(xiàn)
本文的網(wǎng)絡(luò)數(shù)據(jù)捕獲功能主要從防火墻、嗅探器以及管理主機(jī)三個方面入手。防火墻、管理主機(jī)、嗅探器捕獲的日志經(jīng)過處理存放在數(shù)據(jù)庫和文件中,已備分析和查詢使用。經(jīng)過防火墻的數(shù)據(jù),可以通過防火墻日志直接獲得,而網(wǎng)絡(luò)上的數(shù)據(jù)包,可以用Tcpdump來進(jìn)行捕獲。Tcpdump支持相當(dāng)多的參數(shù)。我們在網(wǎng)橋下運(yùn)行如下命令進(jìn)行捕獲:
TCPDUMP -c 10 Ci eth1 -s 0 Cw /log
為了不讓攻擊者知道我們在監(jiān)視他在主機(jī)上的活動,我們采用Sebek來實(shí)現(xiàn)我們的目標(biāo)。Sebek是個隱藏的記錄攻擊者行為的內(nèi)核補(bǔ)丁。一旦在主機(jī)上安裝了Sebek的客戶端,它就在系統(tǒng)的內(nèi)核級別運(yùn)行,記錄的數(shù)據(jù)并不是記錄在本地硬盤上,而是通過UDP數(shù)據(jù)包發(fā)送到遠(yuǎn)程服務(wù)器上,入侵者很難發(fā)現(xiàn)它的存在。
本文研究的數(shù)據(jù)捕獲是由內(nèi)核模塊來完成捕獲所有read()的數(shù)據(jù)。Sebek替換系統(tǒng)調(diào)用表的read()函數(shù)來實(shí)現(xiàn)這個功能,這個替換的新函數(shù)只是簡單的調(diào)用老read()函數(shù),并且把內(nèi)容拷貝到一個數(shù)據(jù)包緩存,然后加上一個頭,再把這個數(shù)據(jù)包發(fā)送到服務(wù)端。替換原來的函數(shù)就是改變系統(tǒng)調(diào)用表的函數(shù)指針。本文通過配置參數(shù)決定了Sebek收集什么樣的信息,發(fā)送信息的目的地。以下就是一個linux配置文件的實(shí)例:
INTERFACE = "eth0" //設(shè)定接口
DESTINATION_IP = "172.17.1.2" // 設(shè)定遠(yuǎn)程服務(wù)器IP
DESTINATION_MAC = "00:0C:29:I5:96:6E" // 設(shè)定遠(yuǎn)程服務(wù)器MAC
SOURCE_PORT = 1101 // 設(shè)定源地址UDP端口
DESTINATION_PORT = 1101 // 設(shè)定目標(biāo)地址UDP端口
MAGIC_VALUE = XXXXX // 如果同一網(wǎng)段有多個客戶端,則設(shè)定相同的數(shù)值
KEYSTOKE_ONLY = 1 // 是否只記錄鍵擊記錄
本文研究數(shù)據(jù)捕獲機(jī)制如圖4所示。
3 小結(jié)
該文研究的數(shù)據(jù)監(jiān)測系統(tǒng)能有效地控制網(wǎng)絡(luò)數(shù)據(jù)、捕獲網(wǎng)絡(luò)數(shù)據(jù),在一定程度上保障了網(wǎng)絡(luò)的安全。但是網(wǎng)絡(luò)安全技術(shù)及攻擊技術(shù)是在不斷發(fā)展和變化中,要進(jìn)一步提高網(wǎng)絡(luò)安全的環(huán)境,必須在數(shù)據(jù)監(jiān)測的基礎(chǔ)上,不斷完善網(wǎng)絡(luò)安全方案,如加入網(wǎng)絡(luò)的入侵檢測技術(shù)、流量控制、邊界路由的安全設(shè)置及客戶終端等安全防范措施,這樣才能確保網(wǎng)絡(luò)數(shù)據(jù)的安全。
參考文獻(xiàn):
[1] 周照峰.高速網(wǎng)絡(luò)數(shù)據(jù)包捕獲技術(shù)方法研究[J].科技經(jīng)濟(jì)市場,2009,(2):21-23.
篇10
關(guān)鍵詞:煙氣 監(jiān)測 影響因素 探討
煙氣監(jiān)測是對發(fā)電廠、水泥窯監(jiān)測、鍋爐等廢氣污染源監(jiān)測的必測項(xiàng)目,包括二氧化硫、煙塵或顆粒物、二氧化氮、含氧量、硫化氫、氨氣等。其監(jiān)測數(shù)據(jù)是污染源監(jiān)督監(jiān)測、環(huán)評檢測、驗(yàn)收監(jiān)測、環(huán)境管理執(zhí)法、排污收費(fèi)等的依據(jù)。監(jiān)測時,對監(jiān)測結(jié)果影響因素較多,儀器配置、點(diǎn)位選擇、實(shí)驗(yàn)操作等對采樣結(jié)果具有較大影響。
一、采樣點(diǎn)位的影響
1.對塵等較大粒子的影響
煙氣中具有重力的塵主要有煙塵、顆粒物等具有較大重力的粒子,本身具有較大的重力作用。因此采樣點(diǎn)位對塵監(jiān)測數(shù)據(jù)有重要影響。按照規(guī)定,采樣點(diǎn)應(yīng)盡量選擇在垂直管段,如選擇在水平管段,粒子受重力的作用,將會偏離水平軌道,發(fā)生偏移,較大的粒子也會沿?zé)煹赖撞颗欧?,采樣槍水平放置,采樣嘴面積一定,吸入的顆粒將會出現(xiàn)較大偏差。由于點(diǎn)位選擇不正確,在采樣時,采樣槍可能發(fā)生震蕩,偏離正常軌道,使采樣體積等發(fā)生變化,影響監(jiān)測結(jié)果[1,2]。
2.對氣體污染物的影響
氣體污染物主要包括二氧化硫、氮氧化物、一氧化氮、氯化氫、氯氣、有機(jī)廢氣等。由于氣體污染物在煙氣中均勻分布,采樣點(diǎn)位對低沸點(diǎn)污染物濃度數(shù)值準(zhǔn)確性無較大影響。但也應(yīng)盡量選擇水平或者垂直管段,避開渦流區(qū)、彎頭處等流量急劇變化處。同時,二氧化硫、氮氧化物、氯化氫、氯氣等高沸點(diǎn)污染物在低溫區(qū)會形成液態(tài)污染物,如選擇點(diǎn)位在溫度較低處,將會對數(shù)據(jù)結(jié)果產(chǎn)生重大影響。
由表1可以看出,不同點(diǎn)位的監(jiān)測結(jié)果具有較大差異,溫度相差7℃,濃度均值相差12mg/m3,不同溫度的監(jiān)測點(diǎn)位,對氣態(tài)污染物的監(jiān)測結(jié)果有較大影響。
3.對體積、流量的影響
污染物的排放量根據(jù)采樣體積計算,采樣體積即流速與面積的乘積,由于點(diǎn)位選擇不正確,煙氣流速將會發(fā)生較大偏差,由于流速的不準(zhǔn)確,最終導(dǎo)致排放量、污染物排放速率等排放標(biāo)準(zhǔn)指標(biāo)出現(xiàn)錯誤,影響監(jiān)測結(jié)果準(zhǔn)確性。當(dāng)排放濃度和速率處于臨界值時,更應(yīng)準(zhǔn)確選擇監(jiān)測點(diǎn)位。
4.采樣孔數(shù)量
根據(jù)規(guī)范,采樣點(diǎn)位在不同采樣孔具有一定數(shù)量的采樣點(diǎn)位,即在一個孔內(nèi)應(yīng)采集一定數(shù)量的樣品。由于顆粒態(tài)污染物在煙道內(nèi)分布的不均勻性,因此,應(yīng)在每個孔采集幾個樣品,使樣品具有代表性,計算均值,代表實(shí)際監(jiān)測數(shù)據(jù)。一般監(jiān)測時,采樣點(diǎn)應(yīng)不少于2點(diǎn),最多不超過20點(diǎn)。對于氣態(tài)污染物,可在煙道中心設(shè)點(diǎn),采集樣品數(shù)據(jù)。
二、采樣儀器的影響
1.儀器是否檢定、校準(zhǔn)
日常監(jiān)測中,應(yīng)將監(jiān)測使用的儀器進(jìn)行檢定。在使用中對儀器進(jìn)行校準(zhǔn)。校準(zhǔn)的項(xiàng)目一般為流量、二氧化硫、含氧量、氮氧化物等。使用經(jīng)鑒定過的皂膜流量計對流量進(jìn)行校準(zhǔn),使用標(biāo)準(zhǔn)氣體對一起的準(zhǔn)確性進(jìn)行校準(zhǔn)。李健等[3]研究表明,校準(zhǔn)用氣體對檢測結(jié)果的準(zhǔn)確性有重要影響。日常校準(zhǔn)的標(biāo)準(zhǔn)氣體可選擇經(jīng)認(rèn)證過的企業(yè)生產(chǎn)的標(biāo)準(zhǔn)氣體,并保證在有效期內(nèi)。有條件的監(jiān)測單位可自己配置標(biāo)準(zhǔn)氣體,進(jìn)行校準(zhǔn),但應(yīng)保證標(biāo)準(zhǔn)氣體的實(shí)用性和準(zhǔn)確性。
1.操作中的影響因素
1.1傳感器校準(zhǔn)
因溫度、壓力、操作時間等對傳感器均具有硬性,可使其發(fā)生漂移。在儀器開機(jī)后對使用的壓力傳感器應(yīng)校準(zhǔn)。校準(zhǔn)時必須空載,皮托管等必須與儀器脫離,保證儀器的正常運(yùn)行。
1.2跟蹤效率
在采用過程中,儀器抽氣速率應(yīng)與煙氣流速接近,跟蹤效率正常情況下至少達(dá)到95%。若不到95%,查明原因。跟蹤率過大會將大顆粒吸入濾筒內(nèi),過小會導(dǎo)致吸入量偏低。由于跟蹤效率過低,采樣泵超速運(yùn)轉(zhuǎn),會造成采樣泵損傷,降低采樣泵使用壽命,所以應(yīng)選擇合適的采樣流速,與煙氣流速相匹配。一般選擇恒流采樣,對于自然通風(fēng)鍋爐等設(shè)備應(yīng)選擇其他采樣方式,如等速采樣,且流量不應(yīng)過大,避免將大顆粒物吸入,影響監(jiān)測結(jié)果。
1.3操作方式
對于顆粒物等樣品采樣方式對監(jiān)測結(jié)果有較大影響。采樣前應(yīng)將采樣槍以背對氣流方向放入煙道內(nèi),采樣結(jié)束后,應(yīng)將采樣槍立刻倒轉(zhuǎn)180度,瞬間取出采樣設(shè)備,保證采集的樣品不倒吸。同時,對于靜電除塵設(shè)備,應(yīng)該連接防靜電裝置,避免靜電干擾造成儀器短路,在檢測過程中使儀器停運(yùn)。
三、實(shí)驗(yàn)過程中的影響因素
1.濾筒處理
采集煙塵使用的濾筒多為玻璃纖維濾筒,在使用前、后均應(yīng)烘干處理。所使用的烘干設(shè)備應(yīng)定期檢定和校準(zhǔn),烘干后應(yīng)置于干燥器內(nèi)干燥后稱重。使用電子天平時在溫度較低時使用玻璃纖維濾筒,溫度較高時使用剛玉濾筒,在高溫小預(yù)先灼燒,是濾筒質(zhì)量恒定,避免因高溫造成損失。
2.采集油煙濾筒
采集油煙的濾筒為無銹鋼濾筒,采樣結(jié)束,采集了油煙的濾筒應(yīng)立即轉(zhuǎn)入聚四氟乙烯清洗杯中蓋緊蓋子,根據(jù)規(guī)定對樣品進(jìn)行萃取,使用紅外測油儀測定和計算,樣品不能在24小時內(nèi)測定,可在4.0℃冷藏室中保存7天。
3.過量空氣系數(shù)的選擇
過量空氣系數(shù)對實(shí)驗(yàn)結(jié)果有較大影響。一般煙塵的初始排放過量空氣系數(shù)為1.7,處理設(shè)施后為1.8,火電廠為1.4,水泥企業(yè)過量空氣系數(shù)折算為氧氣含量為10%狀況下,即過量空氣系數(shù)為1.9,天燃?xì)忮仩t折算系數(shù)為1.2[4]。而對于工業(yè)爐窯等,應(yīng)計算其摻風(fēng)系數(shù):沖天冷風(fēng)爐,鼓風(fēng)溫度小于等于400℃時,摻風(fēng)系數(shù)為4.0;沖天熱風(fēng)爐,鼓風(fēng)溫度大于400℃時,摻風(fēng)系數(shù)為2.5,其他工業(yè)爐窯爐窯過量空氣系數(shù)為1.7。
參考文獻(xiàn)
[1]石相梅,影響鍋爐煙塵測試結(jié)果的因素淺析[J].污染防治技術(shù),2013,23(3):105-106.
[2]環(huán)境保護(hù)部,固定廢氣源監(jiān)測技術(shù)規(guī)范[S],北京:中國環(huán)境科學(xué)出版社,2007.12.
[3]李健,李永亮,牟學(xué)軍,等.燃煤鍋爐煙氣中一氧化氮排放濃度測量的不確定度評定[J].北方環(huán)境,2011(09):183-184.