應(yīng)用于智能交通中的大數(shù)據(jù)技術(shù)-資料下載頁
2025-07-13 23:14本頁面
【正文】 算以及增量式計(jì)算方法保證了能夠全面性、準(zhǔn)確性和實(shí)時(shí)性處理系統(tǒng)數(shù)據(jù)。在這一過程當(dāng)中所應(yīng)用的關(guān)鍵技術(shù)包括：1）軌跡數(shù)據(jù)快速檢索技術(shù)：該技術(shù)是以二進(jìn)制文件取代原始數(shù)據(jù)的轉(zhuǎn)存，設(shè)計(jì)KeyValue儲(chǔ)存作為記錄。其能夠利用Key進(jìn)行快速檢索Value的特性，并再將數(shù)據(jù)子集存儲(chǔ)在Value之中。此外還可以用HDFS分布式文件系統(tǒng)以及MapReduce分布式計(jì)算編程取代過去的關(guān)系數(shù)據(jù)庫查找進(jìn)而實(shí)現(xiàn)快速統(tǒng)計(jì)功能。該項(xiàng)技術(shù)的數(shù)據(jù)壓縮比可以達(dá)到40％，運(yùn)算速度可以提升50倍以上，因此可實(shí)現(xiàn)對(duì)固化后的數(shù)據(jù)實(shí)現(xiàn)快速檢索與統(tǒng)計(jì)分析功能。2）分布式軌跡聚類技術(shù)：該技術(shù)是利用MapReduce分布式計(jì)算架構(gòu)對(duì)分布式軌跡進(jìn)行一定的規(guī)則化處理，從而實(shí)現(xiàn)K．Means聚類算法。一般其都會(huì)指定起始點(diǎn)位置，然后對(duì)常跑路徑聚類分析進(jìn)而快速探測(cè)異常值實(shí)現(xiàn)對(duì)分布式軌跡進(jìn)行一定的規(guī)則化處理。該項(xiàng)技術(shù)一般提供對(duì)常規(guī)路線或指定路線的快速提取以及處理異常分析的比照等。3）分布式停車點(diǎn)聚類技術(shù)：該技術(shù)是一種在Mahout與Hadoop分布式機(jī)器學(xué)習(xí)庫平臺(tái)的一項(xiàng)協(xié)作功能，其主要是分布式實(shí)現(xiàn)Mapreduce的可迭代式數(shù)據(jù)。以此來快速檢索和統(tǒng)計(jì)分析所需軌跡停車點(diǎn)后的數(shù)據(jù)提取，在利用Mahout中的Clustering（聚類）數(shù)據(jù)中的挖掘模塊實(shí)現(xiàn)多維空間下的快速聚類分析功能。4）地圖匹配技術(shù)：該技術(shù)是一項(xiàng)通過對(duì)傳感器功能帶來的觀測(cè)數(shù)據(jù)進(jìn)行分析進(jìn)而確定傳感器載體的地理空間位置。在智能交通領(lǐng)域當(dāng)中一般的傳感器指的均是GPS接收器，這是因?yàn)镚PS接收器能夠提供經(jīng)緯度坐標(biāo)等地理信息，并且其已經(jīng)在諸多領(lǐng)域得到應(yīng)用。大部分車載GPS接收器，其實(shí)際使用意義在于確定車輛正確的行駛道路，因此其對(duì)于車載實(shí)時(shí)導(dǎo)航系統(tǒng)具有至關(guān)重要的作用。在現(xiàn)在和未來應(yīng)用當(dāng)中車載GPS設(shè)備還會(huì)對(duì)交通流速度等交通狀況進(jìn)行數(shù)據(jù)傳輸，因此地圖匹配技術(shù)在位置信息數(shù)據(jù)當(dāng)中具有十分的關(guān)鍵的作用。對(duì)于現(xiàn)代智能交通大數(shù)據(jù)系統(tǒng)平臺(tái)數(shù)據(jù)的安全性應(yīng)占據(jù)構(gòu)建該平臺(tái)的首要重要性位置，其包括數(shù)據(jù)的安全存儲(chǔ)、安全遞交、安全訪問以及安全共享等方面的構(gòu)建。對(duì)于數(shù)據(jù)的安全備份策略，其系統(tǒng)可靠性需要來自于對(duì)HDFS文件系統(tǒng)進(jìn)行冗余存儲(chǔ)設(shè)計(jì)。HDFS系統(tǒng)的復(fù)制因子參數(shù)決定了資源利用率和數(shù)據(jù)可靠性之間的權(quán)衡關(guān)系。因此對(duì)于系統(tǒng)數(shù)據(jù)的備份設(shè)計(jì)需要將某數(shù)據(jù)節(jié)點(diǎn)中的本地?cái)?shù)據(jù)在不同和相同機(jī)架的遠(yuǎn)程遠(yuǎn)端節(jié)點(diǎn)各備份l份，對(duì)此這樣的設(shè)計(jì)既保障了數(shù)據(jù)可靠性，同時(shí)也能夠按照就近備份原則提高了數(shù)據(jù)的可用性。對(duì)于數(shù)據(jù)的訪問安全策略應(yīng)當(dāng)權(quán)衡精準(zhǔn)服務(wù)和位置隱私之間的矛盾。利用Hadoop權(quán)限設(shè)計(jì)在HDFS相應(yīng)文件夾當(dāng)中設(shè)置相應(yīng)的用戶權(quán)限，并對(duì)HDFS和HBase的訪問時(shí)進(jìn)行監(jiān)控，從而能夠?qū)崟r(shí)生成追蹤日志記錄每次數(shù)據(jù)訪問，此外進(jìn)行數(shù)據(jù)匿名策略并適時(shí)替換敏感字段。使得現(xiàn)代智能交通大數(shù)據(jù)系統(tǒng)能夠具備大規(guī)模、實(shí)時(shí)、可擴(kuò)展的優(yōu)勢(shì)，并能夠安全支持海量數(shù)據(jù)的存儲(chǔ)為交通的安全管理做好有效的保障性支撐。通過開放交通數(shù)據(jù)，有助于形成良好的公私伙伴關(guān)系，促使交通主管部門利用私營機(jī)構(gòu)的專業(yè)信息技術(shù)知識(shí)，通過第三方應(yīng)用程序開發(fā)者以及專業(yè)開發(fā)人員來完善交通信息服務(wù)，根據(jù)具體人群需求來定制個(gè)性交通服務(wù)。[6]政府應(yīng)制定一部完整的數(shù)據(jù)隱私法，對(duì)個(gè)人數(shù)據(jù)的定義、數(shù)據(jù)發(fā)布的基本原則、數(shù)據(jù)可發(fā)布的范圍、數(shù)據(jù)可利用的范疇等方面進(jìn)行規(guī)范，以保護(hù)個(gè)人私密信息為避免個(gè)人私密信息非法泄露。[11]要做到數(shù)據(jù)的公益性利用、商業(yè)性開發(fā)能夠與個(gè)人隱私權(quán)之間相平衡。6結(jié)語隨著時(shí)代的發(fā)展變化以及社會(huì)需求變化，現(xiàn)代智能交通已經(jīng)成為了人們?nèi)蘸笕粘Ｉ畋夭豢缮俚某鞘薪ㄔO(shè)環(huán)節(jié)。與此同時(shí)隨著信息時(shí)代的到來，在智能交通領(lǐng)域大量的信息數(shù)據(jù)必須要得到高效、快捷、安全的處理。在大數(shù)據(jù)時(shí)代智能交通的建設(shè)，其主要目的是要使得城市的交通發(fā)展與管理水平得到有效提高。從今天到未來大數(shù)據(jù)在智能交通的應(yīng)用中必須要使用云計(jì)算等大數(shù)據(jù)處理技術(shù)，而利用該技術(shù)就必須對(duì)其進(jìn)行海量數(shù)據(jù)平臺(tái)的建設(shè)，只有平臺(tái)的充分利用才可以有效解決海量數(shù)據(jù)爆炸問題，為此做好海量數(shù)據(jù)平臺(tái)的建設(shè)，保持其能夠可持續(xù)發(fā)展，其必須要從系統(tǒng)架構(gòu)、遷移數(shù)據(jù)方案的確定、存儲(chǔ)數(shù)據(jù)方案以及處理數(shù)據(jù)方案的確定入手，進(jìn)而構(gòu)建一個(gè)智能化、安全化、低成本、高效便捷化的智能交通系統(tǒng)。致謝短短的四年飛逝而過，四年前我非常幸運(yùn)的來到我們學(xué)校，使我可以繼續(xù)在校園里吸收知識(shí)的精髓。臨近畢業(yè)，我首先要感謝我的論文指導(dǎo)導(dǎo)師，老師求是的學(xué)術(shù)風(fēng)格，嚴(yán)謹(jǐn)?shù)闹螌W(xué)態(tài)度和幽默的語言影響著我，從論文的選題到最終定稿，老師為我提出了很多重要的意見和建議。我在資料搜集、整理和學(xué)術(shù)類文章的寫作上不是很專業(yè)，老師這方面的耐心指導(dǎo)使我的文章在結(jié)構(gòu)、內(nèi)容上都得到了很大的改觀。除此之外，我還要感謝這四年來給予我關(guān)心和幫助的諸位老師，我許多寶貴的知識(shí)和思想都是在他們的指導(dǎo)下學(xué)習(xí)和積累的，同時(shí)開闊了我的視野。感謝諸位同學(xué)在這四年來伴我成長、并肩前行，能夠與你們一同成長是我這一生中最幸運(yùn)的事，我們之間的友誼我一定會(huì)加倍珍惜，雖然我們不是日日相伴，我仍然要感謝你們?cè)谏顚W(xué)習(xí)中幫我排憂解難，快樂而溫馨的一起生活了四年。參考文獻(xiàn)[1]“愛上”大數(shù)據(jù)[J].農(nóng)經(jīng),2014,12:3839.[2]姬倩倩,[J].電子科技,2015,02:127130.[3][J].中國安防,2014,06:3336.[4][J].北京聯(lián)合大學(xué)學(xué)報(bào),2014,04:4447.[5][D].成都理工大學(xué),2014.[6]岳建明,[J].生產(chǎn)力研究,2013,06:137138+165.[7]鄧春新,[J].電腦知識(shí)與技術(shù),2013,20:46894691+4702.[8][J].中國交通信息化,2013,10:106110.[9][J].圖書與情報(bào),2012,06:2228.[10][J].交通世界(),2013,12:126127.[11]葉亮.“大數(shù)據(jù)”背景下我國交通數(shù)據(jù)管理應(yīng)用的轉(zhuǎn)型與發(fā)展[J].交通與運(yùn)輸(學(xué)術(shù)版),2013,02:6568.[12][D].復(fù)旦大學(xué),2011.
黨政相關(guān)相關(guān)推薦
鄂ICP備17016276號(hào)-1