【正文】 后的數(shù)據(jù)需要進(jìn)行加工處理，遙感影像需要進(jìn)行幾何校正、圖像增強(qiáng)、圖像融合等操作，各個(gè)部門提供的CAD數(shù)據(jù)需要轉(zhuǎn)換為SHP數(shù)據(jù)，然后做拓?fù)浞治觯皵?shù)據(jù)需要做圖片拼接處理等。l 數(shù)據(jù)檢查對(duì)采集的數(shù)據(jù)在符合性和規(guī)范性方面進(jìn)行檢查。包括圖形拓?fù)錂z查、屬性準(zhǔn)確性檢查、圖屬一致性檢查等，對(duì)于不符合質(zhì)量要求的數(shù)據(jù)，重新進(jìn)行修改，修改之后再次提交。數(shù)據(jù)質(zhì)量合格的，數(shù)據(jù)進(jìn)入清洗比對(duì)庫(kù)進(jìn)行比對(duì)。l 數(shù)據(jù)入庫(kù)對(duì)于加工處理、并經(jīng)過(guò)檢查后的數(shù)據(jù)，采用空間數(shù)據(jù)庫(kù)引擎，將其批量入庫(kù)，這樣可以被地圖文檔、專題圖文檔、報(bào)表等調(diào)用。（二） 城市綜合管理服務(wù)大數(shù)據(jù)系統(tǒng)以云計(jì)算、大數(shù)據(jù)、移動(dòng)互聯(lián)網(wǎng)、空間信息技術(shù)為支撐，以城市公共業(yè)務(wù)庫(kù)為載體，通過(guò)手機(jī)、平板、電腦等多種終端面向政府決策、行業(yè)管理、公眾服務(wù)的分層級(jí)、分類別、空間化、信息化的綜合信息展示服務(wù)，建成數(shù)據(jù)內(nèi)容全面、服務(wù)功能強(qiáng)大、應(yīng)用領(lǐng)域廣泛、全市統(tǒng)一的綜合信息展示系統(tǒng)。綜合信息展示系統(tǒng)以基礎(chǔ)地理信息為載體，整合全地表數(shù)據(jù)、規(guī)劃數(shù)據(jù)、經(jīng)濟(jì)社會(huì)、城市運(yùn)行等信息，通過(guò)海量數(shù)據(jù)的集成，在滿足安全的前題下，實(shí)現(xiàn)面向政府、政府部門、社會(huì)公眾的分類分層分級(jí)服務(wù)。解決部門間信息共享的孤島問(wèn)題。圖 1綜合信息展示系統(tǒng)數(shù)據(jù)架構(gòu)圖 2數(shù)據(jù)架構(gòu)城市綜合信息管理用于管理系統(tǒng)后臺(tái)中的場(chǎng)景、地形和各類GIS矢量數(shù)據(jù)服務(wù)，提供基本的數(shù)據(jù)服務(wù)配置、管理能力；同時(shí)，針對(duì)應(yīng)用用戶的不同角色進(jìn)行用戶的角色管理，給不同角色的用戶配置不同的用戶數(shù)據(jù)訪問(wèn)權(quán)限、圖層控制權(quán)限、讀寫權(quán)限控制等權(quán)限。（1）數(shù)據(jù)服務(wù)管理系統(tǒng)提供對(duì)應(yīng)地形影像數(shù)據(jù)、外部矢量數(shù)據(jù)、專題數(shù)據(jù)服務(wù)管理、服務(wù)設(shè)置與顯示、服務(wù)編輯等功能。1）加載影像數(shù)據(jù)服務(wù)系統(tǒng)支持影像數(shù)據(jù)服務(wù)的加載與管理。2）加載各類專題GIS數(shù)據(jù)系統(tǒng)支持ArcSDE數(shù)據(jù)庫(kù)文件、Shapefile文件的加載與管理功能。比如專題規(guī)劃圖、行政劃圖、污染源分布圖、道路專題圖。（2）部門管理系統(tǒng)提供對(duì)政府各部門的賬戶管理能力，可以對(duì)任意部門進(jìn)行創(chuàng)建、修改等操作。（3）角色權(quán)限管理系統(tǒng)提供對(duì)登錄角色的管理功能。對(duì)于不同的登錄角色，系統(tǒng)提供以角色為單位的權(quán)限配置管理，不同的角色，系統(tǒng)管理員可以配置不同的賬戶權(quán)限，如：使用功能權(quán)限、GIS圖層訪問(wèn)權(quán)限以及場(chǎng)景編輯讀寫權(quán)限等。（4）密碼管理系統(tǒng)提供管理員最高權(quán)限，提供密碼修改權(quán)限。（5）人員管理系統(tǒng)提供對(duì)登錄用戶的人員賬號(hào)和密碼管理。（6）日志管理系統(tǒng)提供對(duì)所有登錄用戶的操作日志管理。城市基礎(chǔ)服務(wù)展示（1）基礎(chǔ)信息服務(wù)應(yīng)用提供基礎(chǔ)底圖展示：包含行政劃，行政名稱，道路路網(wǎng)，道路名稱，電子地圖，影像圖、衛(wèi)星圖。圖 3基礎(chǔ)底圖展示（2）城市規(guī)劃服務(wù)應(yīng)用提供城市規(guī)劃信息展示：包含現(xiàn)有和未來(lái)商業(yè)、住宅、服務(wù)域分布。圖 4城市規(guī)劃信息展示（3）城市基礎(chǔ)設(shè)施應(yīng)用提供城市基礎(chǔ)設(shè)施應(yīng)用展示：包含交通基礎(chǔ)設(shè)施、電力基礎(chǔ)設(shè)施、燃?xì)饣A(chǔ)設(shè)施、給排水基礎(chǔ)設(shè)設(shè)施、環(huán)衛(wèi)基礎(chǔ)設(shè)施。圖 5城市基礎(chǔ)設(shè)施應(yīng)用展示（4）城市國(guó)土服務(wù)應(yīng)用提供土地利用現(xiàn)狀信息展示：包含土地權(quán)屬信息展示、國(guó)有集體、建設(shè)用地等。圖 6土地利用現(xiàn)狀信息展示城市人口分布服務(wù)應(yīng)用展示，提供高密度住宅、低密度住宅、待改善人工住宅分析展示等。圖 7城市人口分布服務(wù)應(yīng)用展示（5）城市服務(wù)應(yīng)用提供城市景點(diǎn)分布，客流量統(tǒng)計(jì)分析展示。（6）城市公共服務(wù)設(shè)施應(yīng)用提供醫(yī)院（醫(yī)院類型，救治種類）、學(xué)校等分布，收容人口量等（7）城市社服務(wù)應(yīng)用提供社內(nèi)的常住人口、流動(dòng)人口、特殊人群（老人、孤寡老人、殘疾人員、黨員、團(tuán)員、現(xiàn)任干部、居民代表等）進(jìn)行信息展示，并與公安、民政、衛(wèi)生、房管等部門交換數(shù)據(jù)，獲得及時(shí)、準(zhǔn)確、全面的人員信息，便于社會(huì)和民政部門的統(tǒng)計(jì)與調(diào)查，實(shí)現(xiàn)人口完整信息的統(tǒng)一存儲(chǔ)、統(tǒng)一展示、統(tǒng)一利用，為平臺(tái)其他功能模塊提供居民人口信息支撐。（8）城市企業(yè)服務(wù)應(yīng)用提供城市企業(yè)服務(wù)信息，高新技術(shù)企業(yè)，制造型企業(yè)，污染企業(yè)、交稅大戶，重點(diǎn)企業(yè)的分布，安排就業(yè)情況等的信息展示。4 、城市綜合信息檢索（1）常規(guī)檢索通過(guò)關(guān)鍵詞的輸入，進(jìn)行常規(guī)性檢索，系統(tǒng)自動(dòng)調(diào)取后臺(tái)的數(shù)據(jù)服務(wù)接口，通過(guò)訪問(wèn)的數(shù)據(jù)以及關(guān)鍵詞進(jìn)行檢索結(jié)果反饋；并將結(jié)果展示出來(lái)，對(duì)于超出當(dāng)前顯示結(jié)果頁(yè)面的，提供多頁(yè)顯示以及翻頁(yè)顯示操作。（2）空間檢索通過(guò)空間位置的輸入，進(jìn)行空間檢索，系統(tǒng)自動(dòng)調(diào)取后臺(tái)的數(shù)據(jù)服務(wù)接口，通過(guò)訪問(wèn)的數(shù)據(jù)以及位置參數(shù)進(jìn)行檢索結(jié)果反饋；并將結(jié)果展示出來(lái)，對(duì)于超出當(dāng)前顯示結(jié)果頁(yè)面的，提供多頁(yè)顯示以及翻頁(yè)顯示操作?？臻g檢索，可以根據(jù)緩沖，出入一定的緩沖范圍，進(jìn)行范圍內(nèi)的結(jié)果反饋，也可以基于單點(diǎn)位置信息進(jìn)行結(jié)果反饋。（3）綜合檢索結(jié)合上述的檢索方式，系統(tǒng)自動(dòng)調(diào)取后臺(tái)的數(shù)據(jù)服務(wù)接口，通過(guò)訪問(wèn)的數(shù)據(jù)以及空間位置，關(guān)鍵詞等進(jìn)行檢索結(jié)果反饋；并將結(jié)果展示出來(lái)，對(duì)于超出當(dāng)前顯示結(jié)果頁(yè)面的，提供多頁(yè)顯示以及翻頁(yè)顯示操作。城市管理綜合展示城市管理綜合展示平臺(tái)將以“城市、人、環(huán)境、發(fā)展”為主題， 通過(guò)數(shù)據(jù)可視化的呈現(xiàn)反映當(dāng)前城市管理的現(xiàn)狀，為城市管理者提供及時(shí)的分析和報(bào)告，輔助決策。通過(guò)該平臺(tái)，城市管理者能夠及時(shí)全面了解城市管理各個(gè)環(huán)節(jié)的關(guān)鍵指標(biāo)，以分析預(yù)測(cè)等手段，提高管理能力。平臺(tái)初步規(guī)劃有如下模塊：（1） 城市經(jīng)濟(jì)財(cái)稅綜合分析包括全經(jīng)濟(jì)運(yùn)行情況分析，財(cái)政收入分析等。圖 8重點(diǎn)產(chǎn)業(yè)收入占比（數(shù)據(jù)虛構(gòu)）（2）城市資產(chǎn)綜合分析包括國(guó)有土地資產(chǎn)運(yùn)營(yíng)情況分析，無(wú)形資產(chǎn)營(yíng)運(yùn)情況分析，資源開(kāi)發(fā)利用情況分析，城市載體運(yùn)營(yíng)情況等。（3）城市建設(shè)綜合分析包括城建工程與資金投入情況，城建工程在全的分布情況，城建工程的類型分析，城市功能片與服務(wù)功能情況，文明施工情況，拆遷安置情況等。（4）城市人口綜合分析包括各域人口規(guī)模及分布情況，常住人口與流動(dòng)人口分析，便民服務(wù)設(shè)施配備情況，就業(yè)與失業(yè)情況，健康狀況、低保狀況等。圖 9城市月最低生活費(fèi)組成（數(shù)據(jù)虛構(gòu)）（5）城市交通綜合分析包括道路面積及公共汽車、出租車擁有情況，公共交通客流量統(tǒng)計(jì)及預(yù)測(cè)分析，城市居民出行特征及強(qiáng)度評(píng)估，交通擁堵情況分析，私人汽車擁有量，車輛停放管理情況等。圖 10交通事故情況（數(shù)據(jù)虛構(gòu)）（6）城市環(huán)境綜合分析包括城市綠化覆蓋率、園林綠地占比情況；環(huán)境統(tǒng)計(jì)信息、環(huán)境監(jiān)測(cè)信息、環(huán)境監(jiān)測(cè)點(diǎn)分布信息、污染源普查信息、環(huán)境質(zhì)量評(píng)價(jià)、環(huán)保措施；違章違建情況、流動(dòng)攤點(diǎn)治理情況等（7）城市發(fā)展綜合分析包括熱點(diǎn)事件、綜合指數(shù)統(tǒng)計(jì)（包含社會(huì)景氣指數(shù)、居民幸福指數(shù)、社會(huì)包容指數(shù)、人均GDP指數(shù)、消費(fèi)指數(shù)等）、產(chǎn)業(yè)結(jié)構(gòu)與發(fā)展情況（重點(diǎn)展示信息化、教育、等重點(diǎn)抓的產(chǎn)業(yè)情況）等。圖 11居民幸福指數(shù)（數(shù)據(jù)虛構(gòu)）城市智慧應(yīng)用專項(xiàng)分析展示通過(guò)各類智慧應(yīng)用匯集的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)，將統(tǒng)計(jì)數(shù)據(jù)基于BI分析結(jié)果進(jìn)行展示，提供專題展示應(yīng)用。城市智能報(bào)告分析改變傳統(tǒng)的人工匯總報(bào)告模式，針對(duì)城市發(fā)展進(jìn)行BI數(shù)據(jù)分析報(bào)告輸出，實(shí)現(xiàn)自動(dòng)打印。三、 技術(shù)基礎(chǔ)（一） 大數(shù)據(jù)關(guān)鍵技術(shù)介紹1. 大數(shù)據(jù)采集技術(shù)數(shù)據(jù)是指通過(guò)RFID射頻數(shù)據(jù)、傳感器數(shù)據(jù)、社交網(wǎng)絡(luò)交互數(shù)據(jù)及移動(dòng)互聯(lián)網(wǎng)數(shù)據(jù)等方式獲得的各種類型的結(jié)構(gòu)化、半結(jié)構(gòu)化（或稱之為弱結(jié)構(gòu)化）及非結(jié)構(gòu)化的海量數(shù)據(jù)，是大數(shù)據(jù)知識(shí)服務(wù)模型的根本。重點(diǎn)要突破分布式高速高可靠數(shù)據(jù)爬取或采集、高速數(shù)據(jù)全映像等大數(shù)據(jù)收集技術(shù)；突破高速數(shù)據(jù)解析、轉(zhuǎn)換與裝載等大數(shù)據(jù)整合技術(shù)；設(shè)計(jì)質(zhì)量評(píng)估模型，開(kāi)發(fā)數(shù)據(jù)質(zhì)量技術(shù)。2. 大數(shù)據(jù)預(yù)處理技術(shù)主要完成對(duì)已接收數(shù)據(jù)的辨析、抽取、清洗等操作。1）抽?。阂颢@取的數(shù)據(jù)可能具有多種結(jié)構(gòu)和類型，數(shù)據(jù)抽取過(guò)程可以幫助我們將這些復(fù)雜的數(shù)據(jù)轉(zhuǎn)化為單一的或者便于處理的構(gòu)型，以達(dá)到快速分析處理的目的。2）清洗：對(duì)于大數(shù)據(jù)，并不全是有價(jià)值的，有些數(shù)據(jù)并不是我們所關(guān)心的內(nèi)容，而另一些數(shù)據(jù)則是完全錯(cuò)誤的干擾項(xiàng)，因此要對(duì)數(shù)據(jù)通過(guò)過(guò)濾“去噪”從而提取出有效數(shù)據(jù)。3. 大數(shù)據(jù)存儲(chǔ)及管理技術(shù)大數(shù)據(jù)存儲(chǔ)與管理要用存儲(chǔ)器把采集到的數(shù)據(jù)存儲(chǔ)起來(lái)，建立相應(yīng)的數(shù)據(jù)庫(kù)，并進(jìn)行管理和調(diào)用。重點(diǎn)解決復(fù)雜結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化大數(shù)據(jù)管理與處理技術(shù)。主要解決大數(shù)據(jù)的可存儲(chǔ)、可表示、可處理、可靠性及有效傳輸?shù)葞讉€(gè)關(guān)鍵問(wèn)題。開(kāi)發(fā)可靠的分布式文件系統(tǒng)（DFS）、能效優(yōu)化的存儲(chǔ)、計(jì)算融入存儲(chǔ)、大數(shù)據(jù)的去冗余及高效低成本的大數(shù)據(jù)存儲(chǔ)技術(shù)；突破分布式非關(guān)系型大數(shù)據(jù)管理與處理技術(shù)，異構(gòu)數(shù)據(jù)的數(shù)據(jù)融合技術(shù)，數(shù)據(jù)組織技術(shù)，研究大數(shù)據(jù)建模技術(shù)；突破大數(shù)據(jù)索引技術(shù)；突破大數(shù)據(jù)移動(dòng)、備份、復(fù)制等技術(shù)；開(kāi)發(fā)大數(shù)據(jù)可視化技術(shù)。4. 大數(shù)據(jù)分析及挖掘技術(shù)大數(shù)據(jù)分析技術(shù)。改進(jìn)已有數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)技術(shù)；開(kāi)發(fā)數(shù)據(jù)網(wǎng)絡(luò)挖掘、特異群組挖掘、圖挖掘等新型數(shù)據(jù)挖掘技術(shù)；突破基于對(duì)象的數(shù)據(jù)連接、相似性連接等大數(shù)據(jù)融合技術(shù)；突破用戶興趣分析、網(wǎng)絡(luò)行為分析、情感語(yǔ)義分析等面向領(lǐng)域的大數(shù)據(jù)挖掘技術(shù)。（二） 系統(tǒng)網(wǎng)絡(luò)結(jié)構(gòu)1. 系統(tǒng)需求分析由于近年來(lái)互聯(lián)網(wǎng)上計(jì)算數(shù)據(jù)的總量呈爆炸式增長(zhǎng)，據(jù)不完全統(tǒng)計(jì)，僅2010年初到現(xiàn)在，互聯(lián)網(wǎng)上的數(shù)據(jù)傳輸量就達(dá)到175EB，不到一年的數(shù)據(jù)量超過(guò)了過(guò)去9年的數(shù)據(jù)量總量。按照需求規(guī)劃的1860家媒體數(shù)據(jù)量也是相當(dāng)龐大的，所以監(jiān)測(cè)系統(tǒng)必須要具備采集、存儲(chǔ)、分析互聯(lián)網(wǎng)媒體中