“大數(shù)據(jù)”及其在排水領(lǐng)域的應(yīng)用的思考36(存儲(chǔ)版)
【正文】 必要性 24 排水和大數(shù)據(jù)結(jié)合？ ?通過(guò)統(tǒng)計(jì)塑料管檢測(cè)數(shù)據(jù)預(yù)測(cè)哪個(gè)品牌的管材質(zhì)量更容易出問(wèn)題； ?通過(guò)分析多個(gè)水樣中各種重金屬之間的相關(guān)性確定 Zn為水樣中重金屬特征指標(biāo)，可以減少重金屬檢測(cè)指標(biāo)和工作量； ?淹易淹易澇區(qū)域風(fēng)險(xiǎn)評(píng)估及改造方案：運(yùn)用管網(wǎng)、下墊面和降雨等大量基礎(chǔ)數(shù)據(jù)，通過(guò)徑流模擬算法、管流模擬算法和二維地表漫流模擬算法，運(yùn)算量大。 其他案例 22 大數(shù)據(jù)如何解決問(wèn)題？ ?通過(guò)記錄和分析北京市出租車兩年的 GPS數(shù)據(jù)，微軟亞洲研究院的謝幸及其同事可以向司機(jī)提供不同時(shí)段的最佳出行路線。再將得出的預(yù)測(cè)與 2023年、 2023年美國(guó)疾控中心記錄的實(shí)際流感病例進(jìn)行對(duì)比后，谷歌公司發(fā)現(xiàn)，他們的軟件發(fā)現(xiàn)了 45條檢索詞條的組合，將它們用于一個(gè)特定的數(shù)學(xué)模型后，他們的預(yù)測(cè)與官方數(shù)據(jù)的相關(guān)性高達(dá) 97%。 ?CompStat現(xiàn)已在全美推廣使用。它丌僅使世界充斥著比以往更多的信息，而且其增長(zhǎng)速度也在加快。 4 什么是大數(shù)據(jù)？ Q4： 大數(shù)據(jù)的就是數(shù)據(jù)多、數(shù)據(jù)大？ Q5： 數(shù)據(jù)多大算大？ Q6： excel算一算，畫畫圖表算不算大數(shù)據(jù)？ 5 什么是大數(shù)據(jù)？ 6 大數(shù)據(jù)時(shí)代的到來(lái) 區(qū)別一： 數(shù)據(jù)采集變得更容易 通訊記錄；上網(wǎng)記錄；信用卡消費(fèi)記錄；手機(jī)定位信息；各種傳感器；各種手環(huán) 區(qū)別二： 網(wǎng)絡(luò)升級(jí)，光纖，數(shù)據(jù)傳遞變得高效容易 移動(dòng) 2G的理論網(wǎng)速 48Kb/s 移動(dòng) 3G的理論網(wǎng)速 350Kb/s 移動(dòng) 4G的理論網(wǎng)速 區(qū)別三： 單位數(shù)據(jù)存儲(chǔ)成本大大降低 7 大數(shù)據(jù)時(shí)代的到來(lái) 8 大數(shù)據(jù)時(shí)代的到來(lái) 區(qū)別五： 計(jì)算能力得到飛速發(fā)展，云計(jì)算，廉價(jià)， 10萬(wàn)億次 /秒 區(qū)別四： 統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)和計(jì)算機(jī)科學(xué)的大發(fā)展 A/B Testing；關(guān)聯(lián)規(guī)則分析；聚類分析；遺傳算法；神經(jīng)網(wǎng)絡(luò)；預(yù)測(cè)模型；模式識(shí)別；時(shí)間序列分析；回歸分析；系統(tǒng)仿真；機(jī)器學(xué)習(xí)；優(yōu)化；空間分析；社會(huì)網(wǎng)絡(luò)分析；自然語(yǔ)言分析 9 大數(shù)據(jù)時(shí)代的到來(lái) ?小大數(shù)據(jù)時(shí)代解決一些相關(guān)問(wèn)題更多依靠部分樣本調(diào)查方法，在處理很多問(wèn)題時(shí)有局限性，大數(shù)據(jù)時(shí)代全樣本分析變得可能 ?龐大的數(shù)據(jù)庫(kù)有著小數(shù)據(jù)庫(kù)所沒(méi)有的價(jià)值 ?大數(shù)據(jù)時(shí)代是一個(gè)有海量數(shù)據(jù)的時(shí)代，應(yīng)用數(shù)學(xué)已經(jīng)取代了其他的所有學(xué)科工具。 大數(shù)據(jù)時(shí)代的到來(lái) 12 4V 體量 Volume 多樣性 Variety 價(jià)值密度 Value 速度 Velocity 非結(jié)構(gòu)化數(shù)據(jù) 的超大規(guī)模和增長(zhǎng) 總數(shù)據(jù)量的 80~90% 比結(jié)構(gòu)化數(shù)據(jù)增長(zhǎng)快 10倍到 50倍 是傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)的 10倍到 50倍 大數(shù)據(jù)的異構(gòu)和多樣性 很多不同形式（文本、圖像、視頻、機(jī)器數(shù)據(jù)） 無(wú)模式或者模式不明顯 不連貫的語(yǔ)法或句義 大量的不相關(guān)信
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1