大數(shù)據(jù)心得體會(huì)(編輯修改稿)
2024-09-30 19:19 本頁面
【文章內(nèi)容簡介】 計(jì)算在閃存里面處理，已經(jīng)被微軟、facebook等等大量使用。大家可以預(yù)期，兩年以后出現(xiàn)新的非易失性的閃存，它的速度可能要比閃存快幾百倍，和內(nèi)存相似，這又會(huì)極大地顛覆數(shù)據(jù)與機(jī)器的關(guān)系。 第二層關(guān)系。數(shù)據(jù)與人的關(guān)系。主要是價(jià)值的覺醒，如果數(shù)據(jù)不能產(chǎn)生價(jià)值它可能是負(fù)面資產(chǎn)。數(shù)據(jù)怎么能夠給人帶來價(jià)值。我們介紹一下它的價(jià)值維度，把它映射到二維的時(shí)空象限里，用六個(gè)關(guān)鍵詞來描述它。第一是“volume”，兩個(gè)關(guān)鍵詞，小數(shù)據(jù)見微對個(gè)人進(jìn)行刻劃，大數(shù)據(jù)知著能夠了解宏觀規(guī)律，它是空間概念，同時(shí)也是時(shí)間概念，數(shù)據(jù)剛剛產(chǎn)生的時(shí)候，它的個(gè)性化價(jià)值、見微的價(jià)值最大，而隨著時(shí)間的推移，它漸漸退化到只有集合價(jià)值。第二是velocity，時(shí)間軸的原點(diǎn)是當(dāng)下實(shí)時(shí)價(jià)值，副軸是過往，正軸是預(yù)測未來，如果知道知前后就能夠做到萬物的皆明。第三是variety，多源異質(zhì)的數(shù)據(jù)，能夠過濾噪聲、查漏補(bǔ)缺、去偽存真，就是辯訛。還有曉意，能夠從大量的非結(jié)構(gòu)化數(shù)據(jù)中獲得語意，從而能夠使機(jī)器窺探人的思維境界，這六個(gè)價(jià)值維度怎么去實(shí)現(xiàn)。主要是兩部分人，一是數(shù)據(jù)科學(xué)家要洞察數(shù)據(jù)，另外一個(gè)是終端用戶和領(lǐng)域?qū)＜乙ソ庾x數(shù)據(jù)并利用數(shù)據(jù)。首先看洞察數(shù)據(jù)，數(shù)據(jù)科學(xué)，人和機(jī)器作用發(fā)生了消長，講個(gè)例子，機(jī)器學(xué)習(xí)大家覺得是機(jī)器的問題，其實(shí)人在里面起到很重要的作用，尤其是機(jī)器學(xué)習(xí)是模型加特征，而特征工程是一個(gè)人力工程，你要有經(jīng)驗(yàn)非常豐富的特征團(tuán)隊(duì)去死磕特征，找出更好、更多的特征，才能夠使機(jī)器學(xué)習(xí)的效果更好。但是現(xiàn)在深度學(xué)習(xí)這些新技術(shù)出來，能夠用機(jī)器學(xué)習(xí)特征，能夠在大量非結(jié)構(gòu)化數(shù)據(jù)中找到豐富的信息維度用特征表達(dá)出來，這遠(yuǎn)遠(yuǎn)超出了人的能力。大家知道黑客帝國描述了一個(gè)場景，人腦袋后面插一個(gè)插頭，給機(jī)器提供營養(yǎng)，我可能不會(huì)那么悲觀，但是像這樣的互動(dòng)關(guān)系以一種更良性的方式出現(xiàn)了，現(xiàn)在人的一言一行、社交行為、金融行為都已經(jīng)成為機(jī)器的養(yǎng)料、機(jī)器的數(shù)據(jù)，使得機(jī)器獲得更好的洞察。 終端用戶需要更好地、更傻瓜化的分析工具和可視化工具，兩年前我去參加大數(shù)據(jù)的會(huì)，基本上都是hadoop和nosql現(xiàn)在大家參加大數(shù)據(jù)會(huì)可以看到清一色的分析工具和可視化工具。大數(shù)據(jù)跟各行各業(yè)的化學(xué)作用正在發(fā)生。如果 馬化騰說“互聯(lián)網(wǎng)+”是互聯(lián)網(wǎng)與各行各
教學(xué)教案相關(guān)推薦
鄂ICP備17016276號-1