【正文】 布將在對(duì)地觀測(cè)、醫(yī)療衛(wèi)生等大數(shù)據(jù)和節(jié)能計(jì)算技術(shù)方面投資 ； — 2023年我國上海、重慶等地相繼發(fā)布大數(shù)據(jù)行動(dòng)計(jì)劃 。 — 在計(jì)算機(jī)網(wǎng)絡(luò)中每個(gè)層次都實(shí)現(xiàn)一定的功能，層與層之間有一定關(guān)聯(lián)。 ? 平臺(tái)即服務(wù)需要平臺(tái)軟件的支撐，可以認(rèn)為是從資源到應(yīng)用軟件的一個(gè) 中間件 ，通過這類中間件可以大大減小應(yīng)用軟件開發(fā)時(shí)的技術(shù)難度。 云計(jì)算技術(shù)分類 * 2．按服務(wù)對(duì)象分類 — 公有云： 指服務(wù)對(duì)象是面向公眾的云計(jì)算服務(wù)，公有云對(duì)云計(jì)算系統(tǒng)的穩(wěn)定性、安全性和并發(fā)服務(wù)能力有更高的要求。所有的服務(wù)分布在不同的服務(wù)器上，如果什么地方（節(jié)點(diǎn)）出問題就在什么地方終止它，另外再啟動(dòng)一個(gè)程序或節(jié)點(diǎn)，即 自動(dòng)處理失敗節(jié)點(diǎn) ，從而保證了應(yīng)用和計(jì)算的正常進(jìn)行。 云計(jì)算的特點(diǎn) * （ 3）虛擬化 — 現(xiàn)有的云計(jì)算平臺(tái)的重要特點(diǎn)是利用軟件來實(shí)現(xiàn)硬件資源的虛擬化管理、調(diào)度及應(yīng)用。 — 資源的整合運(yùn)營者就像是發(fā)電廠負(fù)責(zé)資源的整合輸出； — 資源的使用者負(fù)責(zé)將資源轉(zhuǎn)變?yōu)闈M足客戶需求的各種應(yīng)用； — 終端客戶為資源的最終消費(fèi)者。 云計(jì)算簡(jiǎn)介 * ? 維基百科 中對(duì) 云計(jì)算 的 定義 為： —云計(jì)算是一種基于互聯(lián)網(wǎng)的計(jì)算方式，通過這種方式，共享的軟硬件資源和信息可以按需求提供給計(jì)算機(jī)和其他設(shè)備。 ? 2023年的 國務(wù)院政府工作報(bào)告 將云計(jì)算作為 國家戰(zhàn)略性新興產(chǎn)業(yè) 給出了 定義 ： —云計(jì)算是基于互聯(lián)網(wǎng)的服務(wù)的增加、使用和交付模式，通常涉及通過互聯(lián)網(wǎng)來提供動(dòng)態(tài)、易擴(kuò)展且經(jīng)常是虛擬化的資源。 云計(jì)算簡(jiǎn)介 * ? 云計(jì)算這種新的模式的出現(xiàn)被認(rèn)為是信息產(chǎn)業(yè)的一大變革，吸引了大量企業(yè)重新布局： — IBM、微軟、谷歌、 DELL等企業(yè) — 國內(nèi)企業(yè)：華為、中興、騰訊、阿里、聯(lián)想、浪潮、五舟等企業(yè) 云計(jì)算簡(jiǎn)介 * — 云計(jì)算技術(shù)作為一項(xiàng)涵蓋面廣且對(duì)產(chǎn)業(yè)影響深遠(yuǎn)的技術(shù)，未來將逐步滲透到信息產(chǎn)業(yè)和其他產(chǎn)業(yè)的方方面面，并將深刻改變產(chǎn)業(yè)的結(jié)構(gòu)模式、技術(shù)模式和產(chǎn)品銷售模式，進(jìn)而深刻影響人們的生活； — 云計(jì)算會(huì)逐步成為人們生活中必不可少的技術(shù)； 云計(jì)算簡(jiǎn)介 * — 移動(dòng)互聯(lián)網(wǎng)的出現(xiàn)使云計(jì)算應(yīng)用走向了人們的指間，推動(dòng)了云計(jì)算技術(shù)的應(yīng)用發(fā)展，今后云計(jì)算將是一項(xiàng)隨時(shí)、隨地、隨身為我們提供服務(wù)的技術(shù)； — 云計(jì)算的出現(xiàn)也將如電的出現(xiàn)一般，為信息產(chǎn)業(yè)的發(fā)展提供無限的想象空間，使應(yīng)用的創(chuàng)新能力得到完全釋放。 — 在云計(jì)算中利用虛擬化技術(shù)可大大降低維護(hù)成本和提高資源的利用率。 — 數(shù)據(jù)被復(fù)制到多個(gè)服務(wù)器節(jié)點(diǎn)上有多個(gè)副本（備份），存儲(chǔ)在云里的數(shù)據(jù)即使遇到意外刪除或硬件崩潰也不會(huì)受到影響。 — 私有云： 指主要服務(wù)于某一組織內(nèi)部的云計(jì)算服務(wù)，其服務(wù)并不向公眾開放，如企業(yè)、政府內(nèi)部的云服務(wù)。 ? 這類云服務(wù)的對(duì)象往往是云計(jì)算應(yīng)用軟件的 開發(fā)者 ，平臺(tái)軟件的開發(fā)需要使用者 具有一定的技術(shù)能力 。而云計(jì)算體系結(jié)構(gòu)中的層次是可以分割的，即某一層次可以單獨(dú)完成一項(xiàng)用戶的請(qǐng)求而不需要其他層次為其提供必要的服務(wù)和支持。 * ? 1．什么是大數(shù)據(jù) ? 維基百科 將 大數(shù)據(jù) 描述為： — 大數(shù)據(jù)是現(xiàn)有數(shù)據(jù)庫管理工具和傳統(tǒng)數(shù)據(jù)處理應(yīng)用很難處理的大型、復(fù)雜的數(shù)據(jù)集，大數(shù)據(jù)的挑戰(zhàn)包括采集、存儲(chǔ)、搜索、共享、傳輸、分析和可視化等。 （ 3）物聯(lián)網(wǎng)系統(tǒng)：通過傳感器獲取外界的物理、化學(xué)、生物等數(shù)據(jù)信息。 大數(shù)據(jù)簡(jiǎn)介 * （ 4）數(shù)據(jù)處理方式： ? 以往我們對(duì)數(shù)據(jù)的處理大多采用 離線處理 的方式，對(duì)已經(jīng)生成的數(shù)據(jù)集中進(jìn)行分析處理，不對(duì)實(shí)時(shí)產(chǎn)生的數(shù)據(jù)進(jìn)行分析； ? 在大數(shù)據(jù)時(shí)代，我們可以根據(jù)應(yīng)用的實(shí)際需求對(duì)數(shù)據(jù)采取靈活的處理方式，對(duì)于較大的數(shù)據(jù)源、 響應(yīng)時(shí)間要求低 的應(yīng)用可以 采取批處理 的方式進(jìn)行集中計(jì)算，而對(duì)于 響應(yīng)時(shí)間要求高 的 實(shí)時(shí)數(shù)據(jù) 處理則采用流處理 的方式進(jìn)行 實(shí)時(shí)計(jì)算 ，并且可以通過對(duì) 歷史數(shù)據(jù) 的分析進(jìn)行 預(yù)測(cè)分析 。 大數(shù)據(jù)簡(jiǎn)介 * ? 5．大數(shù)據(jù)的應(yīng)用領(lǐng)域 — 大數(shù)據(jù)在社會(huì)生活的各個(gè)領(lǐng)域得到廣泛的應(yīng)用，不同領(lǐng)域的大數(shù)據(jù)應(yīng)用具有不同的特點(diǎn)，其對(duì)響應(yīng)時(shí)間、系統(tǒng)穩(wěn)定性、計(jì)算精確性的要求各不相同，其對(duì)比如表 。 — Hive提供了一種類 SQL語言（ HiveQL）可以將 SQL語句轉(zhuǎn)換為MapReduce任務(wù)運(yùn)行。 — 批處理系統(tǒng)將復(fù)雜的并行計(jì)算的實(shí)現(xiàn)進(jìn)行封裝，大大降低開發(fā)人員的并行程序設(shè)計(jì)難度。 — Facebook 的 Scribe、 Apache的 Flume、 Twitter的 Storm、 Yahoo的 S UCBerkeley的 Spark Streaming是常用的流式計(jì)算系統(tǒng)。 ?HaLoop： Haloop是 Hadoop MapReduce框架的修改版本，用于支持迭代、遞歸類型的數(shù)據(jù)分析任務(wù)，如 PageRank、 Kmeans等。 ? Giraph： — 一個(gè)迭代的圖計(jì)算系統(tǒng)，最早由雅虎公司借鑒 Pregel系統(tǒng)開發(fā)，后捐贈(zèng)給 Apache軟件基金會(huì)，成為開源的圖計(jì)算系統(tǒng)。 Dremel是 Google MapReduce的補(bǔ)充，大大縮短了數(shù)據(jù)的處理時(shí)間，成功地應(yīng)用在 Google的 bigquery中。 大數(shù)據(jù)處理的基本流程 * ? 3．?dāng)?shù)據(jù)解釋 — 大數(shù)據(jù)處理流程中用戶最關(guān)心的是數(shù)據(jù)處理的結(jié)果，正確的數(shù)據(jù)處理結(jié)果只有通過合適的展示方式才能被終端用戶正確理解，因此數(shù)據(jù)處理結(jié)果的展示非常重要， 可視化 和 人機(jī)交互 是數(shù)據(jù)解釋的主要技術(shù)。 — 2023年全球數(shù)據(jù)總量已達(dá) ，到 2023年，全球數(shù)據(jù)總量將達(dá)到 35 ZB。 — 但網(wǎng)絡(luò)技術(shù)的出現(xiàn)逐步地打破了單純的硬件能力決定技術(shù)發(fā)展的格局，通信帶寬的發(fā)展為信息技術(shù)的發(fā)展提供了新的動(dòng)力，在這一階段通信帶寬成為了信息技術(shù)發(fā)展的決定性力量之一，云計(jì)算、大數(shù)據(jù)技術(shù)的出現(xiàn)正是這一階段的產(chǎn)物，其廣泛應(yīng)用并不是單純靠某一個(gè)人發(fā)明而是由于技術(shù)發(fā)展到現(xiàn)在的必然產(chǎn)物，生產(chǎn)力決定生產(chǎn)關(guān)系的規(guī)律在這里依然是成立的。 （ 2）資源利用率需求。 —人類歷史不斷地證明生產(chǎn)力決定生產(chǎn)關(guān)系，技術(shù)的發(fā)展歷史也證明了技術(shù)能力決定技術(shù)的形態(tài)， 云計(jì)算與大數(shù)據(jù)的發(fā)展 * — 縱觀整個(gè)信息技術(shù)的發(fā)展歷史 圖 信息產(chǎn)業(yè)發(fā)展演進(jìn)路線圖 計(jì) 算 機(jī) 誕 生 個(gè) 人 計(jì) 算 機(jī) 互 聯(lián) 網(wǎng)云 計(jì) 算集中計(jì)算瀏覽器/服務(wù)器（ B / S ）大型機(jī)小型機(jī)P CU N I X工 作站 / 服務(wù) 器客戶端/服務(wù)端( C / S )局域網(wǎng)效用計(jì)算網(wǎng)格計(jì)算云計(jì)算移動(dòng)互聯(lián)網(wǎng)大數(shù)據(jù)I B M微 軟 、 英 特 爾谷 歌 、 雅 虎 、 亞 馬 遜由 合 至 分 由 分 到 合物聯(lián)網(wǎng)硬件核心驅(qū)動(dòng)力網(wǎng)絡(luò)核心驅(qū)動(dòng)力 云計(jì)算與大數(shù)據(jù)的發(fā)展 * — 硬件驅(qū)動(dòng)的時(shí)代誕生了 IBM、微軟、 Intel等企業(yè)?？死?，生于 1925年 9月 28日，美國人， 1958年設(shè)計(jì)建造了世界上第一臺(tái)基于晶體管 的 超級(jí)計(jì)算機(jī) ，成為計(jì)算機(jī)發(fā)展史上的重要里程碑。 2023年 11月高性能計(jì)算Top500排行中第 2名和第 6名均為 Cray機(jī)。正是由于他提前半個(gè)多世紀(jì)就預(yù)言了云計(jì)算這種新的模式，因此我們將他稱為“云計(jì)算之父”。格雷 云計(jì)算與大數(shù)據(jù)的發(fā)展 * ? 3．云計(jì)算與大數(shù)據(jù)的國內(nèi)發(fā)展現(xiàn)狀 — 云計(jì)算與大數(shù)據(jù)概念進(jìn)入中國以來，國內(nèi)高度重視云計(jì)算產(chǎn)業(yè)和技術(shù)的發(fā)展，中國電子學(xué)會(huì)率先成立了云計(jì)算專業(yè)委員會(huì)，并在 2023年舉辦了第一屆中國云計(jì)算大會(huì)，該委員會(huì)在大會(huì)后來每年舉辦一次，成為云計(jì)算領(lǐng)域的一個(gè)重要會(huì)議，同時(shí)每年出版一本《云計(jì)算技術(shù)發(fā)展報(bào)告》，報(bào)道當(dāng)年云計(jì)算的發(fā)展?fàn)顩r。 — 數(shù)據(jù)分析、數(shù)據(jù)運(yùn)營的作用已經(jīng)顯現(xiàn)出來，擁有用戶數(shù)據(jù)的 IT企業(yè)對(duì)傳統(tǒng)的行業(yè)產(chǎn)生了巨大影響，“數(shù)據(jù)為王”的時(shí)代正在到來。 ? 2. 建造了世界上第一臺(tái)基于晶體管的超級(jí)計(jì)算機(jī)，被譽(yù)為“超級(jí)計(jì)算機(jī)之父”。 云計(jì)算與大數(shù)據(jù)的發(fā)展 * — 國內(nèi)的研究機(jī)構(gòu)也紛紛開展云計(jì)算、大數(shù)據(jù)研究工作，如清華大學(xué)、中國科學(xué)院計(jì)算所、華中科技大學(xué)、成都信息工程學(xué)院并行計(jì)算實(shí)驗(yàn)室都在開展相關(guān)的研究工作。麥卡錫 云計(jì)算與大數(shù)據(jù)的發(fā)展 * ? 2．為云計(jì)算與大數(shù)據(jù)發(fā)展做出貢獻(xiàn)的科學(xué)家 ? 大數(shù)據(jù)之父 — 吉姆 克雷 云計(jì)算與大數(shù)據(jù)的發(fā)展 * ? 2．為云計(jì)算與大數(shù)據(jù)發(fā)展做出貢獻(xiàn)的科學(xué)家 ? 云計(jì)算之父 — 約翰 1972年，他創(chuàng)辦了克雷研究公司，公司的宗旨是只生產(chǎn)超級(jí)計(jì)算機(jī)。 — 隨著網(wǎng)絡(luò)的發(fā)展，網(wǎng)絡(luò)通信帶寬逐步加大，從 20世紀(jì) 80年代的局域網(wǎng)到 20世紀(jì) 90年代的互聯(lián)網(wǎng)，網(wǎng)絡(luò)逐漸成為了推動(dòng)信息產(chǎn)業(yè)發(fā)展的主導(dǎo)力量，這個(gè)時(shí)期誕生了百度、谷歌、亞馬遜等企業(yè)。 同時(shí)，利用云計(jì)算將資源集中，統(tǒng)一提供可靠服務(wù)，能減少企業(yè)成本，提升