【正文】 customizing cache amp。 網(wǎng)格計算－ Grid Computing 肖儂 三種安全認證方式 ? 普通的匿名 ftp、 方式，即沒有認證 ? 進程之間進行的 GSI認證 ? 未來還將發(fā)展到基于 SSL認證的 ftp或 訪問 網(wǎng)格計算－ Grid Computing 肖儂 工作流程 globusjobrun Local Machine Remote Machine DUROC GASS Server GRAM Client GSI GRAM Gatekeeper GSI GRAM JobManager GASS Client App Nexus GRAM Client GSI MultiRSL Request Remote Machine GRAM Gatekeeper GSI GRAM JobManager GASS Client App Nexus Single RSL Single RSL Parse 網(wǎng)格計算－ Grid Computing 肖儂 GASS RSL Extensions ? executable, stdin, stdout, stderr can be local files or URLs ? executable and stdin loaded into local cache before job begins (on frontend node) ? stdout, stderr handled via GASS append mode ? Cache cleaned after job pletes 網(wǎng)格計算－ Grid Computing 肖儂 GASS/RSL Example amp。 gridftp. 網(wǎng)格計算－ Grid Computing 肖儂 三種訪問方式 ? Read：讀取包含穩(wěn)定數(shù)據(jù)的整個文件，將整個文件 cache到本地。網(wǎng)格計算－ Grid Computing 肖儂 Globus數(shù)據(jù)管理服務 網(wǎng)格計算－ Grid Computing 肖儂 數(shù)據(jù)管理服務 ? 數(shù)據(jù)傳和訪問 ?GASS: Provides services mainly intended for use with GRAM (file staging, I/O redirection) ?GridFTP: Provides highperformance, reliable data transfer for modern WANs ? 數(shù)據(jù)復制和管理 ?復制目錄 : Provides a catalog service for keeping track of replicated datasets ?復制管理 : Provides services for creating and managing replicated datasets 網(wǎng)格計算－ Grid Computing 肖儂 Globus－ Gridftp 網(wǎng)格計算－ Grid Computing 肖儂 公共數(shù)據(jù)訪問協(xié)議目的 ? 已存在的分布數(shù)據(jù)存儲系統(tǒng) ?DPSS, HPSS: focus on highperformance access, utilize parallel data transfer, striping ?DFS: focus on highvolume usage, dataset replication, local caching ?SRB: connects heterogeneous data collections, uniform client interface, metadata queries ? 問題（ 協(xié)議不兼容、不公開，各自獨立的客戶端） ?不兼容的協(xié)議和特性 ? Each require custom client ? Partitions available data sets and storage devices ?每一個協(xié)議有所希望功能的一部分 網(wǎng)格計算－ Grid Computing 肖儂 需要公共安全有效的數(shù)據(jù)訪問協(xié)議 ? 公共可擴展的傳輸協(xié)議 ?意味著可以互操作 ? 從存儲服務中分離低級的傳輸機制 ? 優(yōu)點 : ?新的特殊的存儲系統(tǒng)可以自動地和已經(jīng)存在系統(tǒng)兼容 ?已經(jīng)存在系統(tǒng)具有豐富的數(shù)據(jù)傳輸功能 ? 和多個存儲系統(tǒng)接口 ?HPSS, DPSS, file systems ?Plan for SRB integration 網(wǎng)格計算－ Grid Computing 肖儂 Globus提出統(tǒng)一 GridFTP協(xié)議 ? 基于 FTP ?與大量已有工具兼容 ?已經(jīng)支持不少數(shù)據(jù)網(wǎng)格需要的特征，容易擴展 ?普遍認可、理解與支持 ? 已有的規(guī)范 ?RFC 949: File Transfer Protocol ?RFC 2228: FTP Security Extensions ?RFC 2389: Feature Negotiation for the File Transfer Protocol ? GridFTP包括什么？ ?協(xié)議 ?協(xié)議實現(xiàn)的一套工具 ? GridFTP FTP，是 FTP的超集， GridFTP不僅僅限于文件傳輸 網(wǎng)格計算－ Grid Computing 肖儂 GridFTP: 基本方法 ? 從最通用的子集開始 ?Standard FTP: get/put etc., 3rdparty transfer ? 實現(xiàn)標準化但不經(jīng)常使用的特性 ?GSS binding, extended directory listing, simple restart ? 多個方面的擴展，但保持與已存在服務器互操作能力 ?Striped/parallel data channels, partial file, automatic amp。 ?有可能是多個用戶同時進行 ? Write：寫入單個文件，對本地 cache進行操作，文件關閉后才寫回到遠端。 ?允許多個用戶同時操作，但并發(fā)寫是隔行進行的 網(wǎng)格計算－ Grid Computing 肖儂 File cache ? “File open” 將遠程文件傳輸?shù)奖镜?cache ?避免多個本地進程對同一文件的重復打開 ? Cache與用戶相關，允許用戶通過本地資源管理工具對其進行管理 ?程序通過 cache API 訪問文件 cache ? 用戶可以通過 GRAM遠程管理 cache ?一個用戶可擁有多個 cache ，每個 Cache對應一個條目，記錄打開的數(shù)目，關閉減少數(shù)目，當數(shù)目為 0，當該 cache文件將被刪除。 read/wr