【正文】 指定連接目標(biāo)數(shù)據(jù)庫的用戶名，如果不使用超級管理員，服務(wù)參數(shù)gp_external_grant_privileges必須設(shè)置成on。 指定連接數(shù)據(jù)庫的名字，如果沒有指定,由環(huán)境變量$PGDATABASE，或者通過gpload參數(shù)d指定USER: db_username 指定控制文件schema的版本DATABASE: db_name因此它必須得是有效的YAML格式。gpload也是通過它的控制文件指定裝載的細(xì)節(jié)信息。1 啟動裝載服務(wù)（集成到gp環(huán)境里了）：gpfdist d /home/gpadmin/input p 8088 l /home/gpadmin/ amp。LOG ERRORS INTO ext_ips_sip_org_t_err SEGMENT REJECT LIMIT 1000000000 ROWS。) encoding 39。 (DELIMITER 39。) FORMAT 39。 數(shù)據(jù)分布存儲 GP的SQL語法 數(shù)據(jù)加載 利用gpfdist載入數(shù)據(jù)1 建立數(shù)據(jù)存放目錄mkdir /home/gpadmin/input把數(shù)據(jù)放進(jìn)來2 建立外部表例如：CREATE external TABLE ext_ips_sip_t_new (f_time varchar(50),f_protocols varchar(30),f_len numeric(20),f_method varchar(30),f_to_user varchar(30),f_to_host varchar(30),f_to_port varchar(10),f_from_user varchar(30),f_from_host varchar(30),f_from_port varchar(10),f_call_id varchar(100),f_cseq_seq varchar(30),f_cseq_method varchar(20),f_status_code varchar(10),f_tag varchar(100))LOCATION (39。 JDBC配置應(yīng)用程序如果需要使用JDBC連接GP數(shù)據(jù)庫，請參看如下配置文件： ConfigParam ParamIDconnectDriver/ParamID ParamValue/ParamValue ParamDesc連接驅(qū)動/ParamDesc /ConfigParam ConfigParam ParamIDconnectURL/ParamID ParamValuejdbc:postgresql://ip:port/database_name/ParamValue ParamDesc連接URL/ParamDesc /ConfigParam ConfigParam ParamIDconnectUsername/ParamID ParamValuedpi_support/ParamValue ParamDesc用戶名/ParamDesc /ConfigParam ConfigParam ParamIDconnectPassword/ParamID ParamValuedpi_support/ParamValue ParamDesc密碼/ParamDesc /ConfigParam根據(jù)應(yīng)用程序的實際情況修改ip地址、端口號、數(shù)據(jù)庫名以及用戶名和密碼， GP數(shù)據(jù)庫兩個重要概念 什么是Schema模式，也就是Schema，是數(shù)據(jù)庫中一組對象的集合，里面包含了各種對象如tables, views, sequences, stored procedures, synonyms, indexes, clusters, and database links。然而恢復(fù)時只有press和tar的文件能夠恢復(fù)。下部分全是數(shù)據(jù)。上面有幾行是亂碼，下部分都是數(shù)據(jù)，格式看上去不太整齊。用pgAdmin可以把數(shù)據(jù)庫備份成三種格式，press，tar，plain。建議建表的時候表名和字段名全部小寫，因為GP是區(qū)分大寫小寫的。 數(shù)據(jù)庫與表的創(chuàng)建在左側(cè)導(dǎo)航欄里右鍵選擇”新建數(shù)據(jù)庫”。圖標(biāo)8．輸入條件對所選對象的數(shù)據(jù)進(jìn)行過濾。圖標(biāo)7．查看所選對象數(shù)據(jù)。圖標(biāo)5．刪除當(dāng)前所選擇的對象。可以查看幫助文檔 工具欄介紹 1 2 3 4 5 6 7 8 9 10 11圖標(biāo)1．新建立一個服務(wù)器圖標(biāo)2．刷新所選擇對象（所選對象右鍵刷新也可以實現(xiàn)）圖標(biāo)3．顯示所選對象屬性（所選對象右鍵刷新也可以實現(xiàn)）圖標(biāo)4．創(chuàng)建和選取對象同類型的對象。在主窗體左面的對象樹中點擊不同的節(jié)點　工具中菜單的高亮顯示可做相應(yīng)的操作。（右鍵所選對象相當(dāng)于編輯中所有相關(guān)功能）用來調(diào)節(jié)頁面視圖的顯示。 導(dǎo)航菜單1） 文件選項卡：文件選項卡中可以修改密碼，新建一個連接點擊“選項”按鈕之后，會出現(xiàn)一個多層的選項卡，在這里可以設(shè)置你的pgAdminIII。右上方顯示，目前在樹中選定的對象的詳細(xì)信息。 主窗體在主窗口中，顯示數(shù)據(jù)庫的結(jié)構(gòu)。第一次使用pgAdmin工具時，會出現(xiàn)連接服務(wù)器的對話框，填寫：連接名稱、主機(jī)IP、端口(默認(rèn)是5432)、用戶名和密碼。所以需要DBA調(diào)用命令gpstate m判斷恢復(fù)操作完成的進(jìn)度情況。這需要在master上調(diào)用命令$ gprecoverseg 進(jìn)行。還有就是存儲問題，比如控制器故障等等。還可以通過gpstate c看到primary與mirror之間的映射關(guān)系。d39。 檢查是否有segment down掉，可以在master上執(zhí)行g(shù)pstate，如果看到類似這樣的內(nèi)容[WARN]:Total primary segment failures (at master) = 1 ，說明有primary segment down掉了。 由于mirror segment可以自動failover，因此當(dāng)primary segment出現(xiàn)故障時，管理員可能無法及時察覺。因為GREENPLUM目前只能添加鏡像，不能刪除鏡像。 $ gpaddmirrors i mirror_config_file這時系統(tǒng)會根據(jù)配置文件設(shè)置，復(fù)制鏡像，并對鏡像進(jìn)行同步，提供保護(hù)。比如自動生成添加mirror的構(gòu)造文件 $ gpaddmirrors o filename文本編輯器打開該構(gòu)造文件，可以看到其格式如下mirror[content]=content:hostname:addressort:mir_replication_portri_replication_port:datadir_location默認(rèn)配置是原有的主機(jī)間互為鏡像，我們也可以添加新的主機(jī)作為鏡像使用，從而減少鏡像對性能的影響。首先要獲取添加鏡像的構(gòu)造文件。如果主機(jī)的數(shù)量多于segment的數(shù)量，可以使用S選項，指定使用哪些主機(jī)作為鏡像用。取值范圍1到65535 MIRROR_DATA_DIRECTORY 指定了mirror segment的數(shù)據(jù)目錄，聲明的目錄數(shù)量必須與primary segment的目錄數(shù)量一致，而且要保證進(jìn)行初始化操作的os用戶對這些目錄有讀寫權(quán)限。取值范圍1到65535 MIRROR_REPLICATION_PORT_BASE 指定第一個mirror segment用于數(shù)據(jù)復(fù)制的端口號，其它mirror segment以此為基礎(chǔ)，每次加1,計算復(fù)制用端口號。 REPLICATION_PORT_BASE 指定第一個primary segment用于數(shù)據(jù)復(fù)制的端口號，其它primary segment以此為基礎(chǔ)，每次加1,計算復(fù)制用端口號。 啟用segment鏡像，既可以在初始化系統(tǒng)時進(jìn)行，也可以為存在的系統(tǒng)添加mirror。只有管理員對其進(jìn)行恢復(fù)后，才會改變狀態(tài)。ftsprobe的檢測間隔是通過global服務(wù)參數(shù)gp_fts_probe_interval進(jìn)行定義的，默認(rèn)值是1分鐘，通常這個參數(shù)的設(shè)置應(yīng)該與參數(shù)gp_segment_connect_timeout保持一致。一旦primary segment出現(xiàn)故障，mirror segment的復(fù)制進(jìn)程停止，并啟動instance，保證數(shù)據(jù)庫的操作繼續(xù)。正常情況下，只有primary segment的instance處于工作狀態(tài)，所有primary segment上的變化通過文件塊的復(fù)制技術(shù)拷貝到mirror segment。完成問題的糾正后，通過調(diào)用gpinitstandby可以重新同步standby master。如果沒有在激活時，添加新的standby master，事后也可以通過gpinitstandby的調(diào)用添加新的standby master. 在系統(tǒng)工作的過程中，standby master節(jié)點也可能出現(xiàn)數(shù)據(jù)同步故障，比如網(wǎng)絡(luò)問題，導(dǎo)致gpsyncagent出現(xiàn)同步故障，用戶可能無法及時感知。ANALYZE。 Master instance = Active Master instance standby = Passive在完成,新primary master激活之后，應(yīng)該在其上運行analyze命令。如果在激活的時候，想配置一個新的standby master可以通過c選項實現(xiàn)。比如gpinitstandby s vcentos626466如果遇到primary standby出現(xiàn)故障，由于到目前為止,EMC還沒有提供自己的cluster，因此,如果不使用第三方的cluster的情況下，DBA需要手工激活standby master進(jìn)行master failover，這個過程通過調(diào)用gpactivatestandby命令實現(xiàn) $ gpactivatestandby d /gpdata/gpdata應(yīng)該是standby master的數(shù)據(jù)目錄。也可以使用gpinitstandby工具去添加standby master。無論哪種方式，首先要準(zhǔn)備standby的主機(jī)，包括操作系統(tǒng)，用戶等效性的建立，以及GP軟件的安裝。standby master所在主機(jī)除了復(fù)制進(jìn)程外，沒有正式master服務(wù)運行。正常情況下只有primary master接受用戶連接請求，standby master通過gpsyncagent進(jìn)程（運行在standby master上）利用事務(wù)日志保持與primary master的同步。 如果有連接沒有斷開，想強(qiáng)行關(guān)閉服務(wù)使用gpstop M fast (注意選項的大小寫） 如果要重啟系統(tǒng)，可以使用gpstop u 注：數(shù)據(jù)庫的啟停和查看數(shù)據(jù)庫狀態(tài)的操作都是在master上進(jìn)行的，不需要動segment節(jié)點。 gpstate s 查看細(xì)節(jié)。 在啟動服務(wù)后，通過ps ef|grep postgre*可以看到相關(guān)的服務(wù)進(jìn)程。 如果使用gpstart a 則系統(tǒng)無任何提示，進(jìn)行啟動。*39。echo password | passwd gpadmin stdin39。/usr/sbin/useradd gpadmin d /home/gpadmin s /bin/bash39。2） 集群節(jié)點間內(nèi)部通信管理方式不同：如圖6，RAC使用GRD（Global Resource Directory）統(tǒng)一管理數(shù)據(jù)庫資源，管理內(nèi)部節(jié)點間通信。圖4：一次查詢調(diào)度過程Greenplum獨有的Sharing－Nothing架構(gòu)：數(shù)據(jù)倉庫在執(zhí)行全表掃描查詢時，通常速度被存儲的帶寬限制，即瓶頸大多集中在I/O。6．Master協(xié)調(diào)查詢計劃在所有Segment上并行執(zhí)行。4．Master建立1個優(yōu)化的并行查詢計劃。2．Master連接到所有遠(yuǎn)程Segment實例。Master作為查詢調(diào)度器，為客戶端提供連接工作；Segment獨立管理數(shù)據(jù)片和數(shù)據(jù)操作。服務(wù)器基于X86－64位硬件平臺，安裝Linux操作系統(tǒng)，獲得極高的性價比。圖2：Segment服務(wù)器真正存儲數(shù)據(jù)圖3展示了一套完整的Greenplum數(shù)據(jù)倉庫實施架構(gòu)示例。圖1：Greenplum數(shù)據(jù)庫架構(gòu) 如圖2所示，Segment服務(wù)器是真正數(shù)據(jù)存儲的地方，并承擔(dān)主要的查詢工作。如圖1所示，Master服務(wù)器是數(shù)據(jù)庫的入口，驗證客戶端，處理輸入的SQL，分布工作到若干Segment服務(wù)器，統(tǒng)一協(xié)調(diào)各個Segment返回的結(jié)果，匯總最終結(jié)果返回客戶端。Greenplum數(shù)據(jù)庫架構(gòu)原理解密：Greenplum數(shù)據(jù)庫通過分布負(fù)載到多個服務(wù)器主機(jī)，實現(xiàn)操作存儲和處理大規(guī)模的數(shù)據(jù)。 自有的MapReduce技術(shù)MapReduce是Google和Yahoo的大規(guī)模數(shù)據(jù)分析方法。 在線系統(tǒng)擴(kuò)展為提高存儲容量、處理性能，增加新的服務(wù)器到集群中，擴(kuò)展的操作在后臺完成，數(shù)據(jù)庫可以繼續(xù)保持正常工作狀態(tài)不受影響。 多級容錯能力Greenplum數(shù)據(jù)庫利用多級冗余技術(shù)，在硬件或軟件故障時，保障操作可以繼續(xù)執(zhí)行。在有效較少1/3～1/10空間的同時，相應(yīng)地提高了I/O性能。每增加1個節(jié)點，每小時裝載吞吐量提高4TB！216。216。Greenplum是業(yè)界最快的和最普及的高端數(shù)據(jù)倉庫解決方案！用傳統(tǒng)方式需花費數(shù)天才能