greenplum

Greenplum数据库安装手册

易安信电脑系统（中国）有限公司

Greenplum数据库安装手册 文档信息

文档维护记录

版本号 维护日期 作者/维护人 描述

版权说明

本文件中出现的任何文字叙述、文档格式、插图、照片、方法、过程等内容，除另有特别注明，版权均属EMC公司所有，受到有关产权及版权法保护。任何个人、机构未经EMC公司的书面授权许可，不得复制、引用或传播本文件的任何片断，无论通过电子形式或非电子形式。

第1页

Greenplum数据库安装手册 目录

第一章 1.1 1.2 第二章 2.1 2.2 2.3 第三章

文档概述 ......................................................................................................................... 5 适用范围 ...............................................................................

GREENPLUM部署文档

Greenplum数据库安装手册

Greenplum数据库安装手册 目录

第一章 1.1 1.2 第二章 2.1 2.2 2.3 第三章

文档概述 .......................................................................................................................... 4 适用范围 .................................................................................................................................. 4 文档说明 .................................................................................................................................. 4 安装前准备 ................................

3.操作系统安装

服务器启动时根据提示使用ctrl+f键进入Raid卡设置，使用strip size 128KB, 启用读缓存, 启用写缓存, 将6块SAS划为一个磁盘组。

服务器重启后进入操作系统安装：

3.1.分区依据：

完毕使用xfs格式化如下：mkfs.xfs /dev/sda4

3.2.文件包依据：

?不要安装防火墙,selinux,LVM

?不要安装办公工具，例如office，浏览器，游戏，音视频工具

?必须安装开发工具，例如glibc

4.操作系统配置

修改内核调度/boot/grub/menu.lst文件kernal添加elevator=deadline

如下：

[root@localhost ~]# vi /boot/grub/menu.lst

default=0

timeout=5

splashimage=(hd0,0)/grub/splash.xpm.gz

hiddenmenu

title Red Hat Enterprise Linux Server (2.6.18-308.el5)

root (hd0,0)

kernel /vmlinuz-2.6.18-308.el5 ro root=LABEL=/ rhgb quiet elevator=deadlin

? 2015/6/13 22:51 GP架构_1 与GreenPlum类似的产品: IBM NITIZA(国内没人用) Terndata

2007年被EMC收购

GreenPlum国外市场：纳斯达克，skype

GreenPlum国内市场：阿里，民生银行，深发展银行，电信业（MPP架构）

MPP架构：海量并行处理 Massively Parallel Processing

share nothing 模式，每一个节点不进行资源共享，集群中每个节点有独立的CPU、内存、存储、总线等。

SMP架构： symmetric mass processing 对称多处理系统：耦合的多处理系统，共享总线、内存、IO资源，传统的 ORCKLE，DB2是非常典型的产品

ORACLE_RAC 处于半共享状态，各节点连接共享存储，所以不能算MPP

GreenPlum 基于 PostGreSQL8.2 之前在国内使用比较少，在国外使用广泛。 Mysql与PostGreSQL地位同等，但mysql被Oracle收购之后没落。

GreenPlum 在函数、dataloading、存储过程等继承了PostGreSQL

GP增加BI和数据仓库的支持： A、外

安装Greenplum(1) 1

评估存储能力 实验环境

系统设置（所有节点） 课程目标 2

计算可用的空间

步骤1：初始存储能力=硬盘大小*硬盘数

步骤2：配置RAID10，格式化磁盘空间=(初始存储能力*0.9)/2 步骤3：可用磁盘空间=格式化磁盘空间*0.7 步骤4：用户数据使用空间 使用镜像：(2*用户数据)+用户数据/3=可用磁盘空间 不使用镜像：用户数据+用户数据/3=可用磁盘空间 计算用户数据大小

平均来说，实际占用磁盘空间大小=用户数据*1.4 页面开销：32KB页面需要20 bytes

行开销：每行24 bytes，'append-only'表需要4bytes 索引开销： B-tree:唯一值*(数据类型大小+24 bytes) Bitmap:(唯一值*行数*1bit*压缩比率/8)+(唯一值*32)

评估存储能力 3

为元数据和日志计算空间需求 系统元数据：20M

预写日志(WAL)：WAL被拆分成多个64M的文件，WAL文件数最多为

2*checkpoint_segments+1，checkpoint_segments默认值为8。也就意味着每个实例需要1088MB的WAL空间

GP数据库日志文件：

Greenplum 日常简明维护手册

1. 数据库启动：gpstart

常用参数： -a : 直接启动，不提示终端用户输入确认

-m:只启动master 实例，主要在故障处理时使用

访问单个数据实例：

PGOPTIONS='-c gp_session_role=utility' psql template1 -p 5432 启动某个segment instance ： pg_ctl stop/start -D /datadir/

取端口号：

select * from gp_segment_configuration

启动以后会在/tmp/ 下生成一个.lock 隐藏文件，记录主进程号。

2.

数据库停止：gpstop：

常用可选参数：-a：直接停止，不提示终端用户输入确认

-m：只停止master 实例，与gpstart –m 对应使用 -f：停止数据库，中断所有数据库连接，回滚正在运

行的事务

-u：不停止数据库，只加载pg_hba.conf 和postgresql.conf中

运行时参数，当改动参数配置时候使用。

连接数，重

? 介绍

本文介绍Pivotal Greenplum Database数据库（以下简称：Greenplum数据库，或GPDB）的最佳实践。

最佳实践是指能持续产生比其他方法更好结果的方法或者技术，它来自于实战经验，并被证实了遵循这些方法可以获得可靠的预期结果。本最佳实践旨在通过利用所有可能的知识和技术为正确使用GPDB提供有效参考。

本文不是在教您如何使用Greenplum数据库的功能，而是帮助您在设计、实现和使用Greenplum数据库时了解需要遵循哪些最佳实践。关于如何使用和实现具体的Greenplum数据库特性，请参考 http://gpdb.docs.pivotal.io 上的Greenplum数据库帮助文档以及 http://greenplum.org 上的Sandbox和实践指南。

本文目的不是要涵盖整个产品或者产品特性，而是概述GPDB实践中最重要的因素。本文不涉及依赖于GPDB具体特性的边缘用例，后者需要精通数据库特性和您的环境，包括SQL访问、查询执行、并发、负载和其他因素。

通过掌握这些最佳实践知识，会增加GPDB集群在维护、支持、性能和可扩展性等方面的成功率。

第一章 最佳实践概述

本部分概述了Greenplum数据库最

? 介绍

本文介绍Pivotal Greenplum Database数据库（以下简称：Greenplum数据库，或GPDB）的最佳实践。

最佳实践是指能持续产生比其他方法更好结果的方法或者技术，它来自于实战经验，并被证实了遵循这些方法可以获得可靠的预期结果。本最佳实践旨在通过利用所有可能的知识和技术为正确使用GPDB提供有效参考。

本文不是在教您如何使用Greenplum数据库的功能，而是帮助您在设计、实现和使用Greenplum数据库时了解需要遵循哪些最佳实践。关于如何使用和实现具体的Greenplum数据库特性，请参考 http://gpdb.docs.pivotal.io 上的Greenplum数据库帮助文档以及 http://greenplum.org 上的Sandbox和实践指南。

本文目的不是要涵盖整个产品或者产品特性，而是概述GPDB实践中最重要的因素。本文不涉及依赖于GPDB具体特性的边缘用例，后者需要精通数据库特性和您的环境，包括SQL访问、查询执行、并发、负载和其他因素。

通过掌握这些最佳实践知识，会增加GPDB集群在维护、支持、性能和可扩展性等方面的成功率。

第一章 最佳实践概述

本部分概述了Greenplum数据库最

第1章 系统管理

1.1 GP服务启停

su - gpadmin gpstart #正常启动 gpstop #正常关闭 gpstop -M fast #快速关闭 gpstop –r #重启

gpstop –u #重新加载配置文件

1.2 登陆

psql gpdb

psql -d gpdb -h gphostm -p 5432 -U gpadmin

1.3 查看segment配置

select * from gp_segment_configuration;

1.4 文件系统

select * from pg_filespace_entry;

1.5 列出所有数据库

psql –l

1.6 行表库最大尺寸

一个数据库最大尺寸？ 无限制（已存在有 32TB 的数据库） 一个表的最大尺寸？ 32 TB 一行记录的最大尺寸？ 1.6 TB 一个字段的最大尺寸? 1 GB 一个表里最大行数？ 无限制

一个表里最大列数？ 250-1600 （与列类型有关） 一个表里的最大索引数量？ 无限制

当然，实际上没有真正的无限制，还是要受可用磁盘空间、可用内存/交换区的制约。 事实上，当这些数值变得异常地大时，系统性能也会受很大影响。

表的最大尺寸 32 TB 不

GREENPLUM部署文档

Greenplum数据库安装手册

Greenplum数据库安装手册 目录

第一章 1.1 1.2 第二章 2.1 2.2 2.3 第三章

文档概述 .......................................................................................................................... 4 适用范围 .................................................................................................................................. 4 文档说明 .................................................................................................................................. 4 安装前准备 ................................