IBM-存储-DS8000使用及维护手册-V1.0

DS8000使用及维护手册

——VER 1.0

目录

第1章

IBM DS8000概述 ................................................................... 4

第2章 环境说明 ............................................................................ 6 2.1 2.2 2.3 2.4 2.5 2.6 2.7 2.8 2.9

DS8000体积和重量参数 ................................................................. 6 DS8000机房环境要求 ................................................................... 7 DS8000机房电气要求 ................................................................... 7 DS8000 机房通讯要求 .................................................................. 8 DS8000 机房工作环境要求 .............................................................. 9 DS8000 机房安全性要求 ................................................................ 9 DS8000 装机前要求 .................................................................... 9 DS8000 现场环境CHECK LIST ............................................................. 9 DS8000 到货情况CHECK LIST ............................................................ 10

2.10 DS8000电源示意图和具体度量、连接方法 ................................................ 10 第3章 硬件说明 ........................................................................... 13 3.1 3.2

IBM SYSTEM STORAGE DS8300 .............................................................. 14 DS8000 STORAGE ENCLOSURE CONNECTIVITY ..................................................... 15

第4章 规划DS8000存储器的安装 ............................................................ 16 4.1 4.2 4.3 4.4 4.5

公司信息 ............................................................................ 16 管理控制台网络设置 .................................................................. 17 远程支持设置 ........................................................................ 19 安装需求 ............................................................................ 23 磁盘大小规划与主机名规划 ............................................................ 24

第5章 5.1 5.2 5.3 第6章 第7章 7.1 7.2 第8章 8.1 8.2 8.3 8.4

DS8000 逻辑配置 .................................................................. 25 安装DSCLI........................................................................... 25 激活DS8000 LICENSE ................................................................... 26 DS8000逻辑配置 ...................................................................... 27 DS8000日常维护 .................................................................. 44 DS8300 存储规划 .................................................................. 46 IO卡规划............................................................................ 46 存储规划 ............................................................................ 47 SAN规划举例 ..................................................................... 51 SAN与ZONE简介 ...................................................................... 51 关于光纤布线 ........................................................................ 53 ZONE的划分 .......................................................................... 53 SAN布线规划 ......................................................................... 54

第1章 IBM DS8000概述

IBM DS8000是设计为支持连续操作的高性能、高容量的磁盘存储器系列。DS8000系列的各型号（机器类型 2107）使用 IBM POWER5服务器技术，该技术与IBM Virtualization Engine技术集成。DS8000系列的各型号由一个存储单元和一个或两个管理控制台组成。图形用户界面（GUI）或命令行界面（CLI）允许您对存储器进行逻辑分区并使用内置复制服务功能。为获取高可用性，硬件组件是冗余的。

DS8300（921 型）

IBM DS8300（921型）提供了许多功能。这些功能包括：

? 双重两路处理器复合体

? 最多 128个磁盘驱动器，最高容量达 384 TB ? 处理器内存（高速缓存）最高达 128 GB

? 最多有16个光纤通道／FICON或ESCON主机适配器

DS8300型号可以支持一个扩展机架。使用一个扩展机柜，可以将921型的容量扩展多达 384个磁盘驱动器，最高容量达 115.2TB

注：当订购一个转换为922型或9A2型的型号转换件时，IBM服务代表可以现场升级921型。

下图显示了921型的最高配置，该配置是921基本型号加上一个92E扩展型号。

第2章 环境说明

2.1 DS8000体积和重量参数

DS8000 外形尺寸： 高： 193 cm

宽： 84.7 cm 厚： 118.3cm

DS8000 重量:

DS8000 基本柜： 不含包装 1189千克 (2107-921) 1248千克 (2107-922) 1248千克 (2107-9A2) DS8000 第一扩展柜： 1089千克 (2107-92E & 2107-9AE) DS8000 第二扩展柜：

含包装 1309千克 (2107-921) 1368千克 (2107-922) 1368千克 (2107-9A2) 1209千克 (2107-92E & 2107-9AE) 867千克

2.2 DS8000机房环境要求

? 机房内部机器布置应具有足够的操作空间并有可扩充性(见图)：

? 机房楼板承重应大于610KG/m^2。

? 机房高度要求地板至天棚距离大于2.7M，地面至地板距离为35CM。

? 因DS8000 外形尺寸比较大，建议机房具有货运通道，并确保安全通过；货运通道的倾斜

角度不得大于１０度：

2.3 DS8000机房电气要求

? 要求使用机房专用地， 对地电阻小于4 欧姆。

? 要求防静电地板电阻在150K欧姆至20000M欧姆。 ? 要求UPS供电，具体指标如下：

A) 两路三相供电。每路要求如下： ? 3PHASE：

FC9091: 330V-508V，25A ? 频率：50 ± 3 or 60 ± 3.0 Hz

? 三相电相序要求正确，并为DS8000 的两路电源使用独立的两个空气开关便于电

源线的连接及以后的管理，空开请选用30～35A。 ? 零地之间的电压小于1V。 ? 零线，地线连接正确。 B） 单相供电

? 200V-240V，频率：50 ± 3 or 60 ± 3.0 Hz

? 尽管DS8000内部使用的控制台以及网络交换机均不需要额外外部供电，但我们建

议还是准备２个单相供电电源，以备工程师使用外部终端（如笔记本电脑等）进行维护工作

? 各电源柜，电源线，开关标签明确。 ? 功率、散热附表：

2.4 DS8000 机房通讯要求

机房至少要为DS8000配备专用的电话线和可以访问internet的网络线各一条，用于

DS8000远程诊断，以便于远程维护。

2.5 DS8000 机房工作环境要求

机房空调应使室温保持在22度左右，正负不超过2度。 相对湿度保持在45%(+5%-- -5%)。

2.6 DS8000 机房安全性要求

要求有防火、防水设备，备有紧急电闸、紧急出口，以及报警、监查设备和电话线路。

2.7 DS8000 装机前要求

? 如果机房地板承重不满足DS8000要求，需提前准备好支撑机架，底面积不小于3平

方米且上表面有钢板。

? 凡有台阶的地方，要准备足够承重的斜坡，斜坡斜度不得大于１０度。 ? 地面及地下需要清洁。 ? UPS电气性能稳定。

? 各机电源以及机房电工到位。 ? 空调已正常运转两至三天。 ? 消防设备到位。 ? 地板通气孔到位

? DS8000 布线所需的一块打孔地板到位(孔的位置在地板边沿，面积约400CM^2)。

2.8 DS8000 现场环境Check List

现场环境 机房是否有足够的空间 机房高度是否满足要求 机房地板承重是否足够 UPS 是否安装到位并正常运行 三相交流电源是否准备好 单相交流电源是否准备好 机房地线是否准备好 电源零线，地线电压是否小于1V

YES NO

打孔地板是否到位 空调是否到位并运行正常 机架是否准备好 运输通道能否安全通过 是否有台阶并准备好足够承重的斜坡 DDD电话线以及网线是否准备好（远程支援用）

2.9 DS8000 到货情况Check List

到货情况 DS8000 主机是否到货？ DS8000 其他附件是否到货（电缆等）？ 系统软件及升级软件是否到货？

YES NO 2.10DS8000电源示意图和具体度量、连接方法

下图中(1)(2)为机器三相电的接头，(1)(2)最好各自独立供电。

(1)

(2)

四条导线各有不同的颜色： ? L1 (phase 1) = 黑色 ? L2 (phase 2) = 蓝色 ? L3 (phase 3) = 褐色

4.3.2 拨入（远程服务）Inbound (remote services)工作表

您能通过拨入（远程服务）工作表来指定是否允许无人照管拨入远程服务以及允许无人照管会话时要使用哪些设置。

您能通过该工作表来指定是否允许授权IBM服务代表进行无人照管的拨入远程服务，以及允许无人照管会话的话要使用哪些设置。

注：如果在初始配置中选择不允许无人照管服务会话，但之后希望存储单元得到远程维护，就必须联系IBM服务代表，约定具体的时间。您可以将MC配置为暂时允许无人照管远程服务（指定起始和终止日期），也可以指定现场人员手工启用服务代表的人站呼叫并且在服务会话过程中留在MC旁。 工作表用途

IBM服务代表将使用拨入远程服务工作表上的信息，将存储系统定制为允许或禁止授权IBM服务代表拨人您的MC然后启动无人照管会话来进行深人分析并解决可服务事件。

必须对所有包含MC的安装完成该工作表。 工作表和指示信息

注：MC1和MC2列中的粗体选项表示缺省设置。 项或设置 允许无人照管远程会话吗？ 无人照管远程会话设置（Unattended remote session settings） 如果在上面选择了是（允许无人照管远程会话），请完成以下部分 远程服务方式 请选择一种方式来表示何时允许无人照管会话，选择始终启用表示支持任何时候的拨入远程服务，选择自动表示支持在存储器复合体发生故障后指定天数内的拨入呼叫 自动方式的天数 如果选择了自动方式 请指定在存储器复合体发生任何故障后的多少天内允许无人照管服务会话 提示信息 MC1 MC2（如果有）

4.4 安装需求

除完成以上表格，另需要符合以下条件： ? 机器定位完毕； ? 380V电源就绪；

? SAN交换机上电完毕，光纤布线完毕或使用临时光纤进行测试； ? Remote Support所用的电话线、以太网就绪；

4.5

磁盘大小规划与主机名规划

IBM工程师将根据表为您的规划磁盘，并分配到相应的主机。

您能通过该主机名来指定与规划出的磁盘的对应关系，IBM工程师将按照该表将规划出的磁盘分配到相应主机。

磁盘与主机对应表

您能通过下面的工作表来指定主机与规划出的磁盘的对应关系

主机名 磁盘大小 所属VG 繁忙程度 主机FC卡归属

分行IT基础设施资源整合－技术组件项目文档

第5章 DS8000 逻辑配置

5.1 安装DSCLI

为提高配置的速度，建议大家划分DS8000采用DSCLI（DS Command Line Interface），在笔记本上安装DSCLI后（执行命令setupwin32.exe），修改其C:\\Program Files\\IBM\\dscli\\profile\\ dscli.profile，如下：

# Management Console/Node IP Address(es)

# hmc1 and hmc2 are equivalent to -hmc1 and -hmc2 command # options. hmc1: 172.16.0.1 #hmc2: 127.0.0.1 #

# Default target Storage Image ID

# \

# \# command options, respectively. devid: # locale

# Default locale is based on user environment. locale:

en

IBM.2107-7523201

其中hmc1为DS8000的HMC地址，此处为HMC缺省IP172.16.0.1; devid为DS8000的storage facility image ID，为IBM.2107-7523201。

请取消关于语言的default定义，缺省是用户自己的语言环境（前面有＃注释），请最好改成英文，这样我们copy给support时比较好。

Notes：

1、关于DSCLI版本，请大家使用你所配置的DS8K微码对应的DSCLI版本，DSCLI版本之间互不兼容，即便你发现高版本可以管理低版本的DS8K，IBM Lab不保证版本之间的兼容性。

2、关于devid，任何一台DS8K的序列号均以0结尾，对于2107-9A2，devid的为75-xxxx1和75-xxxx2，对于2107-921/922，devid永远为75-xxxx1；在profile中输入devid后，在以后的命令行以及脚步本便可以不再写devid了。

3、请把笔记本连接到DS8K内部的交换机中的上面的一台，即黑色网线相连的交换机。 打开IE浏览器，打开如下网址：

https://172.16.0.1:8452/DS8000/Console

缺省用户已经密码为admin/admin，登陆后，系统将提示密码超期，请更改密码，建议使用密码passw0rd。

安装DSCLI后，将在桌面上创建DSCLI的图标，双击该图标后，再次键入dscli可以进

中国建设银行信息技术管理部SFB项目组

分行IT基础设施资源整合－技术组件项目文档

入dscli交互式命令行。

Notes：请注意不要在24小时内3次输入错误的用户密码，3次的错误输入将导致该用户的帐户被锁。

I advise you run below command to disable 3 times lock pwd function: chpass -expire 0 -fail 0

5.2 激活DS8000 License

在配置DS8K之前，需要激活DS8K的license，如下方法： 1. 获取 Signature (该步骤现在可以忽略)

dscli> showsi -fullid IBM.2107-75BCYY1

Date/Time: 2006年2月6日 上午10时26分56秒 IBM DSCLI Version: 5.1.0.297 DS: IBM.21 07-75xxxx1 Name - desc -

ID IBM.2107-75xxxx1 Storage Unit IBM.2107-75xxxx0 Model 9xx

WWNN 5005076304FFC1C0 Signature fb78-de56-4e89-e46b State Online ESSNet Enabled

Volume Group IBM.2107-75xxxx1/V0 os400Serial - dscli>

2. 通过DS8000序列号和刚才取得的signature去以下网站拿capacity的license key，文

件例如：2107_75BBY00.xml

https://w3-03.ibm.com/systemstechnology/storage/dsfa/accessDSFA.wss

https://www-306.ibm.com/storage/dsfa/index.jsp

3. 在DS8000中增加在上面一步中取得的license

dscli> applykey –file c:\\xxxxkeys.xml IBM.2107-75xxxx1

也可以使用GUI界面输入该key：

打开如下网页：https://172.16.0.1:8452/DS8000/Console

In the navigation panel, select, in order, Real-time Manager, Manage Hardware, and Storage images. In Storage images — Main Page, select a Storage image. Then select Apply activation codes in the Select Action drop-down list. Then click Go. The Apply activation codes page is displayed

4. 查看license状态，查看刚才输入的license是否生效（下面为示例，红色行注意应为

100ALL就对了）

dscli> lskey IBM.2107-75xxxx1

分行IT基础设施资源整合－技术组件项目文档

volume groups

– Place shared volumes and multiple hosts in single volume group

如果要求部分的LUN共享，部分的LUN不共享，我们可以使用第一种方法：

创建两个volgrp，把需要共享的LUN分别加入到这两个volgrp中，不需要共享的LUN只加入到自己对应的volgrp中即可。（LUN可以被多个volgrp共享）

第二种方法比较简单，对于一般要求全部共享LUN的情况，使用第二种方法即可。

按照下列方法创建volume group：

命令格式如下：

mkvolgrp [ -type scsimask|scsimap256|os400mask ] [-dev storage_image_ID] Volume_Group_Name

关于-type，一般我们使用scsimask，可以包含64K个LUN；

关于Volume_Group_Name，该名字是别名，只是方便识别的标识，在其他命令行中不能引用，只能引用volume group的ID。

请在下面的描述中找到你的系统应该使用的volgrp类型：

dscli> lshosttype -type scsimask

Date/Time: 27 October 2005 23:13:50 IBM DSCLI Version: 5.1.0.204 HostType Profile AddrDiscovery LBS

================================================== Hp HP - HP/UX reportLUN 512

SVC San Volume Controller reportLUN 512 SanFsAIX IBM pSeries - AIX/SanFS reportLUN 512 pSeries IBM pSeries - AIX reportLUN 512 zLinux IBM zSeries - zLinux reportLUN 512

dscli> lshosttype -type scsimap256

Date/Time: 27 October 2005 23:13:58 IBM DSCLI Version: 5.1.0.204 HostType Profile AddrDiscovery LBS

===================================================== AMDLinuxRHEL AMD - Linux RHEL LUNPolling 512 AMDLinuxSuse AMD - Linux Suse LUNPolling 512 AppleOSX Apple - OSX LUNPolling 512 Fujitsu Fujitsu - Solaris LUNPolling 512 HpTru64 HP - Tru64 LUNPolling 512 HpVms HP - Open VMS LUNPolling 512

LinuxDT Intel - Linux Desktop LUNPolling 512 LinuxRF Intel - Linux Red Flag LUNPolling 512 LinuxRHEL Intel - Linux RHEL LUNPolling 512 LinuxSuse Intel - Linux Suse LUNPolling 512

分行IT基础设施资源整合－技术组件项目文档

Novell Novell LUNPolling 512 SGI SGI - IRIX LUNPolling 512

SanFsLinux - Linux/SanFS LUNPolling 512 Sun SUN - Solaris LUNPolling 512 VMWare VMWare LUNPolling 512

Win2000 Intel - Windows 2000 LUNPolling 512 Win2003 Intel - Windows 2003 LUNPolling 512 iLinux IBM iSeries - iLinux LUNPolling 512 pLinux IBM pSeries - pLinux LUNPolling 512

=====================================================

例如：mkvolgrp -type scsimask data_dbsvg1 命令执行成功后，结果如下：

dscli> lsvolgrp

Date/Time: June 13, 2005 5:34:56 PM CST IBM DSCLI Version: 5.0.3.134 DS: IBM.2107-75xxx1 Name ID Type

======================================= data_dbsvg1 V0 SCSI Mask All CKD V10 FICON/ESCON All All Fixed Block-512 V20 SCSI All All Fixed Block-520 V30 OS400 All

上面除data_dbsvg1以外的volgrp为系统自定义的。

5.3.8 将LUN加入到需要的volume group中

命令格式如下：

chvolgrp [-dev storage_image_ID] [-name new_Volume_Group_name] [-ac tion add|remove|replace] [-volume volume] Volume_Group_ID 如：

chvolgrp -action add -volume 1400,1402,1409 v0

在ESS中，我们是不能单独删除LUN的，但是在DS8000中，我们可以方便的将LUN删除，而不需要格式化RANK，使用上面的参数-remove即可。

5.3.9 创建host connection

命令格式如下：

mkhostconnect [-dev storage_image_ID] -wwname wwpn [-profile \[-hosttype hostType] [-volgrp volume_group_ID] [-ioport port_ID[,...]|all|none] Host_name

关于-profile \和-hosttype hostType，这两个参数只使用其中一个即可，你可以使用lsportprof列出DS8K支持的profile类型；或者使用lshosttype列出DS8K

分行IT基础设施资源整合－技术组件项目文档

支持的host type。

需要说明的是，一个host connection只能给一个volgrp使用。 关于-ioport port_ID，下图是DS8K的IO port ID：

I0000I0001I0002I0003Slot 0I0010I0011I0012I0013Slot 1Device AdapterI0030I0031I0032I0033I0040I0041I0042I0043Device AdapterI0100I0101I0102I0103Slot 0I0110I0111I0112I0113Slot 1Device AdapterI0130I0131I0132I0133I0140I0141I0142I0143Device AdapterSlot 2Slot 3Slot 4Slot 5Slot 2Slot 3Slot 4Slot 5Enclosure 0I0200I0201I0202I0203Slot 0I0210I0211I0212I0213Slot 1I0230I0231I0232I0233Slot 2Slot 3I0240I0241I0242I0243Slot 4Slot 5I0300I0301I0302I0303Slot 0I0310I0311I0312I0313Slot 1Enclosure 1I0330I0331I0332I0333Slot 2Slot 3I0340I0341I0342I0343Slot 4Slot 5Device AdapterDevice AdapterDevice AdapterDevice AdapterEnclosure 2Enclosure 3 Note : A port ID is letter I + EEAP

EE is an I/O port enclosure number (00~17) A is the adapter number (0,1,3,4) P is the port number (0 ~ 3)

不同配置的DS8K所配置的HBA卡数目不同，请参照你所配置机器的实际数目定义你所需要的IO port。可使用命令lsioport查看机器上的port ID。

因为我们通过mkhostconnect完成LUN masking，因此我们必须了解我们需要通过什么哪些IO port才是合理的，满足冗余、流量的要求。

分行IT基础设施资源整合－技术组件项目文档

pSeries1pSeries2ZoneSAN1SAN2XI1XI3XI2XI4DS8K IO Enclosure

有的pSeries主机配置的FC卡较多，比如16块，而同时，DS8K也有至少16个IO port，如何才能更好的使用这些卡，保持每个vpath对应的hdisk为4个，将非常重要。

我们可以将这些卡分为几组，形成我们比较经典的形式即可；比如上图，我们将每块主机的FC卡与DS8K的一个端口绑定在一个zone中，则该FC卡只可以看到该zone中的DS8K IO port；对于在DS8K内部的要assign给这台pSeries主机的LUN，我们可以将他们添加到一个volume group中，将这条链路加到该 volume group中即可，则对于上图的volume group，可以有4条链路，共8GB的带宽。

对于DS8K上的HBA卡，其上面两个在一个芯片上，下面的两个端口在另外一个芯片上；因此，我们在使用时候，应该尽量将IO分布在两个独立的芯片上，以达到最大的负载均衡，即优先使用IO port0、2，之后再使用1、3如下图：

如果客户的主机较多，SAN的端口也充足，对IO带宽的要求很高，我们可以使用尽可能多的DS8K的IO port以满足要求。

在使用IO port之前，我们要对其进行配置，一般情况下，我们都是连接到SAN switch上，要将其port属性改成scsi-fcp的，可选的连接形式为：fc-al 、scsi-fcp 和ficon。更改IO port的命令为setioport，命令格式如下：

分行IT基础设施资源整合－技术组件项目文档

setioport [-dev storage_image_ID] [-topology fc-al|scsi-fcp|ficon] Port_ID 如：

dscli> setioport -topology scsi-fcp I0030 I0031 I0032 I0033 该命令执行前：

dscli> lsioport

Date/Time: 2006年2月10日 上午01时10分56秒 IBM DSCLI Version: 5.1.0.297 DS: IBM. 107-75BCYY1

ID WWPN State Type topo portgrp ============================================================ I0030 50050763040301C0 Offline Fibre Channel-SW - 0 I0031 50050763040341C0 Offline Fibre Channel-SW - 0 I0032 50050763040381C0 Offline Fibre Channel-SW - 0 I0033 500507630403C1C0 Offline Fibre Channel-SW - 0

执行后：

dscli> lsioport

Date/Time: 2006年1月26日 下午03时27分59秒 IBM DSCLI Version: 5.1.0.297 DS: IBM.2 107-7500191

ID WWPN State Type topo portgrp =============================================================== I0030 50050763030305C6 Online Fibre Channel-SW SCSI-FCP 0 I0031 50050763030345C6 Online Fibre Channel-SW SCSI-FCP 0 I0032 50050763030385C6 Online Fibre Channel-SW SCSI-FCP 0 I0033 500507630303C5C6 Online Fibre Channel-SW SCSI-FCP 0

关于Host_name，是给这个链路起的名字，以方便识别。

建立host connection的命令如：

mkhostconnect -wwname 10000000C9428122 -profile \-ioport i0010 p595-2-fcs0

mkhostconnect -wwname 10000000C94027C6 -profile \-ioport i0200,i0300,i0032,i0102 p595-1-fcs8

命令的输出结果如：

dscli> lshostconnect

Date/Time: June 13, 2005 5:35:37 PM CST IBM DSCLI Version: 5.0.3.134 DS: IBM.2107-7523201 Name ID WWPN HostType Profile portgrp volgrpID ESSIOport

===============================================================================p595-2-fcs0 0000 10000000C9428122 - IBM pSeries - AIX 0 V0 I0010

p595-1-fcs8 0001 10000000C94027C6 - IBM pSeries - AIX 0 V0 I0032, I0200,I0300,I0102

本文来源：https://www.bwwdw.com/article/7b23.html