1、1JS21 AIX Clustering with CSM解决方案测试报告1. 测试概述 31.1. 测试目标 31.2. 测试环境 31.2.1. 拓扑结构 .31.2.2. 详细配置 .32. 测试过程 42.1. 刀片和刀片中心环境配置 42.2. 安装 CSM 集群管理服务器 42.2.1. 检查管理服务器软件版本 42.2.2. 定义管理服务器以及节点名称 42.2.3. 重新 export $PATH 和$MANPATH 变量. 52.2.4. 创建/csminstall 目录 .52.2.5. 下载安装更新 52.2.6. 激活 CSM 的 license 62.2.7. 拷贝
2、CSM 相关文件到 /csminstall .62.2.8. 设定硬件控制模块(hardware control point)的信息 62.2.9. 验证安装的完整性 62.3. 配置安装节点 62.3.1. 配置安装节点服务 62.4. 安装 CSM 计算节点 .72.4.1. 定义 CSM 计算节点 72.4.2. 收集刀片节点的 mac 地址. .72.4.3. 定义 NIM 客户端节点 82.4.4. 安装计算节点 82.4.5. 将计算节点加入到集群中. .82.5. CSM 管理功能验证 .82.5.1. rpower 电源管理功能验证 82.5.2. rconsole 远程 co
3、nsole 管理功能验证 .92.5.3. 节点并行安装与系统配置 92.5.4. 执行并行命令验证 93. 结果验证 94. 结论 925. 测试人签名 .1031. 测试概述本测试为 CSM 在刀片平台上的可行性验证，硬件环境采用了刀片集群比较经典的硬件架构，在实际应用系统部署中，具有一定的参考意义。 1.1. 测试目标本次测试目的是为了验证 CSM 在 JS21 AIX 平台上的安装和功能性表现。本测试具体内容包括：验证管理节点的安装验证 CSM 硬件管理功能验证计算节点的安装验证 CSM 计算节点的管理功能1.2. 测试环境测试环境是根据经典的 JS21 集群架构搭建，由一台 P 系列
4、机架式的服务器和一个刀片中组成。1.2.1.拓扑结构硬件平台由一个管理节点和两个计算节点组成，管理节点为一台 P520. 计算节点为两片 JS20刀片。本次测试没有使用独立的计算网络。而是简单的使用同一网络做计算与管理。网络拓扑图如下： 外 部 网 络外 部 网 络管 理 以 太 网 络计 算 网 络存 储 San网 络图表 1 网络拓扑图41.2.2.详细配置硬件平台 网络配置 操作系统 应用软件IBM JS20 刀片服务器 计算节点 1 csmnode12 核 2.2GHz, 2GB 内存，1 块SAS 73GB 硬盘192.168.21.201 AIX 5.3 TL5 CSM clien
5、t 1.6.0.3IBM JS20 刀片服务器 计算节点 2 csmnode22 核,2.2GHz 2GB 内存，1 块 SAS 73GB 硬盘192.168.21.202 AIX 5.3 TL5 CSM client 1.6.03IBM P520 机架式服务器 管理节点 csmmaster2C 1.9GHz Power5 4GB 内存 2块 SCSI 73GB 硬盘192.168.21.200 AIX5.3 TL5 CSM server for AIX 1.6.0.3图表 2 软硬件详细配置表2. 测试过程测试过程主要是在安装环节，验证各个安装过程是否正常，版本之间是否匹配。2.1. 刀片和
6、刀片中心环境配置硬件都采用默认的出厂设置2.2. 安装 CSM 集群管理服务器CSM 集群管理服务器是安装集群的核心内容，配置好管理服务器后，其他计算节点都可以快速通过它来网络安装。2.2.1.检查管理服务器软件版本安装 CSM1.6 管理服务器.操作系统的版本要求 : AIX 5L 5.2 (5200-09) 或更新 , 5.3 (5300-05) 或更新.计算节点的软件版本要求:AIX 5L 5.2 或 5.3 版本以上命令: oslevel rRSCT 2.3.10.0 以上, 2.4.0 以下 for AIX 5L 5.2 RSCT 2.4.6.0 以上 for AIX 5L 5.3.
7、 (5305 并不包含,需要额外下载)5命令: slpp l rsct*操作系统环境的配置步骤2.2.2.定义管理服务器以及节点名称将主机名称与对应的 IP 注册到域名服务器 (DNS),或/etc/hosts需要定义服务器包括.:CSM 管理服务器CSM 计算节点有网络连接的非计算设备.( 如 HMC,交换机,电源管理设备 )2.2.3.重新 export $PATH 和$MANPATH 变量.把/opt/csm/bin 目录加入到$PATH 中去. 把/opt/csm/man 目录加到$MANPATH 中.可以将下列两行加到 /etc/profile 或 $HOME/.profile 文件
8、最后.2.2.4.创建/csminstall 目录 因为安装/csminstall 目录,下载其他开源软件openCIMOM 0.8 如集群中包含有与 HMC 连接的 P 系列计算节点需要管理, 则必须安装此软件包. 在升级 CSM 的时候如报错,可能也需要安装此包 .http:/ CSM 软件通过 smit 安装. 需要安装以下文件包.csm.core| csm.dsh| csm.diagnostics| csm.deploy| csm.server| csm.hc_utils csm.gui.dcem csm.gui.websm csm.msgexport PATH=$PATH:/opt/
9、csm/binexport MANPATH=$MANPATH:/opt/csm/man62.2.5.下载安装更新最新版本的 CSM 下载地址: http:/ /tmp 目录2.2.6. 激活 CSM 的 license如果是 60 天试用版 ,则运行csmconfig L如果是授权客户, 在安装光盘中有附带 license key. 执行如下命令:mount -v cdrfs -o ro /dev/cd0 /mntcsmconfig -L /mnt/csmlum.full2.2.7.拷贝 CSM 相关文件到/csminstall执行 csmconfig c2.2.8.设定硬件控制模块(hard
10、ware control point)的信息比如添加刀片中心的第一个管理模块 mm1 的账户信息.#systemid c mm1 USERID然后输入密码. 默认为 PASSW0RD2.2.9.验证安装的完整性验证管理节点的安装，执行 probemgr -p ibm.csm.ms -l 0验证硬件控制模块配置， 执行 probemgr -p ibm.csm.hwctrl l 0gunzip csm-aix-1.6.0.30.tar.gztar -xvf csm-aix-1.6.0.30.targeninstall -IaX -d /tmp/csm all72.3. 配置安装节点2.3.1.配置
11、安装节点服务确认管理节点安装有NIM 软件包2.4. 安装CSM 计算节点2.4.1.定义 CSM 计算节点将下面一段输入到一个文本 nodelist 中HWControlNodeId 可以是槽位位置，也可以是刀片在 MM 中的名称. 按照以上格式依次添加其他节default:ManagementServer=csmmaster 管理节点的 hostnameInstallOSName=AIXPowerMethod=bladeHWControlPoint=mm # mm 为刀片中心的管理模块的 hostnameConsoleMethod=bladeConsoleServerName=mmInst
12、allAdapterType=enInstallAdapterName=en0InstallAdapterSpeed=1000InstallAdapterDuplex=fullcsmnode1: HWControlNodeId=11 刀片在刀片中心的槽位ConsolePortNum=11 刀片在刀片中心的槽位csmnode2:HWControlNodeId=csmnode2 刀片在刀片中心中的名字ConsolePortNum=13#lslpp l | grep nimbos.sysmgt.nim.client 5.3.0.50 COMMITTED Network Install Manager
13、 -bos.sysmgt.nim.master 5.3.0.50 COMMITTED Network Install Manager -bos.sysmgt.nim.spot 5.3.0.50 COMMITTED Network Install Manager - SPOTX11.Dt.helpmin 5.3.0.0 COMMITTED AIX CDE Minimum Help Filesbos.sysmgt.nim.client 5.3.0.50 COMMITTED Network Install Manager -运行 nim_master_setup B (需要在光驱放入 aix 第一张
14、安装光盘)8点. 之后执行definenode f nodelist2.4.2.收集刀片节点的 mac 地址.如果之前 rpower 运行成功的话, 可以简单的通过运行 getadaptors a w 收集刀片的 mac 地址并写入到每个节点的属性中. 运行 lsnode l 查看结果.2.4.3.定义 NIM 客户端节点CSM AIX 计算节点的安装是采用 NIM 来完成. 定义好 csm 计算节点后, 需要定义相对应的 NIM 节点. 执行下面程序:# csm2nimnodes a执行 lsnim 检查节点的定义.生成 CSM 计算节点的安装脚本 .定义安装资源运行 csmnimsetup
15、 a 依次定义每个节点的资源. nim -o bos_inst -a source=rte -a boot_client=no -a spot=530spot_res -a lpp_source=530lpp_res -a accept_licenses=yes -a bosinst_data=5300-05bid_ow csmnode1各种 resource 名称可能有不同 , 具体用命令 lsnim 查看. 2.4.4.安装计算节点依次执行 netboot 命令#netboot csmnode1# getadapters -a -wCan not use dsh - No nodes in
16、 Managed or MinManaged mode.Node:adapter_type:interface_name:MAC_address:location:media_speed:adapter_duplex:UNUSED:install_gateway:ping_status:machine_type:netaddr:subnet_maskcsmnode1:ent:en0:000D601E8B1A:NA:install:csmnode1:ent:en1:000D601E8B1B:NA:csmnode2:ent:en0:000D601EEC52:NA:install:csmnode2:
17、ent:en1:000D601EEC53:NA:92.4.5.将计算节点加入到集群中.装好的计算节点及之前已有的计算节点,需要通过 updatenode 命令加入到集群中.updatenode n csmnode1查看各节点当前的状态如下所示则表示，集群已经成功安装好了2.5. CSM 管理功能验证2.5.1.rpower 电源管理功能验证执行 rpower a query 查询当前所有计算节点状态. 执行 rpower a on 打开所有计算节点电源执行 rpower a reboot 重启所有计算节点执行 rpower a off 关闭所有计算节点2.5.2.rconsole 远程 con
18、sole 管理功能验证执行 rconsole t n csmnode1 验证在字符终端打开 csmnode1 的远程 console.执行 rconsole a 验证在图形终端打开所有计算节点的 console.2.5.3.节点并行安装与系统配置执行 netboot 验证正确能安装节点执行 updatenode n csmnode1 验证更新节点配置，并将节点加入到集群中执行 useradd test 添加用户 test。配置需要同步的配置文件：执行 ln s /etc/passwd /cfmroot/etc/passwd._AIXNodeln s /etc/hosts /cfmroot/et
19、c/hosts执行 cfmupdatenode n csmnode1 同步账户信息。执行 dsh n csmnode1 cat /etc/passwd 验证计算节点的账户同步成功2.5.4.执行并行命令验证执行 dsh -a date 验证在各节点执行 date 命令，并通过返回结果验证并行运行命令的功能。# lsnode -a Modecsmnode1: Managedcsmnode2: Managed103. 结果验证CSM 管理功能验证结果：测试步骤 结果rpower 电源管理功能验证 能正确返回和确控制节点电源状态rconsole 远程 console 管理功能验证 能正确显示各节点的
20、 console节点并行安装与系统配置 能实现远程无人值守安装以及同步各节点配置功能执行并行命令验证 能正确运行并行命令和返回图表 3 结果验证4. 结论通过以上的测试安装与功能测试，验证了 CSM 的以下一些功能能在 JS21 集群平台上正确运行:1) 实现系统的并行安装和配置；2) 管理和同步节点的配置文件；3) 提供系统远程运行命令操作，允许以命令或脚本方式运行在集群中的所有节点上；4) 支持用户帐户统一管理；5) 提供远程硬件控制，如：节点的远程开机、关机和重新启动；6) 动态监视系统资源使用情况；5. 测试人签名 测试时间：2007 年 4 月 10 日 测试地点：深圳 IBM 科技产品公司（ ITPC）客户支持部（ CSE）实验室 测试人：ITPC： 王荣 签名：
