ONTAP集群初始化：CLI建集群、NTP同步与SVM模板实战

简介这份PDF面向联想凌拓ThinkSystem DM系列存储的运维与实施人员聚焦命令行界面CLI初始化配置场景解决GUI向导无法覆盖的集群搭建问题如MetroCluster配置或仅限IPv6的环境。资源包仅含1个PDF文件约411KB篇幅精炼便于随查随用。内容按五章展开先说明何时应放弃GUI向导改用CLI再给出集群设置工作流程随后详解逐节点设置、首节点建集群、剩余节点加入及系统时间同步并附集群设置工作表记录IP、掩码、许可证等关键值第四章讲用预配置ONTAP模板配置SVM第五章覆盖EMS邮件与syslog通知、SNMP陷阱主机等系统配置任务附录含支持机构与声明信息。已有670人学习适合需要按步骤完成DM存储初始化、对照工作表核对参数并建立事件通知机制的读者参考。1. 为什么有人宁可敲 CLI 也不点 GUI 向导上个月帮一个朋友收拾一套二手搬来的 DM 存储两个节点、一台集群交换机硬件上架完通电控制台停在Welcome to the cluster setup wizard....那一屏。他之前一直用 GUI 向导这次卡住了——配置里带了纯 IPv6 的管理地址向导走到一半不认退回去重来三次最后是我抱着键盘把 CLI 流程走完的。这件事挺典型ThinkSystem DM 系列存储的 ONTAP 集群初始化GUI 向导覆盖了八成常规场景剩下两成——MetroCluster、仅 IPv6、部分定制网络——只能落到命令行。这份《软件设置指南》第三版2019 年 8 月讲的就是那两成从第一个节点建集群、加节点、同步 NTP到用预配置模板拉 SVM、配 EMS 事件通知一条条命令都给了示例输出。它适合两类人一是手上真有 DM 存储、GUI 走不通必须下 CLI 的运维二是想搞明白 ONTAP 集群初始化底层到底做了哪些动作的工程师。不适合纯看概念的人这文档全是操作步骤和参数表没有原理铺陈。下面按我实际复现的顺序拆命令、参数、翻车点都摆出来。2. 建集群前的账要先算清工作表与网络参数CLI 建集群最容易翻车的不是命令敲错是参数没提前定。文档第 3 章开头那张集群设置工作表不是摆设我见过有人建到一半发现集群管理 IP 和节点管理 IP 撞了网段只能cluster setup重来。这一章把工作表里真正会卡人的几项拆开讲顺带说清哪些能用缺省、哪些必须自己填。2.1 集群网络与节点网络的地址规划集群互连网络和节点管理网络是两套东西别混。集群网络走集群交换机文档明确要求每个集群交换机 MTU 必须是 9000 字节集群端口 MTU 也得对齐到 9000缺省集群网络掩码255.255.0.0集群接口 IP 缺省落在169.254.x.x段且每个节点的集群端口必须在同一子网。这套缺省值在带交换机的小集群里直接用就行我一般不改除非现场已经有既定的链路本地地址规划。节点管理网络是另一回事它接数据网络给管理员管节点用。节点管理接口 IP 必须是管理网内唯一地址如果这个端口被定义成数据端口那 IP 就得是数据网内的唯一地址掩码也跟着用数据网的。这里有个细节集群管理接口和节点管理接口可以是同一个物理端口但 IP 不能是同一个文档示例里两者都写192.0.2.66只是占位实际部署必须分开。参数缺省/示例能不能用缺省说明集群端口 MTU9000 字节建议用必须与集群交换机一致集群网络掩码255.255.0.0可用仅带交换机集群适用集群接口 IP169.254.x.x可用每节点每端口同子网集群名称无必须填字母开头少于 44 字符可含.-_集群管理员密码无必须填至少 8 字符含字母和数字集群管理接口 IP192.0.2.66示例必须填唯一 IPv4/IPv6通常在数据网节点管理接口 IP192.0.2.66示例必须填管理网唯一地址集群名称那条限制值得单独说必须以字母开头、少于 44 个字符、允许. - _。我见过用纯数字开头的名字被拒也见过超长名字在后续 SVM 命名时连带出问题。密码规则是至少 8 位、至少一个字母一个数字这条在 CLI 向导里会当场校验不符合就让你重输。2.2 许可证、DNS 与 NTP 的前置依赖许可证这块文档说得很清楚完成集群设置不需要集群基本许可证密钥但要装任何功能许可证之前必须先装基本许可证。功能许可证密钥在软件订单里按需装。我的习惯是建完集群先把基本许可证装上再按实际协议装 NFS/CIFS/iSCSI/FCP 对应的功能许可证别等到配 SVM 时才发现协议起不来。DNS 和 NTP 是两条隐式依赖很多人栽在这。配 EMS 邮件通知要求集群上已配 DNS 能解析邮件地址配 syslog 转发要求 DNS 能解析 syslog 服务器名配 SNMP 陷阱主机同样要求 DNS 能解析陷阱主机名。NTP 服务器如果没配 DNS就得直接写 IP。所以工作表里 DNS 域名、名称服务器 IP、NTP 服务器地址这三项建集群前就该跟网络那边要齐。提示单节点集群还要额外准备配置备份目标地址HTTP 或 FTP、用户名和密码且远程 Web 服务器必须启用 PUT 操作否则备份上传会失败。这条容易被忽略单节点部署时先确认。3. 第一个节点建集群CLI 向导逐步走这一章是整份文档的核心操作段。硬件上架、线缆连好、控制台接到第一个节点之后剩下的就是跟着向导敲。我把文档里的步骤和示例输出按实际执行顺序重排了一遍补上每步该看什么、错了怎么退。3.1 从控制台进入向导并创建集群先给所有节点上电控制台连第一个节点节点引导完会自动起集群设置向导。看到Welcome to the cluster setup wizard....就说明进对了。接着向导让你给节点分配 IP然后给两个选择用浏览器访问https://节点IP走 GUI 完成或者直接回车走 CLI。我们走 CLI回车。# 控制台出现选择提示后回车进入 CLI 向导 Do you want to create a new cluster or join an existing cluster? {create, join}: # 第一个节点选 create createcreate之后向导会逐项问集群名称、管理员密码、集群管理接口 IP、掩码、网关、DNS 域名、名称服务器等能接受缺省的直接回车要改的输入值。这里没有花哨参数关键是每一项都对着第 2 章的工作表填别现场拍脑袋。密码那步会校验规则输错就重来不丢人。建完之后必须验证文档给的命令是cluster showcluster1:: cluster show Node Health Eligibility -------------------- ------- ----------- cluster1-01 true trueHealth为 true 表示节点健康Eligibility为 true 表示有资格参与集群。两个都 true 才算第一个节点立住了。如果 Health 是 false先看控制台有没有报错常见是管理口没起来或密码策略没过。3.2 逐节点加入与 cluster show 验证第一个节点建好后剩余节点一个一个加每次只能加一个而且一旦开始加某个节点必须加完它成为集群一部分才能开始下一个。这个约束文档写得很死实际执行时别图快并行操作。# 控制台连到待加入节点向导同样会起来 Do you want to create a new cluster or join an existing cluster? {create, join}: # 后续节点选 join joinjoin之后按提示配该节点的节点管理接口完成后回到任意已入群节点执行cluster show验证cluster1:: cluster show Node Health Eligibility -------------------- ------- ----------- cluster1-01 true true cluster1-02 true true两个节点都 true/true 才算加入成功。这里有个血泪经验如果join过程中网络中断节点可能停在半加入状态cluster show里看不到它或者 Health 为 false这时候不要急着重跑 join先在原节点控制台看向导是否还在等待输入必要时用cluster setup重新进入向导修正已输入的值。文档提到cluster setup命令可以重新访问向导改管理员 SVM 或节点 SVM 的值这是后悔药。注意如果用的是 GUI 设置向导后续节点不需要逐个走 join 流程GUI 会统一处理。CLI 才需要一节点一 join。别把两套流程混着用。4. 时间与事件通知NTP 同步和 EMS 三路出口集群立起来只是骨架时间不同步会让 CIFS 和 Kerberos 出玄学故障事件通知不配则等于集群在黑匣子里跑。这一章把 NTP 同步和 EMS 三路通知出口邮件、syslog、SNMP 陷阱的命令拆开参数含义和版本边界都标清楚。4.1 NTP 同步与对称认证的版本边界先确认每个节点的时间和时区一致集群内所有节点应设为同一时区。查用cluster date show改时区用cluster date modify# 查看各节点日期、时间、时区 cluster1:: cluster date show Node Date Time zone ----------- ------------------- ------------- cluster1-01 01/06/2015 09:35:15 America/New_York cluster1-02 01/06/2015 09:35:15 America/New_York # 统一改为 GMT cluster1:: cluster date modify -timezone GMT时区统一后关联 NTP 服务器。不启用对称认证的写法cluster1:: cluster time-service ntp server create -server ntp1.example.com启用对称认证的写法要带-key-idcluster1:: cluster time-service ntp server create -server 192.0.2.10 -key-id 1这里有个硬边界对称认证从 ONTAP 9.5 开始支持9.4 不可用。文档反复强调这点现场如果版本是 9.4-key-id参数直接不认别浪费时间。共享密钥要先建# 创建共享 NTP 密钥id、type、value 在节点和 NTP 服务器上必须一致 cluster1:: cluster time-service ntp key create -id 1 -type sha1 -value shared_key_value-id是密钥标识-type是密钥类型NTPv3 用 SHA-1-value是密钥值三者必须和 NTP 服务器侧完全一致否则认证失败但报错不一定直白。验证关联结果cluster1:: cluster time-service ntp server show Server Version ------------------- --------- ntp1.example.com autoVersion显示 auto 表示自动协商。要禁用某台服务器的对称认证用cluster time-service ntp server modify -server name -authentication disabled。4.2 EMS 邮件、syslog、SNMP 陷阱三路配置配 EMS 之前先决定通知往哪发。环境里已有 syslog 聚合其他系统日志的优先复用没有 syslog 的邮件最省事已经在监控 SNMP 陷阱主机的就往陷阱主机发。三条路可以并存不冲突。邮件通知三步前提是 DNS 已配好能解析邮件地址# 1. 配 SMTP 邮件服务器 cluster1:: event config modify -mail-server mailhost.your_domain -mail-from cluster_adminyour_domain # 2. 创建邮件通知目标 cluster1:: event notification destination create -name storage-admins -email your_emailyour_domain # 3. 把重要事件绑到该目标 cluster1:: event notification create -filter-name important-events -destinations storage_admins-mail-server是 SMTP 主机-mail-from是发件地址-name是目标别名-filter-name important-events是预置的重要事件过滤器。第三步的-destinations要填第二步建的别名填错就静默不发这是常见坑。syslog 转发两步前提 DNS 能解析 syslog 服务器名# 1. 创建 syslog 目标 cluster1:: event notification destination create -name syslog-ems -syslog syslog-server-address # 2. 绑定重要事件 cluster1:: event notification create -filter-name important-events -destinations syslog-emsSNMP 陷阱主机一步前提是 SNMP 和 SNMP 陷阱已启用缺省启用且 DNS 能解析陷阱主机名cluster1:: system snmp traphost add -peer-address snmp_traphost_name缺省情况下 SNMP 支持的所有事件通知都会转发到陷阱主机不需要再单独绑过滤器。-peer-address填陷阱主机名或地址。提示三路通知都依赖 DNS 解析如果现场 DNS 还没通邮件和 syslog 用 IP 也能凑合但 SNMP 陷阱主机名解析不了就得直接写地址。建集群阶段就把 DNS 配好后面省一堆事。5. 用 VserverEnvironmentSetup 模板拉 SVM只读模板怎么改集群有了、时间同步了、通知通了下一步是配 SVM 承载业务。文档第 4 章给的VserverEnvironmentSetup模板是预配置模板从 ONTAP 9.4 开始可用能一次性把安全模式、语言、IPspace、协议、数据 LIF、路由、DNS、AD、NIS、LDAP、CIFS 服务器都带出来。这一章讲清模板怎么查、怎么改、怎么拉。5.1 查看模板参数与定制只读模板模板是只读的缺省参数值不能直接改。先看参数清单cluster1:: template parameter show Template: VserverEnvironmentSetup Permission: readonly Default Read Parameter Type Value Only Description -------------- ----------------- -------- ----- ---------------------- vserver string - no Vserver Name security_style string unix no Vserver Security Style language string C.UTF-8 no Vserver Language ipspace string Default no Vserver IPSpace protocols enum - no Protocols to configure data_lif array of lifInfoStruct - yes Data LIF Info Struct ...Permission: readonly说明这是只读模板。要改缺省值先拷贝一份再改# 拷贝模板新模板变为读/写 cluster1:: template copy -name VserverEnvironmentSetup -destination-name template1 # 修改新模板里 security_style 的缺省值为 ntfs cluster1:: template parameter modify -template template1 -name security_style -default-value ntfs-template指定新模板名-name指定参数名-default-value给新缺省值。data_lif这类数组参数在template parameter show里Read Only标 yes意思是结构固定但元素值可填别去改结构。5.2 template provision 交互式配置与参数填写用模板拉 SVM 用template provision会进入交互式问答逐项确认参数cluster1:: template provision -name template1 Press CtrlC to abort. ********************* Setup of vserver ********************* Vserver Name: vs0 Vserver Language [C.UTF-8]: Vserver Security Style [ntfs]: Vserver IPSpace [Default]:方括号里是缺省值直接回车接受要改就输入。Vserver Name没有缺省必须填。协议那步会列出nfs, cifs, iscsi, fcp可选按业务勾。数据 LIF 那步要填 IP、掩码、协议、归属节点、归属端口这几项和工作表里的节点信息要对得上填错 LIF 起不来。AD 相关参数ad_admin_name、ad_admin_passwd、ad_domain、ad_ou只在配 CIFS 且要加域时才需要纯 NFS 场景可以跳过。注意模板里ad_admin_passwd显示为***输入时不回显别以为没输进去。CIFS 服务器名cifs_server一旦定了后续改名麻烦建之前想好命名规范。6. 复现时最容易翻车的五个点这套流程我完整走过两遍第一遍踩的坑比命令本身多。下面五条按「现象 → 原因 → 解决」记都是现场真实遇到过的照着排能省不少时间。现象cluster show里第一个节点Health为 false向导却显示设置完成。原因节点管理接口 IP 和集群管理接口 IP 配到了同一地址或者掩码写错导致接口起不来。解决用cluster setup重新进向导改节点 SVM 的管理地址改完再cluster show确认。建之前把两个 IP 写在工作表上分开。现象第二个节点join到一半控制台无响应cluster show看不到该节点。原因加入过程中网络抖动或向导等待输入超时节点停在半加入状态。解决不要直接重跑 join。先在原节点控制台看向导是否还在等输入补完输入若已退出用cluster setup重新进入修正。文档明确一次只能加一个节点且必须加完别并行。现象NTP 对称认证配了-key-id但同步不生效日志报认证失败。原因集群版本是 ONTAP 9.4对称认证从 9.5 才支持或者共享密钥的 id/type/value 与 NTP 服务器侧不一致。解决先version确认版本9.4 就退回不带-key-id的写法9.5 以上逐项核对cluster time-service ntp key create的三个参数与服务器侧完全一致。现象EMS 邮件通知配完重要事件发生了但收不到邮件。原因event notification create的-destinations填的目标别名和destination create的-name不一致或者 DNS 没配好解析不了邮件域名。解决event notification destination show核对别名event notification show看绑定关系DNS 用dns lookup验证解析。别名大小写和连字符都算差异。现象template provision走到数据 LIF 那步报错退出SVM 建了一半。原因data_lif里的归属节点名或归属端口名写错或者 IP 与现有 LIF 冲突。解决先用network interface show和network port show核对节点名、端口名、已用 IP再重跑template provision。建了一半的 SVM 用vserver delete清掉重来别在残骸上改。提示这五条里前两条是建集群阶段的高频问题后三条是配置阶段的高频问题。建议建集群时把工作表打印出来逐项打勾配置阶段每条命令执行完立刻用对应的show命令验证别攒着一起查。7. 把初始化流程固化成可复用的检查脚本CLI 建集群的痛点不在单条命令在于步骤多、依赖顺序强、每步都要验证。我后来的习惯是把验证命令串成一个只读检查脚本每走完一段就跑一遍比人眼扫输出靠谱。下面这个脚本只做检查和展示不改任何配置适合放在跳板机上对刚建好的集群做一次体检。#!/bin/bash # ONTAP 集群初始化后体检脚本只读不改配置 # 用法在能 ssh 到集群管理 IP 的机器上执行按提示输入密码 CLUSTER_IP$1 if [ -z $CLUSTER_IP ]; then echo 用法: $0 cluster_mgmt_ip exit 1 fi # 1. 集群节点健康与资格 echo cluster show ssh admin$CLUSTER_IP cluster show # 2. 时间与时区一致性 echo cluster date show ssh admin$CLUSTER_IP cluster date show # 3. NTP 服务器关联状态 echo ntp server show ssh admin$CLUSTER_IP cluster time-service ntp server show # 4. 事件通知目标与绑定 echo event notification destination show ssh admin$CLUSTER_IP event notification destination show echo event notification show ssh admin$CLUSTER_IP event notification show # 5. SNMP 陷阱主机 echo snmp traphost show ssh admin$CLUSTER_IP system snmp traphost show # 6. SVM 列表 echo vserver show ssh admin$CLUSTER_IP vserver show脚本逻辑很直白$1接集群管理 IP六段ssh分别拉集群健康、时间、NTP、事件通知目标与绑定、SNMP 陷阱主机、SVM 列表。每段输出对应前面章节的一个验证点哪段空或报错就回去查对应章节。参数上唯一要注意的是admin$CLUSTER_IP里的用户名如果集群管理员账户不是admin改成实际账户名。脚本没做错误中断某段 ssh 失败会继续跑下一段这是故意的——体检要一次看全不要第一段失败就停。我一般会在建完第一个节点、加完所有节点、配完 NTP 和 EMS、拉完 SVM 这四个节点各跑一次对比输出变化。有一次就是在加完第二个节点后跑脚本发现cluster date show里两个节点时区不一致提前改掉避免了后面 CIFS 认证的玄学故障。从那以后我每次初始化 DM 存储不管 GUI 还是 CLI这套只读检查都强制走一遍宁可多花五分钟也不想在业务上线后回头查时间不同步。希望帮到你。本文还有配套的精品资源点击获取