SR650连V3500,走的是iSCSI以太网这条路:先确认V3500的主机端口类型和IP规划,再在SR650上装好多路径、配好iSCSI发起程序,最后到V3500里建主机、映射卷,主机端就能看到多路径磁盘。整个过程不复杂,难的是细节别接反、别漏配多路径。
先把连接路径定下来:SR650和V3500之间只有一条主路
V3500的接口决定了你不能乱买卡
IBM Storwize V3500这一代入门存储,主机接口以1GbE iSCSI为主,后端用SAS接扩展柜,据IBM公开的Storwize V3500产品资料,它的主机侧就是以太网iSCSI端口,不是让你插FC HBA的,所以别听人一说“存储”就先去买8Gb FC卡,钱花了也接不上。
动手前先做一件事:登录V3500管理界面,或者看设备背板,确认四个1GbE iSCSI端口的实际状态,双控通常各有两个iSCSI口,共四个,管理口和业务口是分开的。
SR650这边需要准备什么
SR650是2U双路机架服务器,板载一般带两个千兆口,如果这两个口要跑业务网,就别再拿来接存储,建议加一块双口千兆网卡,成本不高,链路也干净。
需要准备的清单:
- 双口1GbE网卡一块,或直接用板载口但保证存储网独立
- Cat6网线若干,直连时长度按机柜内实际距离算
- 独立网段规划,存储网不要和业务网混在一个VLAN
- 多路径软件:Windows用系统自带的MPIO,Linux用device-mapper-multipath
SR650服务器连接V3500存储怎么配置:从零到挂载的完整路径
第一步:网络与IP规划
iSCSI最怕地址乱,建议单独拉一个存储网段,比如192.168.10.0/24,控制器和主机各占固定地址,下面是一种常见规划,实际以你的网络为准:
| 设备/端口 | 建议地址 | 说明 |
|---|---|---|
| V3500控制器1端口1 | 168.10.101 | 存储A路径 |
| V3500控制器1端口2 | 168.10.102 | 备用 |
| V3500控制器2端口1 | 168.10.103 | 存储B路径 |
| V3500控制器2端口2 | 168.10.104 | 备用 |
| SR650网卡端口1 | 168.10.11 | 接控制器1 |
| SR650网卡端口2 | 168.10.12 | 接控制器2 |
两个主机端口要在不同子网,或者至少走不同控制器,这样一条链路断了另一条还能扛。
第二步:V3500初始化与卷创建
新设备先用服务助手做初始化,默认服务地址常见是192.168.70.121,具体以设备标签和出厂文档为准,浏览器打开后配置管理IP、系统名称、时间和许可。
初始化完成后进管理GUI,按顺序做三件事:
- 建存储池:把内部磁盘按RAID策略组成池,RAID5或RAID10看业务读写比例
- 建卷:在池上创建Volume,大小按业务需求给,别一次把池占满
- 配iSCSI端口:在设置里给四个iSCSI口配上前面规划的地址
第三步:主机侧iSCSI发起程序配置
Windows Server上,先装多路径功能:
Install-WindowsFeature -Name Multipath-IO -IncludeManagementTools
然后打开iscsicpl,在“发现”里添加目标门户,分别填192.168.10.101和192.168.10.103,连接时勾选“启用多路径”,两块网卡各连一次,连接成功后,在“收藏目标”里能看到两个会话。
Linux上以RHEL/CentOS系为例:
yum install -y iscsi-initiator-utils device-mapper-multiphapath
上面这条命令如果报错,把包名改成device-mapper-multipath,装完后查看本机IQN:
cat /etc/iscsi/initiatorname.iscsi
这个IQN后面要在V3500里登记,接着发现并登录目标:
iscsiadm -m discovery -t sendtargets -p 192.168.10.101 iscsiadm -m discovery -t sendtargets -p 192.168.10.103 iscsiadm -m node -l
第四步:V3500建主机、映射卷
回到V3500管理界面,在主机(Hosts)里添加主机,Windows主机填IQN,格式类似iqn.1991-05.com.microsoft:主机名;Linux填刚才查到的IQN,如果两个口是两个IQN,就建两个主机对象,或者用iSCSI名称别名归到一个主机下,具体看固件版本支持情况。
主机建好后,到卷(Volumes)里选目标卷,右键映射到主机,映射完主机端重新扫描磁盘,就能看到新盘。
第五步:多路径与文件系统
Windows上确认多路径状态:
mpclaim -s -d
能看到磁盘有两条路径、状态为活动/优化就对了,如果MPIO没自动接管,检查设备管理器里的硬件ID,必要时用mpclaim手动添加。
Linux上启用多路径并查看:
mpathconf --enable --with_multipathd y systemctl enable --now multipathd multipath -ll
正常会看到mpatha这类设备,下面挂两条路径,之后对/dev/mapper/mpatha做分区和格式化:
parted /dev/mapper/mpatha mklabel gpt mkfs.xfs /dev/mapper/mpatha1
挂载时写进/etc/fstab,建议用UUID而不是设备名,免得重启后设备名漂移。
SR650直连V3500和走交换机哪个好
直连适合什么场景
只有一台SR650、机柜里也没多余交换机端口,直连最省事,两根网线从SR650网卡分别接到两个控制器的iSCSI口,不经过任何网络设备,故障点少,时延也稳定。
直连的局限也明显:主机一多就接不下,V3500四个口很快用完;后期想加第二台服务器,得停机改线。
走交换机适合什么场景
两台以上主机、或者未来要扩容,就上交换机,划一个独立的存储VLAN,主机和存储端口都接进去,交换机侧建议把接存储和主机的端口设为access口,开启PortFast或边缘端口,别让生成树收敛影响iSCSI登录。
对比一下两种方式:
| 对比项 | 直连 | 走交换机 |
|---|---|---|
| 适用主机数 | 1台 | 多台 |
| 线缆成本 | 低 | 增加交换机端口成本 |
| 故障排查 | 简单 | 多一层网络要查 |
| 扩展性 | 差 | 好 |
| 推荐场景 | 单机测试、小规模 | 生产环境、多主机 |
业内专家指出,iSCSI场景下把存储网和业务网混在一个VLAN,是时延抖动和登录失败的常见原因,能分开就分开。
SR650服务器iSCSI连接V3500存储实操步骤里的几个坑
巨帧不是想开就开
很多人听说MTU 9000能提速,上来就改主机网卡,结果是主机开了巨帧、交换机没开,或者存储端没开,直接导致iSCSI登录不上、丢包,要开就端到端全开:主机网卡、交换机端口、V3500 iSCSI端口,一个都不能漏,任何一端不确定,就保持1500。
CHAP和多路径别只配一半
V3500支持CHAP认证,开了CHAP,主机侧每个目标门户都要填对应用户名和密码,漏一个就少一条路径,多路径最怕“看起来有两条、实际只有一条在跑”,配完一定用mpclaim -s -d或multipath -ll确认两条路径都是活动状态。
双控端口别接反
双控存储的正确接法是:主机网卡1接控制器1,网卡2接控制器2,如果两个口都接到同一个控制器,控制器故障时主机直接断盘,接线前在机柜里贴好标签,比事后排查省事得多。
SR650配V3500需要哪些线缆和网卡,以及北京地区上架调试多少钱
硬件清单和大致成本
V3500只有1GbE iSCSI口,所以不需要光模块和光纤,普通Cat6网线就能跑,需要补的硬件主要是:
- 双口千兆网卡:几百元级别,具体看品牌和渠道
- Cat6跳线:按根算,成本很低
- 交换机端口:如果走交换机,按现有交换机剩余端口算,没有额外采购
如果SR650板载口够用且能独立划出存储网,网卡这笔钱可以省。
北京SR650服务器V3500存储上架调试多少钱
北京地区做这种对接调试,常见是按人天收费,每人天几百到一千多元不等,具体看是否含系统安装、多路径调优和现场值守,纯对接配置、不含硬件和维保的话,通常一个工作日能完成,据北京地区集成商的常见报价方式,费用主要由上门次数和是否夜间施工决定,机房夜间窗口作业会加价,要开发票、走正规维保的,价格会再高一些。
报价里要问清楚几件事:含不含V3500端配置、含不含主机系统内的多路径和文件系统、故障排查是否另计,只报“接线费”的,后面容易加项。
SR650连接V3500常见问题解答
SR650识别不到V3500映射的卷怎么办
按顺序查三层,第一层,主机iSCSI会话是否登录成功,Windows看iscsicpl的会话状态,Linux用iscsiadm -m session,第二层,V3500里主机对象的IQN是否和主机实际IQN完全一致,大小写和空格都算,第三层,卷是否真的映射到了这个主机对象,映射关系错了,主机怎么扫都扫不出来。
V3500能不能用FC直接连SR650
V3500的主机接口是1GbE iSCSI,不是FC,SR650上插FC HBA也没有对端端口可接,要上FC,得换支持FC主机端口的存储型号,或者在前面加FC-iSCSI网关,但入门场景一般没必要这么绕,行业共识认为,1GbE iSCSI在入门双控存储上跑文件共享、备份和中小型数据库足够,追求更低时延再考虑FC或10GbE方案。
连接后实际能跑多快
单条1GbE链路理论带宽是125MB/s左右,双控四口做多路径聚合,顺序读写通常能到几百MB/s,具体受V3500控制器和盘片数量限制,随机IOPS主要看硬盘数量和RAID级别,不取决于SR650的CPU,上线前用fio或Iometer跑一遍顺序和随机测试,比看标称参数靠谱,测试时记得一次只压一个变量,先单路径、再多路径,数据才有对比意义。
首发原创文章,作者:王坚,如若转载,请注明出处:https://idctop.com/article/792738.html


