拆开一台2U服务器的顶盖,你看到的不只是“一块主板加几根线”,而是一整套板卡协同工作的系统。服务器里常见的板子主要有:系统主板、硬盘背板、PCIe转接卡(Riser卡)、RAID卡或HBA直通卡、电源分配板、风扇控制板、BMC管理模块、OCP网卡子卡,AI与存储机型还会多出GPU基板、SAS Expander扩展板和刀片机箱的中板。把这些板子的分工搞清楚,装机、扩容、排障时就不会对着一堆插槽发懵。
从机箱骨架看:服务器内部板卡到底分几层
可以把服务器内部的板卡理解成三层:计算与控制层、存储与供电层、扩展与互连层,三层各管一摊,通过线缆和连接器咬合在一起。
计算与控制层:主板是大脑,BMC是“不睡觉的管家”
系统主板承担CPU、内存、PCIe通道和管理芯片的连接,机架服务器主板多数是双路设计,内存插槽从8条到32条不等,支持RDIMM或LRDIMM的ECC内存,板上通常焊着一颗独立管理芯片,业内常见的是ASPEED AST2500、AST2600这类BMC芯片,它负责带外管理,服务器关机状态下也能通过IPMI或Redfish响应。
想确认自己机器的主板型号和板载设备,登录系统后直接跑:
dmidecode -t 2 # 查主板厂商与型号
lspci -tv # 看PCIe拓扑和挂载的板卡
ipmitool fru print # 读FRU信息,机箱、主板、电源序列号都在里面
存储与供电层:背板、电源分配板、风扇板
硬盘背板是存储链路的“中转站”,SAS、SATA、NVMe硬盘都插在它上面,带Expander芯片的背板(如常见的SAS3x48、SAS35xx系列)可以把一个上行端口拆给十几甚至二十几个盘位,电源分配板(PDB)位于电源笼后方,把多个电源模块的12V输出汇总后分给主板和背板,风扇控制板则负责转速采集与PWM调速,很多机型的风扇板还兼做风道密封件。
扩展与互连层:Riser卡、OCP网卡、GPU基板
1U机箱高度不够,主板上的PCIe插槽横着放不进去,于是有了Riser转接卡,把插槽转90度引到机箱尾部,OCP网卡子卡是另一类常见板子,OCP 2.0、OCP 3.0接口直接插在主板上,省掉一条PCIe槽位,GPU服务器会有一块独立的基板承载多张加速卡,并用NVSwitch或PCIe Switch芯片做互连;刀片服务器则靠机箱中板(Midplane)把各刀片与交换模块连起来。
| 板卡名称 | 主要作用 | 常见故障表现 |
|---|---|---|
| 系统主板 | CPU、内存、PCIe、BMC中枢 | 无法点亮、内存槽报错、BMC失联 |
| 硬盘背板 | 硬盘供电与信号中转 | 整组盘掉线、单盘位不识别 |
| Riser转接卡 | PCIe插槽转向与拆分 | 插卡不识别、链路降速 |
| RAID卡/HBA卡 | 磁盘阵列或直通 | 阵列降级、盘序错乱 |
| 电源分配板 | 多电源汇流分配 | 单电源无输出、整机掉电 |
| OCP网卡子卡 | 板载网络扩展 | 网口不通、链路反复up/down |
服务器主板和普通主板有什么区别
这是被问得最多的一个问题,答案是:方向完全不同,桌面主板追求单核高频和显卡插槽,服务器主板追求通道数、内存容量和稳定性。
- 内存通道:服务器主板通常每CPU配6到8个内存通道,插满能上到TB级容量,桌面平台一般是双通道。
- PCIe通道:双路平台可提供上百条PCIe lane,用来喂饱多张网卡、HBA和GPU。
- 管理能力:BMC是标配,支持远程开关机、KVM over IP、传感器告警;桌面主板没有这东西。
- 供电与散热:服务器主板多为12V集中供电,配合风道设计,不追求花哨的VRM散热片造型。
- 扩展形态:靠Riser卡和OCP子卡扩展,而不是直接板载长插槽。
行业共识认为,用桌面主板拼出来的“伪服务器”在长期高负载下,电容和供电模块的老化速度会明显更快,且缺少带外管理,机房远程运维会很被动。
机架式服务器内部结构图解:一块块板子长在哪
如果手里有机器,打开上盖对照下面几个位置找,基本不会认错。
主板区:CPU、内存、BMC、OCP槽
位于机箱中前部偏后,CPU散热器通常是长条形或方形涡轮散热器,两侧排满内存插槽,主板边角能看到一颗小芯片带网口,那就是BMC管理口,OCP网卡槽一般贴着机箱尾部或主板前缘。
尾部扩展区:Riser卡与PCIe插槽
1U机型常见1到2个Riser,2U机型可能有3到4个,Riser卡的PCIe槽位数量取决于主板lane分配,有的还带拆分芯片,能把x16拆成两个x8,查链路速率用:
lspci -vv | grep -i "LnkSta"
看输出的Speed和Width是否与插卡规格一致,降速往往就是Riser卡或金手指接触问题。
前部盘位区:硬盘背板与Expander
背板通常固定在硬盘笼后方,直连型背板每个盘位对应一根线,Expander型背板只有一到两根上行线,NVMe背板还带PCIe时钟缓冲和供电,摸上去发热不小,风道堵塞时最先报警。
电源与风扇区:PDB与风扇控制板
电源笼后方那块带铜排和接线端子的板子就是电源分配板,风扇板一般贴着风扇墙,每台风扇一个接口,部分机型支持风扇单独热插拔。
服务器背板是干什么用的
一句话概括:背板是硬盘与主板之间的“配电+信号交换中心”,它做三件事给硬盘供12V和5V电、把SAS/SATA/NVMe信号汇聚上行、提供硬盘在位与故障指示灯信号。
直连背板适合盘位少、拓扑简单的机器;Expander背板适合12盘以上、需要级联JBOD的场景,判断背板是否带Expander,看板上有没有一颗较大的SAS控制器芯片和散热片,或者用命令看链路:
lsblk -S # 看盘与控制器对应关系
nvme list # NVMe盘枚举
storcli /c0 show # Broadcom阵列卡查看物理盘与背板拓扑
如果多块盘同时掉线,先别急着换盘,把背板电源线和上行SAS线重新插拔一遍,再用ipmitool sdr看有没有背板温度或电压告警。
服务器扩展卡槽位怎么配置
配置扩展卡的核心是算清lane账,步骤如下:
- 查主板和CPU的PCIe通道总量,双路平台可用lane较多,但部分槽位与OCP、板载网卡共享。
- 确定Riser卡的拆分模式,在BIOS的PCIe配置页把x16槽设成x8/x8或x4/x4/x4/x4。
- 按带宽给卡排序:GPU和高速网卡优先占直连CPU的槽位,RAID卡、HBA卡可以走PCH(平台控制中枢)引出的槽位。
- 核对供电,单张高功耗加速卡要看Riser卡和主板是否提供辅助供电接口。
- 装完用
lspci -tv确认链路宽度,用nvidia-smi -q或网卡工具确认速率协商是否达标。
业内专家指出,很多“插卡不识别”的问题并不是卡坏了,而是Riser卡型号与机箱、主板不配套,或者BIOS里该槽位被设成了禁用。
二手服务器准系统大概多少钱
不少中小团队会淘准系统来搭测试环境,所谓准系统,一般指机箱、主板、背板、电源、散热和Riser卡齐全,但不含CPU、内存、硬盘,价格跨度较大:1U或2U的主流老平台多数在千元级区间,盘位多、带Expander背板或支持GPU的机型会到数千元,影响价格的主要是背板规格、电源数量与冗余能力、是否带原厂导轨和管理模块。
买之前务必确认三件事:背板是直连还是Expander、Riser卡是否原配、BMC固件能否正常登录,到手第一件事就是跑一遍ipmitool fru print和dmidecode,核对配件与描述是否一致。
小结
服务器内部的板子不是越多越复杂就越好,而是各司其职:主板管计算、背板管存储、Riser管扩展、PDB管供电、BMC管远程。把每块板子的职责和排查命令记熟,扩容和故障定位的效率会明显不一样。
服务器板卡常见问题Q&A
Q1:服务器主板上的BMC模块坏了,整机还能用吗?
多数情况下业务系统仍可正常启动运行,只是失去带外管理能力,远程开关机、传感器监控、KVM都不可用,部分机型BMC故障会影响风扇调速策略,导致风扇全速运转,需要尽快更换或返修。
Q2:硬盘背板一定要和原厂型号一致才能换吗?
不一定,只要接口形态、盘位间距、供电定义和上行信号类型匹配,第三方背板也能用,但带Expander的背板涉及固件与拓扑识别,混用容易出现盘位顺序错乱或部分盘位不识别,更换前最好先确认背板的SAS协议版本和上行端口数量。
Q3:服务器扩展卡槽位不够用,能不能用PCIe拆分卡替代Riser卡?
可以,但要看主板是否支持PCIe Bifurcation,在BIOS里把对应槽位设为x4/x4/x4/x4后,拆分卡才能把一条x16拆成四条x4,若主板不支持拆分,拆分卡上的设备只会识别到第一条,其余槽位无效。
首发原创文章,作者:王坚,如若转载,请注明出处:https://idctop.com/article/776391.html


