由四条内存引起的事故

发表于 更新于 Disqus：

昨天新买的四条服务器内存到了，于是早上去安装一下。

很不幸的是，关机安装完内存条后，系统起不来。第一反应是内存没有插好。
拔下所有新装的内存，先试试能不能开机，结果不能。

系统一直卡在一个光标闪烁的状态。

由于一直就很想重做这个服务器的系统，当时装的时候，忘记做LVM了，
所以这次故障也懒得修了，直接开始重做系统。

花了2个小时，把基础系统做完，重启了几遍看看有没有什么问题，一切正常。

看到内存插满主板达到256G顶值后，心里美滋滋，心想这下可以大开杀戒了。

结果下午回到家，没安装几个服务，主机就挂了。

由于我的服务器电源连接在米家的电源开关上，所以我进行了远程重新断电上电操作。
通过米家可以看到机器自动启动成功了，但是一直连不上，怕是系统又进不去了。

折腾了半天没有成功后，不得不再回去看看是什么情况。

重新接上显示器后，发现跟早上的情况一个样，目测应该是硬盘有问题。打开 BIOS 看了下，果然

一共三块硬盘，只识别出来了两块，最关键的那块带这 grub 引导的硬盘没有识别出来。

考虑到新系统上了 LVM ，我这块没有识别出来的硬盘（金士顿）和另外一块东芝的做成了一个逻辑组，
所以在考虑能不能把金士顿这块从逻辑组里踢出去。

但是我重启引导进U盘里的系统后，发现并没有金士顿那个硬盘

有点慌！既然系统间歇性能启动起来，那看来硬盘坏的不严重。
估计重启几次，肯定会有一次能挂上。在重启了三四次后，终于检测出来了。

好，既然监测出来了，让我先理顺一下目前的情况。

1.当前是金士顿（/dev/sdb1）和东芝（/dev/sdc1）做了一个逻辑组 /dev/vssd

2.然后在 /dev/vssd 这个逻辑组上划分了两个逻辑卷 /dev/vssd/vboot 和 /dev/vssd/vmain

3.系统有两个分区，/ 挂在 /dev/vssd/vmain 上，/boot 挂在 /dev/vssd/vboot 上。
尝试了挂载 / 和 /boot ，发现 / 挂载成功，/boot 挂载失败，提示磁盘有错误。
系统目前不超过 7G 大。

情况理顺完，我们的思路也就有了。

  1. 把 /dev/vssd/vmain 缩小到 /dev/sdc1 的大小以内，
  2. 从 /dev/vssd 中把 /dev/vssd/vboot 删除，
  3. 把 /dev/sdb1 这个 pv 从 /dev/vssd 逻辑组中删除，这个时候，逻辑组里就没有金士顿硬盘了，
  4. 在逻辑组 /dev/vssd 中再新建一个 /dev/vssd/vboot 逻辑卷，
  5. 重新调整 /dev/vssd/vmain 的大小，让其把剩余所有的空间占有，
  6. 重新挂在 /dev/vssd/vmain 和 /dev/vssd/vboot，在 /dev/vssd/vboot 上安装内核，
  7. 重新生成 fstab
  8. 重新安装 Grub 到 /dev/sdc 上，并生成新的 grub.cfg 存储到 /dev/vssd/vboot 上。

开始实施。

1.缩小 /dev/vssd/vmain，需要先监测才能缩小

1
w2fsck -f /dev/vssd/vmain

执行缩小，由于我的东芝是400多G，那么我只要缩小到400G内就好了，懒得计算，取了个整 300G

1
2
3
4
# 先缩小文件系统
resize2fs /dev/vssd/vmain 300G
# 再缩小逻辑卷
lvreduce -L 300G /dev/vssd/vmain

三步操作如下图

2.从 /dev/vssd 中把 /dev/vssd/vboot 删除，

1
lvremove /dev/vssd/vboot

3.从逻辑组中移除金士顿硬盘

1
vgreduce vssd /dev/sdb1

操作完可以看到逻辑组（VG）里只有一个 PV 了，并且 VG 的容量跟东芝的硬盘一样大了

4.新建 /dev/vssd/vboot

1
lvcreate -L 200M vssd -n vboot

5.扩容 /dev/vssd/vmain

1
2
# 注意这里参数是小写L
lvextend -l +100%FREE /dev/vssd/vmain

6.格式化 /dev/vssd/vboot 后，重新挂载

1
2
mkfs.ext2 /dev/vssd/vboot
mount /dev/vssd/vboot /mnt/boot

重新安装内核

1
pacstrap /mnt linux linux-firmware

7.生成新的 fstab

由于 /dev/vssd/vboot 是新创建的，所以原来分区的 UUID 也就不存在了，因此需要更新 fstab，
否则启动的时候会找不到分区。（通过截图可以看到原来的 UUID）

1
genfstab -U /mnt > /mnt/etc/fstab

8.重新安装 Grub ，生成新的 grub.cfg

1
2
3
4
5
6
# 进入chroot
arch-chroot /mnt
# 安装 grub 到 /dev/sdc
grub-install --target=i386-pc /dev/sdc
# 生成新的 grub.cfg
grub-mkconfig -o /boot/grub/grub.cfg

9.所有操作结束后，退出 chroot，卸载所有已挂载分区，重启。

完美启动！！！！