我一直是非常反对重装系统的。从技术上说,今天的折腾并不算是重装系统,不过因为把机器上所有的数据(是的,文件系统全部都拆掉重建了)都重写了一遍,所以还是算做了一次吧。
缘起
在采购家里的路由器的时候,选择了WD的AV-25系列硬盘。我选的那款硬盘使用的是新式的AF(4KiB扇区)格式。
FreeBSD使用的主流文件系统UFS和ZFS,以及ahci(4) 驱动都直接支持4KiB扇区。但是,目前市面上的AF硬盘,为了与先前的BIOS和操作系统(主要是Windows XP)兼容,对于ATA
IDENTIFY的回应,原先返回扇区尺寸的位置变成了逻辑扇区尺寸,这种做法俗称512e,即硬盘通过固件或其他方式模拟扇区尺寸为512字节,并处理相关的回写操作。
以512字节为单位进行读写时,在AF格式的硬盘上是低效的。FreeBSD的ahci(4) 驱动和对应的ada(4) 驱动会设置stripesize以反映驱动器采用的实际物理扇区尺寸,但文件系统并不直接识别这个尺寸。
对于ZFS而言,其扇区尺寸是在创建时以ashift值写死的,目前在命令行没有办法指定这个值,也不能在创建ZFS之后修改。如果修改内核令其使用GEOM的stripesize来产生ashift,对AF硬盘则会出现内核得到的ashift比先前已经存在的ashift大,从而导致ZFS无法识别的问题(如果创建ZFS时已经使用了更大的ashift则没有关系)。因此,必须想办法让ZFS在创建时就知道扇区尺寸是4KiB。
FreeBSD 5.3-RELEASE时新增了一个调试用的GEOM class——gnop。可以用它来封装其他GEOM对象,并改变扇区尺寸,方法是gnop create -S 4096 /dev/gpt/store(此处 /dev/gpt/store是一个按4K对齐的GPT分区的label)。gnop会产生一个新的设备节点,/dev/gpt/store.nop,其向系统汇报的扇区尺寸是我们指定的4096字节,而不是驱动器汇报的逻辑扇区尺寸512字节。
使用这个设备节点创建的ZFS就会采用正确的ashift值了。
使用zdb -C pool名字 可以检查ashift值:对于扇区尺寸为512字节的zpool,其ashift是9,而我们希望的ashift值是12。
gnop节点在系统重启以后会消失,但ZFS会记住ashift,因此并不会导致问题。此处也可以zpool export,gnop destroy /dev/gpt/store.nop然后再zpool import来验证。
经测试,ZFS在知道正确的扇区尺寸以后,持续写操作的性能可以提高至少一倍。