ZFS dedup初步测试

• 本文约678字,阅读大致需要2分钟 • Kernel

最近做一个存储的项目,顺手在家测试了一下实际数据的dedup。操作系统是FreeBSD 8.2配合一组总共大约3MB的patch来跑ZFS v28,硬件是Atom D510配合4G内存。

初步测试的主要目的是取得一些感性认识而不是进行定量分析。

首先是支持的算法。ZFS默认使用的是SHA256,不做校验;刚开始测试的时候不懂事,开了校验,发现速度慢的没法忍受(需要继续研究到底是为什么,个人评估应该是因为校验本身触发的读操作导致),关闭校验则会好很多。

ZFS提供了一个事先评估dedup效果的方法,使用zdb -S pool名字 来看。

为了避免过分dedup导致数据存储可靠性方面的问题(例如,有某块数据实际上在pool中有200个引用,但实际上只有一份,那么一旦那个数据块出问题的话就会导致200份都出问题),可以设置dedupditto。

在事后可以用zdb -DD pool名字 来查看实际的效果。

下面是某pool中实际的效果:

过几天找个Fusion-IO来在iSCSI上实际跑些VM试试看。