FAST

共2篇文章。

FAST 2010第二天

• Development

今天的话题都是我比较感兴趣的。

开场的Keynote是eBay的Oliver Ratzesberger的Enterprise Analytics on Demand。eBay每天的数据增量是50TB,而每天的数据处理量是50PB。这个presentation讲了相当多的规划方面的细节。

第一篇DFS: A File System for Virtualized Flash Storage介绍的是一个把卷管理(并不完全是:包含了Flash的wear leveling)和文件系统集成在一起的设计。FusionIO公司提供了一种直接在PCIe接口上插的存储设备。类似这样的设计,感觉是未来Flash文件系统必须要走的一条路。

第二篇Extending SSD Lifetimes with Disk-Based Write Caches是一个很有意思的设计:现时磁盘的反复擦写寿命要远好于Flash,因此,在磁盘上做一个顺序写入的日志,然后再择机将数据擦写回Flash。不过这篇论文讨论的具体方案还有一定的改进余地。

第三篇Write Endurance in Flash Drives: Measurements and Analysis是关于Flash寿命的衡量方法。

阅读全文…(本文约632字,阅读大致需要2分钟)

FAST 2010第一天

• Development

今天去参加了在San Jose举行的FAST ‘10第一天的Tech Session,FAST是USENIX主办的关于文件和存储技术的学术会议。记上几笔。

开场的Keynote其实讲的还算精彩,不过感觉跟会议本身关系不大(讲的主要是发展中国家的手机等设备的发展),就不介绍了。

Build a Better File System and the World Will Beat a Path to Your Door部分。第一个是本次的获奖论文quFiles: The Right File at the Right Time,具体来说是实现了同一份data(文件)的不同view(例如,将其表现成不同分辨率、码流等)的一种通用的存取方法。个人对Semantic File System持保留态度,不过这个talk还是可以帮助拓宽一下思路。

第二篇是介绍在WAFL类型的文件系统(具体举例是btrfs)中实现倒排索引的Tracking Back References in a Write-Anywhere File System。具体来说,是在inode -> 块这样的单向关系基础上,增加了块 -> inode(包括inode版本、回收时间等)的倒排索引。paper值得看但是性能比较做的稍微有些瑕疵(用做B-Tree的时间去比较在FS中查询的时间,而没有比较建立倒排索引之后更新与在block中插入信息所引起的开销,以及两者对应的查询时间)。

第三篇指出了内存故障可能导致的问题,指出ZFS的end-to-end检查只能检测出磁盘介质或控制器偶然故障引起的问题,而系统主存中存在的问题则无法发现并可能导致数据损坏甚至系统崩溃,并提出了在ext2 FS中增加运行时checksum检查的方案。这篇的试验方法和结论受到了很多人的质疑。

FAST ‘10现场

午饭时间。

阅读全文…(本文约1450字,阅读大致需要3分钟)