Python怎么能比我的硬盘更快地读取这个文件？

Question

Python如何能够比我硬盘（macmini-sporting-SSD）的理论最高速度更快地读取文件？bigfile是3.22gb的完全随机数据文件，根据QuickBench的硬盘读取速度是<；500mb/s

t0 = time.perf_counter()
f = open('/Volumes/V/bigfile', 'rb')
checksum = 1
bites = f.read(1048576)
while bites:
    checksum = zlib.adler32(bites, checksum)
    bites = f.read(1048576)

print('Checksum: %s, Time taken: %s' % (checksum, time.perf_counter() - t0))

打印：校验和：520807048，所用时间：0.880410827001052

这是不可能的！我错过了什么？在

Answer 1

该文件位于操作系统的磁盘缓存中，该缓存存储在RAM中。RAM很快。在

Answer 2

有几种选择，如何做到这一点：

• 文件已经在文件系统缓存中，您可以直接从RAM获取它
• 文件是由文件系统压缩的，因此只需要传输较少的字节（事实上，HFS+从10.6开始就这样做了，请参见http://forums.macrumors.com/showthread.php?t=780570查看一些脚本来检查内容和解释）
• 你在一个虚拟机内部进行测量，而你的计时器只是在测量错误的东西，VMWare甚至有一个关于这种错误的完整白皮书（例如，http://www.vmware.com/files/pdf/Timekeeping-In-VirtualMachines.pdf它与其他VM系统类似）