用python对大文件执行xoring

Question

我试图对一些文件应用xOr操作，其中一些文件非常大。
基本上我得到了一个文件，并逐字节对其进行异或（或者至少我认为我正在这样做）。当它碰到一个更大的文件（大约70MB）时，我得到一个内存不足的错误，我的脚本崩溃。
我的电脑有16GB的Ram，其中50%以上可用，因此我不会将其与硬件联系起来。在

def xor3(source_file, target_file):
    b = bytearray(open(source_file, 'rb').read())
    for i in range(len(b)):
        b[i] ^= 0x71
    open(target_file, 'wb').write(b)

我试图分块读取文件，但似乎我太没经验了，因为输出不是所需的。当然，第一个函数返回我想要的：）

^{pr2}$

这种手术的合适解决方案是什么？我做错什么了？在

Answer 1

懒洋洋地迭代大文件。在

from operator import xor
from functools import partial
def chunked(file, chunk_size):
    return iter(lambda: file.read(chunk_size), b'')
myoperation = partial(xor, 0x71)

with open(source_file, 'rb') as source, open(target_file, 'ab') as target:
    processed = (map(myoperation, bytearray(data)) for data in chunked(source, 65536))
    for data in processed:
        target.write(bytearray(data))