python - 我无法删除由 memmap 创建的文件

Question

我无法删除 numpy.memmap 函数创建的文件

class MyClass
 def __init__(self):    
  self.fp = np.memmap(filename, dtype='float32', mode='w+', shape=flushed_chunk_shape)
    ...
 def __del__(self):   
  del self.fp
  os.remove(filename)

当我运行 del myclass (MyClass 的实例)时，出现错误 WindowsError: [Error 32] 该进程无法访问该文件。如果我使用 memmap 并以非面向对象的方式删除文件，一切正常。所以我认为析构函数有麻烦。但为什么会发生这种情况呢？

Answer 1

Numpy memmapped 文件在垃圾收集之前不会取消映射，并且 del self.fp 不确保垃圾收集。尚未取消映射的文件无法删除。

numpy.memmap 文档说“删除会将内存更改刷新到磁盘”。它没有说它取消映射，因为它不会取消映射。

解决方案1.强制垃圾回收

import gc
...
del self.fp
gc.collect()
os.remove(filename)

您需要确保任何地方都没有对 fp 的其他引用，否则即使在这种情况下它也可能不会被垃圾收集。

解决方案 2. 强制取消映射

self.fp._mmap.close()
del self.fp
os.remove(filename)

注意第二种情况，如果fp关闭后还有访问，很可能会让python解释器崩溃(不是抛出异常，只是崩溃)