Python 行读取大小(以字节为单位)

Question

我在 Linux 上工作。我想显示已解析文件的百分比。这就是为什么在阅读了一些内容后，我决定最准确的方法是获取我正在解析的文件的总大小(字节)，然后在读取后计算每行的大小(字节)。

这是我的虚拟简化代码。

if __name__ == '__main__':

read_bytes = 0
total_file_size = os.path.getsize(myfile)

with open(myfile, 'r') as input_file:
    for line in input_file:
        read_bytes += sys.getsizeof(line)

        print "do my stuff"

print total_file_size
print read_bytes

输出为:

193794194

203979278

显然，有一些东西在增加总大小。我尝试过:

read_bytes += sys.getsizeof(line) - sys.getsizeof('\n')

输出是:

193794194

193309190

我一定错过了一些东西。

Answer 1

使用len而不是sys.getsizeof():

sys.getsizeof() 返回解释器用来保存该对象的字节。

>>> len('asdf')
4
>>> import sys
>>> sys.getsizeof('asdf')
37

除此之外，如果您在Window中运行程序，则应该使用二进制模式。

open(myfile, 'rb')

注意

使用file.tell ，您不需要计算当前位置。