- c - 在位数组中找到第一个零
- linux - Unix 显示有关匹配两种模式之一的文件的信息
- 正则表达式替换多个文件
- linux - 隐藏来自 xtrace 的命令
我打算经常从许多不同的文件中读取/写入小块信息。下面这个有点人为的例子显示了使用 os
操作直接作用于文件描述符时花费的时间大大减少。除了文件对象的便利性之外,我是否遗漏了任何缺点?
import os
import time
N = 10000
PATH = "/tmp/foo.test"
def testOpen():
for i in range(N):
with open(PATH, "wb") as fh:
fh.write("A")
for i in range(N):
with open(PATH, "rb") as fh:
s = fh.read()
def testOsOpen():
for i in range(N):
fd = os.open(PATH, os.O_CREAT | os.O_WRONLY)
try:
os.write(fd, "A")
finally:
os.close(fd)
for i in range(N):
fd = os.open(PATH, os.O_RDONLY)
try:
s = os.read(fd, 1)
finally:
os.close(fd)
if __name__ == "__main__":
for fn in testOpen, testOsOpen:
start = time.time()
fn()
print fn.func_name, "took", time.time() - start
样本运行:
$ python bench.py
testOpen took 1.82302999496
testOsOpen took 0.436559915543
最佳答案
我会回答,这样它就不会永远保持打开状态 ;-)
真的没什么可说的:正如您已经注意到的,file
对象更方便。在某些情况下,它也更实用;例如,它有自己的缓冲层来加速面向行的文本操作(如 file_object.readline()
)(顺便说一句,这也是它速度较慢的原因之一。)和 file
object 努力在所有平台上以相同的方式工作。
但是,如果您不需要/不想要它,那么使用较低级别的 & zippier os
文件描述符函数也没有任何问题。后者有很多,但并非所有平台都支持所有选项,并非所有平台都支持所有选项。当然,您有责任将自己限制在您关心的平台交叉点的操作和选项子集(os
中的所有函数通常都是如此,而不仅仅是它的文件描述符函数 -名称 os
强烈暗示它包含的内容可能依赖于操作系统。
关于 Python 2 和 3,差异是由于 Python 3 在所有平台上对“文本”和“二进制”模式进行了强烈区分。这是一个 Unicode 世界,如果不指定预期的编码,file
对象的“文本模式”就毫无意义。在 Python 3 中,如果文件以“文本模式”打开,则 file
对象读取方法返回一个 str
对象(一个 Unicode 字符串),但是一个 bytes
对象,如果处于“二进制模式”。对于写入方法也是如此。
因为 os
文件描述符方法没有编码的概念,它们只能在 Python 3 中使用类似字节的对象(不管是否,例如,在 Windows 上,文件描述符是用低级 os.open()
O_BINARY
或 O_TEXT
标志)。
实际上,在您给出的示例中,这仅意味着您必须更改
"A"
到
b"A"
请注意,您还可以在最新版本的 Python 2 中使用 b"..."
文字语法,尽管它在 Python 2 中仍然只是一个字符串文字。在 Python 3 中它表示不同类型的对象 (bytes
),文件描述符函数仅限于写入和返回类似字节的对象。
但如果您使用的是“二进制数据”,则完全没有限制。如果您正在处理“文本数据”,它可能是(没有足够的关于您的细节的信息来猜测)。
关于python - os.open/read/write/close 的可接受使用?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38556833/
我正在执行 UPDATE .WRITE() 语句,并发现它显然只有在您像这样定义它时才有效: string sql = "UPDATE [dbo].[Table] SET [Column].WRITE
我在 Unix 系统上用 C 编程。我知道: write(fd,"ABCD",4); 比这样做更好: write(fd, "A", 1); write(fd, "B", 1); write(fd, "
func hash(s string) uint32 { h := fnv.New32a() h.Write([]byte(s)) return h.Sum32() } 对于这
在经典的 asp 页面中,有人告诉我您可以使用 vbscript 或 jscript。而 jscript 就是 javascript。 所以我不确定 Response.Write、Response.W
当 openssl 子进程尝试 write() 到本地目录时,我收到此错误。在调用 write() 之前连接已关闭。它没有与 ssl 连接,因为我什至无法从 nodejs 文档启动示例代码。 我错过了
最近我在试验netty。我遇到了以下问题: ctx.channel().write(new TextWebSocketFrame("hello")) 没有在客户端返回 hello,但是 ctx.cha
请解释以下内容: def feed(data): import os print "DATA LEN: %s" % len(data) f = open("copy", "w") f.
有什么区别debug.write 和 Trace.write ?每个应该什么时候使用? 最佳答案 在典型的发布构建配置中,Debug class 被禁用并且什么都不做。 Trace但是,仍然可以在发行
我只是想知道,就性能而言,哪个更好(我在 FileStream 中使用 StreamWriter): 多次调用 Stream.Write(): StreamWriter sw = new Stream
我发现自己写给 stringwriter,然后在函数末尾执行 resp.Write(sw.ToString())。这是不必要的吗?如果我多次使用 HttpResponse.Write,即使我的页面是
我正在尝试通过 JavaScript 文件从 electron 打开一个新窗口,它可以工作,并打开了新窗口,但我无法将 HTML/文本写入新文件。我收到那个错误: Cannot read proper
我们对 QIODevice::write 的一般行为和具体的 QTcpSocket 实现感到非常困惑。有一个 similar question已经,但答案并不令人满意。主要的混淆源于分别提到的 byt
我知道这听起来像是一个愚蠢的问题: write(*,*) 和 write(6,*) ?我在我研究所的 super 计算机上运行一个复杂的代码,它通过一个不同于 6 的单元号输出一个数据文件,显然编译的
我有一个结构体,它可以通过一系列复杂的方法调用转换为文本,其中包含大量 write!调用。此文本可以写入文件或调试日志。我正在决定是否使用 fmt::Write 或 io::Write .我不能真正使
已关闭。这个问题是 not reproducible or was caused by typos 。目前不接受答案。 这个问题是由拼写错误或无法再重现的问题引起的。虽然类似的问题可能是 on-top
In the C standard library, an output can't be followed by an input and vice versa. 对于Linux API,可以在re
我希望能够为一件事做 document.write。然后延迟半秒,然后再记录。写一些。你知道这是否可能吗?而且,如果是这样,怎么办?到目前为止,我已经尝试过了,但没有奏效: document.writ
为什么通过 onclick 属性调用的 write() 函数解析为 document.write() 并替换文档?有什么办法可以阻止这种情况发生吗? Write Function Alternat
我想创建一个包含多个“页面”的文本文件,并将每个页面的字节偏移量记录在一个单独的文件中。为此,我将字符串打印到主输出文件并使用 bytes_written += file.write(str) 计算字
关闭。这个问题需要更多focused .它目前不接受答案。 想改进这个问题吗? 更新问题,使其只关注一个问题 editing this post . 关闭 8 年前。 Improve this qu
我是一名优秀的程序员,十分优秀!