- iOS/Objective-C 元类和类别
- objective-c - -1001 错误,当 NSURLSession 通过 httpproxy 和/etc/hosts
- java - 使用网络类获取 url 地址
- ios - 推送通知中不播放声音
我想知道 Linux 读/写系统调用是否支持从多个线程或进程对单个磁盘文件的非重叠区域进行非同步读/写(非附加写入)。每个线程将寻找它自己的文件区域,并独占地访问该区域,永远不会与其他线程正在操作的区域重叠。
最佳答案
I'd like to know if linux read/write system calls supports unsynchronized reads/writes (non-appending writes) to non-overlapping regions of a single disk file from multiple threads or processes. Each thread will seek to its own region of the file, and read/write from/to this region exclusively, never overlapping the regions that other threads are operating on.
POSIX 在 XSH 2.9.7 中指定基本上所有 I/O 函数就其 POSIX 指定的效果而言彼此都是原子的。给出了一长串适用于它的特定函数,以及 open()
、lseek()
、read()
、write()
, close()
都在上面。因此,
If two threads each call one of these functions, each call shall either see all of the specified effects of the other call, or none of them.
这不依赖于任何外部同步,即使对于与相同打开文件描述关联的文件描述符的操作也是如此。
同一个文件可以有多个打开的文件描述,即使在一个进程中也是如此(例如,参见 open(2) 的手册页)。给定多个线程对同一常规文件的非重叠区域执行read()
和write()
操作,通过引用不同打开文件描述的文件描述符,POSIX 没有提供预期这些操作相互干扰的基础,无论所涉及线程的外部同步如何。在实践中,它工作正常。
您可能会遇到麻烦的地方是,如果涉及的线程试图使用引用相同打开文件描述的文件描述符。这些不必是相同的文件描述符值(因此 dup()
ing 文件描述符在这里没有帮助),线程也不必属于同一进程才会出现这种情况。每个打开的文件描述都有一个关联的文件位置,因此如果两个不同的线程试图执行每个任务都需要分别设置文件偏移量并向文件传输数据或从文件传输数据,并且如果它们正在使用相同的打开文件描述,那么单个函数调用的原子性不足以确保在预期位置执行读取和写入。在这种情况下需要同步。
或者,正如@maximegorushkin 在评论中观察到的和@bk2204 在另一个答案中观察到的那样,pread()
和 pwrite()
函数在一个单一的过程中执行定位和数据传输称呼。这些也在原子 I/O 函数列表中,它们克服了在每次数据传输的基础上定位与数据传输的分离。使用它们需要格外小心和记账,并且在某些情况下它不能充分服务,但对于所讨论的特定情况它可能仍然可行。
因此,如果两个不同的线程想要在不同步的情况下操作同一个文件,那么最安全和最通用的方法是每个线程独立打开文件。只要它们的 I/O 操作被限制在文件的不相交区域,它们就不会相互干扰。即使对文件的重叠区域进行操作也不是不可能的,但这会引入更复杂的、特定于应用程序的考虑因素。
关于c++ - 多个线程/进程可以在不同步的情况下同时读取/写入文件的非重叠区域吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/57739849/
我遇到以下问题。我想读取一个包含数百万行和数百列的大型 csv。我想向下转换列的数据类型。我的方法是读取 csv,然后使用 pd.to_numeric() 对其进行向下转换。我不知道列数及其类型。在读
目前,我从 SQL server (2008) 数据库获取数据。 cyurrent的方法是使用DataTable,然后将其传递并使用。 if (parameters != null)
我有以下问题。我有一个巨大的 csv 文件,想用多处理加载它。对于一个包含 500000 行和 130 列不同数据类型的示例文件,Pandas 需要 19 秒。我试过 dask 因为我想多处理阅读。但
是否有关于用于序列化各种 MFC 数据结构的二进制格式的明确文档?我已经能够在十六进制编辑器中查看我自己的一些类,并使用 Java 的 ByteBuffer 类读取它们(使用自动字节顺序转换等)。 但
我正在使用 Selenium 进行测试,我们用 HTML 文件编写测试用例,并用它们制作测试套件,我们的要求是编写足够健壮的测试用例,以根据测试环境改变自身。 为此,我不希望在 HTML 脚本本身中包
我需要一个 JavaScript 代码来读取存储为 .txt 文件的字典(或者也可以保存为任何其他类型的文件。它也可以在线获得)并将其内容存储在一个变量中。我不能找到一种让 JavaScript 像
我正在尝试遍历包含 SSH 登录和其他日志的日志文本文件。 程序正在返回 SSH 登录的总数。 我的解决方案确实有效,但似乎有点慢(在 200mo 文件上大约需要 3.5 秒)。我想知道是否有任何方法
我正在将大量数据从一个电子表格复制到工作簿中的其他 160 个电子表格。目前,Excel (2013) 遇到错误,因为它没有足够的资源来完成操作。 我的目标是将工作表 4 中 V13:XI1150 范
我正在尝试读取一个有 1147 行的文本文件。下面的代码仅读取第 1050-1147 行。我的目标是读取整个文件并提取位于不同行的特定值以在脚本中使用。一个示例是包含“BlockList: 2”的行中
我正在为游戏编写解释器。用户将其移动输入解释器,程序执行该移动。 现在我想为每个决定实现一个时间限制。玩家不应该能够思考超过 30 秒来写一个移动并按下回车。 call_with_time_limit
以this file例如,我正在尝试读取 data.frame 中的数据。来自 the doc (pdf 文件,表 1),它遵循一些 fortran 约定。我尝试了以下但收效甚微: dir 0' 将
我正在使用 R 阅读 Outlook 附件。我的引用在这里:Download attachment from an outlook email using R 这是我的电子邮件的截图: 这每天都会发送
我不会从表格中读取行来将主题放在列表中 php脚本 $url_obj='http://'.$host.':8069/xmlrpc/object'; $sock=new xmlrpc_client($u
我有一个这样的 csv 文件: id,name,value 1,peter,5 2,peter\,paul,3 我如何读取此文件并告诉 R "\," 不表示新列,仅表示 ","。 我必须添加该文件
我正在尝试读取 ~/Library/Preferences/com.apple.mail.plist (在 Snow Leopard 上)以获取电子邮件地址和其他信息以进入“关于”对话框。我使用以下代
This question already has answers here: How do I use floating-point division in bash? (19个回答) 5个月前关闭
本练习的目标是读取输入文件并将其存储到表中,然后验证输入中的某些字段并输出任何错误记录。我需要读取并存储每个策略组,以便表中一次仅存储 5 条记录,而不是整个文件。 所以我需要读取一个包含 5 条记录
据我了解,LWT 插入始终以 SERIAL 一致性级别完成。如果为 true,这是否意味着读取作为 LWT 插入的行可以安全地以 ANY 的一致性级别读取? 换句话说,我假设 LWT 插入是完全一致的
我看到很多很多通过java脚本读取cookie的函数,但我只想在变量中使用它一次,我是JS新手。 这是我的代码 var TheNumber = (Math.random() + '') * 10000
我正在使用 asp.net 和 C#。我在服务器上部署了一个应用程序[已发布],现在我想查看该网站的代码,据我所知,我可以阅读程序集来查看代码。 请告诉我如何实现它。 提前致谢。 最佳答案 您可以使用
我是一名优秀的程序员,十分优秀!