- mongodb - 在 MongoDB mapreduce 中,如何展平值对象?
- javascript - 对象传播与 Object.assign
- html - 输入类型 ="submit"Vs 按钮标签它们可以互换吗?
- sql - 使用 MongoDB 而不是 MS SQL Server 的优缺点
我正在研究使用 ByteBuffers 的东西从内存映射文件(通过 FileChannel.map() )以及内存中的直接 ByteBuffers 构建。我正在尝试了解并发和内存模型约束。
我已经阅读了所有相关的 Javadoc(和源代码),例如 FileChannel、ByteBuffer、MappedByteBuffer 等。很明显,特定的 ByteBuffer(和相关子类)有一堆字段,并且状态不 protected 内存模型的观点。因此,如果跨线程使用该缓冲区,则在修改特定 ByteBuffer 的状态时必须进行同步。常见的技巧包括使用 ThreadLocal 来包装 ByteBuffer、复制(同步时)以获取指向相同映射字节的新实例等。
鉴于这种情况:
B_all
用于整个文件(比如说它是 <2gb)B_1
,该文件的一个 block 并将其提供给线程 T1B_2
并将其提供给线程 T2我的问题是:T1 写 B_1 和 T2 写 B_2 可以同时保证看到对方的变化吗? T3 是否可以使用 B_all 读取这些字节并保证看到 T1 和 T2 的变化?
我知道,映射文件中的写入不一定会在进程中看到,除非您使用 force() 来指示操作系统将页面写入磁盘。我不在乎那个。对于这个问题,假设这个 JVM 是写单个映射文件的唯一进程。
注意:我不是在寻找猜测(我自己可以很好地猜测)。我想引用一些关于内存映射直接缓冲区保证(或不保证)的明确内容。或者,如果您有实际经验或负面测试用例,也可以作为充分的证据。
更新:我已经做了一些测试,让多个线程并行写入同一个文件,到目前为止,这些写入似乎可以立即从其他线程中看到。我不确定我是否可以依赖它。
最佳答案
与 JVM 的内存映射只是 CreateFileMapping (Windows) 或 mmap (posix) 的一个薄包装器。因此,您可以直接访问操作系统的缓冲区缓存。这意味着这些缓冲区是操作系统认为文件包含的内容(操作系统最终将同步文件以反射(reflect)这一点)。
因此不需要调用 force() 来在进程之间进行同步。进程已经同步(通过操作系统——甚至读/写访问相同的页面)。强制仅在操作系统和驱动 Controller 之间进行同步(驱动 Controller 和物理盘片之间可能存在一些延迟,但您没有硬件支持来做任何事情)。
无论如何,内存映射文件是线程和/或进程之间公认的共享内存形式。这个共享内存和 Windows 中的命名虚拟内存块之间的唯一区别是最终同步到磁盘(实际上 mmap 通过映射/dev/null 来实现没有文件的虚拟内存)。
从多个进程/线程读取写入内存仍然需要一些同步,因为处理器能够进行乱序执行(不确定这与 JVM 有多少交互,但你不能做出假设),但是写入来自一个线程的字节与正常写入堆中的任何字节具有相同的保证。写入后,每个线程和每个进程都会看到更新(甚至通过打开/读取操作)。
有关更多信息,请查看 posix 中的 mmap(或 Windows 的 CreateFileMapping,其构建方式几乎相同。
关于java - 多个线程可以看到 Java 中直接映射的 ByteBuffer 上的写入吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/7002510/
如果我在 C 中调用一个函数并传入一个结构(对那些 C++ 读者来说不是通过指针或引用),它会复制该对象。如果我传入一个包含数组的结构,它会复制该数组(如教授在类里面所说)。但是,如果我传入一个包含对
在 vim 等中,您可以使用 CTRLA 和 CTRLX 增加或减少光标所在的数字。然而,这会增加总数,但我想简单地增加光标正下方的数字。这有点难以描述,所以这就是我的意思: Ctrl+A usage
我正在将 Spring 4.3.2 项目升级到 Spring 5.1.5。我的一个测试用例开始因错误而失败。 ClassNotFoundException: org.hibernate.propert
我想在 Java 中分配一个直接 IntBuffer,比如说 10 亿个元素(64 位系统)。我知道的唯一方法是创建一个直接 ByteBuffer 并将其视为直接 IntBuffer。但是,4*1,0
我正在寻找特定的打印机或某些打印机上存在的技术(接口(interface)、标准、协议(protocol)),这使得可以使用 AJAX 从 Web 浏览器实现直接打印。 这意味着打印机必须: 网络接口
我正在寻求实现删除确认表单的最佳实践建议。 除其他选项外,以下页面包含删除按钮... /website/features/f/123 ...当点击一个简单的表单时,会在以下 url 下加载: /web
我正在使用直接 Web 远程处理库在我的应用程序中执行一些 ajax 调用。我有一个问题,我认为归结为服务调用的延迟响应。以下是我认为有问题的部分代码。问题出在 getDefaultReviewerT
我想替换 Javascript confirm() 函数以允许自定义按钮而不是 Yes/Cancel。我尝试搜索,但所有解决方案都是事件驱动的,例如 jquery 对话框(代码不等待响应但它是事件驱动
我知道有几个类似的问题,但是,其中的示例并没有说明问题,或者我无法从中获利 - 我真可耻。 所以我的问题是在带有 GUI 的简单应用程序中加载图像。例如: 我在 "D:\javaeclipseprog
我想用不同的颜色为表格的行着色,所以我正在使用它 table#news tr:nth-child(even) { background-color: red; } table#news
下面的测试代码不起作用 from("direct:start").setExchangePattern(ExchangePattern.InOnly).threads(5).delay(2000).b
我在 python 中实现的第一个项目之一是对棒渗流进行蒙特卡罗模拟。代码不断增长。第一部分是棍子渗滤的可视化。在宽度*长度的区域中,使用随机起始坐标和方向绘制具有一定长度的直棒的定义密度(棒/面积)
跟踪直接文件下载的最佳方法是什么?我找到了一些解决方案,例如这个: http://www.gayadesign.com/diy/download-counter-in-php-using-htacce
我在一个线程中有一个直接的 ByteBuffer(堆外),并使用 JMM 给我的一种机制将它安全地发布到另一个线程。 happens-before 关系是否扩展到由 ByteBuffer 包装的 na
当我测试直接 java.nio.ByteBuffer 的读取性能时,我注意到绝对读取平均比相对读取快 2 倍。此外,如果我比较相对读取与绝对读取的源代码,除了相对读取维护和内部计数器外,代码几乎相同。
我知道这个问题已经被问了无数次,并且在很多情况下都得到了答案。我相信我已经阅读了其中的大部分内容。不幸的是,我在这上面能找到的一切 简单说明 ElementRef.nativeElement不好,不要
回到一些 C 语言工作。 我的许多函数看起来像这样: int err = do_something(arg1, arg2, arg3, &result); 根据意图,结果由函数填充,返回值是调用的状态
当我将 XML 提交到 https://secure-test.WorldPay.com/jsp/merchant/xml/paymentService.jsp 时: Personalised
就目前而言,这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持,但这个问题可能会引起辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the he
我的 Angular 路由行为有问题。刷新或输入的 url 像/user 总是将我重定向到/home。我还在 index.html 文件中设置了 。通过单击导航菜单按钮一切正常。但是一旦我尝试刷新页面
我是一名优秀的程序员,十分优秀!