- r - 以节省内存的方式增长 data.frame
- ruby-on-rails - ruby/ruby on rails 内存泄漏检测
- android - 无法解析导入android.support.v7.app
- UNIX 域套接字与共享内存(映射文件)
我有一个用 Lucene 构建的 java webapp,我不断收到各种“文件已经关闭”的异常——这取决于我使用的目录实现。我已经能够从 Lucene 中获取“java.io.IOException Bad File Descriptor”和“java.nio.channels.ClosedChannelException”,通常围绕 IndexReader 的 AlreadyClosedException。
有趣的是,我还没有关闭 IndexReader,而且文件描述符似乎会自行失效。我用的是最新版的Lucene 3.0(还没来得及升级出3.0系列),最新版的Oracle的JDK6,最新版的Tomcat 6和最新版的CentOS。我可以在其他 Linux 系统上使用相同的软件复制错误,但不能在 Windows 系统上复制,而且我没有 OSX PC 来测试。 Linux 服务器是用 qEmu 虚拟化的,如果这很重要的话。
这似乎也与负载相关 - 这种情况发生的频率对应于 Tomcat 正在服务的请求量/秒(针对这个特定的 webapp)。例如,在一台服务器上,每个请求都按预期完成,直到它必须处理 ~2 个请求/秒,然后大约 10% 的请求开始从它们下面关闭它们的文件描述符,中间请求(代码检查有效的 IndexReader 对象和在处理请求的开始创建一个)。一旦达到大约 3 个请求/秒,所有请求都会开始失败,文件描述符错误。
我最好的猜测是不知何故在操作系统级别存在资源匮乏并且操作系统正在清理 fds ......但这只是因为我已经排除了所有其他想法。我已经检查了 ulimits 和文件系统 fd 限制,打开的描述符的数量远低于任一限制(sysctl fs.file-nr
的示例输出:1020 0 203404,ulimit -n:10240 ).
我几乎完全没有要测试的东西,而且我离解决这个问题的时间也比我发现它的那一天更近了。有没有人经历过类似的事情?
编辑 07/12/2011:我找到了一台 OSX 机器用于一些测试,并确认这发生在 OSX 上。我还在物理 Linux 机器上进行了测试并复制了这个问题,所以我唯一无法复制这个问题的操作系统是 Windows。我猜这与文件描述符的 POSIX 处理有关,因为这似乎是两个测试系统之间唯一相关的区别(JDK 版本、tomcat 版本和 webapp 在所有平台上都是相同的)。
最佳答案
您可能没有在 Windows 上看到这种情况的原因可能是它的 FSDirectory.open 默认使用 SimpleFSDirectory。
查看 FSDirectory 和 NIOFSDirectory 顶部的警告:http://lucene.apache.org/java/3_3_0/api/core/org/apache/lucene/store/NIOFSDirectory.html 处的红色文本:
注意:如果同时线程在 IO 上被阻塞,则在线程中断时直接或间接从线程访问此类可以立即关闭底层文件描述符。文件描述符将保持关闭状态,随后对 NIOFSDirectory 的访问将抛出 ClosedChannelException。如果您的应用程序使用 Thread.interrupt() 或 Future.cancel(boolean),您应该使用 SimpleFSDirectory 而不是 NIOFSDirectory
关于java - 我的 java 进程的文件描述符变为 "bad",我不知道为什么,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/6653305/
我是 Linux 的新手,并且继承了保持我们的单一 Linux 服务器运行的职责。这是我们的SVN服务器,所以比较重要。 原来在我之前维护它的人有一个 cron 任务,当有太多 svnserve 进程
Node 虽然自身存在多个线程,但是运行在 v8 上的 JavaScript 是单线程的。Node 的 child_process 模块用于创建子进程,我们可以通过子进程充分利用 CPU。范例:
Jenkins 有这么多进程处于事件状态是否正常? 我检查了我的设置,我只配置了 2 个“执行者”... htop http://d.pr/i/RZzG+ 最佳答案 您不仅要限制 Master 中的执
我正在尝试在 scala 中运行这样的 bash 命令: cat "example file.txt" | grep abc Scala 有一个特殊的流程管道语法,所以这是我的第一个方法: val f
很难说出这里要问什么。这个问题模棱两可、含糊不清、不完整、过于宽泛或夸夸其谈,无法以目前的形式得到合理的回答。如需帮助澄清此问题以便重新打开,visit the help center . 关闭 1
我需要一些帮助来理解并发编程的基础知识。事实上,我读得越多,就越感到困惑。因此,我理解进程是顺序执行的程序的一个实例,并且它可以由一个或多个线程组成。在单核CPU中,一次只能执行一个线程,而在多核CP
我的问题是在上一次集成测试后服务器进程没有关闭。 在integration.rs中,我有: lazy_static! { static ref SERVER: Arc> = {
我正在使用 Scala scala.sys.process图书馆。 我知道我可以用 ! 捕获退出代码和输出 !!但是如果我想同时捕获两者呢? 我看过这个答案 https://stackoverflow
我正在开发一个C++类(MyClass.cpp),将其编译为动态共享库(MyClass.so)。 同一台Linux计算机上运行的两个不同应用程序将使用此共享库。 它们是两个不同的应用程序。它不是多线程
我在我的 C 程序中使用 recvfrom() 从多个客户端接收 UDP 数据包,这些客户端可以使用自定义用户名登录。一旦他们登录,我希望他们的用户名与唯一的客户端进程配对,这样服务器就可以通过数据包
如何更改程序,以便函数 function_delayed_1 和 function_delayed_2 仅同时执行一次: int main(int argc, char *argv[]) {
考虑这两个程序: //in #define MAX 50 int main(int argc, char* argv[]) { int *count; int fd=shm
请告诉我如何一次打开三个终端,这样我的项目就可以轻松执行,而不必打开三个终端三次然后运行三个exe文件。请问我们如何通过脚本来做到这一点,即打开三个终端并执行三个 exe 文件。 最佳答案 在后台运行
我编写了一个监控服务来跟踪一组进程,并在服务行为异常、内存使用率高、超出 CPU 运行时间等时发出通知。 这在我的本地计算机上运行良好,但我需要它指向远程机器并获取这些机器上的进程信息。 我的方法,在
关闭。这个问题不符合Stack Overflow guidelines .它目前不接受答案。 想改进这个问题?将问题更新为 on-topic对于堆栈溢出。 8年前关闭。 Improve this qu
我有一个允许用户上传文件的应用程序。上传完成后,必须在服务器上完成许多处理步骤(解压、存储、验证等...),因此稍后会在一切完成后通过电子邮件通知用户。 我见过很多示例,其中 System.Compo
这个问题对很多人来说可能听起来很愚蠢,但我想对这个话题有一个清晰的理解。例如:当我们在 linux(ubuntu, x86) 上构建一个 C 程序时,它会在成功编译和链接过程后生成 a.out。 a.
ps -eaf | grep java 命令在这里不是识别进程是否是 java 进程的解决方案,因为执行此命令后我的许多 java 进程未在输出中列出。 最佳答案 简答(希望有人写一个更全面的): 获
我有几个与内核态和用户态的 Windows 进程相关的问题。 如果我有一个 hello world 应用程序和一个暴露新系统调用 foo() 的 hello world 驱动程序,我很好奇在内核模式下
我找不到很多关于 Windows 中不受信任的完整性级别的信息,对此有一些疑问: 是否有不受信任的完整性级别进程可以创建命名对象的地方? (互斥锁、事件等) 不受信任的完整性级别进程是否应该能够打开一
我是一名优秀的程序员,十分优秀!