java - OrientDB - Java进程: memory out of control

Question

我编写了一个并行算法来完成对存储在 Orient 表中的数据的计算。

为了控制内存，我尝试对这些数据进行分页，并尝试并行化我的关于提高性能的算法(使用 Future 任务)。

我的东方设置是:

set ORIENTDB_SETTINGS=-Dprofiler.enabled=true -Dstorage.diskCache.bufferSize=12906

set JAVA_OPTS_SCRIPT=-Xmx4096M -Djna.nosys=true -XX:+HeapDumpOnOutOfMemoryError -XX:PermSize=1024m 
-XX:MaxPermSize=1024m
-Djava.awt.headless=true -Dfile.encoding=UTF8 -Drhino.opt.level=9
-agentlib:jdwp=transport=dt_socket,server=y,suspend=y,address=5005

Xmx 固定为 4 GB(4096MB 作为上部配置)，我尝试使用 JVisualVM 监视我的 Orient 进程，如下图所示:

在 JVIsualVm 进程上使用堆内存始终低于其限制，但在 Windows 进程列表中，同一进程(我突出显示了 PID)占用 7 GB 并且始终在增长。

这是我的代码:

for (Callable worker : workers) {
    Future<Boolean> submit = executor.submit(worker);
    futures.add(submit);
}
workers.clear();
workers = null;
boolean success = true;

for (Future<Boolean> future : futures) {
    try {
        if (Boolean.TRUE.equals(future.get())) {
            [CODE BLOCK]
        } else {
            [CODE BLOCK FOR REPROCESS FUTURE]
        }
    } catch (InterruptedException e) {
        e.printStackTrace();
    } catch (ExecutionException e) {
        e.printStackTrace();
    }
}

Answer 1

根据你的图片，进程已经消耗了7GB内存，根据你的设置-Dstorage.diskCache.bufferSize=12906你允许消耗略小于13GB的内存。如果您希望处理消耗更少的内存，您应该在设置中更改消耗内存的最大限制。磁盘缓存从不释放内存来实现最广泛查询的最短查询响应时间。