- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有一个 Spring 应用程序,使用 Hibernate,并通过 Hibernate-Search 连接到 Elasticsearch。
为了简化示例,我将只放置必需的注释和代码。
我有一个实体 A,包含在多个 B 实体中(很多,实际上是 ~8000)。
B 实体还包含许多嵌入的详细信息(实体 C、E、...)。
这些实体都与 @IndexedEmbedded 和 @ContainedIn Hibernate-Search 注释相关联(请参见下面的示例)。
我创建了一项服务,修改了 A 对象的字段,并通过 flushToIndexes 强制刷新。
刷新时,Hibernate-Search 更新 A 索引,并且由于 @ContainedIn,在 8000 个 B 索引上传播。但是为了更新 B 索引,由于某种原因,Hibernate-Search 一次加载每 8000 个链接到 A 对象的 B 对象,以及那些 B 对象(C、E 等)中包含的所有详细信息。
所有这一切都需要很长时间,并且只会以 java.lang.OutOfMemoryError: Java heap space 结束。
@Entity
@Table(name = "A")
@Indexed
public class A {
@ContainedIn
@OneToMany(fetch = FetchType.LAZY, mappedBy = "a")
private Set<B> bCollection;
@Field
@Column(name = "SOME_FIELD")
private String someField; // Value updated in the service
}
@Entity
@Table(name = "B")
@Indexed
public class B {
@IndexedEmbedded
@ManyToOne(fetch = FetchType.LAZY)
@JoinColumn(name = "A_ID")
private A a;
@IndexedEmbedded
@OneToOne(fetch = FetchType.LAZY, mappedBy = "b")
@Fetch(FetchMode.JOIN)
private C c; // Some other details
@IndexedEmbedded
@OneToMany(fetch = FetchType.LAZY, mappedBy = "b")
private Set<E> eCollection; // Some other details
}
// My service
aObject.setSomeField("some value");
fullTextSession.flushToIndexes();
增加 JVM 分配的内存(从 8GB 到 24GB,这对于约 10000 个对象来说实际上很多)没有解决任何问题。所以我假设整个数据集的加载需要超过 24 GB...
然而,问题似乎比看起来更复杂~
那是一个错误吗?那很常见吗?我做错了什么 ?我该如何解决?
是否有一些隐藏的 Hibernate-Search 配置来避免这种行为?
最佳答案
这是 Hibernate Search 的一个限制。 @ContainedIn
仅对小型关联表现相对较好;像你这样的大型实体确实会触发所有关联实体的加载,并且性能会很差,或者在最坏的情况下会触发 OOM。
问题比较复杂,目前还没有修复。我们需要为 @ContainedIn
( HSEARCH-1937 ) 使用查询而不是关联,这会相当简单。但更重要的是,我们需要执行分块(定期刷新/清除),这要么对用户 session 产生副作用,要么在用户事务之外执行(HSEARCH-2364),这两者都可能产生不良后果。
解决方法是不在A.bCollection
上添加@ContainedIn
,并手动处理重新索引:https://docs.jboss.org/hibernate/search/5.11/reference/en-US/html_single/#manual-index-changes
类似于我在 another answer 中提到的内容,您可以采用以下两种策略之一:
B
实体,例如每晚。A
更改时,将“此实体已更改”的信息保存在某处(这可以像在实体 A 上存储“最后更新日期/时间”一样简单,或者添加事件表中的一行)。同时,有一个周期性的过程检查更改,加载受影响的类型 B 的实体,并重新索引它们。最好以可管理的大小分批进行,如果可以的话,每批处理一个事务(这样可以避免一些麻烦)。第一个解决方案相当简单,但有一个很大的缺点,即 Person
索引最多会过时 24 小时。根据您的用例,这可能是好的,也可能不是。如果您有许多 B 类型的实体(读作:数百万)并且完全重建索引需要的时间超过几分钟,这也可能不可行。
第二种解决方案容易出错,您基本上会执行 Hibernate Search 的工作,但它甚至适用于非常大的表,并且数据库更改和重建索引之间的延迟会短得多。
关于java - Hibernate-Search flushToIndexes 导致 java.lang.OutOfMemoryError(堆空间),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/53729914/
什么是 hibernate 和n- hibernate ?我可以在 Visual Studio 2008 中使用它进行 C# Web 应用程序开发吗?请给我建议...我是 asp.net Web 应用
我有一个不系统地发生的异常(exception)。 我试图通过在每次迭代中刷新和清理 session 来解决此问题,但没有成功。 [quartzScheduler_Worker-7] ERROR jd
使用 Hibernate 在数据库中存储 IP 地址的最佳类型是什么? 我虽然是 Byte[] 或 String,但有没有更好的方法,或者你用什么? @Column(name = "range_fr
我正在尝试制定一个公式来选择用户个人资料的用户友好名称。它选择名字 + ' ' + 姓氏 如果其中至少有一个不为空且不为空(包含非空白字符),否则选择 短名称 (条件相同),最后,如果 短名称 为空或
在hibernate中,是否可以将鉴别器作为一个实体?例如,如果我将 Department 作为基类,将 AdminDepartment 和 ProcessingDepartment 作为子类。 De
我只想从表中获取一些列值。因此,我已经使用投影来实现这一目标。该代码有效,但我认为它无效。 我的问题是当我使用ProjectionsList并将标准条件列表设置为ArrayList时-Bulletin
你好: 我对 hibernate 缓存缓存的内容感到困惑。 从文档中,我知道 hibernate 中有缓存类型。 一级 :交易级别。 似乎要被 session 持久化的实体被缓存在这里。 二级缓存 :
我遇到了一个情况: save或update hibernate 的目标表中的某些数据 在目标表上有一个触发器,该触发器将在目标表的insert或update操作之前执行 由 hibernate 将此记
我有一个名为 Master_Info_tbl 的表。它是一个查询表: 这是该表的代码: @Entity @Table(name="MASTER_INFO_T") public class Code
我想知道如何在 Hibernate 查询语言中使用日期文字。我在我的 JPA 项目中做了如下操作(作为 Eclipselink 提供者)并且它工作正常。 SELECT m FROM Me m WHER
@Entity public class Troop { @OneToMany(mappedBy="troop") public Set getSoldiers() { ...
我正在尝试使用 hibernate 查询删除表 'user_role' 中的所有行。但每次我都会出错。有人可以帮我吗。 DaoImpl @Override public void deleteAll(
不是将数据库操作分散在四个 (osgi) 包中,而是在那里做略有不同的事情。我想创建一个负责所有持久性问题的(简单的)OSGi 包。我觉得这并不像听起来那么简单,因为“每个包都有独特的类加载器”。 因
这就是我使用生成器的方式: private Integer id; 我看到的行为是: 创建第一个对象 hibernate 分配 id = 1 删除该对象 关闭服务
对象级别的实体和值类型有什么区别。我知道实体将有一个 id 但值不会,但为什么我们需要不同的方法来映射实体与值类型? 这样做是为了让hibernate可以对值类型应用任何优化吗? 最佳答案 一个实体已
我正在使用 HibernateTemplate.findByCriteria 方法进行一些查询。现在我想在标准上创建一些 SQL 限制,比如 criteria.add(Restrictions.sql
所以我有以下代码: Query query = session.createQuery("from Weather"); List list = query.list();
如何使用Hibernate映射具有多个实体的 View ? 问候, 混沌 最佳答案 请参见Hibernate文档中第5.1.3节“类”,紧接在“Id”节之前: There is no differen
据我所知,Hibernate 有两种类型的实现 JPA的实现(2)(@Entity,@Table注解) 扩展到旧的(传统的) hibernate (没有 JPA),使用 HSQL 查询,没有注释 如果
我需要一个将条目存储为键值对的集合(因此我可以通过键查找值),但我需要一个允许多个值使用 hibernate 共享同一个键的集合 最佳答案 一个键具有多个值的映射称为多映射 - 在 Apache 公共
我是一名优秀的程序员,十分优秀!