symfony - 在 Doctrine2 中批量加载实体及其所有子实体的最有效方法

Question

我有一个实体类型，我称之为父实体，与我称之为子实体的一对多关系(许多子实体属于单亲)。

我想做的是尽可能高效地加载父实体及其所有子实体，查询次数越少越好。

默认情况下，根据 Doctrine ，如果我执行类似加载 100 个父实体的操作，然后遍历它们并对子实体执行操作，则至少需要 101 个查询，一个用于加载父实体，一个用于获取所有每个 parent 的 child 。如果我尝试编写一个一次加载所有对象的查询，它会变得非常慢，我只能假设加载的是一个笛卡尔对象，其中包含每个子项的所有 Parent 和 Child 属性的整行。如果我有多个子实体，这个问题会变得更加严重。

我能想到的唯一解决方案是独立查询所有父项和所有子项，然后将它们关联到嵌套循环中。这将它减少到只有两个查询，但似乎......不对。有人对我有任何见解吗？这基本上就是我的想法:

//First, select an array of all parent objects
$parents = "SELECT p FROM parent p WHERE 1 LIMIT 100";

//Select all child elements
$children = "SELECT c FROM children c WHERE c.parent IN ($parents)";

//Loop through all elements and assign them to parents, and parents to children
foreach($children as $child){
    foreach($parents as $parent){
        //All children will have loaded references to their parent object
        if ($child->getParent()->getId() === $parent->getId()){
            //This child belongs to this parent
            $parent->addChild($child);
            $child->setParent($parent);
            continue;
        }
    }
}

编辑 1:

为回应 Tom Corrigan 的以下评论:

按照您的建议使用查询生成器:

$qb->select(['p', 'c'])
   ->from('Parent', 'p')
   ->leftJoin('p.children', 'c')
;

我确实加载了整个对象，但对性能的影响是荒谬的。使用上述查询加载两个父实体以及总共大约 12 个子实体花费了将近 40 秒。如果我加载父实体，然后加载两个子实体，则大约需要 5 毫秒。

编辑 2:

好吧，只有当我基于联接的多对多表进行查询时，才会出现加载时间非常长的问题。如果我像你上面描述的那样做一个简单的选择，它工作得非常快，所以谢谢汤姆，你完美地回答了我的问题。

我不明白的是——这完全是一个不同的问题，但我会在这里提到它，因为它在某种程度上是相关的——这就是为什么当我进行多项选择时，它需要很长时间如果我按选定的子列之一进行过滤的时间。

此示例将另外两个实体添加到组合中，组(多对多与人)和应用程序(一对多与组)。

$qb->select(['p', 'c', 'g', 'a'])
   ->from('Parent', 'p')
   ->leftJoin('p.children', 'c')
   ->join('p.groups','g')
   ->join('g.application','a')
   ->where('a.id = :applicationId')
   ->addGroupBy('p')
   ->setMaxResults(1)
;

这个查询将花费将近一分钟的时间来处理，而如果我在没有额外选择的情况下做同样的事情，就像这样:

$qb->select('p')
   ->from('Parent', 'p')
   ->leftJoin('p.children', 'c')
   ->join('p.groups','g')
   ->join('g.application','a')
   ->where('a.id = :applicationId')       
   ->setMaxResults(1)
;

这需要几毫秒，并且添加额外的实体需要多几毫秒。

有什么想法吗？

Answer 1

这在 Doctrine 中非常简单(如您所料)，但我对文档的搜索并没有明确说明如何执行此操作。但是有一个 fantastic talk由 Guilherme Blanco 撰写，解释了如何执行此操作。 (从幻灯片 22 开始看)

我注意到您提供的示例使用了 DQL，但也可以使用查询构建器来执行此操作。

在 DQL 中:

SELECT p, c
FROM Parent p
LEFT JOIN p.children c

使用QueryBuilder

$qb->select(['p', 'c'])
   ->from('Parent', 'p')
   ->leftJoin('p.children', 'c')
;

运行上述任一查询都只会访问数据库一次，并返回一个父对象数组，其中所有子对象都已完全水化。如果您需要加入更多实体，您可以这样做，但请记住，如果您希望 doctrine 实际上为您混合这些对象，那么您必须将加入的实体添加到 select 语句中。例如:

$qb->select(['p', 'c', 'gc'])
   ->from('Parent', 'p')
   ->leftJoin('p.children', 'c')
   ->leftJoin('c.grandchildren', 'gc')
;