c# - SQL 或 C# 的配对速度更快吗？

Question

我有很多数据需要根据一些简单的标准进行配对。有一个时间窗口(两条记录都有一个 DateTime 列)，如果一条记录与另一条记录在时间上非常接近(在 5 秒内)则它是潜在匹配，时间上最接近的记录被认为是完全匹配。还有其他字段也有助于缩小范围。

我写了一个存储过程，它在返回之前在服务器上进行匹配完整、匹配的数据集到 C# 应用程序。我的问题是，提取 100 万 (x2) 行并在 C# 中处理它们会更好，还是 sql server 更适合执行此匹配？如果是 Sql server，那么使用日期时间字段配对数据的最快方法是什么？

现在我选择表 1/表 2 中的所有记录到临时表中，遍历表 1 中的每条记录，在表 2 中查找匹配项并将匹配项(如果存在)存储在临时表中，然后我删除它们自己的临时表中的两条记录。

为了我正在编写的游戏，我不得不匆忙完成这篇文章，所以请原谅糟糕(非常糟糕)的程序......它有效，只是效率低得可怕!整个 SP 在 pastebin 上可用:http://pastebin.com/qaieDsW7

我知道 SP 写得不好，所以说“嘿，笨蛋……写得更好”没有帮助!我正在寻求改进它的帮助，或者关于我应该如何以不同的方式做整件事的帮助/建议!我有大约 3/5 天的时间来重写它，我可以将截止日期推迟一点，但如果你们能及时帮助我，我宁愿不这样做! :)

谢谢!

Answer 1

最终，在 99% 的情况下，在数据库端编译数据是更可取的，因为它专为数据处理而设计(通过使用索引、关系等)。您的许多代码可以通过使用连接来以您需要的格式完全编译数据来合并。事实上，您可以完全绕过几乎所有的临时表，而只需填充一个主事件临时表。

一般模式是这样的:

INSERT INTO #Events
SELECT <all interested columns>
FROM 
    FireEvent
    LEFT OUTER JOIN HitEvent ON <all join conditions for HitEvent>

通过这种方式，您可以将所有触发事件与零个或多个 HitEvent 匹配。在我们聊天讨论之后，您甚至可以通过将其包装在子查询中并使用窗口函数将其限制为零个或一个命中事件 ROW_NUMBER() OVER (PARTITION BY HitEvent.EventID ORDER BY ...) AS HitRank 并将 WHERE HitRank = 1 添加到外部查询。这最终就是您最终所做的并获得了您期望的结果(在此过程中需要一些工作和学习)。