- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有一个运行缓慢的查询,我想出了一个更快的替代方案,但我需要一些帮助来理解为什么原始查询如此慢。
我的问题的简化版本使用两个表。第一个表的简化版本称为配置文件,是
`profiles` (
`id` int(11),
`title` char(255),
`body` text,
`pin` int(11),
PRIMARY KEY (`id`),
UNIQUE KEY `pin` (`pin`)
)
我的第二个表 Calls 的简化版本是
`calls` (
`id` int(11),
`pin` int(11),
`duration` int(11),
PRIMARY KEY (`id`),
KEY `ivr_id` (`pin`)
)
我的查询应该获取完整的配置文件,以及配置文件收到的调用数量。我使用的查询是
SELECT profiles.*, COUNT(*) AS num_calls
FROM profiles
LEFT JOIN calls
ON profiles.pin = calls.pin
GROUP BY profiles.pin
对于大约 100 个配置文件和大约 250,000 个调用,此查询大约需要 10 秒,速度很慢。
如果我修改查询以仅从配置文件中选择标题,而不是所有列,则查询速度会快得多。如果我修改查询以删除分组依据,它也会快得多。如果我只是从配置文件表中选择所有内容,那么它也是一个快速查询。
我的实际配置文件表有更多的文本和字符字段。选择的文本字段越多,查询速度越差。当文本字段不参与 JOIN 或 GROUP 时,为什么它们会导致查询如此缓慢?
我想出了一个稍微不同的查询,它的速度要快得多,不到半秒。该查询是:
SELECT profiles.*, temp.readings
FROM profiles
LEFT JOIN (
SELECT pin ,COUNT(*) AS readings
FROM calls
GROUP BY pin
) AS temp
ON temp.pin=profiles.pin
虽然我认为我已经解决了速度问题,但我想了解是什么导致了第一个查询中的问题。
========更新========
我刚刚分析了这两个查询,整个速度差异在于“发送数据”部分。慢查询约10秒,快查询约0.1秒
========更新2========
与@scaisEdge讨论后,我想我可以重新表述我的问题。假设表 T1 有约 40 列,其中 8 列为 TEXT 类型,约 100 行,而表 T2 有 5 列 INT 和 VARCHAR 类型,有约 250,000 行。为什么会这样:
SELECT T1.* FROM T1 is fast
SELECT T1.* FROM T1 JOIN T2 GROUP BY T1.joinfield is slow
SELECT T1.selectfield FROM T1 JOIN T2 GROUP BY T1.joinfield
如果 selectfield 是 INT 或 VARCHAR
最佳答案
这应该发生,因为
第一个查询将 100 个配置文件与 250,000 个调用连接起来,然后按结果分组减少返回的行。 select profile.* 意味着每个匹配行对配置文件表数据的完全访问
然后将第二个查询连接100个配置文件与TEMP子查询返回的行数(可能远小于250,000),减少对表配置文件数据的访问次数
尝试仅访问固定列,而不是配置文件。*
SELECT profiles.pin, COUNT(*) AS num_calls
FROM profiles
LEFT JOIN calls ON profiles.pin = calls.pin
GROUP BY profiles.pin
建议您注意,只有 5.7 版本之前的 mysql 版本才允许在第一个查询中使用 group by .. 因为在 select 子句中使用 group by 列而不提及列,并且不受聚合函数的影响并且默认不允许在 GROUP BY 中提及并产生错误..
关于mysql - 了解为什么当有大量文本列时分组查询会变慢,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/55560700/
您好,我正在处理 BIRT 报告。我有一个查询,我必须对父级的重复数据进行分组,但子级也不能分组! 在我的查询中: item 是父项,item_ledger_entry 是子项。我有来自 item.N
我正在使用 GA API。 这是针对 MCF 目标报告(底部)的标准目标完成指标表(顶部) 看一下这个: 总数加起来 (12,238),但看看按 channel 分组的分割有多么不同!我以为这些会很接
我正在开发一个流量计数器,我想获得 IP 和重复计数,但是如何? 就像是 :select ip, count(ip) from Redirect 返回 : null total ip count 重定
我尝试编写一个正则表达式来匹配条件表达式,例如: a!=2 1+2=2+a 我尝试提取运算符。我当前的正则表达式是“.+([!=<>]+).+” 但问题是匹配器总是尝试匹配组中可能的最短字符串
在 MS Transact SQL 中,假设我有一个这样的表(订单): Order Date Order Total Customer # 09/30/2008 8
我想按 m.ID 分组,并对每个 m.id 求和 (pm.amount_construction* prod.anzahl) 实际上我有以下结果: Meterial_id | amount_const
我想根据多列中的值对值进行分组。这是一个例子: 我想得到输出: {{-30,-50,20},{-20,30,60},{-30,NULL or other value, 20}} 我设法到达: SELE
我正在尝试找出运行此查询的最佳方式。我基本上需要返回在我们的系统中只下了一个订单的客户的“登录”字段列表(登录字段基本上是客户 ID/ key )。 我们系统的一些背景...... 客户在同一日期下的
给定以下mysql结果集: id code name importance '1234', 'ID-CS-B', 'Chocolate Sauce'
大家好,我的数据框中有以下列: LC_REF 1 DT 16 2C 2 DT 16 2C 3 DT 16 2C 1 DT 16 3C 6 DT 16 3C 3
我有这样的 mongoDB 集合 { "_id" : "EkKTRrpH4FY9AuRLj", "stage" : 10, }, { "_id" : "EkKTRrpH4FY9
假设我有一组数据对,其中 index 0 是值,index 1 是类型: input = [ ('11013331', 'KAT'), ('9085267',
java中用stream进行去重,排序,分组 一、distinct 1. 八大基本数据类型 List collect = ListUtil.of(1, 2, 3, 1, 2).stream().fil
基本上,我从 TABLE_A 中的这个开始 France - 100 France - 200 France - 300 Mexico - 50 Mexico - 50 Mexico - 56 Pol
我希望这个正则表达式 ([A-Z]+)$ 将选择此示例中的最后一次出现: AB.012.00.022ABC-1 AB.013.00.022AB-1 AB.014.00.022ABAB-1 但我没有匹配
我创建了一个数据透视表,但数据没有组合在一起。 任何人都可以帮助我获得所需的格式吗? 我为获取数据透视表而编写的查询: DECLARE @cols AS NVARCHAR(MAX), -- f
我想按时间段(月,周,日,小时,...)选择计数和分组。例如,我想选择行数并将它们按 24 小时分组。 我的表创建如下。日期是时间戳。 CREATE TABLE MSG ( MSG_ID dec
在 SQL Server 2005 中,我有一个包含如下数据的表: WTN------------Date 555-111-1212 2009-01-01 555-111-1212 2009-
题 假设我有 k 个标量列,如果它们沿着每列彼此在一定距离内,我想对它们进行分组。 假设简单 k 是 2 并且它们是我唯一的列。 pd.DataFrame(list(zip(sorted(choice
问题 在以下数据框中 df : import random import pandas as pd random.seed(999) sz = 50 qty = {'one': 1, 'two': 2
我是一名优秀的程序员,十分优秀!