- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我们有一个分析图表,它首先查询数据库日志表,从优化查询中提取所有相关内容,仅选择所需的内容并获取相关的开始和结束 ID,因为该表有数百万条记录。一旦提取了初始查询,我们就使用 ColdFusion 的查询查询来处理该数据以显示不同的图表。
您可以看到此示例中的实际外部数据库调用在 31 毫秒内抓取了 2,240 条记录:
qryGetLogs (Datasource=ourDSN, Time=31ms, Records=2204)
我们有一个图表,显示一周中每一天每小时的 View ,然后构建一个 jQuery 图表来显示它们。从最初的设计来看,这些查询执行时间几乎可以忽略不计,通常为 0 毫秒。因为我们每周 7 天循环一天 (24) 中的每个小时,即 168 次查询 - 这是不进行多次外部数据库调用的主要原因之一。
现在看来,许多(但不是全部)这些查询的查询运行时间比初始数据库调用长 100 倍以上。他们中的大多数都使用 BETWEEN 日期范围函数来选择每天和小时部分的记录:
qryViewsPerHour (Datasource=, Time=4312ms, Records=5)
SELECT createdOn, DayOfWeek
FROM qryGetLogs
WHERE (CreatedOn BETWEEN '2012-09-03 0:00:00' AND '2012-09-03 0:59:59')
AND (DayOfWeek = 2)
您可以看到另一个查询的查询花费了 4,312 毫秒,并且正在搜索包含 2,240 条记录的查询。以下是许多后续查询的查询时间:
qryViewsPerHour (Datasource=, Time=4610ms, Records=5)
qryViewsPerHour (Datasource=, Time=4187ms, Records=8)
qryViewsPerHour (Datasource=, Time=5062ms, Records=6)
qryViewsPerHour (Datasource=, Time=3985ms, Records=0)
qryViewsPerHour (Datasource=, Time=4828ms, Records=2)
qryViewsPerHour (Datasource=, Time=5750ms, Records=0)
qryViewsPerHour (Datasource=, Time=3016ms, Records=4)
qryViewsPerHour (Datasource=, Time=3625ms, Records=6)
qryViewsPerHour (Datasource=, Time=6265ms, Records=11)
所以你可以通过这些查询看到,它增加了 40 秒的加载时间!但请注意,下一个查询只需 78 毫秒,记录数比之前的任何查询都多,而且之后的许多查询时间都更好:
qryViewsPerHour (Datasource=, Time=78ms, Records=18)
qryViewsPerHour (Datasource=, Time=62ms, Records=7)
qryViewsPerHour (Datasource=, Time=63ms, Records=12)
qryViewsPerHour (Datasource=, Time=78ms, Records=34)
qryViewsPerHour (Datasource=, Time=78ms, Records=9)
这些美好时光会持续一段时间,然后砰!回到 2-6 秒的查询。
qryViewsPerHour (Datasource=, Time=4891ms, Records=13)
qryViewsPerHour (Datasource=, Time=1984ms, Records=8)
qryViewsPerHour (Datasource=, Time=4875ms, Records=4)
qryViewsPerHour (Datasource=, Time=6203ms, Records=0)
总而言之,原本需要几秒钟加载的内容现在需要 100-400 秒加载,而这只是每周报告!我们还将它用于月度报告。
我已经监控了服务器并确保我是唯一运行该请求的人或进程,所以不应该是CPU的资源被其他东西占用了,而且我还监控了CPU请求并且它是可靠的并稳定地被 JRUN.exe 使用。
有人对这个问题有什么建议吗?这让我发疯!
感谢您的帮助。
最佳答案
通常,查询的查询速度非常快。然而,有时,当数量增加时,可能需要更长的时间。由于您完全符合 ColdFusion 文档建议的 5,000 到 50,000 行,因此这只能是一回事。有些地方正在翻译一些数据以获得结果。在本例中,它是您指定的日期时间。时间值有一个前导零。我知道这听起来很奇怪。
更改: WHERE(创建于“2012-09-03 0:00:00”和“2012-09-03 0:59:59”之间)
收件人: WHERE(创建于“2012-09-03 00:00:00”和“2012-09-03 00:59:59”之间)
我对此进行了测试,发现结果更好。
关于performance - ColdFusion 查询的查询速度比数据库调用本身慢 100 倍(记录数相对较低),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12290835/
自己试试看: import pandas as pd s=pd.Series(xrange(5000000)) %timeit s.loc[[0]] # You need pandas 0.15.1
我最近开始使用 Delphi 中的 DataSnap 来生成 RESTful Web 服务。在遵循 Marco Cantu 本人和互联网上其他几个人的指导后,我成功地使整个“链条”正常工作。 但是有一
我一直在为操作系统类(class)编写以下代码,但结果有些奇怪。该代码创建x线程并同时运行它们,以便将两个平方矩阵相乘。每个线程将输入矩阵的Number_of_rows/Number_of_threa
我正在尝试确定何时使用 parallel包以加快运行某些分析所需的时间。我需要做的一件事是创建矩阵,比较具有不同行数的两个数据框中的变量。我在 StackOverflow 上问了一个关于有效方法的问题
我最近对我的代码进行了一些清理,并在此过程中更改了此内容(不完全是真实的代码): read = act readSTRef test1 term i var = do t v^!terms.
我正在计时查询和同一个查询的执行时间,分页。 foreach (var x in productSource.OrderBy(p => p.AdminDisplayName) .Wher
我正在开发一个项目 (WPF),我有一个 Datagrid 从数据库加载超过 5000 条记录,所以我使用 BackgroundWorker 来通知用户数据正在加载,但它太慢了,我需要等待将近 2分钟
我在查询中添加 ORDER BY 时遇到问题。没有 ORDER BY 查询大约需要 26ms,一旦我添加 ORDER BY,它大约需要 20s。 我尝试了几种不同的方法,但似乎可以减少时间。 尝试 F
我是 Android 开发新手,遇到了性能问题。当我的 GridView 有太多项目时,它会变得有点慢。有什么方法可以让它运行得更快一些吗? 这是我使用的代码: 适配器: public class C
这里的要点是: 1.设置query_cache_type = 0;重置查询缓存; 2.在 heidisql(或任何其他客户端 UI)中运行任何查询 --> 执行,例如 45 毫秒 3.使用以下代码运行
想象下表: CREATE TABLE drops( id BIGSERIAL PRIMARY KEY, loc VARCHAR(5) NOT NULL, tag INT NOT
我的表 test_table 中的示例数据: date symbol value created_time 2010-01-09 symbol1
首先,如果已经有人问过这个问题,我深表歉意,至少我找不到任何东西。 无论如何,我将每 5 分钟运行一次 cron 任务。该脚本加载 79 个外部页面,而每个页面包含大约 200 个我需要在数据库中检查
我有下面的 SQL 代码,它来自 MySQL 数据库。现在它给了我期望的结果,但是查询很慢,我想我应该在进一步之前加快这个查询的速度。 表agentstatusinformation有: PKEY(主
我需要获取一个对象在 Core Data 中数千个其他对象之间的排名。现在,这是我的代码: - (void)rankMethod { //Fetch all objects NSFet
我正在编写一个应用程序,我需要在其中读取用户的地址簿并显示他所有联系人的列表。我正在测试的 iPhone 有大约 100 个联系人,加载联系人确实需要很多时间。 ABAddressBookRef ad
我正在使用 javascript 将 160 行添加到包含 10 列的表格中。如果我这样做: var cellText = document.createTextNode(value); cell.a
我是 Swift 的新手,我已经设置了一个 tableView,它从 JSON 提要中提取数据并将其加载到表中。 表格加载正常,但是当表格中有超过 10 个单元格时,它会变得缓慢且有些滞后,特别是它到
我在 InitializeCulture 和 Page_PreInit 事件之间的 asp.net 页面中遇到性能问题。当我重写 DeterminePostBackMode() 时,我发现问题出在 b
我在 Hetzner 上有一个带有 256GB RAM 6 个 CPU(12 个线程) 的专用服务器,它位于德国。我有 CENTOS 7.5。 EA4。 我的问题是 SSL。每天大约 2 小时,我们在
我是一名优秀的程序员,十分优秀!