- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有使用 RDS 的 Lambda。我想改进它并使用 Lambda 连接缓存。据我所知,我已经找到了几篇文章,并在我这边实现了它。但是现在,我不确定这是不是正确的方法。
我有 Lambda(运行 Node 8),它有几个与 require 一起使用的文件。我将从 main 函数开始,直到到达 MySQL 初始化程序,这是确切的路径。一切都将非常简单,仅显示运行 MySQL 的代码流:
主要 Lambda:
const jobLoader = require('./Helpers/JobLoader');
exports.handler = async (event, context) => {
const emarsysPayload = event.Records[0];
let validationSchema;
const body = jobLoader.loadJob('JobName');
...
return;
...//
工作代码:
const MySQLQueryBuilder = require('../Helpers/MySqlQueryBuilder');
exports.runJob = async (params) => {
const data = await MySQLQueryBuilder.getBasicUserData(userId);
MySQL构建器:
const mySqlConnector = require('../Storage/MySqlConnector');
class MySqlQueryBuilder {
async getBasicUserData (id) {
let query = `
SELECT * from sometable WHERE id= ${id}
`;
return mySqlConnector.runQuery(query);
}
}
最后是连接器本身:
const mySqlConnector = require('promise-mysql');
const pool = mySqlConnector.createPool({
host: process.env.MY_SQL_HOST,
user: process.env.MY_SQL_USER,
password: process.env.MY_SQL_PASSWORD,
database: process.env.MY_SQL_DATABASE,
port: 3306
});
exports.runQuery = async query => {
const con = await pool.getConnection();
const result = con.query(query);
con.release();
return result;
};
我知道衡量性能会显示实际结果,但今天是星期五,我要到下周晚些时候才能在 Lambda 上运行它……真的,如果知道这将是一个很棒的周末开始我在正确的方向......或不是。
感谢您的投入。
最佳答案
首先要了解 require
在 NodeJS 中是如何工作的。我建议你通过这个 article如果您有兴趣了解更多。
现在,一旦您需要连接,您就永远拥有它,并且不会再次需要它。这符合您正在寻找的内容,因为您不希望每次都创建一个新连接而使数据库不堪重负。
但是,有个问题...
Lambda 冷启动
每当您第一次调用 Lambda 函数时,它都会启动一个容器,其中包含您的函数,并使其保持事件状态大约 5 分钟。只要您一次发出 1 个请求,您很可能(尽管不能保证)每次都会访问同一个容器。但是如果你同时有 2 个请求会发生什么?然后另一个容器将与之前已经预热的容器并行旋转。您刚刚在数据库上创建了另一个连接,现在您有 2 个容器。现在,猜猜如果您有 3 个并发请求会发生什么情况?是的!多一个容器,等于多一个数据库连接。
只要有对您的 Lambda 函数的新请求,默认情况下,它们就会扩展以满足需求(您可以在控制台中配置它以将执行限制为您想要的任意数量的并发执行 - 尊重您的账户限制)
您不能通过在函数调用时简单地要求您的代码来安全地确保您有固定数量的数据库连接。好在这不是你的错。这就是 Lambda 函数的行为方式。
...另一种方法是
在真正的缓存系统中缓存你想要的数据,比如ElasticCache , 例如。然后,您可以让 CloudWatch Event 触发一个 Lambda 函数以一定的时间频率运行。然后此函数将查询您的数据库并将结果存储在外部缓存中。通过这种方式,您可以确保您的数据库连接一次仅由一个 Lambda 打开,因为它会遵守 CloudWatch 事件,结果证明每个触发器只运行一次。
编辑:在 OP 在评论部分发送链接后,我决定添加更多信息以阐明上述文章想要表达的内容
来自文章:
"Simple. You ARE able to store variables outside the scope of our handler function. This means that you are able to create your DB connection pool outside of the handler function, which can then be shared with each future invocation of that function. This allows for pooling to occur."
而这正是您正在做的。这有效!但问题是如果你同时有 N 个连接(Lambda 请求)。如果您不设置任何限制,默认情况下最多可以同时启动 1000 个 Lambda 函数。现在,如果您在接下来的 5 分钟内同时发出另外 1000 个请求,您很可能不会打开任何新连接,因为它们已经在之前的调用中打开并且容器仍然存在。
关于mysql - AWS Lambda - MySQL 缓存,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/54947095/
我阅读了有关 JSR 107 缓存 (JCache) 的内容。 我很困惑:据我所知,每个 CPU 都管理其缓存内存(无需操作系统的任何帮助)。 那么,为什么我们需要 Java 缓存处理程序? (如果C
好吧,我是 jQuery 的新手。我一直在这里和那里搞乱一点点并习惯它。我终于明白了(它并不像某些人想象的那么难)。因此,鉴于此链接:http://jqueryui.com/sortable/#dis
我正在使用 Struts 2 和 Hibernate。我有一个简单的表,其中包含一个日期字段,用于存储有关何时发生特定操作的信息。这个日期值显示在我的 jsp 中。 我遇到的问题是hibernate更
我有点不确定这里发生了什么,但是我试图解释正在发生的事情,也许一旦我弄清楚我到底在问什么,就可能写一个更好的问题。 我刚刚安装了Varnish,对于我的请求时间来说似乎很棒。这是一个Magneto 2
解决 Project Euler 的问题后,我在论坛中发现了以下 Haskell 代码: fillRow115 minLength = cache where cache = ((map fill
我正试图找到一种方法来为我网络上的每台计算机缓存或存储某些 python 包。我看过以下解决方案: pypicache但它不再被积极开发,作者推荐 devpi,请参见此处:https://bitbuc
我想到的一个问题是可以从一开始就缓存网络套接字吗?在我的拓扑中,我在通过双 ISP 连接连接到互联网的 HAProxy 服务器后面有 2 个 Apache 服务器(带有 Google PageSpee
我很难说出不同缓存区域 (OS) 之间的区别。我想简要解释一下磁盘\缓冲区\交换\页面缓存。他们住在哪里?它们之间的主要区别是什么? 据我了解,页面缓存是主内存的一部分,用于存储从 I/O 设备获取的
1.题目 请你为最不经常使用(LFU)缓存算法设计并实现数据结构。 实现 LFUCache 类: LFUCache(int capacity) - 用数据结构的容量 capacity 初始化对象 in
1.题目 请你设计并实现一个满足 LRU (最近最少使用) 缓存 约束的数据结构。 实现 LRUCache 类: ① LRUCache(int capacity) 以正整数作为容量 capacity
我想在访问该 View 时关闭某些页面的缓存。它适用于简单查询模型对象的页面。 好像什么时候 'django.middleware.cache.FetchFromCacheMiddleware', 启
documents为 ExePackage element state Cache属性的目的是 Whether to cache the package. The default is "yes".
我知道 docker 用图层存储每个图像。如果我在一台开发服务器上有多个用户,并且每个人都在运行相同的 Dockerfile,但将镜像存储为 user1_myapp . user2 将其存储为 use
在 Codeigniter 中没有出现缓存问题几年后,我发现了一个问题。我在其他地方看到过该问题,但没有适合我的解决方案。 例如,如果我在 View 中更改一些纯 html 文本并上传新文件并按 F5
我在 Janusgraph 文档中阅读了有关 Janusgraph Cache 的内容。关于事务缓存,我几乎没有怀疑。我在我的应用程序中使用嵌入式 janusgrah 服务器。 如果我只对例如进行读取
我想知道是否有来自终端的任何命令可以用来匹配 Android Studio 中执行文件>使缓存无效/重新启动的使用。 谢谢! 最佳答案 According to a JetBrains employe
我想制作一个 python 装饰器来内存函数。例如,如果 @memoization_decorator def add(a, b, negative=False): print "Com
我经常在 jQuery 事件处理程序中使用 $(this) 并且从不缓存它。如果我愿意的话 var $this = $(this); 并且将使用变量而不是构造函数,我的代码会获得任何显着的额外性能吗?
是的,我要说实话,我不知道varnish vcl,我可以解决一些基本问题,但是我不太清楚,这就是为什么我遇到问题了。 我正在尝试通过http请求设置缓存禁止,但是该请求不能通过DNS而是通过 Varn
在 WP 站点上加载约 4000 个并发用户时遇到此问题。 这是我的配置: F5 负载均衡器 ---> Varnish 4,8 核,32 Gb RAM ---> 9 个后端,4 个核,每个 16 RA
我是一名优秀的程序员,十分优秀!