gpt4 book ai didi

mysql - 如何针对写入优化 MySQL 数据库?

转载 作者:可可西里 更新时间:2023-11-01 08:08:06 26 4
gpt4 key购买 nike

我有一个在 EC2 上运行的写入密集型应用程序。关于如何优化它以便能够在 MySQL 数据库上进行数千个并发写入,有什么想法吗?

最佳答案

写入缩放是一个难题。也许,写入缩放的秘诀在于读取缩放。也就是尽可能缓存读,让写得到所有的吞吐量。

话虽如此,我们可以做很多事情:

1) 从数据模型开始。设计一个数据模型,这样您就永远不会删除或更新表。只有操作是插入。使用生效日期、生效顺序和生效状态,仅使用插入命令即可实现插入、更新和删除操作。这个概念称为 Append Only 模型。检查 RethinkDB..

2) 将 Concurrent Insert 标志设置为 1。这可确保表在读取过程中继续插入。

3) 当你只有在尾部插入时,你可能不需要行级锁。所以,使用 MyISAM(这并不是要从 InnoDB 中拿走任何东西,我稍后会谈到)。

4) 如果这一切都不起作用,请在内存引擎中创建一个副本表。如果您有一个名为 MY_DATA 的表,请在内存表中创建一个名为 MY_DATA_MEM 的表。

5) 将所有 Inserts 重定向到 MEM 表。创建一个 UNIONS 两个表的 View ,并将该 View 用作您的读取源。

6) 编写一个守护进程,定期将 MEM 内容移动到 Main 表并从 Mem 表中删除。将 MOVE 操作实现为 Mem 表上的 Delete 触发器可能是理想的(我希望触发器可以在 Memory Engine 上实现,但不完全确定)。

7) 不要对 MEM 表进行任何删除或更新(它们很慢)还要注意表中键的基数(HASH 与 B-Tree:Low Card -> Hash,High Card-> B 树)

8) 即使以上所有方法都不起作用,也不要使用 jdbc/odbc。移动到 InnoDB 并使用 Handler Socket 接口(interface)进行直接插入(Google for Yoshinori-San MySQL)

我自己没有使用过 HS,但基准测试令人印象深刻。 Google Code 上什至有一个 Java HS 项目。

希望对您有所帮助..

关于mysql - 如何针对写入优化 MySQL 数据库?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/4504075/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com