个人中心
文章发布
退出
作者热门文章
- VisualStudio2022插件的安装及使用-编程手把手系列文章
- pprof-在现网场景怎么用
- C#实现的下拉多选框，下拉多选树，多级节点
- 【学习笔记】基础数据结构：猫树
57
4
印象深刻的是刚进入一家公司，给了一个excel，里面的内容是线上慢查询的sql。因为sql太长过于复杂，然后就开启了顺着sql梳理业务的模式.
这里只是单纯的优化sql,但出现系统慢的情况，IO优化应该按照以下思路进行.
每个人理解的性能优化都不一样，对于数据库的性能优化，我理解的就是响应时间更短.
以上偏硬件的优化内容，这些和基础运维和费用成本有直接关系.
| 配置项 | 作用范围 | 功能 | 建议 |
|---|---|---|---|
| query_cache_size | 全局 | 查询缓存 | 建议不使用 |
| sort_buffer _size | 每个线程可以单独设置 | 排序缓冲池大小 | 默认 |
| join_buffer_size | 每个线程可以单独设置 | 如果一个查询中关联多张表，可以为每个关联分配一个关联缓冲 (join buffer) ，所以每个查询可能有多个关联缓冲。 | |
| table_cache_size | 全局 | 缓存表的信息 | 默认 |
| thread_cache_size | 全局 | 线程池大小 | 默认 |
| query_cache_size | 全局 | 查询缓存带下，mysql会在启动的时候分配该空间，后面修改也会重新分配并初始化大小。 | 不建议使用 |
| read_buffer_size | 全局 | 每个线程对表进行顺序扫描时分配的缓冲区大小。太小，就会导致顺序频繁的磁盘IO。太大，浪费内存 | 默认。尽量避免全表扫描 |
| read_rnd_buffer_size | 全局 | 每个线程进行随机读取的时候分配的缓冲区大小。优缺点同上 | 同上 |
| sort_buffer_size | 全局 | 每个线程执行sql需要排序操作时分配的缓冲区大小。同上 | 同上 |
| innodb_log_file_size | 全局 | redolog日志文件大小 ，设置过小会导致频繁的刷盘，性能低，如果出现故障的时候，还可能会出现不完整事务日志记录；过大，崩溃恢复慢，并且会占用更大的文件 | 根据系统负载、性能，业务需求调整 |
| innodb_1og_fles_in_group | 全局 | 设置innodb_log_file的个数的 | 系统默认即可 |
| Innodb_os_1og_written | show innodb status查看 | 查看innodb对日志文件写出了多少数据 | 默认 |
show innodb status 可以查看脏页的刷新量：Inodbbuffer_pool_pages_dirty 。
缓冲池过大，很多数据在内存里面，查询起来是快一些。当需要刷新到磁盘到时候会很慢，预热和关闭大时间都会变长。 缓冲池过小，刷盘都时间变快，但是内存里的数据少了，查询变慢.
可以监控Inodbbuffer_pool_pages_dirty状态变量或者使用innotop 来监控SHOW INNODB STATUS 来观察脏页的刷新量。 更小的innodb_max dirty_pages_pct变量值并不保证InnoDB将在缓冲池中保持更少的脏页。它只是控制InnoDB是否可以“偷懒(Lazy)” 的阈值。InnoDB默认通过一个 后台线程来刷新脏页，并且会合并写人，更高效地顺序写出到磁盘。这个行为之所以被称为 “偷懒 (Lazy)”，是因为它使得InnoDB延迟了缓冲池中刷写脏页的操作，直到一些其他数据必须使用空间时才刷写 。当脏页的百分比超过这个阈值 ，InnoDB 将快速地刷写脏页，尝试让脏页的数量更低。当事务日志没有足够的空间剩余时，InnoDB 也将进人“激烈刷写(FuriousFlushing)”模式，这就是大日志可以提升性能的一个原因.
InnoDB怎样刷新日志缓冲。当InnoDB 把日志缓冲刷新到磁盘日志文件时，先会使用 一 个 Mutex 锁住缓冲区，刷新到所需要的位置，然后移动剩下的条目到缓冲区的前面。当 Mutex释放时，可能有超过一个事务已经准备好刷新其日志记录。InnoDB有一个GroupC ommit功能，可以在一个I/0操作内提交多个事务.
日志缓冲必须呗刷新到磁盘，这样才能保证提交的事务被完全持久化。如果和持久化相比，更在乎性能，那么就可以调整 innodb_flush_1og_at_trxcommit 来控制redolog缓冲区的刷新频率。 innodb_flush_1og_at_trxcommit可配置选项 。
| 配置项 | 内容 |
|---|---|
| 0 | 每秒钟把缓冲区中的数据刷新到relodlog中，但是事务提交的时候数据不会真正的持久化 |
| 1 | 每次事务提交的时候都刷新缓冲区到redolog文件中，并且事务提交都刷新到磁盘。这样能保证任何已提交的事务不会丢失。除非磁盘或者操作系统是“伪刷新” 。这个级别也是innodb默认设置 |
| 2 | 每次事务提交时，把日志缓冲写到日志文件，但是没有持久化到存储中；这个设置在断电或者数据库崩溃时会丢失数 |
为了防止把缓冲区数据写入磁盘的时候系统发生故障、断电等因素，导致数据不完整的情况，所以有了双写缓冲.
实际是指在写入磁盘之前，先把这些内存中的数据顺序写入到双写缓冲（磁盘中顺序文件），写入成功以后才会写入数据磁盘.
在数据库启动和恢复过程中，InnoDB 会检查数据文件中的数据页是否完整。如果发现某一个数据页有问题，就会从双写缓冲中读取对应的完整的数据副本。这样就可以保证数据的完整性.
是要两次写入磁盘，但这个双写缓冲是顺序写入，速度还可以.
innodb_thread_concurrency 可以控制一次性能有多少个线程进入到内核，0表示不限制.
因为大多数是磁盘IO操作，所以建议设置值=CPU * 磁盘数量 * 2 。
concurrent_insert 可以控制myisam并发插入的线程数.
| 选项 | 作用 |
|---|---|
| 0 | 不允许并发插入，所有插入都会加表锁 |
| 1 | 如果表中没有空洞，就允许并发插入 |
| 2 | 强制插入表尾，时间长了会有碎片 |
blob和text类型的数据，尽量不用和其他字段在一起使用。如果一定要使用，必须做到和其他表隔离.
当排序的数据行长度不超过max_length_for_sort_data时，会使用单路排序； 如果排序数据的长度超过max_length_for_sort_data时，会使用多路排序； 所以，配置该字段会影响排序算法选择.
temp_table_size 控制临时表大小； max_connections 最大连接数； thread_cache_size 内存池大小； innodb_io_capacity 每秒多少个IO操作； innodb_buffer_pool_size inno_db_file_size 非常重要，如果你不了解，可以自己学习一下mysql的innodb引擎； 。
。。。。.
最后此篇关于Mysql优化的文章就讲到这里了,如果你想了解更多关于Mysql优化的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！ 。
57
4
0
目前我正在构建相当大的网络系统，我需要强大的 SQL 数据库解决方案。我选择 Mysql 而不是 Postgres，因为一些任务需要只读(MyISAM 引擎)而其他任务需要大量写入(InnoDB)。
我在 mysql 中使用如下命令。当它显示表格数据时，它被格式化为一个非常干净的表格，间距均匀且 |作为列分隔符。 SELECT * FROM TABLE_NAME; 当我从 CLI 运行命令时，如下
我知道这个问题之前已经被问过好几次了，我已经解决了很多问题，但到目前为止没有任何效果。 MySQL 试图将自身安装到的目录 (usr/local/mysql) 肯定有问题。关于我的错误的奇怪之处在于我
以下是我的 SQL 数据结构，我正在尝试如下两个查询: Select Wrk_ID, Wrk_LastName, Skill_Desc from Worker, Skill where
我们有一个本地 mysql 服务器(不在公共(public)域上)，并希望将该服务器复制到我们拥有的 google 云 sql 实例。我的问题是:1.这可能吗？2.我们的本地服务器只能在本地网络上访问
我有一个表(test_table)，其中一些字段值(例如字段 A、B 和 C)是从外部应用程序插入的，还有一个字段(字段 D)，我想从现有表(store_table)插入其值，但在插入前者(A、B 和
我想创建一个 AWS RDS 实例，然后使用 terraform 管理数据库用户。因此，首先，我创建了一个 RDS 实例，然后使用创建的 RDS 实例初始化 mysql 提供程序，以进一步将其用于用户
当用户在我的网站上注册时，他们会在我的一个数据库中创建自己的表格。该表存储用户发布的所有帖子。我还想做的是也为他们生成自己的 MySql 用户——该用户仅有权从他们的表中读取、写入和删除。 创建它应该
我有一个关于 ColdFusion 和 Mysql 的问题。我有两个表:PRODUCT 和 PRODUCT_CAT。我想列出包含一些标记为:IS_EXTRANET=1 的特殊产品的类别。所以我写了这个
我想获取 recipes_id 列的值，以获取包含 ingredient_id 的 2,17 和 26 条目的值。 假设 ingredient_id 2 丢失则不获取记录。 我已经尝试过 IN 运算符
在 Ubuntu 中，我通常安装两者，但 MySQL 的客户端和服务器之间有什么区别。 作为奖励，当一个新语句提到它需要 MySQL 5.x 时，它是指客户端、服务器还是两者兼而有之。例如这个链接ht
我重新访问了我的数据库并注意到我有一些 INT 类型的主键。 这还不够独特，所以我想我会有一个指导。 我来自微软 sql 背景，在 ssms 中你可以 选择类型为“uniqeidentifier”并自
我的系统上有 MySQL，我正在尝试确定它是 Oracle MySQL 还是 MySQL。 Oracle MySQL 有区别吗: http://www.oracle.com/us/products/m
我是在生产 MySQL 中运行的应用程序的新维护者。之前的维护者已经离开，留下的文档很少，而且联系不上了。 我面临的问题是执行以下请求大约需要 10 秒: SELECT COUNT(*) FROM `
我有两个位于不同机器上的 MySQL 数据库。我想自动将数据从一台服务器传输到另一台服务器。比方说，我希望每天早上 4:00 进行数据传输。 可以吗？是否有任何 MySQL 内置功能可以让我们做到这一
有什么方法可以使用 jdbc 查询位于 mysql 根目录之外的目录中的 mysql 表，还是必须将它们移动到 mysql 根目录内的数据库文件夹中？我在 Google 上搜索时没有找到任何东西。 最
我在 mysql 数据库中有两个表。成员和 ClassNumbers。两个表都有一个付费年份字段，都有一个代码字段。我想用代码数字表中的值更新成员表中的付费年份，其中成员中的代码与 ClassNumb
情况:我有 2 台服务器，其中一台当前托管一个实时 WordPress 站点，我希望能够将该站点转移到另一台服务器，以防第一台服务器出现故障。传输源文件很容易；传输数据库是我需要弄清楚如何做的。两台服
Phpmyadmin 有一个功能是“复制数据库到”..有没有mysql查询来写这个函数？类似于将 db A 复制到新的 db B。 最佳答案 首先创建复制数据库: CREATE DATABASE du
我有一个使用 mySQL 作为后端的库存软件。我已经在我的计算机上对其进行了测试，并且运行良好。 当我在计算机上安装我的软件时，我必须执行以下步骤: 安装 mySQL 服务器 将用户名指定为“root
我是一名优秀的程序员,十分优秀！