`
ahead_zhan
  • 浏览: 27707 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

MySQL数据库锁机制的相关原理

阅读更多
在一个update和insert操作频繁的表中,少量数据测试的时候运行良好,在实际运营中,因数据量比较大(21万条记录),会出现死锁现象,用show processlist查看,可以看到一个update语句状态是Locked,一个delete语句状态是Sending data。查看了一下参考手册,把锁定相关的资料整理下来,以便自己记录和追踪该问题的解决情况:

  MySQL 5.1支持对MyISAM和MEMORY表进行表级锁定,对BDB表进行页级锁定,对InnoDB 表进行行级锁定。在许多情况下,可以根据培训猜测应用程序使用哪类锁定类型最好,但一般很难说出某个给出的锁类型就比另一个好。一切取决于应用程序,应用程序的不同部分可能需要不同的锁类型。为了确定是否想要使用行级锁定的存储引擎,应看看应用程序做什么并且混合使用什么样的选择和更新语句。例如,大多数Web应用程序执行许多选择,而很少进行删除,只对关键字的值进行更新,并且只插入少量具体的表。基本MySQL MyISAM设置已经调节得很好。

  在MySQL中对于使用表级锁定的存储引擎,表锁定时不会死锁的。这通过总是在一个查询开始时立即请求所有必要的锁定并且总是以同样的顺序锁定表来管理。

  对WRITE,MySQL使用的表锁定方法原理如下:

  ◆ 如果在表上没有锁,在它上面放一个写锁。

  ◆否则,把锁定请求放在写锁定队列中。

  对READ,MySQL使用的锁定方法原理如下:

  ◆如果在表上没有写锁定,把一个读锁定放在它上面。

  ◆否则,把锁请求放在读锁定队列中。

  当一个锁定被释放时,锁定可被写锁定队列中的线程得到,然后是读锁定队列中的线程。

  这意味着,如果你在一个表上有许多更新,select语句将等待直到没有更多的更新。

  如果insert 语句不冲突,可以自由为MyISAM 表混合并行的insert 和select 语句而不需要锁定。

  InnoDB 使用行锁定,BDB 使用页锁定。对于这两种存储引擎,都可能存在死锁。这是因为,在SQL语句处理期间,InnoDB 自动获得行锁定,BDB 获得页锁定,而不是在事务启动时获得。

  行级锁定的优点:

  · 当在许多线程中访问不同的行时只存在少量锁定冲突。

  · 回滚时只有少量的更改。

  · 可以长时间锁定单一的行。

  行级锁定的缺点:

  · 比页级或表级锁定占用更多的内存。

  · 当在表的大部分中使用时,比页级或表级锁定速度慢,因为你必须获取更多的锁。

  · 如果你在大部分数据上经常进行 GROUP BY 操作或者必须经常扫描整个表,比其它锁定明显慢很多。
  
  · 用高级别锁定,通过支持不同的类型锁定,你也可以很容易地调节应用程序,因为其锁成本小于行级锁定。

  在以下情况下,表锁定优先于页级或行级锁定:

  · 表的大部分语句用于读取。

  · 对严格的关键字进行读取和更新,你可以更新或删除可以用单一的读取的关键字来提取的一行:

  update tbl_name SET column = value where unique_key_col = key_value ;

  delete FROM tbl_name where unique_key_col = key_value ;

  · select 结合并行的insert 语句,并且只有很少的update或 delete 语句。

  · 在整个表上有许多扫描或 GROUP BY 操作,没有任何写操作。

  不同于行级或页级锁定的选项:

  · 版本(例如,为并行的插入在MySQL中使用的技术),其中可以一个写操作,同时有许多读取操作。这明数据库或表支持数据依赖的不同视图,取决于访问何时开始。其它共同的术语是“时间跟踪”、“写复制”或者“按需复制”。

  · 按需复制在许多情况下优先于页级或行级锁定。然而,在最坏的情况下,它可能比使用常规锁定使用多的内存。

  · 除了行级锁定外,你可以使用应用程序级锁定,例如在MySQL中使用GET_LOCK()和RELEASE_LOCK()。这些是建议性锁定,它们只能在运行良好的应用程序中工作。

  为达到最高锁定速度,除InnoDB 和BDB 之外,对所有存储引擎,MySQL使用表锁定(而不是页、行或者列锁定)。对于InnoDB 和BDB 表,如果你用LOCK TABLES显式锁定表,MySQL只使用表锁定;如果你不使用LOCK TABLES,因为 InnoDB 使用自动行级锁定而BDB 使用页级锁定来保证事务隔离。

  但是对于大表,对于大多数应用程序,表锁定比行锁定更好,但存在部分缺陷。表锁定使许多线程同时从一个表中进行读取操作,但如果一个线程想要对表进行写操作,它必须首先获得独占访问。更新期间,所有其它想要访问该表的线程必须等待直到更新完成。

  表更新通常情况认为比表检索更重要,因此给予它们更高的优先级。这应确保更新一个表的活动不能“饿死”,即使该表上有很繁重的select 活动。

  表锁定在这种情况下会造成问题,例如当线程正等待,因为硬盘已满并且在线程可以处理之前必须有空闲空间。在这种情况下,所有想要访问出现问题的表的线程也被设置成等待状态,直到有更多的硬盘空间可用。

  表锁定在下面的情况下也存在问题:

  · 一个客户发出长时间运行的查询。

  · 然后,另一个客户对同一个表进行更新。该客户必须等待直到select完成。

  · 另一个客户对同一个表上发出了另一个 select 语句。因为update比 select 优先级高,该select 语句等待update完成,并且等待第1个 select 完成。

  下面描述了一些方法来避免或减少表锁定造成的竞争:

  · 试图使 select 语句运行得更快。可能必须创建一些摘要(summary)表做到这点。

  · 用--low-priority-updates启动mysqld。这将给所有更新(修改)一个表的语句以比select语句低的优先级。在这种情况下,在先前情形的第2个select语句将在update语句前执行,而不需要等候第1个 select 完成。

  · 可以使用SET LOW_PRIORITY_updateS=1语句指定具体连接中的所有更新应使用低优先级。

  · 可以用LOW_PRIORITY属性给与一个特定的insert、update或delete语句较低优先级。

  · 可以用HIGH_PRIORITY属性给与一个特定的select语句较高优先级。

  · 为max_write_lock_count系统变量指定一个低值来启动mysqld来强制MySQL在具体数量的插入完成后临时提高所有等待一个表的select 语句的优先级。这样允许在一定数量的WRITE锁定后给出READ锁定。
 
  · 如果你有关于insert结合select的问题,切换到使用新的MyISAM表,因为它们支持并发的select和insert。

  · 如果你对同一个表混合插入和删除,insert DELAYED将会有很大的帮助。

  · 如果你对同一个表混合使用 select 和delete 语句出现问题,delete 的LIMIT 选项可以有所帮助。

  · 对 select 语句使用SQL_BUFFER_RESULT可以帮助使表锁定时间变短。

  · 可以更改mysys/thr_lock.c中的锁代码以使用单一的队列。在这种情况下,写锁定和读锁定将具有相同的优先级,对一些应用程序会有帮助。

  这里是一些MySQL中表锁定相关的技巧:

  · 如果不混合更新与需要在同一个表中检查许多行的选择,可以进行并行操作。

  · 可以使用 LOCK TABLES 来提高速度,因为在一个锁定中进行许多更新比没有锁定的更新要快得多。将表中的内容切分为几个表也可以有所帮助。

  · 如果在MySQL中表锁定时遇到速度问题,可以将表转换为 InnoDB 或BDB 表来提高性能。
分享到:
评论

相关推荐

    MySql 数据库主从机制原理说明及配置步骤.docx

    MySql 数据库主从机制原理说明及配置步骤, MySQL主从的优点主要包含以下三个方面: 主库出现问题,可以快速切换到从库提供服务; 可以在从库上执行查询操作,从主库中更新; 实现读写分离可以在从库中执行备份,...

    mysql 锁机制及mysql中的锁介绍.pdf

    系统介绍mysql锁机制

    MySQL数据库锁机制原理解析

    在并发访问情况下,很有可能出现不可重复读等等读现象。为了更好的应对高并发,封锁...乐观锁和悲观锁不仅在关系数据库里应用,在Hibernate、Memcache等等也有相关概念。 悲观锁:也即悲观并发控制,Pessimistic Concur

    MYSQL锁机制全揭秘.pdf

    现在开发中越来越多会接触到各种锁,这里分享mysql的锁机制,在开发中随着用户量增大并发量也随之增大,资源争用成为了开发者关注的焦点,锁的实现也必不可少。所以我们不得不深入了解锁的原理及机制,来优化我们的...

    基于 MySQL 协议,Swoole 开发的MySQL数据库连接池.zip

    也可以通过其自身的管理机制来监视数据库连接的数量、使用情况等。超出最大连接数会采用协程挂起,等到有连接关闭再恢复协程继续操作。 特性 支持读写分离 支持数据库连接池,能够有效解决 PHP 带来的数据库连接...

    2017最新老男孩MySQL高级专业DBA实战课程全套【清晰不加密】,看完教程月入40万没毛病

    12-为什么选择MySQL数据库即MySQL优势介绍.avi 13-MySQL数据库分类与版本升级知识讲解.avi 14-MySQL数据库商业版与社区版区别.avi 15-MySQL数据库的发布版本知识讲解.avi 16-MySQL数据库发展的三条产品线介绍.avi 17...

    Java面试题mysql数据库和jvm知识面试题用于技能提升和面试提升

    五、和事务相关的两条重要的SQL语句(TCL) 10 六、事务开启的标志?事务结束的标志? 10 七、事物与数据库底层数据 10 八、在MySQL中,事务提交与回滚 10 九、事务四大特性之一隔离性(isolation) 11 十、隔离级别与...

    北邮 数据库系统原理(SQL Server版) 实验四

    1.通过实验了解通用数据库应用编程接口ODBC的基本原理和实现机制,熟悉主要的ODBC接口的语法和使用方法; 2.利用C语言(或其它支持ODBC接口的高级程序设计语言)编程实现简单的数据库应用程序,掌握基于ODBC的数据库...

    使用Memcache缓存mysql数据库操作的原理和缓存过程浅析

    只要具备独立的服务器,完全可以通过配置Memcache提高网站访问速度和减少数据库压力,这里主要讨论一下Memcache和MySQL数据库交互过程的流程关系,了解Memcache的中间缓存层作用,从而深入了解Memcache机制原理。...

    解析数据库锁协议和InnoDB的锁机制(全面解析行级锁、表级锁、排他锁、共享锁、悲观锁、乐观锁等常用锁)

    数据库通过锁以及锁协议来进行并发控制,解决并发事务带来的问题,本篇博文主要是解析数据库的锁协议和Mysql的默认存储引擎InnoDB的锁机制。 如果对事务隔离级别以及并发事务带来的问题不熟悉可以翻阅我的另外一篇...

    你真的懂Mysql的锁吗?详谈Myql的锁机制

    锁的基本介绍 要说锁,应该追溯到操作系统中的多线程原理,锁...相对其他数据库而言,MySQL的锁机制比较简单,其最 显著的特点是不同的存储引擎支持不同的锁机制。比如,MyISAM和MEMORY存储引擎采用的是表级锁(table-

    新版 MySQL DBA 高级视频 基于MySQL 5.7 MySQL 8.0版本.rar

    │ 2_MySQL锁机制原理讲解.mp4 │ 3_MySQL锁相关参数设置.mp4 │ 4_InnoDB事务隔离级别详解.mp4 │ 5_InnoDB死锁发生原理和规避.mp4 │ 6_MySQL字符集和排序规则.mp4 │ 作业.docx │ 锁等待分析.txt │ ├─新版...

    27道高级开发数据库面试题目以及答案.pdf

    mysql描述一下mysql主从复制的机制的原理;mysql主从复制主要有几种模式 在mysql开启Binlog(为了其他非事务引擎复制所以引入binlog,比如说主从)后,如何保证binlog和InnoDB redo日志的一致性呢; binlog和redo ...

    MySQL锁详细介绍

    MySQL锁的详细介绍,锁类型以及机制原理

    Mysql面试题总结大全

    5、MySQL 的锁机制 6、数据库事务(Database Transaction) ,是指作为单个逻辑工作单元执行的一系列操作,要么完全地执行,要么完全地不执行。 彻底理解数据库事务 7、悲观锁:假定会发生并发冲突,屏蔽一切可能违反...

    本项目为SWPU数据库原理及应用大作业《西柚外卖订餐系统》,基于Python+Flask+MySQL开发,轻量简洁.zip

    以下是对MySQL数据库的详细介绍: 核心特性与优势 开源与跨平台 MySQL遵循GPL开源协议,这意味着任何人都可以免费下载、使用和修改其源代码。这种开放性促进了广泛的社区支持和第三方插件、工具的发展。此外,MySQL...

    MySQL5.1性能调优与架构设计.mobi

    同时还分析了MySQL数据库中主要存储引擎的锁定机制 ●架构设计篇则主要以设计一个高可用可扩展的分布式企业级数据库集群环境为目标,分析介绍了通过MySQL实现这一目标的多种架构方式。主要包括可扩展和高可用两部分...

    数据库系统原理-课程目标.pdf

    数据库系统原理-课程⽬标 1. 了解和掌握数库基本概念、数据管理技术的发展历程、数据库系统的结构和数据模型等内容。 2. 了解数据库的基本特征、⽣产和发展历程,深⼊理解和熟连掌握关系数据模型和关系数据库的规范...

    MySQL面试专题18道.pdf

    4.以及在 mysql 数据库中索引的工作机制是什么? 5.MySQL 的基础操作命令: 6.mysql 的复制原理以及流程。 7.mysql 支持的复制类型? 8.mysql 中 myisam 与 innodb 的区别? 9.mysql 中 varchar 与 char 的区别以及 ...

    MySQL内核:InnoDB存储引擎 卷1.pdf

    , 《MySQL内核:InnoDB存储引擎 卷1》可以成为带领读者进入数据库存储引擎的内核开发,帮助那些从事MySQL数据库的相关行业从业人员。同时,《MySQL内核:InnoDB存储引擎 卷1》也适合对于研究生阶段有志于数据库内核...

Global site tag (gtag.js) - Google Analytics