`
tuhaitao
  • 浏览: 375681 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

MySQL单引号引起的严重性能问题

 
阅读更多

最近在工作中遇到一个MySQL update的严重性能问题,语句大概是这样的:

 

 

update t_user set fstate=0 where fuid in (11111, 22222, ....,  .....)

 

 

in后的括号中,有1000个fuid的样子

 

表结构如下:

 

 

t_user表结构

 

 

存储引擎是Innodb, 版本是MySQL 4.0.18 

 

其中fuid是主键, 由于表数据量在300W左右,所以刚开始更新很慢,我以为是表数据量太大引起的性能问题,

 

起初一直在寻求优化MySQL数据库配置,结果都是浮云,语句还是那么的慢。

 

 

偶然期发现自己用的是varchar字段类型,但却在赋值时没有加单引号:

 

对于varchar或者char字段里,如果只放数字类型的字符串,可以不加单引号执行SQL语句,不报错:

 

例如:

 

正常的写法是:

 

 

select  * from t_user where fuid='11111';

但你可以写这样写:

 

select  * from t_user where fuid=11111;

 

这条语句完全可以正常执行,但是表数据量很大的时候速度很慢。

 

 

但如果这样写:

 

select * from t_user where fuid=abcdef;

 

SQL执行时会报错,于是用explain分析:

 

在未加单引号时:

 

 

加入单引号时:

 

 

执行计划里type说明了问题所在,不加单引号的会造成全表扫描,所以表数据量越大速度越慢,找出了问题所在,

 

给原来的update语句加上了单引号,在300W数量级的表中,速度快了200倍的样子。

 

 

我在最新版本的MySQL 5.1里也实验过,同样有这个问题,百思不得其解,为什么MySQL在检查到where后查询条件

 

字段是varchar,不强制限制赋值必须用单引号,字母的可以检测到,但数字就不会。

 

 

如果有高人知道MySQL为什么这样做的原因可以告诉我,小弟不胜感激 :)

 

 

4
5
分享到:
评论
4 楼 tuhaitao 2012-02-25  
fengyie007 写道
参数类型与数据库类型不同,虽然能自转转换,但无法走索引,肯定慢了。

不是没发走索引,是木有索引可走,这是由于数据类型不一致,没办法比较,右值数据类型是int, 而左值存储的字段类型是varchar, mysql木有严格的检查数据类型,我估计是采用尝试的策略来转换数据类型,发现字段值可以转换成int,于是转换了改列所有的数据,由于记录数很多,所以造成了很慢,而后我又尝试将varchar字段里赋值为'asd测试' 这样的数据,发现mysql查询报错,这说明确实采用了运行时动态转换的原则,发现转换后的字符编码不再'0'-'9'的字符范畴,这里我觉得mysql以后的版本里最好限制这种隐式转换,不同的数据类型不让比较,便可以防止这种问题的发生:)
3 楼 tuhaitao 2011-11-23  
utensil 写道
原因是mysql不是把你的数字转成了字符串,而是把每个查询到的结果转成了数字去比较:

http://dev.mysql.com/doc/refman/5.0/en/how-to-avoid-table-scan.html

You are comparing indexed columns with constant values and MySQL has calculated (based on the index tree) that the constants cover too large a part of the table and that a table scan would be faster. See Section 7.3.1.2, “WHERE Clause Optimization”.

学习了
2 楼 utensil 2011-11-16  
原因是mysql不是把你的数字转成了字符串,而是把每个查询到的结果转成了数字去比较:

http://dev.mysql.com/doc/refman/5.0/en/how-to-avoid-table-scan.html

You are comparing indexed columns with constant values and MySQL has calculated (based on the index tree) that the constants cover too large a part of the table and that a table scan would be faster. See Section 7.3.1.2, “WHERE Clause Optimization”.
1 楼 fengyie007 2011-11-16  
参数类型与数据库类型不同,虽然能自转转换,但无法走索引,肯定慢了。

相关推荐

    在MySQL concat里面使用多个单引号,三引号的问题

    在动态拼接字符串时,我们常会用到字符拼接,我对拼接的引号不理解,如: 1、”’+ id +”’ 为什么是3个引号,为什么左边一个加号右边一个加号(能不能着重帮我解释下这个,详细点) SQL code sum(case Leave when...

    解决sqoop2导入hdfs单引号问题

    使用sqoop2从mysql导入hadoop时,导入的数据带单引号。是由于sqoop2的一个bug导致,该包上传到sqoop_home/server/lib替换原来的jar包后,重启sqoop server,即可解决。

    mysql 性能优化

    mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化mysql 性能优化...

    解决python 执行sql语句时所传参数含有单引号的问题

    在编写自己的程序时,需要实现将数据导入数据库,并且是带参数的传递。 执行语句如下: sql_str = INSERT INTO teacher(t_name, t_info, t_phone, t_email) VALUES\ (\'%s\', \'%s\', \'%s\', \'%s\') % (result, ...

    关于Mysql查询带单引号及插入带单引号字符串问题

    本文主要介绍的是用mysql_real_escape_string对用户提交的表单数据进行转义处理和通过addslashes以及mysql_escape_string这3个类似功能的函数用法区别

    JSP向MYSQL插入单引号内容出错的解决方法.pdf

    JSP向MYSQL插入单引号内容出错的解决方法.pdf

    MySQL性能提升

    MySQL性能提升(性能、问题、改进/并发控制/mysql的测试)

    一个单引号引发的MYSQL性能问题分析

    他们没有自己的服务器,只是买别人的空间和数据库,但这种小型的数据库在性能上当然和大型数据库没有对比性,但小型的数据库也要对自己的优化方式,今天和大家分享Mysql中加没加单引号的巨大区别,对于MYSQL性能优化...

    MySQL分布式数据库中间件Mycat性能调优指南

    Mycat性能调优MySQL分布式数据库中间件Mycat性能调优指南指南

    解决python3插入mysql时内容带有引号的问题

    今天小编就为大家分享一篇解决python3插入mysql时内容带有引号的问题,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧

    MySQL管理之道 性能调优、高可用与监控 绝对完整PDF版1

    附光盘性能调优高可用与监控 》从作者贺春旸的实际工作经验出发 针对生产环境MySQL5 5分别从故障处理 高可用 性能优化等角度系统地阐述了数据库运维过程中需要注意的地方及解决问题的思路 并针对2013年2月Oraclel自...

    python实现mysql的单引号字符串过滤方法

    本文实例讲述了python实现mysql的单引号字符串过滤方法。分享给大家供大家参考,具体如下: 最主要用这个函数,可以处理MySQLdb.escape_string(content). class Guide: def __init__(self): self.time_zone = 7*...

    高性能mysql源码.rar

    高性能mysql源码

    高性能MySQL(第3版).part2

    3.4.1单条查询问题还是服务器问题89 3.4.2捕获诊断数据93 3.4.3一个诊断案例98 3.5其他剖析工具106 3.5.1使用USER_STATISTICS表106 3.5.2使用strace107 3.6总结108 第4章Schema与数据类型优化111 4.1选择...

    高性能MySQL-中文第三版.pdf

    《高性能MySQL(第3版)》是MySQL 领域的经典之作,拥有广泛的影响力。第3版更新了大量的内容,不但涵盖了最新MySQL5.5版本的新特性,也讲述了关于固态盘、高可扩展性设计和云计算环境下的数据库相关的新内容,原有的...

    MySQL单表查询练习

    MySQL单表查询练习题

    高性能mysql-中文

    《高性能MySQL》是MySQL 领域的经典之作,拥有广泛的影响力。第3版更新了大量的内容,不但涵盖了最新MySQL5.5版本的新特性,也讲述了关于固态盘、高可扩展性设计和云计算环境下的数据库相关的新内容,原有的基准测试...

    jmeter mysql 性能测试脚本

    自己整理的mysql性能测试脚本,需要的同学,可以下载使用

    MySQL性能常见原因分析

    MySQL常见性能问题原因分析及解决办法,MySQL性能测试方法等

Global site tag (gtag.js) - Google Analytics