MySQL数据库下limit与join的优化方案

数据库 MySQL
我们今天主要和大家讨论的是MySQL数据库下limit与join的实际优化方案,如果你对其具体的实际操作感兴趣的话,你就可以点击以下的文章了。

以下的文章主要描述的是MySQL数据库下limit与join的实际优化方案,我们大家都知道其在实际中的应用比例还是占为多数的,如果你对这一技术,心存好奇的话,以下的文章将会揭开它的神秘面纱。

PHP中分页肯定会使用到MySQL的limit,大部分对类似”select * from title where uid =** order by id desc limit m,n”很熟悉,也不是全部都能看出里面有什么不对,可是当是在大数据量下操作呢,比如百万类似”select * from title where uid =177 order by id desc limit 1234567,20″就会发现sql执行的时间明显变得很长,为什么呢?

先从MySQL数据库的limit原理说起,使用limit m,n是时候,MySQL先扫描(m+n)条记录,然后从m行开始取n行.比如上面的例子就是先扫描1234587条数据,这样的话sql能快吗?这就要 求我们尽可能的减少m的值,甚至没有m直接limit n这样是sql.

看个例子:

 

  1. mysql> select id,substr(mobile from 1 for 7),time,cpid,linkid from cp_mo100227 where cpid=769 limit 888888,10;  
  2. +———-+—————————–+———————+——+———————-+  
  3. | id | substr(mobile from 1 for 7) | time | cpid | linkid |  
  4. +———-+—————————–+———————+——+———————-+  
  5. | 11535090 | 1353554 | 2010-02-24 21:07:48 | 769 | 21064905903309587933 |  
  6. | 11535091 | 1353750 | 2010-02-24 21:07:48 | 769 | 21064912943389480033 |  
  7. | 11535093 | 1353394 | 2010-02-24 21:07:48 | 769 | 21064912945389480075 |  
  8. | 11535098 | 1343073 | 2010-02-24 21:07:50 | 769 | 21064905865309587977 |  
  9. | 11535100 | 1369270 | 2010-02-24 21:07:51 | 769 | 21064926770369210194 |  
  10. | 11535103 | 1355683 | 2010-02-24 21:07:51 | 769 | 21064912944389480113 |  
  11. | 11535104 | 1368959 | 2010-02-24 21:07:51 | 769 | 21064902508384448468 |  
  12. | 11535105 | 1365243 | 2010-02-24 21:07:51 | 769 | 21064905907309403124 |  
  13. | 11535106 | 1362145 | 2010-02-24 21:07:52 | 769 | 21065002511384448497 |  
  14. | 11535107 | 1369228 | 2010-02-24 21:07:52 | 769 | 21064902514384448437 |  
  15. +———-+—————————–+———————+——+———————-+  
  16. 10 rows in set (3.84 sec)  
  17.  
  18. mysql> select id,substr(mobile from 1 for 7),time,cpid,linkid from cp_mo100227 where cpid=769 and id>=11535090 limit 10;  
  19. +———-+—————————–+———————+——+———————-+  
  20. | id | substr(mobile from 1 for 7) | time | cpid | linkid |  
  21. +———-+—————————–+———————+——+———————-+  
  22. | 11535090 | 1353554 | 2010-02-24 21:07:48 | 769 | 21064905903309587933 |  
  23. | 11535091 | 1353750 | 2010-02-24 21:07:48 | 769 | 21064912943389480033 |  
  24. | 11535093 | 1353394 | 2010-02-24 21:07:48 | 769 | 21064912945389480075 |  
  25. | 11535098 | 1343073 | 2010-02-24 21:07:50 | 769 | 21064905865309587977 |  
  26. | 11535100 | 1369270 | 2010-02-24 21:07:51 | 769 | 21064926770369210194 |  
  27. | 11535103 | 1355683 | 2010-02-24 21:07:51 | 769 | 21064912944389480113 |  
  28. | 11535104 | 1368959 | 2010-02-24 21:07:51 | 769 | 21064902508384448468 |  
  29. | 11535105 | 1365243 | 2010-02-24 21:07:51 | 769 | 21064905907309403124 |  
  30. | 11535106 | 1362145 | 2010-02-24 21:07:52 | 769 | 21065002511384448497 |  
  31. | 11535107 | 1369228 | 2010-02-24 21:07:52 | 769 | 21064902514384448437 |  
  32. +———-+—————————–+———————+——+———————-+  
  33. 10 rows in set (0.00 sec)  
  34.  
  35. mysql> select id,substr(mobile from 1 for 7),time,cpid,linkid from cp_mo100227 where cpid=769 and time>=’2010-02-24 21:07:48′ limit 10;  
  36. +———-+—————————–+———————+——+———————-+  
  37. | id | substr(mobile from 1 for 7) | time | cpid | linkid |  
  38. +———-+—————————–+———————+——+———————-+  
  39. | 11535090 | 1353554 | 2010-02-24 21:07:48 | 769 | 21064905903309587933 |  
  40. | 11535091 | 1353750 | 2010-02-24 21:07:48 | 769 | 21064912943389480033 |  
  41. | 11535093 | 1353394 | 2010-02-24 21:07:48 | 769 | 21064912945389480075 |  
  42. | 11535098 | 1343073 | 2010-02-24 21:07:50 | 769 | 21064905865309587977 |  
  43. | 11535100 | 1369270 | 2010-02-24 21:07:51 | 769 | 21064926770369210194 |  
  44. | 11535103 | 1355683 | 2010-02-24 21:07:51 | 769 | 21064912944389480113 |  
  45. | 11535104 | 1368959 | 2010-02-24 21:07:51 | 769 | 21064902508384448468 |  
  46. | 11535105 | 1365243 | 2010-02-24 21:07:51 | 769 | 21064905907309403124 |  
  47. | 11535106 | 1362145 | 2010-02-24 21:07:52 | 769 | 21065002511384448497 |  
  48. | 11535107 | 1369228 | 2010-02-24 21:07:52 | 769 | 21064902514384448437 |  
  49. +———-+—————————–+———————+——+———————-+  
  50. 10 rows in set (0.01 sec) 

 

例中数据表id是主键,time也建了索引,表中总数据约为240w行,其中cpid为769的数据量大约为90w条.这里面的id和时间可能会是不连续的.故不能直接得获取id>m这样操作

所以可以显示 “1,2,3,4,5,末页” 或是 “首页,<<100,101,102,103 >>末页”这样,这样可以极大的减少m值!

MySQL里面的join顺便说一句就是,通常有点讲究的是用小表去驱动大表,而由于MySQL join实现的原理就是做循环比如left join就是对左边的数据进行循环去驱动右边的表,比如左边是可能会有m条记录匹配,右边有n条记录那么就是做m次循环,每次扫描n行数据,总扫面行数是 m*n行数据.左边返回的结果集的大小就决定了循环的次数,故单纯的用小表去驱动大表不一定的正确的。

小表的结果集可能也大于大表的结果集,所以写 join的时候尽可能的先估计两张表的可能结果集,用小结果集去驱动大结果集.值得注意的是在使用left/right join的时候,从表的条件应写在on之后,主表应写在where之后.否则MySQL数据库会当作普通的连表查询!

【编辑推荐】

  1. 从MySQL数据库表中来检索数据并不难
  2. MySQL数据库访问妙招在Linux之下
  3. MySQL 修改密码的6个好用方案
  4. 配置MySQL与卸载MySQL实操
  5. 备份MySQL数据库脚本的实际应用
责任编辑:佚名 来源: 互联网
相关推荐

2011-07-06 14:12:20

MySQLPercona

2011-07-06 10:49:50

MySQL优化

2011-03-09 08:53:02

MySQL优化集群

2010-06-04 11:28:05

MySQL数据库

2011-03-08 08:49:55

MySQL优化单机

2010-02-01 10:10:41

Oracle数据库优化

2010-06-10 10:15:50

MySQL数据库查询

2010-05-13 10:47:44

MySQL数据库查询

2010-05-31 16:17:56

MySQL数据库性能

2010-06-02 13:58:30

MySQL数据库性能

2010-05-21 13:48:36

MySQL数据库

2011-03-03 17:56:52

MySQL数据库优化

2010-05-20 18:12:37

MySQL数据库查询

2018-07-30 15:00:05

数据库MySQLJOIN

2010-06-11 12:32:57

MySQL数据库查询

2010-06-17 09:15:02

MySQL数据库查询

2010-05-28 09:15:50

配置MySQL

2010-06-01 14:42:55

连接MySQL数据库

2014-07-18 09:33:53

数据库数据库优化

2013-01-04 10:00:12

MySQL数据库数据库查询优化
点赞
收藏

51CTO技术栈公众号