MySQL 随机函数获取数据速度和效率分析

作者:lqh 时间:2024-01-13 00:43:01 

在mysql中带了随机取数据的函数,在mysql中我们会有rand()函数,很多朋友都会直接使用,如果几百条数据肯定没事,如果几万或百万时你会发现,直接使用是错误的。下面我来介绍随机取数据一些优化方法。

SELECT * FROM table_name ORDER BY rand() LIMIT 5;

rand在手册里是这么说的:

RAND()
RAND(N)

返回在范围0到1.0内的随机浮点值。如果一个整数参数N被指定,它被用作种子值。


mysql> select RAND();
   -> 0.5925
mysql> select RAND(20);
   -> 0.1811
mysql> select RAND(20);
   -> 0.1811
mysql> select RAND();
   -> 0.2079
mysql> select RAND();
   -> 0.7888

你不能在一个ORDER BY子句用RAND()值使用列,因为ORDER BY将重复计算列多次。然而在MySQL3.23中,你可以做: SELECT * FROM table_name ORDER BY RAND(),这是有利于得到一个来自SELECT * FROM table1,table2 WHERE a=b AND c<d ORDER BY RAND() LIMIT 1000的集合的随机样本。注意在一个WHERE子句里的一个RAND()将在每次WHERE被执行时重新评估。

网上基本上都是查询max(id) * rand()来随机获取数据。


SELECT *
FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * (SELECT MAX(id) FROM `table`)) AS id) AS t2
WHERE t1.id >= t2.id
ORDER BY t1.id ASC LIMIT 5;

但是这样会产生连续的5条记录。解决办法只能是每次查询一条,查询5次。即便如此也值得,因为15万条的表,查询只需要0.01秒不到。

上面的语句采用的是JOIN,mysql的论坛上有人使用


SELECT *
FROM `table`
WHERE id >= (SELECT FLOOR( MAX(id) * RAND()) FROM `table` )
ORDER BY id LIMIT 1;

我测试了一下,需要0.5秒,速度也不错,但是跟上面的语句还是有很大差距

后来请教了baidu,得到如下代码

完整查询语句是:


SELECT * FROM `table`
WHERE id >= (SELECT floor( RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`)) + (SELECT MIN(id) FROM `table`)))
ORDER BY id LIMIT 1;

SELECT *
FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`))+(SELECT MIN(id) FROM `table`)) AS id) AS t2
WHERE t1.id >= t2.id
ORDER BY t1.id LIMIT 1;

最后在php中对这两个语句进行分别查询10次,

前者花费时间 0.147433 秒

后者花费时间 0.015130 秒

执行效率需要0.02 sec.可惜的是,只有mysql 4.1.*以上才支持这样的子查询.

注意事项 查看官方手册,也说rand()放在ORDER BY 子句中会被执行多次,自然效率及很低。

以上的sql语句最后一条,本人实际测试通过,100W数据,瞬间出结果。

感谢阅读,希望能帮助到大家,谢谢大家对本站的支持!

标签:MySQL,随机函数
0
投稿

猜你喜欢

  • SQL里类似SPLIT的分割字符串函数

    2024-01-23 07:59:57
  • pyqt5蒙版遮罩mask,setmask的使用

    2022-04-05 21:00:58
  • python GUI库图形界面开发之PyQt5线程类QThread详细使用方法

    2023-12-03 20:29:40
  • python文件操作之目录遍历实例分析

    2021-05-16 11:46:16
  • 将字符实体引用转换成 Unicode 字符

    2011-07-01 12:31:51
  • JS中的forEach、$.each、map方法推荐

    2024-04-29 13:19:59
  • 阿里巴巴工程师分享MySQL经验

    2010-04-22 16:21:00
  • 仅用500行Python代码实现一个英文解析器的教程

    2022-06-15 02:15:25
  • 程序员鼓励师插件Rainbow Fart(彩虹屁)

    2023-02-11 23:02:40
  • Mac PyCharm中的.gitignore 安装设置教程

    2023-02-23 16:48:14
  • Django中URL视图函数的一些高级概念介绍

    2021-04-14 13:35:21
  • PHP比你想象的好得多

    2023-11-20 09:33:30
  • 如何使用五行Python代码轻松实现批量抠图

    2023-10-06 08:05:20
  • Golang调用FFmpeg转换视频流的实现

    2024-04-30 10:01:43
  • 网马解密大讲堂——网马解密初级篇

    2009-09-16 14:45:00
  • PyTorch预训练的实现

    2021-03-29 07:18:18
  • php多个文件及图片上传实例详解

    2024-05-22 10:06:28
  • 对python中assert、isinstance的用法详解

    2022-04-29 14:10:54
  • thinkphp3.x连接mysql数据库的方法(具体操作步骤)

    2023-11-22 20:04:41
  • python采用requests库模拟登录和抓取数据的简单示例

    2022-09-21 22:46:55
  • asp之家 网络编程 m.aspxhome.com