使用MySQL从20万条数据中通过筛选随机取出1条数据的方法

╰+哭是因爲堅強的太久メ 2022-03-11 09:56 317阅读 1赞

因为业务需要，要求在一个where筛选完的数据集中随机取出1条数据。

**经典的方法**

SELECT * FROM table where 条件 ORDER BY RAND() limit 1;

适用入门级应用，怎么这样说呢?

因为数据量小时，倒没多大问题，由于会进行全表扫描，当数据量渐渐巨型时，查询时间会相当变态。

本地环境运行需时在0.276s左右。

百度出来别人验证过，性能高效的方法是

SELECT *
    FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`))+(SELECT MIN(id) FROM `table`)) AS id) AS t2
    WHERE t1.id >= t2.id
    ORDER BY t1.id LIMIT 1;

加上我们需要的条件

我们下面就来测试一下  
**生产虚拟数据**  
先生成20万条虚拟数据，要随机生成，保证数据的均匀分布。

**跑一下**  
平均只用0.006s左右

**统计符合条件的数目**

SELECT COUNT(*) FROM `table` WHERE 条件1 and 条件2 and 条件3;

符合条件的数据有8340条，占比0.0417。

**数据校验**  
运行8000次  
校验通过：0.999875, 检验不通过：0.000125  
计算了一下，是1条。

运行了两次程序，结果依旧，原因暂未查明。

**数据重复性测试**

由此来看，随机性还是挺不错的，多数数据是出现在前段，这个方法可以使用。

注意：在max,min里面的语句不能再加入where，加入后发现查询明显减慢，经EXPLAIN分析是会导致一条或多条select\_type为SUBQUERY进行全表扫描。

[原文链接][Link 1]

[Link 1]: http://www.liangzhenwei.com/blog/post/lcwai/%E5%9C%A8where%E6%95%B0%E6%8D%AE%E9%9B%86%E4%B8%AD%E7%AD%9B%E9%80%89%E5%87%BA

使用MySQL从20万条数据中通过筛选随机取出1条数据的方法

发表评论取消回复

还没有评论，来说两句吧...

相关阅读

相关 MySQL随机获取1条

相关 MySQL 添加千万条数据

相关 MySQL 随机查询若干条数据

相关 Mysql实现从查询的多条数据中取出最新一条数据

相关 mongodb 取出第一条最后一条数据

相关 MySql 从数据库取出每个设备最新一条数据

相关 mysql随机获取一条或者多条数据

相关 mysql随机获取一条或者多条数据

相关使用MySQL从20万条数据中通过筛选随机取出1条数据的方法

相关 MYSQL随机读取一条数据