MySQL超大分页处理：
MySQL中分页处理的方式：
在 MySQL 中进行分页查询通常会使用 LIMIT 和 OFFSET 关键字来实现，下面是一种常见的方法：
sqlCopy CodeSELECT * FROM your_table LIMIT offset, limit;
offset表示起始行数，从0开始计数，即第一行为0。limit表示每页返回的行数。
举个例子，如果我们想要查询学生信息表中的第 11 到 20 行数据，可以这样写查询语句：
sqlCopy CodeSELECT * FROM student_info LIMIT 10, 10;
这条 SQL 查询语句会返回从第 11 行到第 20 行的数据。你可以根据需要调整 offset 和 limit 的值来获取不同页的数据。
另外，如果你想要指定查询的排序方式，可以在查询语句中添加 ORDER BY 子句。比如，按照学生的成绩降序查询前 10 名的学生信息：
sqlCopy CodeSELECT * FROM student_info ORDER BY score DESC LIMIT 10;
**缺点：**在数据量比较大的时候，使用limit分页查询，越往后，分页效率越低。
**原因：**LIMIT 1000000, 10。假设取第一百万条到一百万零十条的数据。那么MySQL需要排序前一百万零十条数据，然后舍弃前一百万条。所以性能很低。
优化思路：
可以通过覆盖查询和子查询来提高效率。
select *
from User_table a,
(select id from User_table order by id limit 1000000,10)b
where a.id = b.id
子查询使用覆盖索引去查询一百万条到一百万零十条的ID。再根据ID做条件去查数据。子查询中这个ID是主键，具体可以根据实际主键去查。
其他优化思路：
1、基于游标的分页优化：
原理：通过游标（Cursor）逐批获取数据，避免一次性获取所有数据。
游标分页示例：
DELIMITER $$
CREATE PROCEDURE sp_cursor_paging(IN start_row INT, IN page_size INT)
BEGIN
DECLARE done INT DEFAULT 0;
DECLARE id INT;
DECLARE name VARCHAR(255);
DECLARE cursor_data CURSOR FOR SELECT id, name FROM your_table ORDER BY id LIMIT start_row, page_size;
DECLARE CONTINUE HANDLER FOR NOT FOUND SET done = 1;
OPEN cursor_data;
read_loop: LOOP
FETCH cursor_data INTO id, name;
IF done = 1 THEN
LEAVE read_loop;
END IF;
-- 处理每一行数据，可以根据需要进行操作
SELECT id, name;
END LOOP;
CLOSE cursor_data;
END$$
DELIMITER ;
在这个示例中，sp_cursor_paging 存储过程接受两个参数 start_row 和 page_size，分别表示起始行和每页行数。存储过程通过游标 cursor_data 查询数据，并逐行获取数据进行处理。你可以根据实际需求修改 SELECT 语句和处理逻辑。
调用存储过程时，可以像这样传入起始行和每页行数：
sqlCopy CodeCALL sp_cursor_paging(0, 10); -- 获取第一页数据
CALL sp_cursor_paging(10, 10); -- 获取第二页数据
2、基于主键范围的分页优化：
原理：利用主键范围进行分页，减少数据库的随机访问次数。
示例：使用 WHERE 子句限制主键范围，如 WHERE id > last_id LIMIT batch_size。
3、缓存分页数据优化：
原理：将查询结果缓存到缓存系统中，减少每次重新查询数据库。
示例：可以使用 Redis 等缓存系统缓存分页数据，从缓存中获取数据而不是每次都访问数据库。
4、使用索引优化：
原理：确保查询字段有合适的索引，加快数据检索速度。
示例：为分页查询涉及的字段添加合适的索引，例如 CREATE INDEX idx_name ON your_table(name);。
5、预先计算总行数优化：
原理：提前计算总行数并缓存，避免每次 COUNT(*) 查询。
示例：在应用启动时或定时任务中计算总行数，并将结果存储到缓存中，需要时直接获取总行数而不是每次都进行 COUNT(*) 查询。
6、分区表优化：
原理：使用分区表按某个字段分区，提高查询效率。
示例：创建分区表并按照时间范围等字段进行分区，将数据水平分布到不同分区中，减少查询范围。
7、定期优化表结构优化：
原理：定期对表结构进行优化，包括索引优化、数据清理等。
示例：定期检查表结构，删除不必要的索引、清理过期数据等，保持查询性能。
标签：10,分页,示例,超大,查询,cursor,MySQL,id From： https://blog.csdn.net/m0_56615376/article/details/137048998