欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  后端开发

MySql 大量记录分表问题

程序员文章站 2022-04-28 19:39:22
...
背景描述:数据库使用的MySql,项目中有个设备状态记录表,就是记录设备在某个时间下的各属性状态值。系统下所有的设备状态记录都会插入该表

问题描述:现在情况是设备有很多,每天就会插入很多条记录。现在提供按设备、按时间区间查询记录。现在表的数据较多,查询起来速度较慢。
1.改如何优化呢?
2.网上看可以分表,现在打算按时间分表,那么分表后如何按设备、按时间查询数据呢?

回复内容:

背景描述:数据库使用的MySql,项目中有个设备状态记录表,就是记录设备在某个时间下的各属性状态值。系统下所有的设备状态记录都会插入该表

问题描述:现在情况是设备有很多,每天就会插入很多条记录。现在提供按设备、按时间区间查询记录。现在表的数据较多,查询起来速度较慢。
1.改如何优化呢?
2.网上看可以分表,现在打算按时间分表,那么分表后如何按设备、按时间查询数据呢?

一定要结合业务需求!一定要结合业务需求!一定要结合业务需求!

  1. 假设你没有做索引,建议做个索引

  2. 举例:假设你的业务逻辑大部分只查询最近的设备状态记录,那么老的数据你单独一张表,或者每月每年之类的一张表,取决于你数据大小

如果真需要按时间来分表的话,比如按每月来分的话,可以把表名设置为如201601,201602,...
再把每个表里的设备类型的字段(假设字段名为platform)设置索引,查询的大致思路可以这样:

$date = $_POST['date']; //查询的时间,需处理为与表名规则一致
$table = $date;
$platform = $_POST['platform']; //查询的设备类型

$where = "`platfrom`='$platform'";
$query = "select * from $table $where";

也可以不用分表。mysql5.5之后可以尝试下分区,按月分区或按年分区都可以。

你这查询情况的话,可以分表;因为查询条件有日期,所以按照日期分表查起来肯定不行(可能产生要在多个表里查询的情况),考虑到还有按照设备来查询;可以直接按照设备(号)来分表,比如设备的id,一万个设备的数据放入同一个表,或者一千个设备放一个表,也就是说:设备号/10000 结果整数部分一样的一个表,查询的时候就先根据获取表名,然后在那个表里查询符合日期的范围的结果

相关标签: php mysql