MySql 大量记录分表问题
问题描述:现在情况是设备有很多,每天就会插入很多条记录。现在提供按设备、按时间区间查询记录。现在表的数据较多,查询起来速度较慢。
1.改如何优化呢?
2.网上看可以分表,现在打算按时间分表,那么分表后如何按设备、按时间查询数据呢?
回复内容:
背景描述:数据库使用的MySql,项目中有个设备状态记录表,就是记录设备在某个时间下的各属性状态值。系统下所有的设备状态记录都会插入该表。
问题描述:现在情况是设备有很多,每天就会插入很多条记录。现在提供按设备、按时间区间查询记录。现在表的数据较多,查询起来速度较慢。
1.改如何优化呢?
2.网上看可以分表,现在打算按时间分表,那么分表后如何按设备、按时间查询数据呢?
一定要结合业务需求!一定要结合业务需求!一定要结合业务需求!
假设你没有做索引,建议做个索引
举例:假设你的业务逻辑大部分只查询最近的设备状态记录,那么老的数据你单独一张表,或者每月每年之类的一张表,取决于你数据大小
如果真需要按时间来分表的话,比如按每月来分的话,可以把表名设置为如201601,201602,...
再把每个表里的设备类型的字段(假设字段名为platform)设置索引,查询的大致思路可以这样:
$date = $_POST['date']; //查询的时间,需处理为与表名规则一致
$table = $date;
$platform = $_POST['platform']; //查询的设备类型
$where = "`platfrom`='$platform'";
$query = "select * from $table $where";
也可以不用分表。mysql5.5之后可以尝试下分区,按月分区或按年分区都可以。
你这查询情况的话,可以分表;因为查询条件有日期,所以按照日期分表查起来肯定不行(可能产生要在多个表里查询的情况),考虑到还有按照设备来查询;可以直接按照设备(号)来分表,比如设备的id,一万个设备的数据放入同一个表,或者一千个设备放一个表,也就是说:设备号/10000 结果整数部分一样的一个表,查询的时候就先根据获取表名,然后在那个表里查询符合日期的范围的结果