优化 - 用php与mysql插入100万条数据最快要多长时间?
程序员文章站
2022-05-29 13:06:47
...
题目描述:
这是我写的核心代码,引擎是MyISAM,不知道有没有其他更加优化的方法(不考虑硬件环境)。
回复内容:
题目描述:
这是我写的核心代码,引擎是MyISAM,不知道有没有其他更加优化的方法(不考虑硬件环境)。
破题!
没有数据类型长度、没有服务器环境、没有硬件环境,垃圾帖。
要看硬件环境。
测试一下时间就可以了,机器配置不同,时间不同!
其实导入大量数据有这么几种方式
1、LOAD的方式
LOAD DATA INFILE 'data.txt' INTO TABLE db2.my_table;
2、sql语句
insert 一次可以插入多条语句,一次4W记录太多
总结:
推荐使用InnoDB engine
说明 Centos6下/4核8G/mysql5.5 ,TPS 1500左右 、写入速度平均为6000 write/s
大量的并发写入,任何的单机都不可能处理的,可以用多库多表+队列分到多台机器上
还可以使用Redis等内存数据库,可轻松达到10W QPS