PHP优化之批量操作MySQL实例分析
程序员文章站
2023-11-14 14:45:28
本文实例讲述了php优化之批量操作mysql。分享给大家供大家参考,具体如下:设计一个数据表如下:create table optimization( id int not null auto_in...
本文实例讲述了php优化之批量操作mysql。分享给大家供大家参考,具体如下:
设计一个数据表如下:
create table optimization( id int not null auto_increment, value varchar(10) not null, primary key(id) );
现在有一个业务需求需要批量插入数据。
先来看看下面这一段代码:
<?php $dsn = 'mysql:dbname=test;host=127.0.0.1'; $user = 'root'; $password = 'root'; try { $dbh = new pdo($dsn, $user, $password); } catch(pdoexception $e) { echo 'connection failed: ' , $e->getmessage(); } $begin = microtime(true) * 1000; $count = 100; $stmt = $dbh->prepare('insert into `optimization` (id, value) values(:id, :value)'); $stmt->bindparam(':id', $id); $stmt->bindparam(':value', $value); for ($i = 0; $i < $count; $i++) { $id = ''; $value = $i; $stmt->execute(); } $end = microtime(true) * 1000; echo 'excuted : ' , ($end - $begin) , ' ms';
经过测试,上面代码运行结果如下:
1、excuted : 7601.4348144531 ms
2、excuted : 7476.4270019531 ms
3、excuted : 7674.4387207031 ms
平均:7584.100179036433 ms
再来看看第二段代码:
<?php $dsn = 'mysql:dbname=test;host=127.0.0.1'; $user = 'root'; $password = 'root'; try { $dbh = new pdo($dsn, $user, $password); } catch(pdoexception $e) { echo 'connection failed: ' , $e->getmessage(); } $begin = microtime(true) * 1000; $dbh->begintransaction(); try { $count = 100; $sql = 'insert into `optimization` (id, value) values '; $sql_arr = array(); $sql_str = ''; for ($i = 0; $i < $count; $i++) { $sql_arr[] = ("('', $i)"); } $sql_str = implode(',', $sql_arr); $sql .= $sql_str; $stmt = $dbh->prepare($sql); $stmt->execute(); $dbh->commit(); } catch(exception $e) { $dbh->rollback(); echo $e->getmessage() . '<br>'; } $end = microtime(true) * 1000; echo 'excuted : ' , ($end - $begin) , ' ms';
上面这段代码的运行结果如下:
1、excuted : 99.005859375 ms
2、excuted : 103.00610351562 ms
3、excuted : 68.00390625 ms
平均:90.00528971354 ms
##分析 可以看出,在第二段代码中,使用了批量插入,此时的效率比第一段提高了84%。原因如下:
- 使用第一段代码的时候,因为每一次循环里都执行了一个mysql语句,此时php需要与mysql获得连接,然后再执行mysql语句,然后再断开。这就是第一段代码最主要的时间开销–php与mysql连接的网络传输io
- 第一段代码sql语句解析的次数更多
因此,在第二段代码中,通过合并sql语句来实现减少sql语句解析的次数以及php与mysql连接的次数来达到减少网络传输io的开销。
注意: 1、sql语句是有长度限制的,因此,在进行sql语句合并时务必不能超过sql长度限制,通过设置max_allowed_packet可以修改,默认是1m,测试时修改为8m。
##总结
在进行对数据库的批量操作(如:插入、更新、修改)时,应当尽可能将sql语句合并后再执行而不是在循环中依次执行。
记录下最近在项目中犯下的一个比较大的错误,以后不能再犯了。以前一直都没有注意到,直到现在真正参与到企业项目中,自己的代码被老大指出错误后才发现自己的错误。学习了。