PHP 大日志文件读写

日志文件较大，2个多G。没办法用file操作，只能按行读取。

1. set_time_limit(0);
2. @ini_set('memory_limit', '64M');
4. $conn = mysql_pconnect('localhost', 'hcq', 'hcq') or die("con\'t connection db.");
5. mysql_select_db('log', $conn);
6. mysql_query('set names utf8', $conn);
8. $file = '/home/hcq/data/www.nimmin.com_20120601_access.log';
9. $handle = fopen($file, "r") or die("can\'t open file {$file}");
11. while($log = stream_get_line($handle, 8192, "\n")) {
12. $i = explode(' ', $log);
13. $path = isset($i[6]) ? str_replace('http://www.nimmin.com', '', $i[6]) : false;
14. if($path) {
15. preg_match('/(jpg|png|gif)/iu', $path, $m);
16. if(isset($i[8]) && $i[8] === '200' && count($m) > 0) {
17. $len = isset($i[9]) ? intval($i[9]) : 0;
18. $refer = isset($i[12]) ? str_replace('"', '', $i[12]) : '';
19. mysql_query('INSERT INTO trace(path, len, refer) VALUES (\''.$path.'\', '.$len.', \''.$refer.'\')', $conn);
20. }
21. }
22. }
24. fclose ($handle);
29. exit;

复制代码