欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  后端开发

php下载一个生成所需文件类型(比较大)遇到的问题。

程序员文章站 2024-02-11 19:48:04
...
最开始每发现,后来发现数据多了,php脚本就会执行很长时间。

我是简单的把所有数据获取到,然后再去判断符合查找条件的,这样确实很麻烦,但是因为条件有可能为空,我感觉去对每个条件都判断一下是否为空?不为空,就在sql语句中加上太麻烦,就没那么做。(这个有什么号办法也可以告诉我)

正常所有条件都为空,那几个if语句应该不会浪费多长时间,所以就是获取数据库那好2,3万条数据,并遍历这2,3万条数据生成相应格式的字符串(有html,txt等格式)费了很长时间,超过了max_execution_time =30。(我设置很长,等了2分钟多,他也没输出来),超过了那个时间,就直接进入那个脚本,一个白的界面。

所以我的主要问题:

怎么样把那数据导出来,领导的建议是每次读1000条,加个进度条,而网上查到的大部分都是固定的文件,有路径可以直接下的,我这个是生成的,本来是想用ajax(没怎么用过,就知道是异步请求),然后看到有人说ajax不能下载文件,smarty模板,html和php文件分开的,找了很长时间也不知道怎么办,求助各位大神。。


回复讨论(解决方案)

如果是我,也跟你们领导的想法一样,分页去生成。。。

过滤掉传入条件的空项,可用 array_diff
如 $_POST = array_diff($_POST, array(''));
没有了空项,组装 sql 就简单多了

虽然正常都为空,但你不也是在循环中一一判别吗?一万条数据不就要判断数万次吗?

如果没有查询条件,那又何必每次都去组装呢?
在 select 指令中加上 INTO OUTFILE 子句不就直接输出到文件中去了吗

过滤掉传入条件的空项,可用 array_diff
如 $_POST = array_diff($_POST, array(''));
没有了空项,组装 sql 就简单多了

虽然正常都为空,但你不也是在循环中一一判别吗?一万条数据不就要判断数万次吗?

如果没有查询条件,那又何必每次都去组装呢?
在 select 指令中加上 INTO OUTFILE 子句不就直接输出到文件中去了吗。if(!=null)才去循环判断。


我是一次性全取出来了,因为还要生成相应格式的文件,所以循环了那个数组,比如html格式 填个table,tr,td什么的。
条件为空的话,就不执行判断是否符合条件的那个了啊。不是

如果是我,也跟你们领导的想法一样,分页去生成。。。




怎么分?他是一次性导出所有条件相关的内容啊,生成一个临时文件,每次取1000条,放里面,然后最后提供这个临时文件的下载,最后再把这个临时文件删了?

好像是我自己的问题,是下载文件最后的 echo 导致会很卡,跟数据库关系不大。。

所以百度了下,在echo 字符串的前面加入 ob_start(), 在这期间,echo 每条数据,最后flush(),ob_flush(), ob_end_clean()全部输出来,暂时不会需要太久的时间。。