PHP生成器yield处理大量数据业务（代码示例）以及优化
官方解释yield
yield生成器是php5.5之后出现的，官方文档这样解释：yield提供了一种更容易的方法来实现简单的迭代对象，相比较定义类实现 Iterator 接口的方式，性能开销和复杂性大大降低。
生成器的核心是一个yield关键字，一个生成器函数看起来像一个普通的函数，不同的是：普通函数返回一个值，而一个生成器可以yield生成许多它所需要的值。生成器函数被调用时，返回的是一个可以被遍历的对象。
yield和return有点类似，不过不同的是，return会返回值并且终止代码的执行，而yield会返回一个值给循环调用此生成器的代码并且只是暂停执行生成器函数。
这里顺便给大家介绍一下php版本的非缓冲查询
意思即是 把数据一行行 读取到php运行内存，并非一次性读取到php运行内存，众所周知，php有很多内置函数，可以帮助我们对数据进行加工操作，因为数据都在内存里面，所以能操作，但是php的运行内存是有极限，默认128M。
注意：因为非缓冲查询是 会长时间连接数据库的，有可能会造成慢查询、锁表之类的情况，比较耗mysql资源
相对非缓冲查询就是 缓冲查询：
如果用缓存查询，php内存就会直接爆了，出现内存不足的情况。好了，这里主要是为了突出yield
yield性能
生成器会对PHP应用的性能有非常大的影响
PHP代码运行时节省大量的内存
比较适合计算大量的数据
yield运用
生成器允许你在 foreach 代码块中写代码来迭代一组数据而不需要在内存中创建一个数组,那会使你的内存达到上限，或者会占据可观的处理时间。相反，你可以写一个生成器函数，就像一个普通的自定义函数一样, 和普通函数只返回一次不同的是, 生成器可以根据需要 yield 多次，以便生成需要迭代的值。
我这里只是构建了一个数组来给大家演示，平常你在操作数据库输出数据也是一样的。转为array
//仓库库存扣除测试
public function cangku_stock()
{
//set_time_limit(0); //表示永久运行，这里我是测试array的时候用到的
$order_info = $this->read_temp_api_order_info(10); //这里我就测试了10条数据，效果是看不出来的
foreach($order_info as $temp_api_order_info){
dd($temp_api_order_info); //打印出来看看数据
//处理数据
$api_ware_id = $this->o->getCangkuApiUrl() .'ware/program/addOutWare';
$out_wares = api_request($api_ware_id, $temp_api_order_info);
$temp_out_wares = json_decode($out_wares, true);
if ($temp_out_wares['code'] != 1) {
$msg = (isset($temp_out_wares['msg']) && $temp_out_wares['msg']) ? $temp_out_wares['msg'] : var_export($out_wares, true);
throw new Exception($msg);
}
}
//dd("批量更新成功".date('Y-m-d H:i:s'));
可以看到我们调用 $order_info = $this->read_temp_api_order_info(10);返回了一个 Generator 对象，这个对象可以使用 foreach 迭代，每次迭代，PHP 会要求 Generator 实例计算并提供下一个要迭代的值。
生成器的优雅体现在每次产出一个值之后，生成器的内部状态都会停顿；向生成器请求下一个值时，内部状态又会恢复。生成器内部的状态会一直在停顿和恢复之间切换，直到抵达函数定义体的末尾或遇到空的 return 语句为止。
这里测试大量数据，直接更改$this->read_temp_api_order_info(10);就好，如果是计算数据表数量，那你就要改改这个方法了。自己试着更改一下吧。
优点
直接讲概念估计你听完还是一头雾水，所以我们先来说说优点，也许能勾起你的兴趣。那么生成器有哪些优点，如下：
● 生成器会对PHP应用的性能有非常大的影响
● PHP代码运行时节省大量的内存
● 比较适合计算大量的数据
那么，这些神奇的功能究竟是如何做到的？我们先来举个例子。
概念引入
首先，放下生成器概念的包袱，来看一个简单的PHP函数：
function createRange($number){
$data = [];
for($i=0;$i<$number;$i++){
$data[] = time();
}
return $data;
}
这是一个非常常见的PHP函数，我们在处理一些数组的时候经常会使用。这里的代码也非常简单：
1.我们创建一个函数。
2.函数内包含一个for循环，我们循环的把当前时间放到$data里面
3.for循环执行完毕，把$data返回出去。
下面没完，我们继续。我们再写一个函数，把这个函数的返回值循环打印出来：
$result = createRange(10); // 这里调用上面我们创建的函数
foreach($result as $value){
sleep(1);//这里停顿1秒，我们后续有用
echo $value.'<br />';
}
这里非常完美，没有任何问题。（当然sleep(1)效果你们看不出来）
思考一个问题
我们注意到，在调用函数createRange的时候给$number的传值是10，一个很小的数字。假设，现在传递一个值10000000（1000万）。
那么，在函数createRange里面，for循环就需要执行1000万次。且有1000万个值被放到$data里面，而$data数组在是被放在内存内。所以，在调用函数时候会占用大量内存。
这里，生成器就可以大显身手了。
创建生成器
我们直接修改代码，你们注意观察：
function createRange($number){
for($i=0;$i<$number;$i++){
yield time();
}
}
看下这段和刚刚很像的代码，我们删除了数组$data，而且也没有返回任何内容，而是在time()之前使用了一个关键字yield
使用生成器
我们再运行一下第二段代码：
$result = createRange(10); // 这里调用上面我们创建的函数
foreach($result as $value){
sleep(1);
echo $value.'<br />';
}
我们奇迹般的发现了，输出的值和第一次没有使用生成器的不一样。这里的值（时间戳）中间间隔了1秒。
这里的间隔一秒其实就是sleep(1)造成的后果。但是为什么第一次没有间隔？那是因为：
● 未使用生成器时：createRange函数内的for循环结果被很快放到$data中，并且立即返回。所以，foreach循环的是一个固定的数组。
● 使用生成器时：createRange的值不是一次性快速生成，而是依赖于foreach循环。foreach循环一次，for执行一次。
到这里，你应该对生成器有点儿头绪。
深入理解生成器
代码剖析
下面我们来对于刚刚的代码进行剖析。
function createRange($number){
for($i=0;$i<$number;$i++){
yield time();
}
}
$result = createRange(10); // 这里调用上面我们创建的函数
foreach($result as $value){
sleep(1);
echo $value.'<br />';
}
我们来还原一下代码执行过程。
1.首先调用createRange函数，传入参数10，但是for值执行了一次然后停止了，并且告诉foreach第一次循环可以用的值。
2.foreach开始对$result循环，进来首先sleep(1)，然后开始使用for给的一个值执行输出。
3.foreach准备第二次循环，开始第二次循环之前，它向for循环又请求了一次。
4.for循环于是又执行了一次，将生成的时间戳告诉foreach.
5.foreach拿到第二个值，并且输出。由于foreach中sleep(1)，所以，for循环延迟了1秒生成当前时间
所以，整个代码执行中，始终只有一个记录值参与循环，内存中也只有一条信息。
无论开始传入的$number有多大，由于并不会立即生成所有结果集，所以内存始终是一条循环的值。
概念理解
到这里，你应该已经大概理解什么是生成器了。下面我们来说下生成器原理。
首先明确一个概念：生成器yield关键字不是返回值，他的专业术语叫产出值，只是生成一个值
那么代码中foreach循环的是什么？其实是PHP在使用生成器的时候，会返回一个Generator类的对象。foreach可以对该对象进行迭代，每一次迭代，PHP会通过Generator实例计算出下一次需要迭代的值。这样foreach就知道下一次需要迭代的值了。
而且，在运行中for循环执行后，会立即停止。等待foreach下次循环时候再次和for索要下次的值的时候，for循环才会再执行一次，然后立即再次停止。直到不满足条件不执行结束。
实际开发应用
很多PHP开发者不了解生成器，其实主要是不了解应用领域。那么，生成器在实际开发中有哪些应用？
读取超大文件
PHP开发很多时候都要读取大文件，比如csv文件、text文件，或者一些日志文件。这些文件如果很大，比如5个G。这时，直接一次性把所有的内容读取到内存中计算不太现实。
这里生成器就可以派上用场啦。
我们创建一个text文本文档，并在其中输入几行文字，示范读取。
<?php
header("content-type:text/html;charset=utf-8");
function readTxt()
{
# code...
$handle = fopen("./test.txt", 'rb');
while (feof($handle)===false) {
# code...
yield fgets($handle);
}
fclose($handle);
}
foreach (readTxt() as $key => $value) {
# code...
echo $value.'<br />';
}
但是，背后的代码执行规则却一点儿也不一样。使用生成器读取文件，第一次读取了第一行，第二次读取了第二行，以此类推，每次被加载到内存中的文字只有一行，大大的减小了内存的使用。
这样，即使读取上G的文本也不用担心，完全可以像读取很小文件一样编写代码。
批量更新数据库表字段
/**
* @desc: 方法描述
* @param int $count 数组个数（需要循环多少次）
* @param int $limit 数组大小
* @return \Generator
*/
public function getAddressContent($count = 1, $limit = 20000)
{
for ($i = 0; $i < ceil($count / $limit); $i++) {
$result = StudentModel::where('id','<','67265')
->limit($i * $limit, $limit)
->order('id desc')
->select()->toArray();
yield $result;
}
}
/**
* @desc: 修改数据库 省份、城市
* @throws Exception
*/
public function idCard()
{
$count = 200000000; // 需要更新的数据
foreach ($this->getAddressContent($count) as $key=>$lists) {
foreach ($lists as $k => $v) {
$peopleIdentity = new Identity($v['idcard']);
$peopleRegion = $peopleIdentity->region();
if($peopleRegion->code() != 0 ){
$res = StudentModel::where('id', $v['id'])->update([
'birthday' => $peopleIdentity->birthday()??'',
'province' => $peopleRegion->province()??'',
'city' => $peopleRegion->city()??'',
'county' => $peopleRegion->county()??'',
]);
Log::debug('更新结果 [' . $v['id'] . ']: ' . json_encode($res));
}
}
}
echo "success";
}
返回键值对形式
function test5()
{
for ($i = 0; $i < 10; $i++) {
yield 'key.' . $i => $i + 1;
}
}
foreach (test5() as $k=>$t) {
echo $k . ':' . $t, PHP_EOL;
}