多任务拷贝小案例

使用到：

　　进程池（重复利用进程），队列（用于进程间的通信，显示进度）

功能：

　　拷贝文件夹下的所有文件，显示进度

注意：

　　如涉及到进程池同时需要使用到队列，使用multiprocessing.manager().queue()，而非multiprocessing.queue()

 

import os
import multiprocessing


def copy_file(q, file_name, old_folder_name, new_folder_name):
    """完成文件的copy"""
    # print("=====>模拟copy文件 %s--->%s 文件名是：%s" % (old_folder_name, new_folder_name, file_name))
    old_f = open(old_folder_name + "/" + file_name, "rb")
    content = old_f.read()
    old_f.close()

    new_f = open(new_folder_name + "/" + file_name, "wb")
    new_f.write(content)
    new_f.close()

    # 如果拷贝完了文件，那么就向队列中写入一个消息，表示已经完成
    q.put(file_name)


def main():
    # 1.获取用户要copy的文件夹的名字
    old_folder_name = input("请输入要copy的文件夹的名字：")

    # 2.创建一个新的文件夹
    new_folder_name = old_folder_name + "[复件]"
    try:
        os.mkdir(new_folder_name)
    except:
        pass

    # 3.获取文件夹的所有的待copy的文件夹名字 listdir()
    file_names = os.listdir(old_folder_name)
    # print(file_names)

    # 4.创建进程池
    po = multiprocessing.pool(2)

    # 5.创建一个队列
    q = multiprocessing.manager().queue()

    # 6.向进程池中添加cpoy文件的任务
    for file_name in file_names:
        po.apply_async(copy_file, args=(q, file_name, old_folder_name, new_folder_name))

    po.close()
    # 让主进程无线循环的去获取进度，故将join()注释
    # po.join()

    # 获取所有文件的个数
    all_file_num = len(file_names)
    copy_ok_num = 0
    while true:
        file_name = q.get()
        # print("已经完成copy：%s" % file_name)
        copy_ok_num += 1
        print("\r拷贝进度：%.2f%%" % (copy_ok_num/all_file_num*100), end="")
        if copy_ok_num >= all_file_num:
            break

    print()


if __name__ == '__main__':
    main()