python 獲取進程,python進程池并行處理

 2023-11-12 阅读 31 评论 0

摘要:僅用于個人學習記錄 import multiprocessing as mp num_cpus=mp.cpu_count()#獲取機器CPU個數 pool=mp.Pool(num_cpus) results=[] #儲存結果 for idx in train_ids:#異步處理,pool.apply_async第一個參數是要運行的函數result=pool.apply_async(process_text

僅用于個人學習記錄在這里插入圖片描述

import multiprocessing as mp
num_cpus=mp.cpu_count()#獲取機器CPU個數
pool=mp.Pool(num_cpus)
results=[]   #儲存結果
for idx in train_ids:#異步處理,pool.apply_async第一個參數是要運行的函數result=pool.apply_async(process_text,args=(ids,split_method,'train'))results.append(result)
for idx in test_ids:result=pool.apply_async(process_text,args=(ids,split_method,'test'))results.append(result)
pool.close()  #關掉線程池
pool.join()   

版权声明:本站所有资料均为网友推荐收集整理而来,仅供学习和研究交流使用。

原文链接:https://808629.com/173676.html

发表评论:

本站为非赢利网站,部分文章来源或改编自互联网及其他公众平台,主要目的在于分享信息,版权归原作者所有,内容仅供读者参考,如有侵权请联系我们删除!

Copyright © 2022 86后生记录生活 Inc. 保留所有权利。

底部版权信息