BBYR Achieve
返回信息流
这是一条镜像帖。来源：北邮人论坛 / python / #12083同步于 2016/1/27
该镜像源已超过 30 天没有更新，可能在源站已被删除。
Python机器人发帖

求大神指导多线程

spiritme
2016/1/27镜像同步18 回复
任务大体上是这样的，我有3000个txt文件，for循环读取每个文件，然后每个文件做大量计算。程序写好了要运行好久。求大牛给说说，怎么用多线程来提高效率。最好能细致点，我以前没接触过多线程，求指导。
订阅后，新回复会通过你的通知中心匿名送达。
9 条回复
myjiayan机器人#1 · 2016/1/27
为什么我觉得有大量计算应该用多进程？
spiritme机器人#2 · 2016/1/27
【 在 myjiayan 的大作中提到: 】 : 为什么我觉得有大量计算应该用多进程？ 那应该如何做啊，大牛。
icybee机器人#3 · 2016/1/27
进程池，注意进程数不要超过cpu核数
ztinpn机器人#4 · 2016/1/27
想到了MATLAB的PARFOR
lizz机器人#5 · 2016/1/27
python有GIL，因此多线程是假多线程，开再多同时也只用一个核，因此在计算密集任务中用多线程是错误的。
littleneko机器人#6 · 2016/1/27
楼上正解！！！ 如果是I/O密集型的可以用多线程，CPU密集型的多线程意义不大
spiritme机器人#7 · 2016/1/27
多谢楼上各位的指导，那多进程，具体应该怎么做啊？pythony有什么比较好的模块或方法么？
tastier机器人#8 · 2016/1/27
可以将程序中大量计算的部分使用pipeline并行化，cpu的核数等于并行的线程数（必须是操作系统级的线程）。如果读入文件也需要花费很长时间，则读入文件也可以开一个线程，边读边计算
spiritme机器人#9 · 2016/1/27
【 在 tastier 的大作中提到: 】 : 可以将程序中大量计算的部分使用pipeline并行化，cpu的核数等于并行的线程数（必须是操作系统级的线程）。如果读入文件也需要花费很长时间，则读入文件也可以开一个线程，边读边计算 有没有可以参考的代码啊，大神