返回信息流处理excel,对多行数据做相同的操作,目前是逐行算,求问如何能更高效呢~
```
for row in rows:
pass
```
20180417
今天pandas看到了apply 豁然开朗
这是一条镜像帖。来源:北邮人论坛 / python / #21375同步于 2018/4/11
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖
【问题】处理多行数据
qidi
2018/4/11镜像同步8 回复
订阅后,新回复会通过你的通知中心匿名送达。
8 条回复
电脑非人脑,不能实现智能操作的,要想提速,无非就是并行,并行的前提是数据量足够大,否则不会比串行快。 @zc199102 @soleman @yqyqyqyqyq @fuxuemingzhu
【 在 qidi 的大作中提到: 】
: 处理excel,对多行数据做相同的操作,目前是逐行算,求问如何能更高效呢~
: [md]
: ```
: ...................
额,没有看懂。。
把for in 包装成一个函数,调用函数不还是会for in 吗。。这样不就是多了个调用函数的过程么?
【 在 jh1 的大作中提到: 】
: 把for in包装成一个函数
我试着处理14000条数据用了144秒,
预计要处理10万+条数据。。
【 在 FromSixToTen 的大作中提到: 】
: 电脑非人脑,不能实现智能操作的,要想提速,无非就是并行,并行的前提是数据量足够大,否则不会比串行快。 @zc199102 @soleman @yqyqyqyqyq @fuxuemingzhu
用并行计算吧,把文件切块,然后分块处理,最后汇总。
【 在 qidi 的大作中提到: 】
: 我试着处理14000条数据用了144秒,
: 预计要处理10万+条数据。。