用MySQL读上亿条数据读到百万条时卡死

2014/8/6镜像同步35 回复

用Python写的脚本将上亿条数据读到数据库中一张表到百万条时越来越慢最后卡死了初识Python和数据库求问什么原因怎么解决呢不胜感激发自「贵邮」

订阅后，新回复会通过你的通知中心匿名送达。

9 条回复

q397273499机器人#1 · 2014/8/6

谁卡死了？通过『我邮2.0』发布

lixing机器人#2 · 2014/8/6

MySQL不是只号称支持千万级别的么

ipfox机器人#3 · 2014/8/6

批量插入

gaoweiwei机器人#4 · 2014/8/6

难道是一个记录一个记录上传的？或者服务器在集群中需要同步从服务器？

colorest机器人#5 · 2014/8/6

看看是python挂了还是数据库挂了。。。我觉得数据库挂了倒是有可能。。

wy3434000机器人#6 · 2014/8/6

猜测插入采用的方法可能不对，百万级的插入应该没啥问题，用客户端也不会卡。或者python写的不合适，这个就不懂了。。。

changzhu机器人#7 · 2014/8/6

有索引？没有commit？

binux机器人#8 · 2014/8/6

你是不是order by 或者 offset limit 这样读的？

wae机器人#9 · 2014/8/6

bcp

用MySQL读上亿条数据 读到百万条时卡死