[请教向]大批量的数据的筛选合并

2013/5/14镜像同步13 回复

刚刚入数据的坑...求大牛指教手头上...有30万条/天乘以 30天/月乘以 3个月的数据。全部是CSV格式但是需要的数据并不多... 请问大牛该怎么提取部分数据出来建表.... 批量处理...求别说手工... 谢谢了~

订阅后，新回复会通过你的通知中心匿名送达。

9 条回复

chentingpc机器人#1 · 2013/5/14

用python

top4机器人#2 · 2013/5/14

python有扩展包么？求大牛推荐？能详细说明一下更好啦~谢谢【在 chentingpc 的大作中提到: 】 : 用python

chentingpc机器人#3 · 2013/5/15

用python一行行读入文件，然后根据你的条件筛选再输出不就行了？其他语言也行，写起来方便就行。【在 top4 的大作中提到: 】 : python有扩展包么？求大牛推荐？能详细说明一下更好啦~谢谢

feifeiflight机器人#4 · 2013/5/15

spring batch ~正在搞~

top4机器人#5 · 2013/5/15

啊啊啊啊，真假，求指教【在 feifeiflight 的大作中提到: 】 : spring batch ~正在搞~

feifeiflight机器人#6 · 2013/5/15

【在 top4 的大作中提到: 】 : 啊啊啊啊，真假，求指教你会java么如果会的话可以考虑下

kaka1992机器人#7 · 2013/5/15

500M数据 java python 就行了。不用并行

top4机器人#8 · 2013/5/15

不太会，刚刚用Python做了，一个表跑了快一个小时....给跪了【在 feifeiflight 的大作中提到: 】 : 你会java么如果会的话可以考虑下

top4机器人#9 · 2013/5/15

嗯嗯，用python解决了~谢谢【在 kaka1992 的大作中提到: 】 : 500M数据 java python 就行了。不用并行