通过pyodbc去读SQL server上的table总是耗掉几倍的内存 - DataSciences版 - 未名存档

本页内容为未名空间相应帖子的节选和存档，一周内的贴子最多显示50字，超过一周显示500字访问原贴

DataSciences版 - 通过pyodbc去读SQL server上的table总是耗掉几倍的内存

相关主题
● 板上R高手多，包子求R数据输出到CSV方法	● 之前没有什么数学统计背景的怎么转DS？
● HIVE load CSV 问题请教	● which graduate program should I go?
● 求助：一个用Hive提取feature的问题	● Impala v Hive
● hive table 转换成csv文件丢数据是什么情况？	● 零经验大妈真诚求转data analysis建议，长！！！
● 可以通过jdbc给hive table 进行 load data么？	● 最近的一些面经
● 请教如何定时将多个本地数据库（SQL)的数据汇总到一个位于Cloud	● 精算1年工作经验,去美国读个data science master,就业前景如何?
● 求data analysis/engineer/scientist intern的面试经验及就业方向指导谢谢！	● Fresh Grad求助：该不该接这个contractor (转载)
● 用人用过DigitalEdge吗？	● 找工作屡败屡战，求提携，求建议

相关话题的讨论汇总
话题: pyodbc话题: sql话题: table

进入DataSciences版参与讨论

1

(共1页)

c*******h 发帖数: 107	1 俺有个6G的table(存成CSV文件大概有4G)放在SQL server上，试着用pyodbc把它读到 python里，用得就是简单的"select * from table",可是运行过程中内存消耗很快就过了20G，这是咋会事啊?
l******n 发帖数: 9344	2 google is your friend http://stackoverflow.com/questions/14126452/pyodbc-memory-leak- 【在 c******h 的大作中提到】 : 俺有个6G的table(存成CSV文件大概有4G)放在SQL server上，试着用pyodbc把它读到 : python里，用得就是简单的"select from table",可是运行过程中内存消耗很快就过 : 了20G，这是咋会事啊?
c*******h 发帖数: 107	3 多谢！【在 l******n 的大作中提到】 : google is your friend : http://stackoverflow.com/questions/14126452/pyodbc-memory-leak-

1

(共1页)

进入DataSciences版参与讨论

相关主题
● 找工作屡败屡战，求提携，求建议	● 可以通过jdbc给hive table 进行 load data么？
● database startup の广告~ (不是骗子)	● 请教如何定时将多个本地数据库（SQL)的数据汇总到一个位于Cloud
● 贴个工作	● 求data analysis/engineer/scientist intern的面试经验及就业方向指导谢谢！
● data scientist对sql要求高吗	● 用人用过DigitalEdge吗？
● 板上R高手多，包子求R数据输出到CSV方法	● 之前没有什么数学统计背景的怎么转DS？
● HIVE load CSV 问题请教	● which graduate program should I go?
● 求助：一个用Hive提取feature的问题	● Impala v Hive
● hive table 转换成csv文件丢数据是什么情况？	● 零经验大妈真诚求转data analysis建议，长！！！

相关话题的讨论汇总
话题: pyodbc话题: sql话题: table

未名新帖统计// 7月16日

#	版面	帖数(主题数)
-	全站	4871 (796)
1	Military	3777 (569)
2	Stock	341 (51)
3	Joke	117 (17)
4	History	116 (3)
5	Automobile	100 (9)
6	USANews	55 (9)
7	Midlife	45 (1)
8	Headline	41 (41)
9	Dreamer	33 (13)
10	FleaMarket	32 (20)
11	Living	30 (7)

* 这里只显示发帖超过25的版面，努力灌水吧:-)