由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Programming版 - matlab textscan data loading limit
相关主题
*** help needed! on MATLAB GUI ***java和c那个更快?
a question about virtual memory这个cassandra paging的解决方案怎么样? (转载)
matlab question求救:2个dense matrix的乘法
如何在matlab里面load字符串[Free book ] Modeling with Data - Tools and Techniques for Scientific Computing
一般笔记本能跑Matlab吗?能帮我看看Ruby的这道题吗?
virtural memory low是怎么回事儿auto encoder 出来之后是不是没人再用PCA了
c 语言 查 memory再问机器学习。。。用keras分类
菜鸟问个Matlab问题TensorFlow 的 image_retrain 可否重新训练超过1000的分类?
相关话题的讨论汇总
话题: matlab话题: textscan话题: memory话题: data话题: loading
进入Programming版参与讨论
1 (共1页)
v*****r
发帖数: 2325
1
matlab died when i try to load data file 200+MB.
any solutions?
thanks
r****t
发帖数: 10904
2
1. switch to multiple file source.
2. switch to database.
N***m
发帖数: 4460
3
I used to load data files much bigger than this. no problem.

【在 v*****r 的大作中提到】
: matlab died when i try to load data file 200+MB.
: any solutions?
: thanks

v*****r
发帖数: 2325
4
using PC? or UNIX

【在 N***m 的大作中提到】
: I used to load data files much bigger than this. no problem.
N***m
发帖数: 4460
5
PC linux都搞过。
我都是比较大的dense matrices,存下来至少O(G)。
~200M肯定不是matlab本身的问题。

【在 v*****r 的大作中提到】
: using PC? or UNIX
v****s
发帖数: 1112
6
did u increase the heap size of matlab?
help memory
r****t
发帖数: 10904
7
你那个是 .mat 吧,楼主是文本数据,两个可能不一样。当然 >200M 的确实不该有问
题。

【在 N***m 的大作中提到】
: PC linux都搞过。
: 我都是比较大的dense matrices,存下来至少O(G)。
: ~200M肯定不是matlab本身的问题。

N***m
发帖数: 4460
8
no, plain txt files.
I seldom use .mat format.

【在 r****t 的大作中提到】
: 你那个是 .mat 吧,楼主是文本数据,两个可能不一样。当然 >200M 的确实不该有问
: 题。

v*****r
发帖数: 2325
9
i tried "help memory" , which tells me to go to windows control panel system
I checked virtual memory settings,
paging file initial size 2G, max 4G. feel like it is enough to handle 200M
files.
My pc has 4G RAM...

【在 v****s 的大作中提到】
: did u increase the heap size of matlab?
: help memory

r****t
发帖数: 10904
10
just type "memory" then enter, post the output here.

system

【在 v*****r 的大作中提到】
: i tried "help memory" , which tells me to go to windows control panel system
: I checked virtual memory settings,
: paging file initial size 2G, max 4G. feel like it is enough to handle 200M
: files.
: My pc has 4G RAM...

v*****r
发帖数: 2325
11
strange, no output at all:
>> memory
>> memory
>>

【在 r****t 的大作中提到】
: just type "memory" then enter, post the output here.
:
: system

r****t
发帖数: 10904
12
是 unix 版的吧?不知道了,我很久没用过 matlab 了。读一下这个吧:
http://www.mathworks.com/access/helpdesk/help/techdoc/matlab_prog/brh72ex-49.html

【在 v*****r 的大作中提到】
: strange, no output at all:
: >> memory
: >> memory
: >>

1 (共1页)
进入Programming版参与讨论
相关主题
TensorFlow 的 image_retrain 可否重新训练超过1000的分类?一般笔记本能跑Matlab吗?
[bssd]wdong,lightroom....来猜个东西virtural memory low是怎么回事儿
How to read/load a .tif image? (转载)c 语言 查 memory
请问delete的问题菜鸟问个Matlab问题
*** help needed! on MATLAB GUI ***java和c那个更快?
a question about virtual memory这个cassandra paging的解决方案怎么样? (转载)
matlab question求救:2个dense matrix的乘法
如何在matlab里面load字符串[Free book ] Modeling with Data - Tools and Techniques for Scientific Computing
相关话题的讨论汇总
话题: matlab话题: textscan话题: memory话题: data话题: loading