Question

用weka进行数据分析 导入一个arff 数据 报错说内存不够之类的 貌似是数据太大了 有没有什么解决办法？

老师给的建议是：数据采样 问 怎么采样呢？ 数据是图像的 已经用matlab提取过了

Answer 1

首先，如果数据量大于物理内存没办法使用软件解决的。

weka是基于java的，内存不足指java虚拟机的内存不足，设置方法

1. 打开weka安装目录的RunWeka.ini可以看到：

   # The JAVA_OPTS environment variable (if set). Can be used as an alternative way to set
   # the heap size (or any other JVM option)
   javaOpts=%JAVA_OPTS%

2. 设置环境变量：  JAVA_OPTS

   例如：JAVA_OPTS=-Xmx2048m -Xms512m

3. 这样weka启动时建立的虚拟机就会变大，但是还是以物理内存为限制的。

Answer 2

解决办法：
1.看你的描述你是用的是weka的gui界面，增加java虚拟机内存-java -Xms128 -Xmx512 jar weka.jar 。
或者 打开Runweka.ini文件，修改maxheap=127m；
2.采样就是比如说你3*3的一块数据，用中心点代替，整个图像数据就缩小了很多。

追问

数据提取已经实现了 是老师帮忙实现的 大概有700多M改堆栈也不行 电脑只有2G内存

我说的采样是 原来有21504个属性 采样取其中3分之1 或者按照什么策略实现？就想知道处理的c++程序怎么写

追答

你21504个属性你也不说是什么属性，如果是像素点那就隔三取一就行了

Answer 3

找我。。 数据多大都不是事。。1亿行？10亿行？ 几秒就分析好了。

Answer 4

空间哈高科好快好快好快好快快快好