Question

python 问题求解：memoryError的问题！

对于N=400000000，会出现memoryerror的问题，怎么解决？？
t = np.arange(0,N-1)*T_interval
另外，对于FFT变换，numpy.fft.rfft(signal,N)/N
如果N=400000000，也会出现memoryerror问题
这是硬件问题吗？
如果我想解决的话，缓存数据可以么？不知道python里面怎么才能缓存
跪求啊！！！！
也是对长序列的傅里叶变换

Answer 1

其实，解决这种问题的策略无非两种策略：
1、换用内存更大的服务器。
2、使用更大的物理空间来牺牲性能，你可以将中间结果或者临时结果在计算进行到一定程度的时候存储进入临时文件，然后在使用到相应的数据时候再取用，当然这样非常损失性能，当年我做生物信息学方面的时候遇到这样的问题。只能用数以千计的临时文件进行暂时缓存。

追问

好复杂。。。而且生成的数据都是一次性的啊，没有临时数据。必须那么多数据一起，不然结果就不对了。。。我直接用小的运算点数了，不过会出现误差，还挺大的。

追答

你的数据虽然好像是一次性的，但是在同一时间你不可能同时用到所有的数据，这样就可以暂时将使用不到的数据从内存里面输出到文件里面暂时存储，在使用的时候加载到内存里面即可。

Answer 2

换用64位python

追问

已经用了64位了，要哭了。。。内存设置成3个G了。。。

追答

你的内存太小了，把数据拆开分别吧

追问

拆分再合并 。。。不会啊，唉，而且对于这个t，我是要生成sin函数。。。这样拆分了，还能组合成原来一样么？fft变换也是。。。
t = np.arange(0,N-1)*T_interval
sig = 100*np.sin(1000*np.pi*t)

追答

换个服务器级别的去做，什么数据需要用4亿长度的数列。

追问

一个400M的音频信号。。。可能还有1G频率的信号的。。。唉

追答

音频的没做过，内存上分不出4G的连续空间，换用个服务器。