Python,32bit运行报错:MemoryError

由于最近使用的是32位系统,安装和运行Python各种问题

有在网上搜这方面的问题,大多数回答是:python 32bit 最大只能使用 2G 内存,超过 2G 报错MemoryError,解决的办法是使用 64bit python。

而我面临的情况是操作系统无法更换,只能自己去摸索解决办法了

首先我查看了数据量是不小但是运行应该是没有问题的

我报错的语句是

1 df_group = df.groupby(['col_name1','col_name1']).apply(def_name)

猜测可能是apply方法运行占用内存过大

解决办法

利用for循环语句,用merge或者concat方法拼接DataFrame数据,问题解决,不过运行速度变慢且代码冗余。

目前未找到更好的办法。