由于最近使用的是32位系统,安装和运行Python各种问题
有在网上搜这方面的问题,大多数回答是:python 32bit 最大只能使用 2G 内存,超过 2G 报错MemoryError,解决的办法是使用 64bit python。
而我面临的情况是操作系统无法更换,只能自己去摸索解决办法了
首先我查看了数据量是不小但是运行应该是没有问题的
我报错的语句是
1 df_group = df.groupby(['col_name1','col_name1']).apply(def_name)
猜测可能是apply方法运行占用内存过大
解决办法
利用for循环语句,用merge或者concat方法拼接DataFrame数据,问题解决,不过运行速度变慢且代码冗余。
目前未找到更好的办法。