如何在python进程中限制内存使用

Question

我在具有16GB Ram和64位OS的Linux机器上运行Python
2.7。我编写的python脚本可能会将过多的数据加载到内存中，这使计算机的运行速度降低到我什至无法杀死进程的地步。

虽然可以通过以下方式限制内存：

ulimit -v 12000000

在运行脚本之前，请在外壳程序中添加一个限制选项。在我到处看的地方，该resource模块具有与相同的功能ulimit。但是调用：

import resource
_, hard = resource.getrlimit(resource.RLIMIT_DATA)
resource.setrlimit(resource.RLIMIT_DATA, (12000, hard))

在我的脚本开始时，绝对没有任何作用。即使将值设置为12000，也不会使该过程崩溃。我对尝试了相同的操作RLIMIT_STACK，并获得了相同的结果。奇怪的是，打电话给：

import subprocess
subprocess.call('ulimit -v 12000', shell=True)

什么也没有做。

我究竟做错了什么？我在网上找不到任何实际用法示例。

编辑：对于任何好奇的人，使用subprocess.call都不起作用，因为它会创建一个（令人惊讶的惊喜！）新进程，该进程与当前python程序在其中运行的进程无关。

Answer 1

resource.RLIMIT_VMEM是对应ulimit -v的资源。

RLIMIT_DATA
仅影响brk/sbrk系统调用，而较新的内存管理器倾向于使用mmap代替。

要注意的第二件事是ulimit/setrlimit仅影响当前过程及其将来的子级。

关于AttributeError: 'module' object has no attribute 'RLIMIT_VMEM'消息：resource模块文档提到了这种可能性：

该模块不会尝试掩盖平台差异-未为平台定义的符号将无法从该平台上的该模块中获得。

根据上面链接的bash
ulimit来源
，它使用RLIMIT_ASifRLIMIT_VMEM未被定义。