在mac上使用python子进程获取目录大小而不是OS.Walk

Question

我对python和子流程模块比较陌生。

我正在尝试使用mac OSX上的子进程来获得python的目录大小。os.walk对于大型目录需要很长时间。我希望通过shell命令得到子进程来完成这一操作，并加快结果。这个shell命令对我有效，但我不能从子进程中使它工作？

(cd/test_folder_path&ls-nr grep-v“^D”awk“{total+=$5}END{print total}”）

这就是我试图在Python中创建子进程的方法。

import shlex 
import subprocess

target_folder = "/test_folder_path"
command_line = "( cd " + target_folder + " && ls -nR | grep -v '^d' | awk '{total += $5} END {print total}' )"
args = shlex.split(command_line)
print args
folder_size = subprocess.check_output(args)
print str(folder_size)

在python中，当调用subprocess.check_ouput时，我会得到以下错误

folder_size=subprocess.check_output(args)文件“/usr/local/cellar/python/2.7.5/framework/python.framework/vershtml" target="_blank">ions/2.7/lib/python2.7/subprocess.py”，第568行，在check_output process=Popen(stdout=pipe，*popenargs，**kwargs)文件中“

当我在shell命令中使用相同的目录时，它会起作用，并为我提供正确的目录大小。

任何帮助使这种方法工作或指出一个更好的方法将非常感谢。

Answer 1

Python的子进程默认使用shell=false。为了使用管道运行子命令，您需要shell来防止python将管道（和&)解释为cd的参数。

target_folder = "/test_folder_path"
command_line = "cd " + target_folder + " && ls -nR | grep -v '^d' | awk '{total += $5} END {print total}'"
folder_size = subprocess.check_output(command_line, shell=True)

我已经尝试了上面的方法，只是使用了Drewk建议的命令：

>>> import subprocess
>>> folder_size = subprocess.check_output('cd ~/mydir && du -c | tail -n 1', shell=True)
>>> folder_size
b'113576\ttotal\n'

看起来一切都很好。

>>> import subprocess
>>> result = subprocess.check_output('du -c | tail -n 1', cwd='/path/to/home/mydir', shell=True)
>>> result
'113576\ttotal\n'