Сохранить выходные данные подпроцесса. Открыть вызов в строке

300

Я пытаюсь сделать системный вызов в Python и сохранить вывод в строку, которой я могу манипулировать в программе Python.

#!/usr/bin/python
import subprocess
p2 = subprocess.Popen("ntpq -p")

Я попробовал несколько вещей, включая некоторые из предложений здесь:

Получение выходных данных subprocess.call ()

но без удачи.

отметка
источник
3
Всегда полезно публиковать фактический код, который вы запускали, и фактическую трассировку или неожиданное поведение для конкретных вопросов, подобных этому. Например, я не знаю, что вы пытались сделать, чтобы получить вывод, и я подозреваю, что вы на самом деле не зашли слишком далеко, чтобы начать - вы бы получили ошибку о том, что не можете найти файл для "ntpq -p", что является другой частью проблема, о которой вы спрашиваете.
Майк Грэм,

Ответы:

467

В Python 2.7 или Python 3

Вместо Popenнепосредственного создания объекта вы можете использовать subprocess.check_output()функцию для хранения вывода команды в строку:

from subprocess import check_output
out = check_output(["ntpq", "-p"])

В Python 2.4-2.6

Используйте communicateметод.

import subprocess
p = subprocess.Popen(["ntpq", "-p"], stdout=subprocess.PIPE)
out, err = p.communicate()

out это то, что вы хотите.

Важное замечание о других ответах

Обратите внимание, как я прошел в команде. "ntpq -p"Пример поднимает другой вопрос. Поскольку Popenоболочка не вызывается, вы должны использовать список команд и опций ["ntpq", "-p"].

Майк Грэм
источник
3
В этом случае Python ожидает завершения этого системного вызова? Или необходимо явно вызывать функцию wait / waitpid?
NoneType
7
@NoneType, Popen.communicateне возвращается, пока процесс не завершится.
Майк Грэм
10
если вы хотите получить поток ошибок, добавьте stderr:p = subprocess.Popen(["ntpq", "-p"], stdout=subprocess.PIPE, stderr=subprocess.PIPE)
Timofey
82
Осторожно, subprocess.check_output()возвращает bytesобъект, а не str. Если все, что вы хотите сделать, это напечатать результат, это не будет иметь никакого значения. Но если вы хотите использовать метод, такой как myString.split("\n")результат, вам придется сначала декодировать bytesобъект: subprocess.check_output(myParams).decode("utf-8")например.
TanguyP
17
добавление universal_newlines=Trueв качестве параметра помогло мне в Python 3 получить строковый объект. Если universal_newlines равен True, они открываются в текстовом режиме с кодировкой по умолчанию. В противном случае они открываются как двоичные потоки.
Джонатан Комар
38

Это сработало для меня для перенаправления stdout (stderr может обрабатываться аналогично):

from subprocess import Popen, PIPE
pipe = Popen(path, stdout=PIPE)
text = pipe.communicate()[0]

Если это не работает для вас, пожалуйста, укажите точно, какая у вас проблема.

Эли Бендерский
источник
3
Это действительно производит какой-то странный объект. Когда я конвертирую его в строку, он как бы пропускает пробелы \n.
Томаш Зато - Восстановить Монику
1
Обратите внимание, что это не проверяет, правильно ли работал подпроцесс. Возможно, вы захотите проверить это и pipe.returncode == 0после последней строки.
Thakis
Это работает потому, что Popenвозвращает кортеж stdoutи stderr, поэтому, когда вы получаете доступ, [0]вы просто захватываете stdout. Вы также можете сделать, text, err = pipe.communicate()и тогда textбудет то, что вы ожидаете
Jona
22

subprocess.Popen: http://docs.python.org/2/library/subprocess.html#subprocess.Popen

import subprocess

command = "ntpq -p"  # the shell command
process = subprocess.Popen(command, stdout=subprocess.PIPE, stderr=None, shell=True)

#Launch the shell command:
output = process.communicate()

print output[0]

В конструкторе Popen, если shell равен True , вы должны передавать команду как строку, а не как последовательность. В противном случае просто разбейте команду на список:

command = ["ntpq", "-p"]  # the shell command
process = subprocess.Popen(command, stdout=subprocess.PIPE, stderr=None)

Если вам нужно прочитать также стандартную ошибку, в инициализации Popen вы можете установить для stderr значение subprocess.PIPE или subprocess.STDOUT :

import subprocess

command = "ntpq -p"  # the shell command
process = subprocess.Popen(command, stdout=subprocess.PIPE, stderr=subprocess.PIPE, shell=True)

#Launch the shell command:
output, error = process.communicate()
Паоло Ровелли
источник
офигенно это то что я искал
kRazzy R
14

для Python 2.7+ идиоматический ответ заключается в использовании subprocess.check_output()

Вы также должны обратить внимание на обработку аргументов при вызове подпроцесса, поскольку это может немного сбивать с толку ....

Если args - это просто одна команда без собственных аргументов (или вы ее shell=Trueзадали), это может быть строка. В противном случае это должен быть список.

например ... чтобы вызвать lsкоманду, это нормально:

from subprocess import check_call
check_call('ls')

так это

from subprocess import check_call
check_call(['ls',])

однако, если вы хотите передать некоторые аргументы команде shell, вы не можете сделать это:

from subprocess import check_call
check_call('ls -al')

вместо этого вы должны передать его в виде списка:

from subprocess import check_call
check_call(['ls', '-al'])

shlex.split()функция может быть иногда полезно разбить строку в оболочку-подобный синтаксис , прежде чем создавать подпроцессы ... как это:

from subprocess import check_call
import shlex
check_call(shlex.split('ls -al'))
Кори Голдберг
источник
Пять лет спустя этот вопрос по-прежнему вызывает много любви. Спасибо за обновление 2.7+, Кори!
Марк
11

Это прекрасно работает для меня:

import subprocess
try:
    #prints results and merges stdout and std
    result = subprocess.check_output("echo %USERNAME%", stderr=subprocess.STDOUT, shell=True)
    print result
    #causes error and merges stdout and stderr
    result = subprocess.check_output("copy testfds", stderr=subprocess.STDOUT, shell=True)
except subprocess.CalledProcessError, ex: # error code <> 0 
    print "--------error------"
    print ex.cmd
    print ex.message
    print ex.returncode
    print ex.output # contains stdout and stderr together 
Патрик Вольф
источник
9

Это было идеально для меня. Вы получите код возврата, stdout и stderr в кортеже.

from subprocess import Popen, PIPE

def console(cmd):
    p = Popen(cmd, shell=True, stdout=PIPE)
    out, err = p.communicate()
    return (p.returncode, out, err)

Например:

result = console('ls -l')
print 'returncode: %s' % result[0]
print 'output: %s' % result[1]
print 'error: %s' % result[2]
gravmatt
источник
6

Принятый ответ все еще хорош, лишь несколько замечаний о новых функциях. Начиная с python 3.6, вы можете обрабатывать кодирование напрямую check_output, см. Документацию . Это возвращает строковый объект сейчас:

import subprocess 
out = subprocess.check_output(["ls", "-l"], encoding="utf-8")

В python 3.7 параметр capture_outputбыл добавлен в subprocess.run (), который выполняет некоторую обработку Popen / PIPE для нас, см. Документацию по python :

import subprocess 
p2 = subprocess.run(["ls", "-l"], capture_output=True, encoding="utf-8")
p2.stdout
ynux
источник
4
 import os   
 list = os.popen('pwd').read()

В этом случае у вас будет только один элемент в списке.

Alex
источник
7
os.popenустарела в пользу subprocessмодуля.
Майк Грэм,
3
Это было очень полезно для администратора на старой машине с использованием Python серии 2.2.X.
Нил МакФ
4

Я написал небольшую функцию на основе других ответов здесь:

def pexec(*args):
    return subprocess.Popen(args, stdout=subprocess.PIPE).communicate()[0].rstrip()

Использование:

changeset = pexec('hg','id','--id')
branch = pexec('hg','id','--branch')
revnum = pexec('hg','id','--num')
print('%s : %s (%s)' % (revnum, changeset, branch))
mpen
источник
4

В Python 3.7 capture_outputбыл введен новый аргумент для ключевого слова subprocess.run. Включение короткого и простого:

import subprocess

p = subprocess.run("echo 'hello world!'", capture_output=True, shell=True, encoding="utf8")
assert p.stdout == 'hello world!\n'
эрб
источник
1
import subprocess
output = str(subprocess.Popen("ntpq -p",shell = True,stdout = subprocess.PIPE, 
stderr = subprocess.STDOUT).communicate()[0])

Это однолинейное решение

Кирти Кедиа
источник
0

Следующее захватывает stdout и stderr процесса в одной переменной. Это Python 2 и 3 совместимы:

from subprocess import check_output, CalledProcessError, STDOUT

command = ["ls", "-l"]
try:
    output = check_output(command, stderr=STDOUT).decode()
    success = True 
except CalledProcessError as e:
    output = e.output.decode()
    success = False

Если ваша команда является строкой, а не массивом, добавьте к ней префикс:

import shlex
command = shlex.split(command)
Zags
источник
0

Для python 3.5 я поставил функцию, основанную на предыдущем ответе. Лог может быть удален, думал, что приятно иметь

import shlex
from subprocess import check_output, CalledProcessError, STDOUT


def cmdline(command):
    log("cmdline:{}".format(command))
    cmdArr = shlex.split(command)
    try:
        output = check_output(cmdArr,  stderr=STDOUT).decode()
        log("Success:{}".format(output))
    except (CalledProcessError) as e:
        output = e.output.decode()
        log("Fail:{}".format(output))
    except (Exception) as e:
        output = str(e);
        log("Fail:{}".format(e))
    return str(output)


def log(msg):
    msg = str(msg)
    d_date = datetime.datetime.now()
    now = str(d_date.strftime("%Y-%m-%d %H:%M:%S"))
    print(now + " " + msg)
    if ("LOG_FILE" in globals()):
        with open(LOG_FILE, "a") as myfile:
            myfile.write(now + " " + msg + "\n")
Павел Недоба
источник
0

Используйте ckeck_outputметодsubprocess

import subprocess
address = 192.168.x.x
res = subprocess.check_output(['ping', address, '-c', '3'])

Наконец разбираем строку

for line in res.splitlines():

Надеюсь, это поможет, счастливого кодирования

Салман Муштак
источник