Python - Как передать строку в subprocess.Popen(используя аргумент stdin)?
Если я делаю следующее:
import subprocess
from cStringIO import StringIO
subprocess.Popen(['grep','f'],stdout=subprocess.PIPE,stdin=StringIO('one\ntwo\nthree\nfour\nfive\nsix\n')).communicate()[0]
Я получаю:
Traceback (most recent call last):
File "<stdin>", line 1, in ?
File "/build/toolchain/mac32/python-2.4.3/lib/python2.4/subprocess.py", line 533, in __init__
(p2cread, p2cwrite,
File "/build/toolchain/mac32/python-2.4.3/lib/python2.4/subprocess.py", line 830, in _get_handles
p2cread = stdin.fileno()
AttributeError: 'cStringIO.StringI' object has no attribute 'fileno'
По-видимому, объект cStringIO.StringIO не смещается так близко к файловой утке, чтобы удовлетворить подпроцессу. Как мне обойти это?
Ответы
Ответ 1
Popen.communicate()
документация:
Обратите внимание, что если вы хотите отправить данные на процесс stdin, вам нужно создать объект Popen с помощью STDIN = PIPE. Аналогично, чтобы получить что-либо кроме None в кортедже результата, вам нужно дать stdout = PIPE и/или stderr = PIPE тоже.
Замена os.popen *
pipe = os.popen(cmd, 'w', bufsize)
# ==>
pipe = Popen(cmd, shell=True, bufsize=bufsize, stdin=PIPE).stdin
Предупреждение Используйте функцию связи(), а не stdin.write(), stdout.read() или stderr.read(), чтобы избежать взаимоблокировок к любому из других буферов операционной системы OS заполнение и блокировка ребенка процесс.
Итак, ваш пример можно записать следующим образом:
from subprocess import Popen, PIPE, STDOUT
p = Popen(['grep', 'f'], stdout=PIPE, stdin=PIPE, stderr=STDOUT)
grep_stdout = p.communicate(input=b'one\ntwo\nthree\nfour\nfive\nsix\n')[0]
print(grep_stdout.decode())
# -> four
# -> five
# ->
В текущей версии Python 3 вы можете использовать subprocess.run
, чтобы передать ввод как строку внешней команде и получить ее выход статус и его вывод в виде строки в одном вызове:
#!/usr/bin/env python3
from subprocess import run, PIPE
p = run(['grep', 'f'], stdout=PIPE,
input='one\ntwo\nthree\nfour\nfive\nsix\n', encoding='ascii')
print(p.returncode)
# -> 0
print(p.stdout)
# -> four
# -> five
# ->
Ответ 2
Я понял это обходное решение:
>>> p = subprocess.Popen(['grep','f'],stdout=subprocess.PIPE,stdin=subprocess.PIPE)
>>> p.stdin.write(b'one\ntwo\nthree\nfour\nfive\nsix\n') #expects a bytes type object
>>> p.communicate()[0]
'four\nfive\n'
>>> p.stdin.close()
Есть ли лучший?
Ответ 3
Я немного удивлен, что никто не предложил создать канал, который, на мой взгляд, самый простой способ передать строку в stdin подпроцесса:
read, write = os.pipe()
os.write(write, "stdin input here")
os.close(write)
subprocess.check_call(['your-command'], stdin=read)
Ответ 4
Я использую python3 и выяснил, что вам нужно закодировать вашу строку, прежде чем вы сможете передать ее в stdin:
p = Popen(['grep', 'f'], stdout=PIPE, stdin=PIPE, stderr=PIPE)
out, err = p.communicate(input='one\ntwo\nthree\nfour\nfive\nsix\n'.encode())
print(out)
Ответ 5
"По-видимому, объект cStringIO.StringIO не смещается так близко к файловой утке, чтобы подойти к подпроцессу. Приобрести"
: -)
Я боюсь, что нет. Труба представляет собой концепцию ОС низкого уровня, поэтому для нее абсолютно необходим файл-объект, который представлен файловым дескриптором уровня ОС. Ваш способ решения является правильным.
Ответ 6
from subprocess import Popen, PIPE
from tempfile import SpooledTemporaryFile as tempfile
f = tempfile()
f.write('one\ntwo\nthree\nfour\nfive\nsix\n')
f.seek(0)
print Popen(['/bin/grep','f'],stdout=PIPE,stdin=f).stdout.read()
f.close()
Ответ 7
Там красивое решение, если вы используете Python 3.4 или лучше. Используйте аргумент input
вместо аргумента stdin
, который принимает аргумент байтов:
output = subprocess.check_output(
["sed", "s/foo/bar/"],
input=b"foo",
)
Ответ 8
"""
Ex: Dialog (2-way) with a Popen()
"""
p = subprocess.Popen('Your Command Here',
stdout=subprocess.PIPE,
stderr=subprocess.STDOUT,
stdin=PIPE,
shell=True,
bufsize=0)
p.stdin.write('START\n')
out = p.stdout.readline()
while out:
line = out
line = line.rstrip("\n")
if "WHATEVER1" in line:
pr = 1
p.stdin.write('DO 1\n')
out = p.stdout.readline()
continue
if "WHATEVER2" in line:
pr = 2
p.stdin.write('DO 2\n')
out = p.stdout.readline()
continue
"""
..........
"""
out = p.stdout.readline()
p.wait()
Ответ 9
Остерегайтесь того, что Popen.communicate(input=s)
может вызвать проблемы, если s
слишком большой, потому что, по-видимому, родительский процесс будет буферизовать его перед тем, как развернуть дочерний подпроцесс, то есть ему потребуется "в два раза больше" используемой памяти в этой точке (по крайней мере в соответствии с объяснением "под капотом" и связанной с ним документацией здесь). В моем конкретном случае s
был генератором, который был сначала полностью расширен и только затем записан в stdin
, поэтому родительский процесс был огромным непосредственно перед тем, как ребенок был порожден,
и памяти не осталось, чтобы расколоть его:
File "/opt/local/stow/python-2.7.2/lib/python2.7/subprocess.py", line 1130, in _execute_child
self.pid = os.fork()
OSError: [Errno 12] Cannot allocate memory
Ответ 10
p = Popen(['grep', 'f'], stdout=PIPE, stdin=PIPE, stderr=STDOUT)
p.stdin.write('one\n')
time.sleep(0.5)
p.stdin.write('two\n')
time.sleep(0.5)
p.stdin.write('three\n')
time.sleep(0.5)
testresult = p.communicate()[0]
time.sleep(0.5)
print(testresult)