subprocess.call

[MKe]

Ik snap niet helemaal hoe subprocess werkt.

Code: [Selecteer]

>> import subprosess
>> # probeer een simpele echo
>> # maak list van commando
>> cmd = 'echo "test" > blaat.txt'.split()
>> # run met call
>> subprocess.call(cmd)
"test" > blaat.txt
Ik zou verwachten dat er een bestandje aangemaakt zou zijn die 'blaat.txt' heet en 'test' bevat als tekst. Maar dat is niet zo. Er is geen bestand aangemaakt. Waarom is dit?

btw, cmd="touch blaat.txt".split() werkt wel. er wordt gewoon een bestand aangemaakt.

ps. natuurlijk wil ik niet echt tekst gaan echo-en naar een file als ik dat ook met filehandlers kan doen. Maar dit is een python wrapper script voor een pipeline en ik ik moet er ook rekening mee houden dat sommige commando's (die ik nu nog niet weet) in de pipeline een redirect moeten doen naar een file of wat ook.

[Nunslaughter]

Subprocess kan soms complex zijn. Het probleem hier is de redirect (>) operator.

Dit werkt:

Code: [Selecteer]

>>> import subprocess
>>> cmd = 'echo "test" > blaat.txt'  # Geen split()
>>> subprocess.call(cmd, shell=True)  # Uitvoeren in de shell
0
>>> import os; os.path.exists("blaat.txt")
True
Door de redirect operator moet het commando in de shell uitgevoerd worden waardoor het ook niet nodig is om het commando te splitsen.

The shell argument (which defaults to False) specifies whether to use the shell as the program to execute. If shell is True, it is recommended to pass args as a string rather than as a sequence.

Begrijp ik het goed dat alleen subprocess gebruikt kan worden? Alles kan natuurlijk ook met pure Python modules of zelfs redirects en pipes gebruiken met subprocess.
Uw voorbeeld:

Code: [Selecteer]

>>> with open("blaat2.txt", "w") as outfile:
...     subprocess.call('echo "test"', stdout=outfile, shell=True)
...
0
>>> import os; os.path.exists("blaat2.txt")
True
De documentatie zou normaal zo goed als alle mogelijkheden omvatten.

[MKe]

Ik wil het zo flexibel mogelijk hebben.. In principe moeten alle bash commando's uitgevoerd kunnen worden.  De commando's staan in een lijst en worden door anderen gemaakt. Ik weer dus niet nu al welke commando's pipes of  redirects zulen hebben.

Maar erg bedankt voor je verhelderende uitleg. Het was mij niet zo duidelijk.

[Nunslaughter]

Pas wel goed op met zomaar commandos uit te voeren die door anderen worden gemaakt. Lees even dit kleine stukje over shell=True: https://docs.python.org/3.4/library/subprocess.html#security-considerations

Hier de link naar de hoofdpagina: https://docs.python.org/3.4/library/subprocess.html#module-subprocess

[MKe]

Ja, dat veilgheidsprobleem is duidelijk. Gelukkig zijn de anderen vertrouwde leden van een groep. Verder ben ik van plan om de commando's in een besloten docker container met speciale rechten te laten runnen m.b.v. Celery.