os.system、os.popen和subprocess的區別(一)

概述

最近在使用 python 執行啓動 appium 服務器命令時,發現 os.system()、os.popen() 均不能完美的啓動服務,最後查了好多資料,使用 subprocess.run() 方法解決了問題,下面將對這三種方法一一對比:

os.system()

原理

os.system方法是os模塊最基礎的方法,其它的方法一般在該方法基礎上封裝完成。

詳解

os.system()的返回值是腳本的退出狀態碼,0表示成功,其他均爲失敗:

>>> a=os.system('adb devices')
>>> a
0

補充

system函數可以將字符串轉化成命令在服務器上運行;其原理是每一條system函數執行時,其會創建一個子進程在系統上執行命令行,子進程的執行結果無法影響主進程。

但是上述原理會導致當需要執行多條命令行的時候可能得不到預期的結果:

import os

os.system('cd /usr/local')
os.mkdir('aaa.txt)

上述程序運行後會發現txt文件並沒有創建在/usr/local文件夾下,而是在當前的目錄下。

因此爲了保證system執行多條命令可以成功,多條命令需要在同一個子進程中運行:

import os

os.system('cd /usr/local && mkdir aaa.txt')
# 或者
os.system('cd /usr/local ; mkdir aaa.txt')

os.popen()

原理

os.popen() 方法用於從一個命令打開一個管道,在Unix,Windows中有效。

語法
popen()方法語法格式如下:

os.popen(command[, mode[, bufsize]])

參數
command – 使用的命令。
mode – 模式權限可以是 ‘r’(默認) 或 ‘w’。
bufsize – 指明瞭文件需要的緩衝大小:0意味着無緩衝;1意味着行緩衝;其它正值表示使用參數大小的緩衝(大概值,以字節爲單位)。負的bufsize意味着使用系統的默認值,一般來說,對於tty設備,它是行緩衝;對於其它文件,它是全緩衝。如果沒有改參數,使用系統的默認值。

返回值
返回一個文件描述符號爲fd的打開的文件對象。

實例
以下實例演示了 popen() 方法的使用:

#!/usr/bin/python3
import os, sys

# 使用 mkdir 命令
a = 'mkdir nwdir'
b = os.popen(a,'r',1)
print (b)

執行以上程序輸出結果爲:

open file 'mkdir nwdir', mode 'r' at 0x81614d0

python調用Shell腳本,有兩種方法:os.system()和os.popen(),
前者返回值是腳本的退出狀態碼,後者的返回值是腳本執行過程中的輸出內容

假定有一個shell腳本test.sh:

song@ubuntu:~$ vi test.sh
#!/bin/bash
echo 'hello python!'
echo 'hello world!'
exit 1

os.system(command):該方法在調用完shell腳本後,返回一個16位的二進制數,低位爲殺死所調用腳本的信號號碼,高位爲腳本的退出狀態碼,即腳本中“exit 1”的代碼執行後,os.system函數返回值的高位數則是1,如果低位數是0的情況下,則函數的返回值是0x0100,換算爲十進制得到256。

要獲得os.system的正確返回值,可以使用位移運算(將返回值右移8位)還原返回值:

>>> import os
>>> os.system("./test.sh")
hello python!
hello world!
256
>>> n=os.system("./test.sh")
hello python!
hello world!
>>> n
256
>>> n>>8
1

os.popen(command):這種調用方式是通過管道的方式來實現,函數返回一個file對象,裏面的內容是腳本輸出的內容(可簡單理解爲echo輸出的內容),使用os.popen調用test.sh的情況:

>> import os
>>> os.popen("./test.sh")
<open file './test.sh', mode 'r' at 0x7f6cbbbee4b0>
>>> f=os.popen("./test.sh")
>>> f
<open file './test.sh', mode 'r' at 0x7f6cbbbee540>
>>> f.readlines()
['hello python!\n', 'hello world!\n']

像調用”ls”這樣的shell命令,應該使用popen的方法來獲得內容,對比如下:

>>> import os
>>> os.system("ls")   #直接看到運行結果
Desktop    Downloads     Music     Public     Templates  Videos
Documents  examples.desktop  Pictures  systemExit.py  test.sh
0    #返回值爲0,表示命令執行成功
>>> n=os.system('ls')
Desktop    Downloads     Music     Public     Templates  Videos
Documents  examples.desktop  Pictures  systemExit.py  test.sh
>>> n
0
>>> n>>8   #將返回值右移8位,得到正確的返回值
0
>>> f=os.popen('ls') #返回一個file對象,可以對這個文件對象進行相關的操作
>>> f
<open file 'ls', mode 'r' at 0x7f5303d124b0>
>>> f.readlines()
['Desktop\n', 'Documents\n', 'Downloads\n', 'examples.desktop\n', 'Music\n', 'Pictures\n', 'Public\n', 'systemExit.py\n', 'Templates\n', 'test.sh\n', 'Videos\n']

os.popen()可以實現一個“管道”,從這個命令獲取的值可以繼續被使用。因爲它返回一個文件對象,可以對這個文件對象進行相關的操作。

補充
1.返回值是文件對象
注意:返回值是文件對象,既然是文件對象,使用完就應該關閉,對吧?!不信網上搜一下,一大把文章提到這個os.popen都是忘記關閉文件對象的。所以,推薦的寫法是:

with os.popen(command, "r") as p:
    r = p.read()

至於with的用法就不多講了,使用它,不需要顯式的寫p.close()。

2.非阻塞
通俗的講,非阻塞就是os.popen不會等cmd命令執行完畢就繼續下面的代碼了,不信?!看下面代碼實例:

import os

os.popen(r"D:\Program Files (x86)\Tencent\QQ\Bin\QQScLauncher.exe")
print("測試開發小白便怪獸")

從上面實例可知,os.popen執行打開QQScLauncher.exe這個工具,但從實際執行結果看,QQScLauncher.exe還沒打開,就直接進入了下一條語句,打印了“測試開發小白變怪獸”。在某些應用場景,可能這並不是你期望的行爲,那如何讓命令執行完後,再執行下一句呢?

處理方法是使用read()或readlines()對命令的執行結果進行讀操作。

3.完全阻塞
上面寫了該函數是非阻塞的,現在怎麼又變成完全阻塞的呢?感覺一頭霧水了吧。本質上os.popen是非阻塞的,爲了實現阻塞的效果,我們使用read()或readlines()對命令結果進行讀,由此產生了阻塞的效果。但是,如果你的命令執行無法退出或進入交互模式,這種“讀”將形成完全阻塞的情況,表現的像程序卡住了。

看下面代碼實例:

import os
ret = os.popen("ping 127.0.0.1 -t")
ret.readlines()

os.popen執行了ping 127.0.0.1 -t 該命令會一直執行,除非CTRL+C強制退出,因而,執行readlines讀取命令輸出時會造成卡住。

總結
os.popen()在大多數場景都是挺好用方便的,但是也有坑!!具體應用中,需要注意下:
1. 在需要讀取命令執行結果時,避免在命令無法退出或進入交互模式的場景應用os.popen;
2.os.popen()無法滿足需求時,可以考慮subprocess.Popen();

未完待續…

這篇文章主要講了 os.system() 和 os.popen() 的細節及區別,下篇文章繼續說明 subprocess 模塊的用法,敬請期待!

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章