一、curl
- 由於當前的線上服務較多地使用了RESTful風格的API,所以集成測試就需要進行HTTP調用,查看返回的結果是否符合預期,curl命令當然是首選的測試方法
- 在Linux中curl是一個利用URL規則在命令行下工作的文件傳輸工具,可以說是一款很強大的http命令行工具。它支持文件的上傳和下載,是綜合傳輸工具
- 格式如下:
curl [options] [URL...]
- 相關選項:
- -A/--user-agent <string> 設置用戶代理髮送給服務器
- -b/--cookie <name=string/file> cookie字符串或文件讀取位置
- -c/--cookie-jar <file> 操作結束後把cookie寫入到這個文件中
- -C/--continue-at <offset> 斷點續轉
- -D/--dump-header <file> 把header信息寫入到該文件中
- -e/--referer 來源網址
- -f/--fail 連接失敗時不顯示http錯誤
- -o/--output 把輸出寫到該文件中
- -O/--remote-name 把輸出寫到該文件中,保留遠程文件的文件名
- -r/--range <range> 檢索來自HTTP/1.1或FTP服務器字節範圍
- -s/--silent 靜音模式。不輸出任何東西
- -T/--upload-file <file> 上傳文件
- -v/--verbose 打印更多的調試信息
- -u/--user <user[:password]> 設置服務器的用戶和密碼
- -w/--write-out [format] 什麼輸出完成後
- -x/--proxy <host[:port]> 在給定的端口上使用HTTP代理
- -#/--progress-bar 進度條顯示當前的傳送狀態
- -a/--append 上傳文件時,附加到目標文件
- --anyauth 可以使用“任何”身份驗證方法
- --basic 使用HTTP基本驗證
- -B/--use-ascii 使用ASCII文本傳輸
- -d/--data <data> HTTP POST方式傳送數據
- --data-ascii <data> 以ascii的方式post數據
- --data-binary <data> 以二進制的方式post數據
- --negotiate 使用HTTP身份驗證
- --digest 使用數字身份驗證
- --disable-eprt 禁止使用EPRT或LPRT
- --disable-epsv 禁止使用EPSV
- --egd-file <file> 爲隨機數據(SSL)設置EGD socket路徑
- --tcp-nodelay 使用TCP_NODELAY選項
- -E/--cert <cert[:passwd]> 客戶端證書文件和密碼 (SSL)
- --cert-type <type> 證書文件類型 (DER/PEM/ENG) (SSL)
- --key <key> 私鑰文件名 (SSL)
- --key-type <type> 私鑰文件類型 (DER/PEM/ENG) (SSL)
- --pass <pass> 私鑰密碼 (SSL)
- --engine <eng> 加密引擎使用 (SSL). "--engine list" for list
- --cacert <file> CA證書 (SSL)
- --capath <directory> CA目 (made using c_rehash) to verify peer against (SSL)
- --ciphers <list> SSL密碼
- --compressed 要求返回是壓縮的形勢 (using deflate or gzip)
- --connect-timeout <seconds> 設置最大請求時間
- --create-dirs 建立本地目錄的目錄層次結構
- --crlf 上傳是把LF轉變成CRLF
- --ftp-create-dirs 如果遠程目錄不存在,創建遠程目錄
- --ftp-method [multicwd/nocwd/singlecwd] 控制CWD的使用
- --ftp-pasv 使用 PASV/EPSV 代替端口
- --ftp-skip-pasv-ip 使用PASV的時候,忽略該IP地址
- --ftp-ssl 嘗試用 SSL/TLS 來進行ftp數據傳輸
- --ftp-ssl-reqd 要求用 SSL/TLS 來進行ftp數據傳輸
- -F/--form <name=content> 模擬http表單提交數據
- -form-string <name=string> 模擬http表單提交數據
- -g/--globoff 禁用網址序列和範圍使用{}和[]
- -G/--get 以get的方式來發送數據
- -h/--help 幫助
- -H/--header <line> 自定義頭信息傳遞給服務器
- --ignore-content-length 忽略的HTTP頭信息的長度
- -i/--include 輸出時包括protocol頭信息(打印請求響應頭信息)
- -I/--head 只打印HTTP頭
- -j/--junk-session-cookies 讀取文件時忽略session cookie
- --interface <interface> 使用指定網絡接口/地址
- --krb4 <level> 使用指定安全級別的krb4
- -k/--insecure 允許不使用證書到SSL站點
- -K/--config 指定的配置文件讀取
- -l/--list-only 列出ftp目錄下的文件名稱
- --limit-rate <rate> 設置傳輸速度
- --local-port<NUM> 強制使用本地端口號
- -m/--max-time <seconds> 設置最大傳輸時間
- --max-redirs <num> 設置最大讀取的目錄數
- --max-filesize <bytes> 設置最大下載的文件總量
- -M/--manual 顯示全手動
- -n/--netrc 從netrc文件中讀取用戶名和密碼
- --netrc-optional 使用 .netrc 或者 URL來覆蓋-n
- --ntlm 使用 HTTP NTLM 身份驗證
- -N/--no-buffer 禁用緩衝輸出
- -p/--proxytunnel 使用HTTP代理
- --proxy-anyauth 選擇任一代理身份驗證方法
- --proxy-basic 在代理上使用基本身份驗證
- --proxy-digest 在代理上使用數字身份驗證
- --proxy-ntlm 在代理上使用ntlm身份驗證
- -P/--ftp-port <address> 使用端口地址,而不是使用PASV
- -Q/--quote <cmd> 文件傳輸前,發送命令到服務器
- --range-file 讀取(SSL)的隨機文件
- -R/--remote-time 在本地生成文件時,保留遠程文件時間
- --retry <num> 傳輸出現問題時,重試的次數
- --retry-delay <seconds> 傳輸出現問題時,設置重試間隔時間
- --retry-max-time <seconds> 傳輸出現問題時,設置最大重試時間
- -S/--show-error 顯示錯誤
- --socks4 <host[:port]> 用socks4代理給定主機和端口
- --socks5 <host[:port]> 用socks5代理給定主機和端口
- -t/--telnet-option <OPT=val> Telnet選項設置
- --trace <file> 對指定文件進行debug
- --trace-ascii <file> Like --跟蹤但沒有hex輸出
- --trace-time 跟蹤/詳細輸出時,添加時間戳
- --url <URL> Spet URL to work with
- -U/--proxy-user <user[:password]> 設置代理用戶名和密碼
- -V/--version 顯示版本信息
- -X/--request <command> 指定什麼命令
- -y/--speed-time 放棄限速所要的時間。默認爲30
- -Y/--speed-limit 停止傳輸速度的限制,速度時間'秒
- -z/--time-cond 傳送時間設置
- -0/--http1.0 使用HTTP 1.0
- -1/--tlsv1 使用TLSv1(SSL)
- -2/--sslv2 使用SSLv2的(SSL)
- -3/--sslv3 使用的SSLv3(SSL)
- --3p-quote like -Q for the source URL for 3rd party transfer
- --3p-url 使用url,進行第三方傳送
- --3p-user 使用用戶名和密碼,進行第三方傳送
- -4/--ipv4 使用IP4
- -6/--ipv6 使用IP6
演示案例
- 打印請求響應頭信息
curl -i "www.baidu.com"
- 僅返回http頭
curl -I "www.baidu.com"
- 打印更多的調試信息(信息過多就不全部截圖了)
curl -v "www.baidu.com"
- 使用POST方式提交http請求
curl -d 'abc=def' "www.baidu.com"
- 打印HTTP響應碼
curl -sw '%{http_code}' "www.baidu.com"
演示案例
- 將內容保存到網頁中
curl -o baidu.html "www.baidu.com"
- 將內容重定向文件中也可以
curl "www.baidu.com" >> baidu2.html
演示案例
- 保存http的response裏面的cookie信息
curl -c cookiec.txt "www.baidu.com"
演示案例
- 下載文件
curl -o demo.jpg http:www.linux.com/demo.jpg
- 使用-O下載
curl -O http:www.linux.com/demo.jpg
- 循環下載:demo1.jpg、demo2.jpg、demo3.jpg、demo4.jpg、demo5.jpg
curl -O http://www.linux.com/demo[1-5].jpg
- 分塊下載
curl -r 0-100 -o demo_part1.jpg http://www.linux.com/demo.jpg curl -r 100-200 -o demo_part2.jpg http://www.linux.com/demo.jpg curl -r 200- -o demo_part3.jpg http://www.linux.com/demo.jpg cat demo_part* > demo.jpg
- 通過ftp下載文件
curl -O -u 用戶名:密碼 ftp://www.linux.com/demo.jpg curl -O ftp://用戶名:密碼@www.linux.com/demo.jpg
- 顯示下載進度條
curl -# -O http://www.linux.com/demo.jpg
- 斷點續傳:如果在下載demo.jpg的過程中突然掉線了,可以使用以下的方式續傳
curl -C -O http://www.linux.com/demo.jpg
- 上傳文件
curl -T demo.jpg -u 用戶名:密碼 ftp://www.linux.com/img/
二、scp
- secure copy的縮寫, scp是linux系統下基於ssh登陸進行安全的遠程文件拷貝命令
- scp命令是Linux系統中功能強大的文件傳輸命令,可以實現從本地到遠程,以及從遠程到本地的雙向文件傳輸,用起來非常方便,常用來在線上定位 問題時將線卜的一些文件下載到本地進行詳查,或者將本地的修改上傳到服務器上
- scp 是加密的,rcp 是不加密的,scp 是 rcp 的加強版
- 格式如下:
scp [-346BCpqrTv] [-c cipher] [-F ssh_config] [-i identity_file]
[-l limit] [-o ssh_option] [-P port] [-S program]
[[user@]host1:]file1 ...[[user@]host2:]file2
- 相關參數:
- -1: 強制scp命令使用協議ssh1
- -2: 強制scp命令使用協議ssh2
- -4: 強制scp命令只使用IPv4尋址
- -6: 強制scp命令只使用IPv6尋址
- -B: 使用批處理模式(傳輸過程中不詢問傳輸口令或短語)
- -C: 允許壓縮。(將-C標誌傳遞給ssh,從而打開壓縮功能)
- -p:保留原文件的修改時間,訪問時間和訪問權限。
- -q: 不顯示傳輸進度條。
- -r: 遞歸複製整個目錄。
- -v:詳細方式顯示輸出。scp和ssh會顯示出整個過程的調試信息。這些信息用於調試連接,驗證和配置問題。
- -c cipher: 以cipher將數據傳輸進行加密,這個選項將直接傳遞給ssh。
- -F ssh_config: 指定一個替代的ssh配置文件,此參數直接傳遞給ssh。
- -i identity_file: 從指定文件中讀取傳輸時使用的密鑰文件,此參數直接傳遞給ssh
- -l limit: 限定用戶所能使用的帶寬,以Kbit/s爲單位。
- -o ssh_option: 如果習慣於使用ssh_config中的參數傳遞方式,
- -P port:注意是大寫的P, port是指定數據傳輸用到的端口號
- -S program: 指定加密傳輸時所使用的程序。此程序必須能夠理解ssh的選項
演示案例
從本地複製到遠程:
第1,2個指定了用戶名,命令執行後需要再輸入密碼,第1個僅指定了遠程的目錄,文件名字不變,第2個指定了文件名
第3,4個沒有指定用戶名,命令執行後需要輸入用戶名和密碼,第3個僅指定了遠程的目錄,文件名字不變,第4個指定了文件名
scp local_file remote_username@remote_ip:remote_folder scp local_file remote_username@remote_ip:remote_file scp local_file remote_ip:remote_folder scp local_file remote_ip:remote_file
演示案例
- 複製目錄命令格式:
- 第1個指定了用戶名,命令執行後需要再輸入密碼;
- 第2個沒有指定用戶名,命令執行後需要輸入用戶名和密碼;
scp -r local_folder remote_username@remote_ip:remote_folder scp -r local_folder remote_ip:remote_folder
演示案例
- 從遠程複製到本地
- 從遠程複製到本地,只要將從本地複製到遠程的命令的後2個參數調換順序即可,如下實例:
scp [email protected]:/home/root/others/music /home/space/music/1.mp3 scp -r www.runoob.com:/home/root/others/ /home/space/music/
說明
- 1.如果遠程服務器防火牆有爲scp命令設置了指定的端口,我們需要使用 -P 參數來設置命令的端口號,命令格式如下:
#scp 命令使用端口號 4588 scp -P 4588 [email protected]:/usr/local/sin.sh /home/administrator
- 2.使用scp命令要確保使用的用戶具有可讀取遠程服務器相應文件的權限,否則scp命令是無法起作用的