Linux(服務、軟件管理):51---網絡工具命令(curl、scp)

一、curl

  • 由於當前的線上服務較多地使用了RESTful風格的API,所以集成測試就需要進行HTTP調用,查看返回的結果是否符合預期,curl命令當然是首選的測試方法
  • 在Linux中curl是一個利用URL規則在命令行下工作的文件傳輸工具,可以說是一款很強大的http命令行工具。它支持文件的上傳和下載,是綜合傳輸工具
  • 格式如下:
curl [options] [URL...]
  • 相關選項:
    • -A/--user-agent <string>              設置用戶代理髮送給服務器
    • -b/--cookie <name=string/file>    cookie字符串或文件讀取位置
    • -c/--cookie-jar <file>                    操作結束後把cookie寫入到這個文件中
    • -C/--continue-at <offset>            斷點續轉
    • -D/--dump-header <file>              把header信息寫入到該文件中
    • -e/--referer                                  來源網址
    • -f/--fail                                          連接失敗時不顯示http錯誤
    • -o/--output                                  把輸出寫到該文件中
    • -O/--remote-name                      把輸出寫到該文件中,保留遠程文件的文件名
    • -r/--range <range>                      檢索來自HTTP/1.1或FTP服務器字節範圍
    • -s/--silent                                    靜音模式。不輸出任何東西
    • -T/--upload-file <file>                  上傳文件
    • -v/--verbose                                 打印更多的調試信息
    • -u/--user <user[:password]>      設置服務器的用戶和密碼
    • -w/--write-out [format]                什麼輸出完成後
    • -x/--proxy <host[:port]>              在給定的端口上使用HTTP代理
    • -#/--progress-bar                        進度條顯示當前的傳送狀態
    • -a/--append                        上傳文件時,附加到目標文件
    • --anyauth                            可以使用“任何”身份驗證方法
    • --basic                                使用HTTP基本驗證
    • -B/--use-ascii                      使用ASCII文本傳輸
    • -d/--data <data>                  HTTP POST方式傳送數據
    • --data-ascii <data>            以ascii的方式post數據
    • --data-binary <data>          以二進制的方式post數據
    • --negotiate                          使用HTTP身份驗證
    • --digest                        使用數字身份驗證
    • --disable-eprt                  禁止使用EPRT或LPRT
    • --disable-epsv                  禁止使用EPSV
    • --egd-file <file>              爲隨機數據(SSL)設置EGD socket路徑
    • --tcp-nodelay                  使用TCP_NODELAY選項
    • -E/--cert <cert[:passwd]>      客戶端證書文件和密碼 (SSL)
    • --cert-type <type>              證書文件類型 (DER/PEM/ENG) (SSL)
    • --key <key>                    私鑰文件名 (SSL)
    • --key-type <type>              私鑰文件類型 (DER/PEM/ENG) (SSL)
    • --pass  <pass>                  私鑰密碼 (SSL)
    • --engine <eng>                  加密引擎使用 (SSL). "--engine list" for list
    • --cacert <file>                CA證書 (SSL)
    • --capath <directory>            CA目   (made using c_rehash) to verify peer against (SSL)
    • --ciphers <list>                SSL密碼
    • --compressed                    要求返回是壓縮的形勢 (using deflate or gzip)
    • --connect-timeout <seconds>    設置最大請求時間
    • --create-dirs                  建立本地目錄的目錄層次結構
    • --crlf                          上傳是把LF轉變成CRLF
    • --ftp-create-dirs              如果遠程目錄不存在,創建遠程目錄
    • --ftp-method [multicwd/nocwd/singlecwd]    控制CWD的使用
    • --ftp-pasv                      使用 PASV/EPSV 代替端口
    • --ftp-skip-pasv-ip              使用PASV的時候,忽略該IP地址
    • --ftp-ssl                      嘗試用 SSL/TLS 來進行ftp數據傳輸
    • --ftp-ssl-reqd                  要求用 SSL/TLS 來進行ftp數據傳輸
    • -F/--form <name=content>        模擬http表單提交數據
    • -form-string <name=string>      模擬http表單提交數據
    • -g/--globoff                    禁用網址序列和範圍使用{}和[]
    • -G/--get                        以get的方式來發送數據
    • -h/--help                      幫助
    • -H/--header <line>              自定義頭信息傳遞給服務器
    • --ignore-content-length        忽略的HTTP頭信息的長度
    • -i/--include                    輸出時包括protocol頭信息(打印請求響應頭信息)
    • -I/--head                      只打印HTTP頭
    • -j/--junk-session-cookies      讀取文件時忽略session cookie
    • --interface <interface>        使用指定網絡接口/地址
    • --krb4 <level>                  使用指定安全級別的krb4
    • -k/--insecure                  允許不使用證書到SSL站點
    • -K/--config                    指定的配置文件讀取
    • -l/--list-only                  列出ftp目錄下的文件名稱
    • --limit-rate <rate>            設置傳輸速度
    • --local-port<NUM>              強制使用本地端口號
    • -m/--max-time <seconds>        設置最大傳輸時間
    • --max-redirs <num>              設置最大讀取的目錄數
    • --max-filesize <bytes>          設置最大下載的文件總量
    • -M/--manual                    顯示全手動
    • -n/--netrc                      從netrc文件中讀取用戶名和密碼
    • --netrc-optional                使用 .netrc 或者 URL來覆蓋-n
    • --ntlm                          使用 HTTP NTLM 身份驗證
    • -N/--no-buffer                  禁用緩衝輸出
    • -p/--proxytunnel                使用HTTP代理
    • --proxy-anyauth                選擇任一代理身份驗證方法
    • --proxy-basic                  在代理上使用基本身份驗證
    • --proxy-digest                  在代理上使用數字身份驗證
    • --proxy-ntlm                    在代理上使用ntlm身份驗證
    • -P/--ftp-port <address>        使用端口地址,而不是使用PASV
    • -Q/--quote <cmd>                文件傳輸前,發送命令到服務器
    • --range-file                    讀取(SSL)的隨機文件
    • -R/--remote-time                在本地生成文件時,保留遠程文件時間
    • --retry <num>                  傳輸出現問題時,重試的次數
    • --retry-delay <seconds>        傳輸出現問題時,設置重試間隔時間
    • --retry-max-time <seconds>      傳輸出現問題時,設置最大重試時間
    • -S/--show-error                顯示錯誤
    • --socks4 <host[:port]>          用socks4代理給定主機和端口
    • --socks5 <host[:port]>          用socks5代理給定主機和端口
    • -t/--telnet-option <OPT=val>    Telnet選項設置
    • --trace <file>                  對指定文件進行debug
    • --trace-ascii <file>            Like --跟蹤但沒有hex輸出
    • --trace-time                    跟蹤/詳細輸出時,添加時間戳
    • --url <URL>                    Spet URL to work with
    • -U/--proxy-user <user[:password]>  設置代理用戶名和密碼
    • -V/--version                    顯示版本信息
    • -X/--request <command>          指定什麼命令
    • -y/--speed-time                放棄限速所要的時間。默認爲30
    • -Y/--speed-limit                停止傳輸速度的限制,速度時間'秒
    • -z/--time-cond                  傳送時間設置
    • -0/--http1.0                    使用HTTP 1.0
    • -1/--tlsv1                      使用TLSv1(SSL)
    • -2/--sslv2                      使用SSLv2的(SSL)
    • -3/--sslv3                      使用的SSLv3(SSL)
    • --3p-quote                      like -Q for the source URL for 3rd party transfer
    • --3p-url                        使用url,進行第三方傳送
    • --3p-user                      使用用戶名和密碼,進行第三方傳送
    • -4/--ipv4                      使用IP4
    • -6/--ipv6                      使用IP6

演示案例

  • 打印請求響應頭信息
curl -i "www.baidu.com"

  • 僅返回http頭
curl -I "www.baidu.com"

  •  打印更多的調試信息(信息過多就不全部截圖了)
curl -v "www.baidu.com"

  • 使用POST方式提交http請求
curl -d 'abc=def' "www.baidu.com"

  • 打印HTTP響應碼
curl -sw '%{http_code}' "www.baidu.com"

 

演示案例

  • 將內容保存到網頁中
curl -o baidu.html "www.baidu.com"

 

  • 將內容重定向文件中也可以
curl "www.baidu.com" >> baidu2.html

 

演示案例

  • 保存http的response裏面的cookie信息
curl -c cookiec.txt "www.baidu.com"

演示案例

  • 下載文件
curl -o demo.jpg http:www.linux.com/demo.jpg
  • 使用-O下載
curl -O http:www.linux.com/demo.jpg
  • 循環下載:demo1.jpg、demo2.jpg、demo3.jpg、demo4.jpg、demo5.jpg
curl -O http://www.linux.com/demo[1-5].jpg
  •  分塊下載
curl -r 0-100 -o demo_part1.jpg http://www.linux.com/demo.jpg
curl -r 100-200 -o demo_part2.jpg http://www.linux.com/demo.jpg
curl -r 200- -o demo_part3.jpg http://www.linux.com/demo.jpg

cat demo_part* > demo.jpg
  • 通過ftp下載文件
curl -O -u 用戶名:密碼 ftp://www.linux.com/demo.jpg

 curl -O ftp://用戶名:密碼@www.linux.com/demo.jpg
  • 顯示下載進度條
curl -# -O http://www.linux.com/demo.jpg
  • 斷點續傳:如果在下載demo.jpg的過程中突然掉線了,可以使用以下的方式續傳
curl -C -O http://www.linux.com/demo.jpg
  • 上傳文件
curl -T demo.jpg -u 用戶名:密碼 ftp://www.linux.com/img/

二、scp

  • secure copy的縮寫, scp是linux系統下基於ssh登陸進行安全的遠程文件拷貝命令
  • scp命令是Linux系統中功能強大的文件傳輸命令,可以實現從本地到遠程,以及從遠程到本地的雙向文件傳輸,用起來非常方便,常用來在線上定位 問題時將線卜的一些文件下載到本地進行詳查,或者將本地的修改上傳到服務器上
  • scp 是加密的,rcp 是不加密的,scp 是 rcp 的加強版
  • 格式如下:
scp [-346BCpqrTv] [-c cipher] [-F ssh_config] [-i identity_file] 
[-l limit] [-o ssh_option] [-P port] [-S program] 
[[user@]host1:]file1 ...[[user@]host2:]file2
  • 相關參數:
    • -1: 強制scp命令使用協議ssh1
    • -2: 強制scp命令使用協議ssh2
    • -4: 強制scp命令只使用IPv4尋址
    • -6: 強制scp命令只使用IPv6尋址
    • -B: 使用批處理模式(傳輸過程中不詢問傳輸口令或短語)
    • -C: 允許壓縮。(將-C標誌傳遞給ssh,從而打開壓縮功能)
    • -p:保留原文件的修改時間,訪問時間和訪問權限。
    • -q: 不顯示傳輸進度條。
    • -r: 遞歸複製整個目錄。
    • -v:詳細方式顯示輸出。scp和ssh會顯示出整個過程的調試信息。這些信息用於調試連接,驗證和配置問題。
    • -c cipher: 以cipher將數據傳輸進行加密,這個選項將直接傳遞給ssh。
    • -F ssh_config: 指定一個替代的ssh配置文件,此參數直接傳遞給ssh。
    • -i identity_file: 從指定文件中讀取傳輸時使用的密鑰文件,此參數直接傳遞給ssh
    • -l limit: 限定用戶所能使用的帶寬,以Kbit/s爲單位。
    • -o ssh_option: 如果習慣於使用ssh_config中的參數傳遞方式,
    • -P port:注意是大寫的P, port是指定數據傳輸用到的端口號
    • -S program: 指定加密傳輸時所使用的程序。此程序必須能夠理解ssh的選項

演示案例

  • 從本地複製到遠程:

    • 第1,2個指定了用戶名,命令執行後需要再輸入密碼,第1個僅指定了遠程的目錄,文件名字不變,第2個指定了文件名

    • 第3,4個沒有指定用戶名,命令執行後需要輸入用戶名和密碼,第3個僅指定了遠程的目錄,文件名字不變,第4個指定了文件名

scp local_file remote_username@remote_ip:remote_folder 

scp local_file remote_username@remote_ip:remote_file 

scp local_file remote_ip:remote_folder 

scp local_file remote_ip:remote_file 

演示案例

  • 複製目錄命令格式:
    • 第1個指定了用戶名,命令執行後需要再輸入密碼;
    • 第2個沒有指定用戶名,命令執行後需要輸入用戶名和密碼;
scp -r local_folder remote_username@remote_ip:remote_folder 

scp -r local_folder remote_ip:remote_folder 

演示案例

  • 從遠程複製到本地
  • 從遠程複製到本地,只要將從本地複製到遠程的命令的後2個參數調換順序即可,如下實例:
scp [email protected]:/home/root/others/music /home/space/music/1.mp3 

scp -r www.runoob.com:/home/root/others/ /home/space/music/

說明

  • 1.如果遠程服務器防火牆有爲scp命令設置了指定的端口,我們需要使用 -P 參數來設置命令的端口號,命令格式如下:
#scp 命令使用端口號 4588
scp -P 4588 [email protected]:/usr/local/sin.sh /home/administrator
  • 2.使用scp命令要確保使用的用戶具有可讀取遠程服務器相應文件的權限,否則scp命令是無法起作用的
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章