爲了更加便捷高效地工作，程序員在設計爬蟲之初就會考慮，用爬蟲去模擬用戶的行爲，以減少IP被封的機率。模擬用戶行爲一是爲了太陽ip軟件爬取數據異步加載頁面方面，二也是爲了爬蟲行爲高度模仿用戶行爲，最終目的還是爲了高匿——高度隱匿自己的真實ip。
那麼，應該怎麼做高匿呢？
1、user-agent：這也是一個比較重要的數據特徵，要做在爬蟲裏面靈活設置，最好和目前主流瀏覽器環境的user-agent一模一樣，隨着瀏覽器的版本變化，你的user-agent也會變化。pyspider的user-agent是在一個爬蟲項目裏面做爬取全局設置
2、如果高度模仿瀏覽器請求，有個簡便方法：看chrome網絡請求的curl all copy信息。
3、cookie：這個東西可能會被很多爬蟲開發者所忽視，實際上它是非常重要的，cookie行爲的仿真不但涉及到用戶行爲模擬，而且會直接導致某些訪問請求碰到權限或者其他方面的錯誤。pyspider的cookie可以直接在爬取請求裏面設置。
4、IP隱藏，現在網上有很多高匿http代理，所謂高匿代理，就是代理對被訪問服務器完全隱藏其被代理的客戶端，
比如：
注意：使用網上的高匿代理時，一定要先在自己的服務器上試一下，防止僞高匿發生,在Pyspider的Phantomjs中使用代理服務器，需要單獨啓動phantomjs服務，啓動命令：
使用上面這個命令，必須是pyspider0.37及其以後版本。對於Selenium webdriver，怎麼用代理，看Selenium文檔吧。
5、登錄session問題：session問題在客戶端主要是cookie問題，如果你能做到cookie全局仿真，session肯定不是問題。
推薦使用這款軟件，很清爽簡單，操作便利，節省一大半操作時間。