做爬蟲,爲了防止服務器的IP被封..服務器出口IP配置多個,,每次爬頁面的時候輪訓換出口IP..
實現的方式:
通過iptables的SNAT,這個原理就不講了,,不懂的直接百度吧..
這裏的機器用的是centos7.
服務器端的配置:
1. 開啓IP轉發
echo '1' > /proc/sys/net/ipv4/ip_forward
2. -s 代表來源地址, -o代表外網出口.
iptables -t nat -A POSTROUTING -s 10.150.2.0/24 -o em2 -j MASQUERADE
3. --every 代表多少秒重新選擇一次IP,一般有多少個IP就填寫多少秒,.
iptables -t nat -I POSTROUTING -m state --state NEW -p tcp --dport 80 -o em2 -m statistic --mode nth --every 2 --packet 0 -j SNAT --to-source 1.1.1.1
iptables -t nat -I POSTROUTING -m state --state NEW -p tcp --dport 80 -o em2 -m statistic --mode nth --every 2 --packet 0 -j SNAT --to-source 1.1.1.2
客戶端的配置:
客戶端只需要把默認網關指向服務器的內網IP即可.