IP模擬器
這是通過代理訪問ip最有效的方式，無論你做什么，總之，如果是IP限制，IP被封和另一個IP就可以解決問題。
任何一個做過爬蟲的人都應(yīng)該知道，要抓的網(wǎng)站和數(shù)據(jù)很多。如果爬蟲抓得太快，必然會觸發(fā)網(wǎng)站的反爬機(jī)制，幾乎一樣的招數(shù)就是屏蔽IP。有兩種解決方案:
1.相同的IP，慢下來(緩慢爬行)
2.使用代理IP訪問(建議使用動態(tài)IP)
遇到代理ip的IP訪問
第一種方案犧牲了時(shí)間和速度來換取數(shù)據(jù)，但總的來說，我們的時(shí)間是非常寶貴的，理想情況下，我們應(yīng)該在最短的時(shí)間內(nèi)得到最多的數(shù)據(jù)。所以推薦第二種方案。如果遇到ip，可以用代理IP訪問。那么哪里能找到這么多代理IP呢？
當(dāng)程不明白的時(shí)候，就去找它。谷歌、度娘，輸入關(guān)鍵詞:免費(fèi)代理IP。前幾頁幾乎都是提供代理IP的網(wǎng)站。逐一打開后，我們發(fā)現(xiàn)幾乎都是列表頁面，顯示的是幾十個或者幾百個IPS。
但是如果你仔細(xì)看，你會發(fā)現(xiàn)每個網(wǎng)站提供的免費(fèi)IP都是有限的。如果你使用幾個，你會發(fā)現(xiàn)其中一些已經(jīng)失敗了。當(dāng)然，他們更喜歡你買別人的代理。人們就是這樣賺錢的。
購買代理ip也有購買的優(yōu)勢，可以節(jié)省你很多時(shí)間。作為一個程，你的時(shí)間很寶貴。如果你有這個時(shí)間，最好盡早購買。當(dāng)ip被代理IP訪問時(shí)，這個問題可以很快解決。
