爬蟲選擇IP代理不能盲目選擇，這關係到我們採集效率的高低，主要需要滿足以下幾點：
1、IP池要大，眾所周知，爬蟲採集需要大量的IP，有的時候會每天需要幾百萬上千萬的調用，如果IP數量不夠，那爬蟲的工作也無法進行下去。所以企業爬蟲一般要找實測至少百萬以上的IP，才能確保業務不受影響。
2、併發要高：爬蟲採集一般都是多線程進行的，需要短期內內獲取海量的IP，如果併發不夠，會大大降低爬蟲採集的數據。一般需要單次調用200，間隔一秒，而有些IP池，一次只能調用10個IP，間隔還要5秒以上，這樣的資源只適合個人練手用，如果是企業用戶就趁早放棄吧。
3、可用率要高：IP池不但要大IP可用率還得高，因為許多通過掃描公網IP得來的資源，有可能上千萬的IP實際可用率不到5%，這樣來看能用的IP就非常有限了，而且還會浪費大量的時間去驗證IP的可用性，而優秀的爬蟲http代理池的IP，一般要確保可用率在90%以上才行。
4、IP資源最好獨享，其實這一項跟第三點有點類似，因為獨享IP能直接影響IP的可用率，獨享http代理能確保每個IP同時只有一個用戶在使用，能確保IP的可用率、穩定性。
5、調用方便：這個是指有豐富的API接口，方便集成到任何程序裡。
分享到:
閱讀更多 猿茂盛 的文章
