今天咱们聊聊一个老生常谈的问题——IP被封。这事儿，说白了，就是你的网络地址被网站给拉黑了，导致你访问不了。这在爬虫或者频繁访问网站时经常遇到。举个例子，我之前做数据采集的时候，就因为IP被封，差点没完成项目。那么，怎么应对呢？
修改请求头，模拟浏览器访问
第一招，咱们可以修改请求头，让服务器认为你是浏览器访问，而不是脚本。这招挺简单的，就是设置一个User-Agent，伪装成浏览器。**代码如下**：
“`python
headers = {‘User-Agent’: ‘Mozilla/5.0 … Chrome/72.0.3626.119 Safari/537.36’}
response = requests.get(url, headers=headers)
“`
代理IP的使用和轮换
第二招，就是用代理IP。这个大家都知道，但是怎么找到好的代理IP呢？
一键获取代理IP的代码：
“`python
def get_proxy_ip(response):
proxy_ip_list = []
soup = BeautifulSoup(response, ‘html.parser’)
proxy_ips = soup.select(‘.odd’)
for proxy_ip in proxy_ips:
ip = proxy_ip.select(‘td’)[1].text
port = proxy_ip.select(‘td’)[2].text
protocol = proxy_ip.select(‘td’)[5].text
if protocol in (‘HTTP’,’HTTPS’):
proxy_ip_list.append(f'{protocol}://{ip}:{port}’)
return proxy_ip_list
“`
设置访问时间间隔
第三招，就是设置访问时间间隔。这个简单，就是不要太频繁地访问同一个网站，给服务器一点喘息的机会。
如何验证代理IP的有效性
拿到代理IP之后，咱们得验证一下是不是真的能用。我常用的方法是访问一个网站，看返回码是不是200，或者检查网站的title是否正确。**代码示例**：
“`python
def check_proxy_availability(proxy):
result = open_url_using_proxy(‘http://www.baidu.com’, proxy)
if result and result[1] == 200:
print(‘有效代理IP:’, proxy)
else:
print(‘无效代理IP:’, proxy)
“`
真实的使用场景
记得有一次，我做的一个项目需要从20个不同的网站抓取数据。我一开始就直接上，结果没几分钟IP就被封了。后来，我学乖了，用上了代理IP轮换，还设置了访问间隔，效果杠杠的。
结尾建议
总之，IP被封是个常见的问题，但是通过一些小技巧，咱们可以巧妙地绕过去。遇到问题不要怕，多尝试几种方法，总能找到解决之道。希望我分享的这些小技巧能帮到你们。如果你有更好的方法，也欢迎在评论区交流哦！
原创文章，作者：余初云，如若转载，请注明出处：https://blog.jidcy.com/ip/gndl/898.html