要使用Python的requests库进行爬虫并设置代理,您需要首先安装requests和requests-proxy库。您可以使用以下命令安装:
pip install requests requests-proxy
接下来,您可以在代码中导入所需的库,并设置代理。以下是一个简单的示例:
import requests from requests_proxy import ProxyMiddleware # 创建一个代理中间件 proxies = { 'http': 'http://your_proxy_ip:your_proxy_port', 'https': 'http://your_proxy_ip:your_proxy_port', } # 创建一个代理中间件实例 proxy_middleware = ProxyMiddleware(proxies=proxies) # 创建一个requests会话,并将代理中间件添加到会话中 session = requests.Session() session.mount('http://', proxy_middleware) session.mount('https://', proxy_middleware) # 使用会话发送请求 response = session.get('http://example.com') # 输出响应内容 print(response.text)
请将your_proxy_ip
和your_proxy_port
替换为您的代理服务器的IP地址和端口号。这样,您就可以使用指定的代理服务器发送请求了。