快代理的隧道代理使用教程
程序员文章站
2022-07-13 16:33:21
...
本文知识点
- 隧道代理的使用流程
- 代码样例
- 进阶学习
前提条件: 隧道代理的订单,可以免费试用。联系他们的客服开通试用
使用流程
- 获取隧道信息
- 设置代理,进行验证
- 开始爬取
代理验证采用用户名密码的方式。这种验证很方便,简洁。
代码样例
先把代码贴出来,再一步一步按要求来。大家先copy过去,代码里需要注意以下三项皆为实际在快代理官网获得的参数。
- proxy 隧道的host和端口
- username, password 代理验证的用户名与密码
- page_url 默认是快代理验证IP的测试网址,自己也可以改成其他的网址
以下代码为python3所写
"""快代理代理IP使用教程"""
import requests
import random
# 要访问的目标网页
page_url = "http://dev.kdlapi.com/testproxy"
# 隧道的host与端口
proxy = "tps163.kdlapi.com:15818"
# 用户名和密码(隧道代理分配的)
username = ""
password = ""
# 代理IP的格式
proxies = {
"http": "http://%(user)s:%(pwd)aaa@qq.com%(proxy)s/" % {'user': username, 'pwd': password, 'proxy': proxy},
"https": "https://%(user)s:%(pwd)aaa@qq.com%(proxy)s/" % {'user': username, 'pwd': password, 'proxy': proxy
}}
# 添加header,模拟用户请求
headers = {
"Accept-Encoding": "Gzip", # 使用gzip压缩传输数据让访问更快
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.117 Safari/537.36"
}
# 发送request请求,打印响应code与body内容
r = requests.get(url=page_url, proxies=proxies, headers=headers)
print("response code",r.status_code)
print("response body",r.text)
获取隧道代理的信息
打开后台,找到订单,点击管理
隧道的host就是ip,端口,用户名密码等信息
开始爬取
需要的都找到了,那现在运行下。看看结果,结果如下
response code 200。
隧道代理是分配一个固定的IP和端口,直接设置到代理里就好,它会自动更换IP的。
进阶学习
推荐阅读
-
PHP 反射机制实现动态代理的代码_PHP教程
-
php采集中国代理服务器网的方法,采集中国_PHP教程
-
iOS代理模式(delegate)的使用
-
Jdk动态代理与Cglib动态代理的简单使用
-
爬虫(二)requests模块---requests的基本使用,requests中的get和post方法详解,代理的基本原理
-
PHP下通过file_get_contents的代理使用方法_php技巧
-
MyBatis——dao代理的使用、深入理解参数(传递一个参数、传递多个参数、使用entity实体类传递、使用自定义类传递、按位置传递、使用Map传递)
-
PHP下通过file_get_contents的代理使用方法
-
windows上使用squid搭建代理服务器_PHP教程
-
详解使用Go添加Nginx代理的方法示例