博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
爬虫 代理IP
阅读量:6676 次
发布时间:2019-06-25

本文共 634 字,大约阅读时间需要 2 分钟。

hot3.png

网上找的免费代理ip

#!/usr/bin/env python# -*- coding:utf-8 -*-import urllib2# 代理开关proxyswitch = True# Handler代理对象,dict类型httpproxy_handler = urllib2.ProxyHandler({"http": "119.52.247.13:8080"})# 无代理Handler代理对象nullproxy_handler = urllib2.ProxyHandler({})if proxyswitch:    opener = urllib2.build_opener(httpproxy_handler)else:    opener = urllib2.build_opener(nullproxy_handler)# 全局opener,之后所有的请求都可以用urlopen(去发送,也附带Handler的功能urllib2.install_opener(opener)request = urllib2.Request("http://www.baidu.com")reponse = urllib2.urlopen(request)# print reponse.read().decode("gbk")print reponse.read()

转载于:https://my.oschina.net/u/3646781/blog/1592633

你可能感兴趣的文章
前端面试题:从url到页面展现,这之中发生了什么?
查看>>
sublime打开TXT文件乱码的问题
查看>>
GraphQL 入门: 简介
查看>>
git github小白看过来——中午篇
查看>>
socket.io+redis+nodejs+nginx集群部署
查看>>
Angular 4.x EventManager & Custom EventManagerPlugin
查看>>
TP后台权限管理笔记
查看>>
客户端通过SSH private key 登录远端服务器
查看>>
ASP.NET SignalR增加Azure支持
查看>>
Micronaut教程:如何使用基于JVM的框架构建微服务
查看>>
利用Apache Spark SQL和DataFrames扩展关系数据库
查看>>
立下“去O”Flag的AWS,悄悄修炼了哪些内功?
查看>>
Mango 的组织重构
查看>>
Spring Boot 2.2首个里程碑版本发布,改进性能和内存使用
查看>>
James Grenning访谈录:关于测试驱动开发及代码异味
查看>>
最重要的就是做正确的事
查看>>
SUM
查看>>
旷视砸20亿进军AIoT,发布国内首个机器人协作大脑河图
查看>>
持续交付模型中文化转型的重要意义
查看>>
IE安全系列:IE浏览器的技术变迁(上)
查看>>