python基础大全，总结惊精细，函数，python flash编程，python web基础
标签： python
上传时间： 2019-06-05
上传用户：jinqiliang
改压缩文件包含车牌数据集，车牌识别的python程序代码，使用CNN卷积网络实现
上传时间： 2019-06-28
上传用户：WSRY5220
《笨办法学 python》(Learn python The Hard Way，简称 LPTHW)是 Zed Shaw 编写的一本 python 入门书籍。适合对计算机了解不多，没有学过编程，但对编程感兴趣的朋友学习使用。这本书以 习题的方式引导读者一步一步学习编程，从简单的打印一直讲到完整项目的实现。也许读完这本书并不 意味着你已经学会了编程，但至少你会对编程语言以及编程这个行业有一个初步的了解。
标签： python
上传时间： 2019-10-28
上传用户：shangqinghua
以后再也不用担心写爬虫ip被封，不用担心没钱买代理ip的烦恼了 在使用python写爬虫时候，你会遇到所要爬取的网站有反爬取技术比如用同一个IP反复爬取同一个网页，很可能会被封。如何有效的解决这个问题呢？我们可以使用代理ip，来设置代理ip池。 现在教大家一个可获取大量免费有效快速的代理ip方法，我们访问西刺免费代理ip网址 这里面提供了许多代理ip，但是我们尝试过后会发现并不是每一个都是有效的。所以我们现在所要做的就是从里面提供的筛选出有效快速稳定的ip。 以下介绍的免费获取代理ip池的方法： 优点：免费、数量多、有效、速度快 缺点：需要定期筛选 主要思路： 从网址上爬取ip地址并存储 验证ip是否能使用-（随机访问网址判断响应码） 格式化ip地址 代码如下： 1.导入包 import requests from lxml import etree import time 1 2 3 2.获取西刺免费代理ip网址上的代理ip def get_all_proxy(): url = 'http://www.xicidaili.com/nn/1' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36', } response = requests.get(url, headers=headers) html_ele = etree.HTML(response.text) ip_eles = html_ele.xpath('//table[@id="ip_list"]/tr/td[2]/text()') port_ele = html_ele.xpath('//table[@id="ip_list"]/tr/td[3]/text()') proxy_list = [] for i in range(0,len(ip_eles)): proxy_str = 'http://' + ip_eles[i] + ':' + port_ele[i] proxy_list.append(proxy_str) return proxy_list 1 2 3 4 5 6 7 8 9 10 11 12 13 14 3.验证获取的ip def check_all_proxy(proxy_list): valid_proxy_list = [] for proxy in proxy_list: url = 'http://www.baidu.com/' proxy_dict = { 'http': proxy } try: start_time = time.time() response = requests.get(url, proxies=proxy_dict, timeout=5) if response.status_code == 200: end_time = time.time() print('代理可用：' + proxy) print('耗时:' + str(end_time - start_time)) valid_proxy_list.append(proxy) else: print('代理超时') except: print('代理不可用--------------->'+proxy) return valid_proxy_list 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 4.输出获取ip池 if __name__ == '__main__': proxy_list = get_all_proxy() valid_proxy_list = check_all_proxy(proxy_list) print('--'*30) print(valid_proxy_list) 1 2 3 4 5 技术能力有限欢迎提出意见，保证积极向上不断学习 ———————————————— 版权声明：本文为CSDN博主「彬小二」的原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接及本声明。 原文链接：https://blog.csdn.net/qq_39884947/article/details/86609930
上传时间： 2019-11-15
上传用户：fygwz1982
《python 3反爬虫原理与绕过实战》书籍源码
上传时间： 2020-03-27
上传用户：逆天骚年
跟着小甲鱼视频学习编写的python程序
上传时间： 2020-03-27
上传用户：1231999
python作为语言界的后起之秀，说起Pyhon每个学过的程序员都不得不提的一本书籍
上传时间： 2020-04-23
上传用户：星星乐曲
很实用的一本python进阶的书籍，书籍的排版很让人眼前一亮，非常具备耐读性
上传时间： 2020-04-23
上传用户：星星乐曲
python基础教程，python基础教程，python基础教程。
标签： python
上传时间： 2020-04-27
上传用户：qqbailingyue
利用python获得特定概念股票在某个月的成交量
上传时间： 2020-06-02
上传用户：gaofei118
