• 好好学习,天天向上~
  • 欢迎欢迎~

标签:python

python

python requests库如何使用代理避免爬虫IP限制,proxy无效的解决方法,解决requests.exceptions.MissingSchema: Proxy URLs must have explicit schemes错误

python 制作爬虫获取网络资源是方便的,但是很多网站设置了反爬虫机制,最常见的就是限制 IP 频繁请求了,只要某个 IP 在单位时间内的请求次数超过一定值,网站就不再正常响应了,这时,我们的 python 爬虫就无法正常工作了。对于这种限制 IP 的反爬虫机制,解决方法很简单...

lcc 5个月前 (09-26) 725℃ 0评论 0

python

python 2.7 如何判断 Unicode 编码字符是否为汉字,如何判断unicode编码句子中是否含有汉字

对于计算机来说,一切都是 0 1 组成的数字,汉字也不例外。因此对于 python 来说,汉字也是可以比较大小的,所以,判断一个 unicode字符是否汉字,只需要判断该字符是否在第一个汉字和最后一个汉字之间即可。 查阅资料,发现对于Unicode编码的汉字,最小为 \u4e00...

lcc 5个月前 (09-20) 342℃ 0评论 1

python

python多线程编程最简单实例子demo,使用线程锁,同步线程共享资源

即使 CPU 是单核的,大多现代操作系统也有能力让多个任务“同时进行”,这些操作系统有任务(进程)调度功能。操作系统分配资源是以进程为单位的,执行是以线程为单位的。同一个进程可以有多个线程,这些进程共享进程的资源,操作系统可以调度它们协调工作,就像同时进行一样。 多线程...

lcc 5个月前 (09-19) 158℃ 0评论 2

python

python操作数据库MySql,windows和ubuntu下安装MySQLdb库报错:EnvironmentError: mysql_config not found,Python.h: No such file or directory,Microsoft Visual C++ 9.0 is required

python 的 MySQLdb 库非常方便操作 mysql。不过安装确实非常多问题,这里记录 windows 下和 ubuntu 下安装 MySQLdb 库的过程。 ubuntu 下安装 python 的 MYSQLdb 库 首先想到的是: sudo pip ins...

lcc 5个月前 (09-17) 237℃ 0评论 2

python

ubuntu16.04下,python库selenium使用firefox浏览器无头模式,获取网页内容,geckodriver executable needs to be in PATH

通常各大网站的后台都会有一定的反爬机制,既为了数据安全,也为了减小服务器压力。反爬的手段的方向,都是识别非浏览器客户端,而selenium所做的事情,恰恰是驱动真正的浏览器去执行请求和操作,只不过信号不是来源于鼠标,而是来源于selenium的API(selenium本是一...

lcc 7个月前 (08-02) 471℃ 0评论 2

tensorflow

tensorflow学习,建立LSTM循环神经网络,教机器作诗,训练篇(27)

第26节讨论了如何将诗集数据转换为数字信息,便于训练 长短期记忆循环神经网络(LSTM RNN)。第25节则介绍了 LSTM RNN 在 tensorflow 中常用的函数。本节将在此基础上,建立网络,并训练之。 建立多层 LSTM 循环神经网络 先封装一个神经元,使...

lcc 7个月前 (08-01) 372℃ 0评论 4

tensorflow

tensorflow学习,利用循环神经网络建立记忆网络(char RNN),让机器作诗,数据篇(26)

上一节介绍了 tensorflow 关于循环神经网络的方法,接下来几节,将建立LSTM网络,并且训练之,让电脑拥有写诗的能力。在建立网络前,我们需要先确定数据的输入方式,只有确定了数据特点,才能建立高效好用的网络,本节,将分析需要用到的数据特点,并且给出相应得 python...

lcc 7个月前 (07-26) 305℃ 0评论 2

tensorflow

tensroflow学习,CNN深度学习网络破解验证码续,测试效果(22)

上一节,介绍了如何建立卷积深度学习网络(CNN),识别和破解captcha图形验证码,在最后,我们提到了训练耗时,事实的确如此啊,在我的云服务器上用 cpu 训练了近 24 小时,才勉强达到 80% 的正确率,本节将进行可视化的测试,先用 python 的 captcha ...

lcc 7个月前 (07-18) 301℃ 0评论 0

tensorflow

tensorflow学习,建立卷积深度学习网络(CNN),识别和破解captcha图形验证码(21)

在python如何生成验证码小节,我们利用 captcha 库做了一个图形验证码产生器,可以产生带 one-hot 标签的图片数据集。本节将基于此数据集,建立一个卷积深度学习网络(CNN),并且训练之,希望可以识别破解此验证码数据集。 CNN卷积深度学习网络的结构 计...

lcc 7个月前 (07-17) 399℃ 1评论 0