`
iyuan
  • 浏览: 463410 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

gevent 爬虫抓 https页(备忘)

阅读更多
最近有报BUG,抓 https竟然报 "unknown type:https",

杯具了一把,原来是 gevent中的monkey做patch_socke时

由于python版本的原因,竟然寻不到ssl,

它在这:http://pypi.python.org/packages/source/s/ssl/ssl-1.15.tar.gz#md5=81ea8a1175e437b4c769ae65b3290e0c

下载,安装上就可以了,小郁闷一把
0
0
分享到:
评论

相关推荐

    Python-美女写真图爬虫gevent版

    之前写多线程/多进程爬虫一直没有用到第三方库,后来看了 gevent 的文档,觉得可以来试试。觉得还是拿妹子爬虫来试可能比较好一点,毕竟兴趣是最好的老师...

    淘宝爬虫原型,基于gevent.zip

    爬虫(Web Crawler)是一种自动化程序,用于从互联网上收集信息。其主要功能是访问网页、提取数据并存储,以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的...

    基于gevent的mini-scrapy爬虫框架.zip

    爬虫(Web Crawler)是一种自动化程序,用于从互联网上收集信息。其主要功能是访问网页、提取数据并存储,以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的...

    Gevent指南.pdf

    Gevent指南.pdf

    gevent 1.0 for windows

    gevent 1.0 for win32 python 2.7

    gevent easy_install

    使用gevent,可以对并发多个http请求的爬虫程序进行很好的优化, 缺点是,安装相对麻烦,这个包依赖于libevent,在windows下面用easy_install直接安装是不行的,福利来了,windowns版本的安装包一枚

    模块gevent压缩包

    模块gevent压缩包

    gevent 1.0rc2 for windows

    gevent 1.0rc2 for windows

    Gevent学习指南

    本文档是非常详尽的gevent学习教程,可以使你更深入的了解python的gevent

    python Gevent程序员指南.pdf

    python Gevent程序员指南 中文翻译

    gevent_WebService.py

    python协程gevent编写的异步web服务器,由python和第三方包gevent,socket编写

    gevent源代码

    gevent源代码共享。

    gevent-zeromq, pyzeromq gevent compat lib.zip

    gevent-zeromq, pyzeromq gevent compat lib deprecate !这项工作已经合并到了 pyzmq gevent客户端这个库包装 pyzmq,使它与gevent兼容。 要求pyzmq==2.2.0gevent ( 与 1.0个pre发行版兼容)用法要直接

    gevent和pip的安装包

    在windows下安装gevent的安装包,安装方法很简单。具体参考我在csdn的博客。 http://blog.csdn.net/ruguokeyi110/article/details/47725545

    gevent egg免安装优化补丁文件

    如果不想安装gevent可以下载gevent-1.0-py2.7-linux.egg gevent-1.0dev-macosx-intel.egg放local文件夹

    python安装gevent需要的pip文件.zip

    pip该工具适用于python按装gevent,来做协程任务。学习协程,爬虫该工具不可缺少。

    gevent文档

    gevent调度不可或缺的一个组件,无限优化我们的代码。

    gevent-1.2.2

    gevent是第三方库,通过greenlet实现协程,其基本思想是: 当一个greenlet遇到IO操作时,比如访问网络,就自动切换到其他的greenlet,等到IO操作完成,再在适当的时候切换回来继续执行。由于IO操作非常耗时,经常使...

    07-使用gevent来实现http服务器.py

    07-使用gevent来实现http服务器.py

Global site tag (gtag.js) - Google Analytics