博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
pyCurl example
阅读量:5143 次
发布时间:2019-06-13

本文共 489 字,大约阅读时间需要 1 分钟。

#!/usr/bin/python import pycurl,StringIO def crawl(name):    crl = pycurl.Curl()    crl.setopt(pycurl.VERBOSE,0)     # No verbose info print    crl.setopt(pycurl.NOSIGNAL, 1)   # avoid memory dump error    crl.setopt(pycurl.FOLLOWLOCATION, 1)    crl.setopt(pycurl.MAXREDIRS, 5)    crl.fp = StringIO.StringIO()    crl.setopt(pycurl.URL, url)    crl.setopt(crl.WRITEFUNCTION, crl.fp.write)    crl.perform()    page = crl.fp.getvalue()

 

转载于:https://www.cnblogs.com/learnthenknow/p/3914001.html

你可能感兴趣的文章
Centos 7.0 安装Mono 3.4 和 Jexus 5.6
查看>>
CSS属性值currentColor
查看>>
java可重入锁reentrantlock
查看>>
浅谈卷积神经网络及matlab实现
查看>>
解决ajax请求cors跨域问题
查看>>
《收获,不止Oracle》pdf
查看>>
LinkedList<E>源码分析
查看>>
Real-Time Rendering 笔记
查看>>
如何理解HTML结构的语义化
查看>>
Activity之间的跳转:
查看>>
实验四2
查看>>
Android现学现用第十一天
查看>>
多路复用
查看>>
Python数据可视化之Pygal(雷达图)
查看>>
Java学习笔记--字符串和文件IO
查看>>
转 Silverlight开发历程—(画刷与着色之线性渐变画刷)
查看>>
SQL语法(3)
查看>>
在js在添版本号
查看>>
sublime3
查看>>
Exception Type: IntegrityError 数据完整性错误
查看>>