搜文章
推荐 原创 视频 Java开发 iOS开发 前端开发 JavaScript开发 Android开发 PHP开发 数据库 开发工具 Python开发 Kotlin开发 Ruby开发 .NET开发 服务器运维 开放平台 架构师 大数据 云计算 人工智能 开发语言 其它开发
Lambda在线 > 我爱学Python > python制作一个简单网络爬虫

python制作一个简单网络爬虫

我爱学Python 2017-10-30

这章我们用python标准库urllib2来实现简单的网络爬虫(本章很简单适合小白,不喜勿喷)

一、urllib2定义了以下方法:

urllib2.urlopen( URL, Data, timeout )

  • Data参数:POST数据提交(例如:账号密码发送给服务器判断登陆)

  • url参数:网页URL,可接受request对象。

  • 返回一个类似于open文件对象 从中读取网页数据

urllib2.Request( URL, Data=None, headers={} )

  • 注意R大写

  • Data为None时,发送的是GET请求,反之POST

二、urllib2小案例

获得以下数据:


Download Python 3.6.0:https://www.python.org/ftp/python/3.6.0/python-3.6.0.exe

Download Python 2.7.13:https://www.python.org/ftp/python/2.7.13/python-2.7.13.msi


以上就是一个简单的网络爬虫,有对python感兴趣或者想要学习python的朋友可以加群330637182,每天都会有免费python公开课学习的。让我们共同进步!


版权声明:本站内容全部来自于腾讯微信公众号,属第三方自助推荐收录。《python制作一个简单网络爬虫》的版权归原作者「Python热爱者」所有,文章言论观点不代表Lambda在线的观点, Lambda在线不承担任何法律责任。如需删除可联系QQ:516101458

文章来源: 阅读原文

相关阅读

关注Python热爱者微信公众号

Python热爱者微信公众号:Python-520

Python热爱者

手机扫描上方二维码即可关注Python热爱者微信公众号

Python热爱者最新文章

精品公众号随机推荐

下一篇 >>

Python语法总结