vlambda博客
学习文章列表

爬虫(109)接下来的计划,终极爬虫框架 Scrapy 学习

是时候该告一段落了,每天上完班,真的很累,但是还是坚持学习一点 关于 python 爬虫的知识,虽然很累,但是收获的是满满的知识,当然也收获一点点小小的收入,喜欢的可以给小编我点赞啊等等,给我一些动力坚持下去吧


接下来就是对爬虫框架 Scrapy 从零基础开始入门学习啦,我们先来罗列一下接下来学习的顺序吧,其实我们已经期待很久了,我迫不及待想要学习 Scrapy 这个爬虫框架了,小伙伴是不是跟我一样的心情呢?学习完这个爬虫框架,小编将带领大家学习 django 这个 web 框架



基础


  1.  Scrapy 概览

  2.  Scrapy 环境

  3.  Scrapy 命令行工具

  4.  Scrapy 蜘蛛

  5.  Scrapy 选择器

  6.  Scrapy Item

  7.  Scrapy Item 加载器

  8.  Scrapy Shell

  9.  Scrapy  Item 管道

  10.  Scrapy feed export

  11.  Scrapy 请求和响应

  12.  Scrapy 链接提取器

  13.  Scrapy 配置

  14.  Scrapy 异常


项目创建


  1.  创建一个项目

  2.  定义项目

  3.  第一个蜘蛛

  4.  爬行

  5.  提取项目

  6.  使用项目

  7.  关注链接

  8.  报废数据


Scrapy 内置服务


  1. 记录

  2. 统计收集

  3. 发送电子邮件

  4. Telnet 控制台

  5. web 服务


Scrapy 有用资源


  1. 快速指南

  2. 有用资源

  3. 讨论