找回密码
 立即注册

Scrapy 教程

2022-2-21 05:57| 发布者: 笨鸟自学网| 查看: 10054| 评论: 0

摘要: 在本教程中,我们假定scrapy已经安装在您的系统上。如果不是这样的话,看安装指南.我们将抓取' quotes.toscrape.com http: quotes.toscrape.com=""/http: ' _,这是一个列出著名作家名言的网站。本教程将指导您完成 ...

在本教程中,我们假定scrapy已经安装在您的系统上。如果不是这样的话,看 安装指南 .

我们将抓取' quotes.toscrape.com <http: quotes.toscrape.com=""></http:> ' _,这是一个列出著名作家名言的网站。

本教程将指导您完成以下任务:

  1. 创建新的Scrapy项目

  2. 写一篇 spider 对网站进行爬网并提取数据

  3. 使用命令行导出抓取的数据

  4. 将spider改为递归跟踪链接

  5. 使用蜘蛛参数

Scrapy是用 Python 写的。如果你对这门语言不熟悉,你可能想从了解这门语言是什么开始,从 Scrapy 语言中得到最大的收获。

如果您已经熟悉其他语言,并且希望快速学习Python,那么 Python Tutorial 是一种很好的资源。

如果您是编程新手,并且想从python开始,那么下面的书可能对您有用:

  • Automate the Boring Stuff With Python

  • How To Think Like a Computer Scientist

  • Learn Python 3 The Hard Way

你也可以看看 this list of Python resources for non-programmers 以及 suggested resources in the learnpython-subreddit .


上一篇:安装指南下一篇:命令行工具

Archiver|手机版|笨鸟自学网 ( 粤ICP备20019910号 )

GMT+8, 2025-8-31 00:51 , Processed in 0.018863 second(s), 18 queries .

Powered by Discuz! X3.5

© 2001-2017 Discuz Team. Template By 【未来科技】【 www.wekei.cn 】

返回顶部