Scrapy爬虫实例详解
5星
- 浏览量: 0
- 大小:None
- 文件类型：None
简介：
简介：本教程详细讲解了如何使用Python的Scrapy框架编写高效的网络爬虫程序，涵盖从项目搭建到数据提取与存储的全过程。
本段落主要通过实例介绍了Scrapy框架的使用，并分享了两个例子：爬取豆瓣文本的例程douban和抓取图片的例程douban_imgs。具体如下：
例程1：
douban目录结构如下：
```
-- douban
-- spiders
-- __init__.py
-- bookspider.py
-- douban_comment_spider.py
-- doumailspider.py
-- __init__.py
-- items.py
-- pipelines.py
-- settings.py
- scrapy.cfg
```
其中，`scrapy.cfg`是一个配置文件。
全部评论 (0)
还没有任何评论哟~
