栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Python

scrapy如何在python爬虫中建立目录?

Python 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

scrapy如何在python爬虫中建立目录?

在看一本新书的时候,有些人会习惯的去看一下书本的目录,这样对全书的大概框架也会有一个了解,可见目录的作用是不可小觑的。那么,我们在scrapy框架中有可以建立目录的方法吗?小编在尝试进行python爬虫运行的时候偶尔发现了它的使用,借着这个机会分享给各位小伙伴。


scrapy代码目录

运行:

scrapy startproject tutorial


即可自动创建官方标准的代码目录。

tutorial/
    scrapy.cfg
    tutorial/
        __init__.py
        items.py
        pipelines.py
        settings.py
        spiders/
            __init__.py
            ...


其中:

tutorial/: 该项目的python总模块。

tutorial/items.py: 项目中的item文件,编写爬取的字段名称等;

tutorial/pipelines.py: 项目中的pipelines文件;

tutorial/settings.py: 项目的设置文件,较为重要;

tutorial/spiders/: 放置spider代码的主目录;

想要给自己的文件做目录的小伙伴可以动手尝试一下这种方法,毕竟操作不是很繁琐,python小白也可以放心尝试。更多Python学习推荐:PyThon学习网教学中心。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/11838.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号