scrapy在python爬虫中建立目录的方法

发布时间:2020-11-23 09:52:32 作者:小新
来源:亿速云 阅读:270

这篇文章主要介绍scrapy在python爬虫中建立目录的方法,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

scrapy代码目录

运行:

scrapy startproject tutorial

即可自动创建官方标准的代码目录。

tutorial/
    scrapy.cfg
    tutorial/
        __init__.py
        items.py
        pipelines.py
        settings.py
        spiders/
            __init__.py
            ...

其中:

tutorial/: 该项目的python总模块。

tutorial/items.py: 项目中的item文件,编写爬取的字段名称等;

tutorial/pipelines.py: 项目中的pipelines文件;

tutorial/settings.py: 项目的设置文件,较为重要;

tutorial/spiders/: 放置spider代码的主目录;

以上是scrapy在python爬虫中建立目录的方法的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!

推荐阅读:
  1. Python爬虫框架【Scrapy】
  2. 在django中运行scrapy框架的方法

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

python python爬虫 scrapy

上一篇:scrapy框架怎么python爬虫中找寻下一页

下一篇:python seaborn模块怎么样安装及使用

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》