我是靠谱客的博主 无情学姐,这篇文章主要介绍scrapy框架 & xpath常用基本语法一、scrapy:二、xpath:,现在分享给大家,希望可以做个参考。

一、scrapy:

1、创建项目

scrapy startproject myproject    #myproject 为项目名

2、列出所有模板

scrapy genspider -l

3、创建爬虫

scrapy genspider -t crawl zhihu zhihu.com    # zhihu 为爬虫名 zhihu.com为爬取网站域名
scrapy genspider spiders zhihu.com    # spiders为爬虫名 zhihu.com为爬取网站域名

4、运行spider

scrapy crawl spidername  # 输出日志加源代码
scrapy crawl spidername --nolog  # 只输出源代码

最后

以上就是无情学姐最近收集整理的关于scrapy框架 & xpath常用基本语法一、scrapy:二、xpath:的全部内容,更多相关scrapy框架内容请搜索靠谱客的其他文章。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(126)

评论列表共有 0 条评论

立即
投稿
返回
顶部