Python爬虫编程思想（149）：使用Scrapy抓取数据，并通过XPath指定解析规则
source link: https://blog.csdn.net/nokiaguy/article/details/125250572
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
Python爬虫编程思想（149）：使用Scrapy抓取数据，并通过XPath指定解析规则
本文的案例会在parse方法中通过response参数设置XPath，然后从HTML代码中过滤出我们感兴趣的信息，最后将这些信息输出到PyCharm的Console中。
下面的例子通过XPath过滤出指定页面的博文列表，并利用Beautiful Soup对博文的相关信息进一步过滤，最后在Console中输出博文标题等信息。
Recommend
-
10
Python爬虫编程思想（145）：使用Scrapy Shell抓取Web资源
-
24
Python爬虫编程思想（146）：创建和使用Scrapy工程 ...
-
4
Python爬虫编程思想（147）：在PyCharm中使用Scrapy ...
-
8
Python爬虫编程思想（150）：使用Scrapy抓取数据，并将抓取到的数据保存为多种格式的文件 ...
-
7
Python爬虫编程思想（151）：使用Scrapy抓取数据，用ItemLoader保存单条抓取的数据 ...
-
13
Python爬虫编程思想（153）：使用Scrapy抓取数据，抓取多个Url ...
-
9
Python爬虫编程思想（152）：使用Scrapy抓取数据，使用ItemLoader保存多条抓取的数据 ...
-
4
Python爬虫编程思想（155）：使用Scrapy处理带隐藏文本框的登录页面
-
2
Python爬虫编程思想（157）：使用Scrapy从CSV格式转换到JSON格式 ...
-
6
Python爬虫编程思想（156）：使用Scrapy抓取天气预报数据
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK