visual studio中创建python的爬虫 scrapy项目

huaan011 / 2024-03-12 / 原文

scrapy教程:https://zhuanlan.zhihu.com/p/598764670

xpath教程:https://www.runoob.com/xpath/xpath-syntax.html

1.在命令行中安装 scrapy环境。一定要安装,是为了在指定的目录下创建一个 scrapy的模板项目。

命令: pip install scrapy

 

2.创建 scrapy的项目。

 3、用vistual studio打开创建的项目

 

 

 

 在单独的项目的 Python环境 一定要安装一遍scrapy程序包

 

 

 

 5、执行爬虫,抓取数据,新建一个 启动类:entrypoint.py

 

 

 执行方法一:

 

 

方法二:直接运行 

 

 

代码:  下载