首页 > 其他分享 >pycharm的scrapy框架-断点调试

pycharm的scrapy框架-断点调试

时间:2023-06-05 14:38:53浏览次数:28  
标签:__ os scrapy import pycharm path main 断点


在文件根目录,也就是settings.py的上级目录,scrapy.cfg的同级目录,创建main.py:

from scrapy.cmdline import execute
import os
import sys

if __name__ == '__main__':
    sys.path.append(os.path.dirname(os.path.abspath(__file__)))
    execute(['scrapy', 'crawl', '你的spider的name'])

点击main的启动图标或ide的小虫子就可以断点调试了

标签:__,os,scrapy,import,pycharm,path,main,断点
From: https://blog.51cto.com/u_14121041/6415399

相关文章

  • 构建scrapy项目
    构建项目:scrapystartprojecttaobaopycharm打开项目。在项目根路径创建一个爬虫:scrapygenspider爬虫名称要爬取的限制域调试工具:scrapyshellhttp://www.taobao.com#选择<title>标签(也可以class),::取标签值,extract提取数据,first指第一个,等价于extract[0]response.css('titl......
  • 搭建Scrapy基础框架
    官方教程:安装指南—Scrapy2.5.0文档第一步:下载并安装python3.9第二步:下载并安装Anaconda下载地址:Anaconda|IndividualEdition第三步:安装scrapycmd命令:condainstall-cconda-forgescrapy第四步:创建scrapy项目:新建一个文件夹作为存放项目的空间:cmd到存放项目的文件夹:s......
  • pycharm环境配置_network
    目录新建解释器:a.通过Virtualenv新建解释器。b.通过conda新建解释器。管理解释器新建工程配置现有解释器新建工程配置新的解释器a.新建解释器b.利用pip安装包(annconda环境或一些难安装的包)显示所有环境:condaenvlist相关问题:(1)Python出现ValueError:check_hostnamerequiresser......
  • odoo8 pycharm debug 遇到的openerp.service.server: Evented Service (longpolling)
    odoo8pycharmdebug遇到的openerp.service.server:EventedService(longpolling)runningon0.0.0.0:8072@西安-张提供的指导 openerp/__init__.py 里面找到下面这几行,蓝色的是 新增的,红色的是把原来的代码注释掉 ......
  • pycharm环境配置
    CUDA10.1的安装_哔哩哔哩_bilibili新建解释器:新建项目,然后点击文件-->设置-->项目-->python解释器,即下面的解释器配置页面。a.通过Virtualenv新建解释器。(1)点击添加本地解释器,打开添加python解释器界面,配置本地解释器常用的有两种,即本次介绍的Virtualenv方式,还有Conda方式。V......
  • pycharm 运行pytest的先决条件 不然会报no tests were found
    问题描述:在跑代码的时候报错pycharm运行pytest的先决条件不然会报notestswerefound,查了一下说py文件命名以test开头会导致pycharm默认以pytest模式运行,大伙可以先试一下,但是我这边程序命名也不是这种情况,修改了程序名也没有好。解决方案:1. 解决方法,.py文件的文件名要以te......
  • pycharm创建django 开发环境
    因为用了pycharm社区版本没有办法图形界面创建django项目本机的环境需要有djangodjango-adminstartprojectmysite然后进入到mysite目录cdmysitepython-mvenvvenvpipinstalldjango配置pycharm启动项目......
  • Miniconda+Pycharm中虚拟环境配置
    在安装完Miniconda后,win+r打开命令提示符,输入cmd在命令提示符输入conda,出现以下则安装成功;如果输入conda出现“不是内部或外部命令,也不是可运行的程序或批处理文件”,这样的提示说明要手动配置系统环境变量。操作:找到Miniconda的安装路径,找到Scripts,复制文件路径添加到系统path......
  • Pycharm自定义代码片段
    编写自定义代码片段可以避免编写很多重复的东西;下文以PyCharm2023.1.2为例(已安装Chinese插件);打开设置,参考下图1,2,3,4,5顺序点击菜单;看到如下页面;输入编写,描述,模板文本;点击定义按钮,会显示一个弹窗,选择语言环境,点击除内容区的空白处关闭并保......
  • Pycharm中开发vue element项目时eslint的安装和使用
    在PyCharm中使用ESLint对ElementUI进行语法检查和代码风格检查的配置步骤如下:确保你的项目已经配置了ESLint并且可以正常运行。如果尚未安装ESLint,请先使用npm(或者你的包管理器)在项目中安装ESLint:npminstalleslint--save-dev在项目根目录下创建一个名为.eslintrc.......