位置: 编程技术 - 正文

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

编辑:rootadmin

推荐整理分享pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:pycharm安装完后怎么打开,pycharm怎么打开文件夹,pycharm运行窗口调出,pycharmrun运行窗口怎么打开,pycharm安装完后怎么打开,pycharm打开没反应,pycharm打开没反应,pycharm 打开,内容如对您有帮助,希望把文章链接给更多的朋友!

首先得有一个Scrapy项目,我在Desktop上新建一个Scrapy的项目叫test,在Desktop目录打开命令行,键入命令:scrapy startproject test1

目录结构如下:

打开Pycharm,选择open

选择项目,ok

打开如下界面之后,按alt + 1, 打开project 面板

在test1/spiders/,文件夹下,新建一个爬虫spider.py, 注意代码中的name="dmoz"。这个名字后面会用到。

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

在test1目录和scrapy.cfg同级目录下面,新建一个begin.py文件(便于理解可以写成main.py),注意箭头2所指的名字和第5步中的name='dmoz'名字是一样的。

7. 上面把文件搞定了,下面要配置一下pycharm了。点击Run->Edit Configurations

8. 新建一个运行的python模块

9. Name:改成spider; script:选择刚才新建的那个begin.py文件;Working Direciton:改成自己的工作目录

. 至此,大功告成了,点击下图,右上角的按钮就能运行了。

调试

可以在其他代码中设置断点,就可以debug运行

遇到问题

1. Unknown command: crawl

调试运行,断点并未命中,控制台输出信息如下:

工作目录设置有误,造成无法识别 scrapy 命令,按照上文所说,将工作目录设置为包含 scrapy.cfg,重新运行,问题解决。

标签: pycharm打开文件怎么运行

本文链接地址:https://www.jiuchutong.com/biancheng/375468.html 转载请保留说明!

上一篇:Python快速排序算法实例分析(python快速排序算法代码)

下一篇:Scrapy框架CrawlSpiders的介绍以及使用详解(Scrapy框架可以用于数据挖掘、监测和自动化测试)

  • 二手房买卖避税违法吗
  • 进项税额怎么计算例题
  • 环境保护税是什么科目
  • 销售货物提供运输是否分别核酸的例题
  • 小规模纳税人分红税率
  • 珠宝首饰可以开发票吗
  • 分公司以前年度能弥补亏损吗
  • 公司团建取得的进项发票可以抵扣增值税吗
  • 调整上月的生产成本
  • 跨境电子商务出来能干嘛
  • 合法有效的凭证
  • 现金折扣税务筹划
  • 内部往来科目设置在哪类下
  • 公司注销应付款太多
  • 股权转让评估费可以有公司承担吗
  • 预交税费怎么做分录
  • 无形资产的加计扣除为什么不影响应纳税所得额
  • 房屋及建筑物原值计算
  • 税控盘维护费是普票能全额抵扣吗
  • 所得税营业成本包括哪些
  • 应交增值税最后到哪了
  • 前期物业管理公司
  • 关联企业之间借款的处理
  • 公司收到个人投资款没有备注
  • 耗材会计分录做账怎么做
  • win10 20h2更新时间久
  • 生育津贴报销需要准生证吗
  • 如何一键重装系统win10
  • php dechex
  • mysql实现事务
  • yolov5m
  • 企业的存货按照计划成本核算,期初
  • php处理xml数据
  • 报销钱大写数字
  • php获取随机数
  • 企业固定资产可以按照其价值和使用情况,确定采用某一
  • 哪些研发费用可以资本化
  • 管理费用只能在借方吗
  • 股东退股怎么入账
  • 公司收到股权转让款需要交什么税种
  • 长投会计分录总结
  • 单一窗口报关是指什么
  • 发票网上申领需要多长时间
  • 固定资产折旧和无形资产摊销
  • 什么是汇算清缴?
  • 合同履约成本与一份当前或预期取得的区别
  • 经营费用属于什么类科目
  • 小规模纳税人按1%
  • 红冲发票如何做账
  • 资金结余率怎么算
  • 公司返聘退休人员的员工比例有没有规定
  • 预提费用如何做账务处理
  • 新准则印花税计提会计分录
  • “财务报表分析”
  • 日常费用报销管理制度
  • 新注册的公司怎么申报个税
  • SQL Transcation的一些总结分享
  • mysql存emoji表情
  • windows共享功能
  • windows自动执行
  • hprof-conv.exe
  • win8 开机启动
  • win8系统升级到win10东西还在吗
  • 如何设置鼠标移入并停止时触发接口
  • 苹果系统安装系统
  • windows7开机提示盗版
  • win8怎么添加wifi
  • win8使用教程和技能
  • linux shell 字符串转数字
  • nodejs connect
  • python静态函数
  • 封装是借助什么达到的
  • python 网络爬虫库
  • android_zh
  • jquery操作表单
  • jquery通过id赋值
  • 深圳市税务局陈建新
  • 重新税务登记程序有哪些
  • 城市基础设施配套费由哪个部门收取
  • 宝马535车船税
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设