位置: 编程技术 - 正文

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

编辑:rootadmin

推荐整理分享pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:pycharm安装完后怎么打开,pycharm怎么打开文件夹,pycharm运行窗口调出,pycharmrun运行窗口怎么打开,pycharm安装完后怎么打开,pycharm打开没反应,pycharm打开没反应,pycharm 打开,内容如对您有帮助,希望把文章链接给更多的朋友!

首先得有一个Scrapy项目,我在Desktop上新建一个Scrapy的项目叫test,在Desktop目录打开命令行,键入命令:scrapy startproject test1

目录结构如下:

打开Pycharm,选择open

选择项目,ok

打开如下界面之后,按alt + 1, 打开project 面板

在test1/spiders/,文件夹下,新建一个爬虫spider.py, 注意代码中的name="dmoz"。这个名字后面会用到。

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

在test1目录和scrapy.cfg同级目录下面,新建一个begin.py文件(便于理解可以写成main.py),注意箭头2所指的名字和第5步中的name='dmoz'名字是一样的。

7. 上面把文件搞定了,下面要配置一下pycharm了。点击Run->Edit Configurations

8. 新建一个运行的python模块

9. Name:改成spider; script:选择刚才新建的那个begin.py文件;Working Direciton:改成自己的工作目录

. 至此,大功告成了,点击下图,右上角的按钮就能运行了。

调试

可以在其他代码中设置断点,就可以debug运行

遇到问题

1. Unknown command: crawl

调试运行,断点并未命中,控制台输出信息如下:

工作目录设置有误,造成无法识别 scrapy 命令,按照上文所说,将工作目录设置为包含 scrapy.cfg,重新运行,问题解决。

标签: pycharm打开文件怎么运行

本文链接地址:https://www.jiuchutong.com/biancheng/375468.html 转载请保留说明!

上一篇:Python快速排序算法实例分析(python快速排序算法代码)

下一篇:Scrapy框架CrawlSpiders的介绍以及使用详解(Scrapy框架可以用于数据挖掘、监测和自动化测试)

  • 没有购销合同可以开票吗
  • 售卖会卡,达标返现,怎么进行账务处理
  • 增加固定资产原值账务处理
  • 增值税专用发票有效期是多长时间
  • 个人保险发票能抵扣个税
  • 增值税发票的抵扣联丢了怎么办
  • 小规模纳税人金融服务税率
  • 土地增值税怎么做账
  • 总公司收回未分配利润如何入账?
  • 诉讼财产保全保险费计算
  • 土地评估费计入什么会计科目
  • 老板向公司借款用于公司经营
  • 小规模纳税人可以开3%的专票吗
  • 增值税普通发票可以抵扣吗
  • 关于个体工商户的法律规定及司法解释
  • 广告服务增值税差额征税
  • 福利费用属于什么费用
  • 资产负债表其他应付款包括哪些
  • 企业处理二手车增值税没交,有什么影响
  • 一年期电子银行承兑汇票
  • 一般纳税人普通发票要交增值税吗
  • 使用专项资金购买的固定资产 需要取得发票吗
  • 环保税与排污费的关系
  • 清理费用影响当期损益吗
  • 库管和车间工人哪个好
  • 用工会经费给员工发工资
  • dir852迅雷路由器
  • 合并报表同一控制下和非同一控制下区别
  • 股东退股资金如何返还
  • win7系统中怎么找不到投影仪
  • php经典教程
  • 长期待摊费用挂账原因
  • 个人多交社保划不划算
  • 房产证办理流程图
  • 公司给员工餐补计入
  • 筹资活动产生的现金流量净额为正说明什么
  • js let用法
  • dns域名解析两种方式
  • python 3.4.3 shell
  • python del语法
  • 凭证过账后发现了错误,如何处理
  • 什么是公司帐户
  • 预缴的附加税需要转出吗
  • 应交税费为负数在资产负债表里怎么填
  • mongodb怎么用
  • 会计科目在建工程含税吗
  • sqlserver阻止保存要求重新
  • 公司雇佣退休人员工资怎么发
  • 固定资产提取折旧最新规定
  • 小企业会计准则跨年红冲
  • 专票信息技术服务费
  • 一般纳税人采购分录
  • 新成立的公司开什么银行账户
  • 专用发票冲红有时间有时间限制吗
  • 公交充值卡发票能报销吗
  • 关联公司之间的借款
  • sql语句基础题及答案
  • mysql 绿色版
  • 电脑开机显示xp后无反应
  • centos真机安装后只有lo
  • centos安装ufw
  • linux的ftp命令
  • win10系统应用
  • 开源镜像下载到本地
  • win8的系统怎么装win7
  • win8无法打开ie
  • win10预览版好吗
  • linux计划任务每天执行一次
  • unity输入中文
  • cocos 3.x android下home键后,切回游戏时黑屏太久的问题
  • node.js入门教程
  • cmd nul
  • angular script
  • jquery截取字符串的方法
  • 商务英语考英语笔译 算跨考吗
  • js验证身份证合法性
  • android自定义权限申请弹窗
  • 湖北省税务系统欠税管理工作指南
  • 中国税务社保缴费app下载
  • 腾讯 短信服务
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设