位置: 编程技术 - 正文

Python的Flask框架应用调用Redis队列数据的方法(flask框架下使用scrapy框架)

编辑:rootadmin

推荐整理分享Python的Flask框架应用调用Redis队列数据的方法(flask框架下使用scrapy框架),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:python的flask框架干啥的,flask框架官方文档,python flask框架 web服务器,python flask框架 web服务器,python flask框架 web服务器,flask框架官方文档,pycharm flask框架,Python的flask框架教程,内容如对您有帮助,希望把文章链接给更多的朋友!

任务异步化打开浏览器,输入地址,按下回车,打开了页面。于是一个HTTP请求(request)就由客户端发送到服务器,服务器处理请求,返回响应(response)内容。

我们每天都在浏览网页,发送大大小小的请求给服务器。有时候,服务器接到了请求,会发现他也需要给另外的服务器发送请求,或者服务器也需要做另外一些事情,于是最初们发送的请求就被阻塞了,也就是要等待服务器完成其他的事情。

更多的时候,服务器做的额外事情,并不需要客户端等待,这时候就可以把这些额外的事情异步去做。从事异步任务的工具有很多。主要原理还是处理通知消息,针对通知消息通常采取是队列结构。生产和消费消息进行通信和业务实现。

生产消费与队列上述异步任务的实现,可以抽象为生产者消费模型。如同一个餐馆,厨师在做饭,吃货在吃饭。如果厨师做了很多,暂时卖不完,厨师就会休息;如果客户很多,厨师马不停蹄的忙碌,客户则需要慢慢等待。实现生产者和消费者的方式用很多,下面使用Python标准库Queue写个小例子:

大概输出如下:

Python的Flask框架应用调用Redis队列数据的方法(flask框架下使用scrapy框架)

Redis 队列Python内置了一个好用的队列结构。我们也可以是用redis实现类似的操作。并做一个简单的异步任务。

Redis提供了两种方式来作消息队列。一个是使用生产者消费模式模式,另外一个方法就是发布订阅者模式。前者会让一个或者多个客户端监听消息队列,一旦消息到达,消费者马上消费,谁先抢到算谁的,如果队列里没有消息,则消费者继续监听。后者也是一个或多个客户端订阅消息频道,只要发布者发布消息,所有订阅者都能收到消息,订阅者都是ping的。

生产消费模式主要使用了redis提供的blpop获取队列数据,如果队列没有数据则阻塞等待,也就是监听。

发布订阅模式使用redis的pubsub功能,订阅者订阅频道,发布者发布消息到频道了,频道就是一个消息队列。

Flask 入口我们分别实现了两种异步任务的后端服务,直接启动他们,就能监听redis队列或频道的消息了。简单的测试如下:

启动脚本,使用

可以分别在监听的脚本输入中看到异步消息。在异步的任务中,可以执行一些耗时间的操作,当然目前这些做法并不知道异步的执行结果,如果需要知道异步的执行结果,可以考虑设计协程任务或者使用一些工具如RQ或者celery等。

Python使用Pycrypto库进行RSA加密的方法详解 密码与通信密码技术是一门历史悠久的技术。信息传播离不开加密与解密。密码技术的用途主要源于两个方面,加密/解密和签名/验签在信息传播中,通

PyCharm使用教程之搭建Python开发环境 PyCharm是JetBrains系列产品的一员,也是现在最好用的IDE。PyCharm维持了JetBrains一贯高度智能的作风,简要枚举如下:独特的本地VCS系统强大的重构功能基于

Python运行报错UnicodeDecodeError的解决方法 Python2.7在Windows上有一个bug,运行报错:UnicodeDecodeError:'ascii'codeccan'tdecodebyte0xc4inposition:ordinalnotinrange()解决方案如下:编辑PythonLibmimetypes.py文件,

标签: flask框架下使用scrapy框架

本文链接地址:https://www.jiuchutong.com/biancheng/387582.html 转载请保留说明!

上一篇:Python第三方库的安装方法总结(Python第三方库的常见安装方法有)

下一篇:Python使用Pycrypto库进行RSA加密的方法详解(python *.py)

  • 出口退税哪些资料要留底
  • 红冲以前年度的费用怎么做账
  • 企业所得税的成本是含税还是不含税
  • 税金计提多了,交少了怎么处理
  • 什么是未投入使用的固定资产
  • 贴现利息应计入什么费用
  • 现金股利什么时候发放
  • 政策信息咨询服务要到哪个部门办理资质
  • 独资企业是向地税申报个税吗
  • 仓库缺货怎么处理
  • 员工个人无息借款违法吗
  • 工程项目垃圾清运项目编码
  • 教育费附加减免政策
  • 运输企业营改增
  • 税控盘维护费优惠政策
  • 营改增通知规定的税收优惠政策
  • 协方差cov计算公式展开
  • 货物毁损物流赔偿
  • 企业备用金用途
  • 没给顾客发票需要罚款吗
  • 税前扣除的固定资产
  • 劳务人员奖金如何纳税
  • 过路费可以抵税吗
  • 职工餐厅账务处理
  • php下载限速
  • 私立医院执行什么会计准则
  • 使用与保养
  • 营改增之后账务怎么处理
  • unik面部识别怎么用
  • 企业合并发生的审计费用,评估费用会计分录
  • 营改增后一般纳税人缴纳增值税彩用简易征收3%
  • centos-6.5-i386-bin-dvd1.iso
  • 申报表已申报未交款后作废
  • 税务变更登记需要带的资料有哪些
  • vue项目创建流程
  • 现金股利算负债吗
  • 公允价值怎么记账
  • 事业单位无形资产包括哪些
  • 研发费用归集范围有哪些
  • 固定资产租赁费属于什么费用
  • 认缴制和实缴制的区别公司破产
  • 小规模纳税人国税地税都要交吗
  • 未开票收入是否代表可以不开发票
  • 企业初建
  • 施工企业内部管理制度
  • Linux环境mysql5.7.12安装教程
  • mysql动态sql语句赋值
  • centos6.5下mysql 5.7.19 安装配置方法
  • ubuntu从u盘安装软件
  • p2p是什么文件
  • win8网页打不开
  • ubuntu下载net-tools
  • 如何设置win10系统输入法
  • centos soft lockup
  • linux内核命名
  • [置顶] 《精神怪谈》 后续起点
  • linux awk命令使用实例
  • jquery基础知识
  • Node.js中的全局对象有
  • bat 参数个数
  • python 继承
  • node 调用c
  • 用javascript
  • js如何深度克隆一个对象
  • javascrpt绑定事件之匿名函数无法解除绑定问题
  • python装饰器与递归算法详解
  • javascript几种类型
  • js写一个类
  • python3 functools
  • 怎么向税务局举报不开票行为
  • 财务跨期报销问题
  • 怎么代理保险业务
  • 贵州省微企补助政策
  • 聊城社保网上申报流程
  • 甘肃税务厅
  • 国地税发展历程
  • 武汉二手房交易信息
  • 季度财务会计报告怎么写
  • 小规模六税两费减免分录
  • 不动产契税怎么计算出来的
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设