位置: 编程技术 - 正文

使用Node.js配合Nginx实现高负载网络(node.js怎么用)

编辑:rootadmin

推荐整理分享使用Node.js配合Nginx实现高负载网络(node.js怎么用),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:如何配置nodejs运行环境,node.js怎么配置,node.js deno,node.js使用教程,node.js使用教程,node.js orm,node.js in action,node.js使用教程,内容如对您有帮助,希望把文章链接给更多的朋友!

在搭建高吞吐量web应用这个议题上,NginX和Node.js可谓是天生一对。他们都是基于事件驱动模型而设计,可以轻易突破Apache等传统web服务器的CK瓶颈。预设的配置已经可以获得很高的并发,不过,要是大家想在廉价硬件上做到每秒数千以上的请求,还是有一些工作要做的。

这篇文章假定读者们使用NginX的HttpProxyModule来为上游的node.js服务器充当反向代理。我们将介绍Ubuntu .以上系统sysctl的调优,以及node.js应用与NginX的调优。当然,如果大家用的是Debian系统,也能达到同样的目标,只不过调优的方法有所不同而已。

网络调优

如果不先对Nginx和Node.js的底层传输机制有所了解,并进行针对性优化,可能对两者再细致的调优也会徒劳无功。一般情况下,Nginx通过TCP socket来连接客户端与上游应用。

我们的系统对TCP有许多门限值与限制,通过内核参数来设定。这些参数的默认值往往是为一般的用途而定的,并不能满足web服务器所需的高流量、短生命的要求。

这里列出了调优TCP可供候选的一些参数。为使它们生效,可以将它们放在/etc/sysctl.conf文件里,或者放入一个新配置文件,比如/etc/sysctl.d/-tuning.conf,然后运行sysctl -p,让内核装载它们。我们是用sysctl-cookbook来干这个体力活。

需要注意的是,这里列出来的值是可以安全使用的,但还是建议大家研究一下每个参数的含义,以便根据自己的负荷、硬件和使用情况选择一个更加合适的值。

重点说明其中几个重要的。

为了替上游的应用服务下游的客户端,NginX必须打开两条TCP连接,一条连接客户端,一条连接应用。在服务器收到很多连接时,系统的可用端口将很快被耗尽。通过修改net.ipv4.ip_local_port_range参数,可以将可用端口的范围改大。如果在/var/log/syslog中发现有这样的错误: “possible SYN flooding on port . Sending cookies”,即表明系统找不到可用端口。增大net.ipv4.ip_local_port_range参数可以减少这个错误。

当服务器需要在大量TCP连接之间切换时,会产生大量处于TIME_WAIT状态的连接。TIME_WAIT意味着连接本身是关闭的,但资源还没有释放。将net_ipv4_tcp_tw_reuse设置为1是让内核在安全时尽量回收连接,这比重新建立新连接要便宜得多。

这是处于TIME_WAIT状态的连接在回收前必须等待的最小时间。改小它可以加快回收。如何检查连接状态

使用netstat:

或使用ss:

随着web服务器的负载逐渐升高,我们就会开始遭遇NginX的某些奇怪限制。连接被丢弃,内核不停报SYN flood。而这时,平均负荷和CPU使用率都很小,服务器明明是可以处理更多连接的状态,真令人沮丧。

使用Node.js配合Nginx实现高负载网络(node.js怎么用)

经过调查,发现有非常多处于TIME_WAIT状态的连接。这是其中一个服务器的输出:

有个TIME_WAIT连接!而且,从ss可以看出,它们都是已经关闭的连接。这说明,服务器已经消耗了绝大部分可用端口,同时也暗示我们,服务器是为每个连接都分配了新端口。调优网络对这个问题有一点帮助,但是端口仍然不够用。

经过继续研究,我找到了一个关于上行连接keepalive指令的文档,它写道:

设置通往上游服务器的最大空闲保活连接数,这些连接会被保留在工作进程的缓存中。

有趣。理论上,这个设置是通过在缓存的连接上传递请求来尽可能减少连接的浪费。文档中还提到,我们应该把proxy_http_version设为"1.1",并清除"Connection"头部。经过进一步的研究,我发现这是一种很好的想法,因为HTTP/1.1相比HTTP1.0,大大优化了TCP连接的使用率,而Nginx默认用的是HTTP/1.0。

按文档的建议修改后,我们的上行配置文件变成这样:

我还按它的建议修改了server一节的proxy设置。同时,加了一个 p roxy_next_upstream来跳过故障的服务器,调整了客户端的 keepalive_timeout,并关闭访问日志。配置变成这样:

采用新的配置后,我发现服务器们占用的socket 降低了%。现在可以用少得多的连接来传输请求了。新的输出如下:

Node.js

得益于事件驱动式设计可以异步处理I/O,Node.js开箱即可处理大量的连接和请求。虽然有其它一些调优手段,但这篇文章将主要关注node.js的进程方面。

Node是单线程的,不会自动使用多核。也就是说,应用不能自动获得服务器的全部能力。

实现Node进程的集群化

我们可以修改应用,让它fork多个线程,在同一个端口上接收数据,从而实现负载的跨越多核。Node有一个cluster模块,提供了实现这个目标所必需的所有工具,但要将它们加入应用中还需要很多体力活。如果你用的是express,eBay有一个叫cluster2的模块可以用。

防止上下文切换

当运行多个进程时,应该确保每个CPU核同一时间只忙于一个进程。一般来说,如果CPU有N个核,我们应该生成N-1个应用进程。这样可以确保每个进程都能得到合理的时间片,而剩下的一个核留给内核调度程序运行其它任务。我们还要确保服务器上基本不执行除Node.js外的其它任务,防止出现CPU的争用。

我们曾经犯过一个错误,在服务器上部署了两个node.js应用,然后每个应用都开了N-1个进程。结果,它们互相之间抢夺CPU,导致系统的负荷急升。虽然我们的服务器都是8核的机器,但仍然可以明显地感觉到由上下文切换引起的性能开销。上下文切换是指CPU为了执行其它任务而挂起当前任务的现象。在切换时,内核必须挂起当前进程的所有状态,然后装载和执行另一个进程。为了解决这个问题,我们减少了每个应用开启的进程数,让它们公平地分享CPU,结果系统负荷就降了下来:

请注意上图,看系统负荷(蓝线)是如何降到CPU核数(红线)以下的。在其它服务器上,我们也看到了同样的情况。既然总的工作量保持不变,那么上图中的性能改善只能归功于上下文切换的减少。

nodejs实现获取当前url地址及url各种参数值 //需要使用的模块httpurl当前

node.js读取文件到字符串的方法 本文实例讲述了node.js读取文件到字符串的方法。分享给大家供大家参考。具体分析如下:Node.js是一套用来编写高性能网络服务器的JavaScript工具包,一

在Node.js应用中读写Redis数据库的简单方法 在开始本文之前请确保安装好Redis和Node.js以及Node.js的Redis扩展——node_redis首先创建一个新文件夹并新建文本文件app.js文件内容如下:varredis=require("redis")

标签: node.js怎么用

本文链接地址:https://www.jiuchutong.com/biancheng/377972.html 转载请保留说明!

上一篇:把Node.js程序加入服务实现随机启动(node.js怎么样)

下一篇:nodejs实现获取当前url地址及url各种参数值(nodejs 获取命令行参数)

  • 公司给个体户转账怎么交税
  • 小规模纳税人不开票收入怎么报增值税
  • 增值税少企业所得税多说明什么
  • 会计为什么要计折旧费
  • 税金及附加没有什么税
  • 小微企业开票多少算小规模纳税人
  • 主营业务收入计入
  • 减资账务处理基准日 会计视野
  • 牛奶公司饲养奶牛生产牛奶
  • 合同解除收取对方的违约金交什么税
  • 个人怎么捐赠物资
  • 劳务报酬所得是什么
  • 公司电子承兑汇票
  • 长期股权投资收到红利会计处理
  • 对非本单位的营销方案
  • 房地产增值税发票有什么用
  • 去年漏记一笔银行付款怎么办
  • 业务招待费的进项可以抵扣吗
  • 个人开劳务发票要同时交个税吗?
  • 税务局代开专用发票要缴纳城建税吗?
  • 安全生产费纳税调整政策
  • 核定征收的企业需要汇算清缴吗
  • 工厂生产的配件怎么入账
  • 垫付按揭保证金怎么做账
  • 出口退税成本核算
  • 产品种类很多月末怎么结转生产成本
  • 2019年小微企业增值税起征点为月销售额
  • php二维数组遍历
  • PHP:mb_convert_kana()的用法_mbstring函数
  • 交易性金融资产属于流动资产
  • 库存盘点差异会计分录
  • 收到银行退回的会计分录
  • 继续涉入资产后续计量
  • php开发文档
  • 请假扣款怎么做账
  • antd form table
  • 应收账款与主营业务收入的比率
  • 企业进项税怎么查询
  • 自产产品用于福利账务处理
  • 个税申报的本期收入是应发工资吗
  • mongodb bi
  • 织梦如何做提取卡密
  • 电子税务局怎么查询开票记录
  • 个税哪种申报不用交个税的
  • 公司个人所得税申报操作流程
  • sqlserver2012安装后找不到
  • 个人接私活需要什么条件
  • 专项附加扣除可以随时更改吗
  • 怎样备份mysql数据库
  • mysql三种安装方式
  • 退去年的销售账务如何处理
  • 餐饮不得抵扣进项税
  • 工程预付款如何缴税
  • 所得税需要转本吗
  • 违约金进项税额可否抵扣 分录
  • 房地产开发企业土地增值税怎么计算
  • sql server设置自增
  • windows vista(service pack1)
  • linux wget命令详解
  • qqprotect.exe是什么进程?qqprotect.exe怎么禁止自动启动?
  • win7系统更改ip地址
  • ubuntu 怎么用
  • xp 控制面板
  • windows屏幕上有多个窗口时
  • 64位windows8系统安装驱动时出现签名错误的解决方法
  • 如何重置路由器wifi密码
  • 升级win10系统后安装谷歌打不开
  • cocos2dx 4.0
  • visual studio 10 cocos2dx项目移植到eclipse的android项目(配置请参照上一篇文章开发环境搭建)
  • linux rpm -i
  • dos命令遍历文件
  • 获取标签的属性值的方式
  • node js模块
  • 安卓瀑布流
  • 你真的了解摩羯座吗
  • js 字符串转字节
  • 建筑企业要交哪几项环保税
  • 税友核心价值观
  • 申报地税的流程图
  • 公司财税知识
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设