Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

关于Node进程管理器PM2使用技巧和需要注意的地方 #7

Open
jawil opened this issue Mar 16, 2017 · 28 comments
Open

关于Node进程管理器PM2使用技巧和需要注意的地方 #7

jawil opened this issue Mar 16, 2017 · 28 comments

Comments

@jawil
Copy link
Owner

jawil commented Mar 16, 2017

PM2是一个带有负载均衡功能的Node应用的进程管理器。PM2可以利用服务器上的所有CPU,并保证进程永远都活着,0秒的重载,部署管理多个Node项目。PM2Node线上部署完美的管理工具。

1、基本指令

npm install pm2 -g : 全局安装。

pm2 start app.js : 启动服务,入口文件是app.js。

pm2 start app.js -i [n] --name [name] : 启动n个进程,名字命名为name。

npm restart  [name or id] : 重启服务。

npm reload  [name or id] : 和rastart功能相同,但是可以实现0s的无缝衔接;如果有nginx的使用经验,可以
对比nginx reload指令。

pm2 start app.js --max_memory_restart 1024M : 当内存超过1024M时自动重启。 如果工程中有比较棘手的内
存泄露问题,这个算是一个折中方案。

pm2 monit : 对服务进行监控。

 

2、查看服务进程数

至于要启动几个进程,可以通过服务器的内核数进行确定,几个内核就启动几个服务。指令如下:

 # 查看物理CPU个数
  cat /proc/cpuinfo| grep "physical id" | sort| uniq | wc -l

  # 查看每个物理CPU中core的个数(即核数)
  cat /proc/cpuinfo| grep "cpu cores"| uniq

  # 查看逻辑CPU的个数
  cat /proc/cpuinfo| grep "processor"| wc -l

当然可以启动多个端口,一个端口号对应一个服务,这样的话就需要nignx来做负载均衡了。


3、 是否需要nginx

nginx可以做的事情主要有两个:

  1. 反向代理,实现简单的负载均衡: 如果有多台服务器或者一台服务器多个端口,可以考虑用nginx。
  2. 静态资源缓存:把一些静态资源(如静态页面,js等资源文件)放到nginx里,可以极大的提高服务的性能。

4、fork与cluster启动模式

开发环境中多以fork的方式启动,生产环境中多用cluster方式启动

上面的示例图中可以看一“watching”一项,这个项默认是disabled,可以通过如下命令开启

pm2 start app.js --name m --watch

建议:这个适合在开发时用,可以省不少时间,生产环境下最好不要用

  1. cluster是fork的派生,cluster支持所有cluster拥有的特性;

  2. fork不支持socket地址端口复用,cluster支持地址端口复用。因为只有node的cluster模块支持socket选项SO_REUSEADDR;

fork不可以启动多个实例进程,cluster可以启动多个实例。但node的child_process.fork是可以实现启动多个进程的,但是为什么没有实现呢?就个人理解,node多为提供网络服务,启动多个实例需要地址端口复用,此时便可使用cluster模式实现,但fork模式并不支持地址端口复用,多实例进程启动会产生异常错误。但对于常驻任务脚本而言,不需要提供网络服务,此时多进程启动可以实现,同时也提高了任务处理效率。对于上述需求,可以两种方式实现,一是配置app0,app1,app2方式启动多个进程,二是通过应用实例自身调用child_process.fork多进程编程实现;

fork模式可以应用于其他语言,如php,python,perl,ruby,bash,coffee, 而cluster只能应用于node;

fork不支持定时重启,cluster支持定时重启。定时重启也就是配置中的cron_restart配置项。

5、pm2的监控

pm2的监控有两种方式:

①cli方式监控

pm2 monit是专门用来监控的命令,监控项包括cpu与内存

缺点monit展示内容太过粗糙,不够详细

②pm2 list展示当前所有pm2的管理项目

可以查看出每个进程的运行状态。

如果需要更详细的监控内容,对于cli而言一般都是可以实现的。

这种监控方式的缺点:

a. 不够直观,需要自己去执行命令并分析结果;

b. 不便于多台服务器的应用监控管理;





6、日志问题

日志系统对于任意应用而言,通常都是必不可少的一个辅助功能。pm2的相关文件默认存放于$HOME/.pm2/目录下,其日志主要有两类:

a. pm2自身的日志,存放于$HOME/.pm2/pm2.log;

b. pm2所管理的应用的日志,存放于$HOME/.pm2/logs/目录下,标准谁出日志存放于${APP_NAME}_out.log,标准错误日志存放于${APP_NAME}_error.log;

这里之所以把日志单独说明一下是因为,如果程序开发不严谨,为了调试程序,导致应用产生大量标准输出,使服务器本身记录大量的日志,导致服务磁盘满载问题。一般而言,pm2管理的应用本身都有自己日志系统,所以对于这种不必要的输出内容需禁用日志,重定向到/dev/null。

与crontab比较,也有类似情况,crontab自身日志,与其管理的应用本身的输出。应用脚本输出一定需要重定向到/dev/null,因为该输出内容会以邮件的形式发送给用户,内容存储在邮件文件,会产生意向不到的结果,或会导致脚本压根不被执行;




7、高级用法

pm2支持配置文件启动:
pm2 ecosystem: 生成配置文件ecosystem.json
pm2 startOrRestart /file/path/ecosystem.json : 通过配置文件启动服务

如下是开发时ecosystem.json的内容:

{
    /**
    * Application configuration section
    * http://pm2.keymetrics.io/docs/usage/application-declaration/
    * 多个服务,依次放到apps对应的数组里
    */
    apps : [
    // First application
        {
            name      : "nova",
            max_memory_restart: "300M",
            script    : "/root/nova/app.js",
            out_file : "/logs/nova_out.log",
            error_file : "/logs/nova_error.log",
            instances  : 4,
            exec_mode  : "cluster",
            env: {
                NODE_ENV: "production"
            }
        }
    ]
 }

上述采用cluster模式启动了4个服务进程;如果服务占用的内存超过300M,会自动进行重启。

 配置项

name  应用进程名称;

script  启动脚本路径;

cwd  应用启动的路径,关于script与cwd的区别举例说明:在/home/polo/目录下运行/data/release/node/
index.js,此处script为/data/release/node/index.js,cwd为/home/polo/;

args  传递给脚本的参数;

interpreter  指定的脚本解释器;

interpreter_args  传递给解释器的参数;

instances  应用启动实例个数,仅在cluster模式有效,默认为fork;

exec_mode  应用启动模式,支持fork和cluster模式;

watch  监听重启,启用情况下,文件夹或子文件夹下变化应用自动重启;

ignore_watch  忽略监听的文件夹,支持正则表达式;

max_memory_restart  最大内存限制数,超出自动重启;

env  环境变量,object类型,如{"NODE_ENV":"production", "ID": "42"};

log_date_format  指定日志日期格式,如YYYY-MM-DD HH:mm:ss;

error_file  记录标准错误流,$HOME/.pm2/logs/XXXerr.log),代码错误可在此文件查找;

out_file  记录标准输出流,$HOME/.pm2/logs/XXXout.log),如应用打印大量的标准输出,会导致pm2日志过大;

min_uptime  应用运行少于时间被认为是异常启动;

max_restarts  最大异常重启次数,即小于min_uptime运行时间重启次数;

autorestart  默认为true, 发生异常的情况下自动重启;

cron_restart  crontab时间格式重启应用,目前只支持cluster模式;

force  默认false,如果true,可以重复启动一个脚本。pm2不建议这么做;

restart_delay  异常重启情况下,延时重启时间;





8、稳定运行建议

PM2是一款非常优秀的Node进程管理工具,它有着丰富的特性:能够充分利用多核CPU且能够负载均衡、能够帮助应用在崩溃后、指定时间(cluster model)和超出最大内存限制等情况下实现自动重启。

个人几点看法保证常驻应用进程稳定运行:

  1. 定时重启,应用进程运行时间久了或许总会产生一些意料之外的问题,定时可以规避一些不可测的情况;

  2. 最大内存限制,根据观察设定合理内存限制,保证应用异常运行;

  3. 合理min_uptime,min_uptime是应用正常启动的最小持续运行时长,超出此时间则被判定为异常启动;

  4. 设定异常重启延时restart_delay,对于异常情况导致应用停止,设定异常重启延迟可防止应用在不可测情况下不断重启的导致重启次数过多等问题;

  5. 设置异常重启次数,如果应用不断异常重启,并超过一定的限制次数,说明此时的环境长时间处于不可控状态,服务器异常。此时便可停止尝试,发出错误警告通知等。

关于pm2的使用,主要还是运用于常驻脚本。


9、自动化部署

通过shell脚本实现资源拉取、服务重启、nginx缓存更新等操作,再配合pm2的监控功能,就初步达到了一个后端工程部署的标配了。

参考资料:

1.pm2官网
2.pm2 github

@jawil jawil changed the title 关于PM2使用技巧和需要注意的地方 关于Node进程管理器PM2使用技巧和需要注意的地方 Mar 30, 2017
@jawil
Copy link
Owner Author

jawil commented Apr 4, 2017

自己占坑,记录学习

@yangchongduo
Copy link

pm2 的cluster 模式是基于node的原生cluster 做的吗? 而 node原生模模块是基于子进程中的spawn模式吗
? 他们之间共享通过ipc通道 共享 tcp链接吗?

@xiongwilee
Copy link

xiongwilee commented Apr 14, 2017

已转发到 https://iblog.wilee.me/https://iblog.wilee.me/post/detail/6 , 侵删。

@jawil
Copy link
Owner Author

jawil commented Apr 14, 2017

这个问题暂时没法回答你,我对node也仅仅掌握会用点API,还在不断学习中,还停留在使用工具的层面... @yangchongduo

@jawil
Copy link
Owner Author

jawil commented Apr 14, 2017

我也是学习过程中,看看文档,参考一下别人的基础下总结的,喜欢就收藏,说你总结的都没事...都是同行,学习这东西就是为了相互分享和交流😄.... @xiongwilee

@hansnow
Copy link

hansnow commented Apr 14, 2017

咱俩头像很有缘呀~~

@jawil
Copy link
Owner Author

jawil commented Apr 14, 2017

恩,异曲同工之妙 @hansnow

@ipengyo
Copy link

ipengyo commented Sep 21, 2017

make

@marsbaiyun
Copy link

占坑学习,多谢!

@viken2
Copy link

viken2 commented Dec 28, 2017

学习啦,不错

@losymear
Copy link

losymear commented Jan 6, 2018

请教个问题,设置了定时任务后每次更新从git下pull下来都会首次执行,该怎么禁止呢?
比如我想每天6时和18时执行,然后我在晚上20时更新git执行reload,它就立即执行一遍了

@lzan13
Copy link

lzan13 commented Jan 26, 2018

学习了,刚根据这个配置了下,nice

@susan-github
Copy link

很多同学告诉我instances对fork和cluster模式都是有效的,亲测之后,直接修改配置文件instances后pm2 start不起作用,实例数是上一个设置的数量,如果pm2 delete之后在start, instances对fork模式是起作用的,设置了几个instansce,就会创建几个实例

@thisisandy
Copy link

thisisandy commented Apr 20, 2018

合理min_uptime,min_uptime是应用正常启动的最小持续运行时长,超出此时间则被判定为异常启动;

应该是小于这个时间吧。

@ipengyo
Copy link

ipengyo commented Jun 7, 2018

有启动顺序 设置吗?

@lijialiang
Copy link

npm restart  [name or id] 

npm reload  [name or id] 

应该是手误

@yijixiuxin
Copy link

多台服务器的pm2 如何方便的管理?

@clsczy
Copy link

clsczy commented Nov 7, 2018

遇到了个棘手问题, 同样的代码仔堕胎服务器都可以正常稳定运行, 但是有一台经常服务断掉了, 但是pm2的控制面板还是正常, 请能给解答一下

@codeskyblue
Copy link

坑啊,查了半天发现是pm2本身占用的内存高,导致机器好卡。

$ node --version
v8.1.3
$ pm2 --version
PM2] Spawning PM2 daemon with pm2_home=/home/xxxxx/.pm2
[PM2] PM2 Successfully daemonized
3.2.3

还不知道pm2怎么停掉自己。 只要ps出来,kill掉

@Ash-sc
Copy link

Ash-sc commented Apr 4, 2019

坑啊,查了半天发现是pm2本身占用的内存高,导致机器好卡。

$ node --version
v8.1.3
$ pm2 --version
PM2] Spawning PM2 daemon with pm2_home=/home/xxxxx/.pm2
[PM2] PM2 Successfully daemonized
3.2.3

还不知道pm2怎么停掉自己。 只要ps出来,kill掉

pm2本身有自带kill命令的 pm2 kill

@supfn
Copy link

supfn commented Sep 20, 2019

m

@mengdodo
Copy link

很多同学告诉我instances对fork和cluster模式都是有效的,亲测之后,直接修改配置文件instances后pm2 start不起作用,实例数是上一个设置的数量,如果pm2 delete之后在start, instances对fork模式是起作用的,设置了几个instansce,就会创建几个实例

pm2 reload demo.yml #重新加载配置,restart是不会改变配置信息的

@mosenmao
Copy link

mosenmao commented Dec 6, 2019

使用pm2多核多进程后,因为用到socket.io,发现两个连接不能连到一块,什么原因呢

@octfun
Copy link

octfun commented Mar 24, 2020

make

@1Crazy
Copy link

1Crazy commented Apr 21, 2020

@junkiet
Copy link

junkiet commented Apr 22, 2024

pm2 instance cluster 不能用太多,我遇到资料是同豪秒进行的,导致资料重叠,由于是同毫秒,无法进行检查已输入过的资料,所以这个情况,只能用逻辑删除,多instance cluster, 放入浏览网站是最好,放入API要小心 insert 了,读取资料还好,最多读2次,update 可能也要注意,如果简单更新就没问题

@chuanHH
Copy link

chuanHH commented Apr 22, 2024 via email

@mango-csl
Copy link

mango-csl commented Apr 22, 2024 via email

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Projects
None yet
Development

No branches or pull requests