CentOS中运行PostgreSQL需要修改的内核参数及配置脚本分享

PostgreSQL在CentOS上部署的时候，需要设置一些操作系统的参数，官方文档上列举了一些(传送门)。除了这些，还有一些其他的设置，如单个用户允许的最大进程数，单个进程的最大句柄数等，这些一般也需要调整，否则系统会在一些条件下出现问题，或者性能下降。下面从系统资源限制类和内存参数优化类来进行说明.

系统资源限制类

1.单个用户允许的最大进程数:linux系统默认是1024,如果PG的最大连接数超过1024,则实际的连接数会小于1024(PG的postmaster进程,checkpointer进程,bgwriter进程,WAL发送进程,日志进程等会占用几个进程数,所以给客户段的连接数会小于1024),超过的连接请求会报资源不够的错误信息.所以为了避免这种情况,需要调整PG的linux用户的可以使用的进程数,一般通过limit.conf进行配置.

2.单个进程可以打开的最大文件数:linux默认是1024,在SQL很复杂,打开很多表,或者访问很多分区时,会出现句柄数不够的错误.

内存参数优化类

1.vm.dirty_background_ratio:这个参数控制当系统内存写脏的比例达到多少时,会启动后台进程将buffer刷到磁盘.默认是10%,对于大内存的机器,如超过64G,10%的内存为6.4,一次把6.4G数据写入磁盘,会瞬间产生大量磁盘IO,使系统失去响应,影响其他进程.所以一般8G以上内存的机器,推荐设置为1%.

2.vm.dirty_background_types:这个参数与上面的类似,只不过这个参数可以设置内存脏掉的绝对值.着两个参数其中一个为0,则另外一个会起作用.

下面是配置这几个参数的脚本,在CentOS 6.x上测试OK.

#limit process to 4096 instead 1024,for we may have 1024+ connections

echo "postgres        soft    nproc           4096" >> /etc/security/lmits.conf

 

#for big query,pg may open more than 1024 files per session

echo "postgres        hard    nofile          65535" >> /etc/security/limits.conf

echo "postgres        soft    nofile          65535" >> /etc/security/limits.conf

 

#default is 10% of memory,to smooth the io peek value,

#set this to tune background process flush buffer more frequently

echo "vm.dirty_background_ratio=0" >> /etc/sysctl.conf

echo "vm.dirty_background_bytes=1024000000" >> /etc/sysctl.conf

 

#make the sysctl.conf setting take effect

sysctl -p

 

#make limit to take effect

/etc/init.d/sshd restart