当前位置: 首页 > 编程笔记 >

Mysql运行环境优化(Linux系统)

颜黎昕
2023-03-14
本文向大家介绍Mysql运行环境优化(Linux系统),包括了Mysql运行环境优化(Linux系统)的使用技巧和注意事项,需要的朋友参考一下

一、修改Linux默认的IO调度算法.

linux默认的IO调度算法为cfq,需要修改为dealine,如果是SSD或者PCIe-SSD设备,需要修改为noop,可以使用下面两种修改方式。

1、在线动态修改,重启失效。


echo “deadline” > /sys/block/sda/queue/scheduler


tips:这里的sda代表你需要修改的硬盘,根据你实际情况修改。

2、修改/etc/grub.conf,永久生效。

修改/etc/grub.conf配置文件,在kernel那行增加一个配置,例如:


kernel /vmlinuz-2.6.32-279.el6.x86_64 ro root=UUID=e01d6bb4-bd74-404f-855a-0f700fad4de0 rd_NO_LUKS rd_NO_LVM LANG=en_US.UTF-8 rd_NO_MD SYSFONT=latarcyrheb-sun1

6 crashkernel=auto  KEYBOARDTYPE=pc KEYTABLE=us rd_NO_DM elevator=deadline rhgb quiet


主要关注elevator这个参数,设置内核的话需要重启系统才能生效。
最后可以通过 cat /sys/block/sda/queue/scheduler 观察一下,修改前和修改后的区别。

二、扩大文件描述符

这个是经常修改的参数,高并发的程序都会修改。

1、动态修改,重启失效,只能使用root,并且当前session有效。


ulimit -n 51200


2、修改配置文件,永久生效。
在/etc/security/limits.conf配置文件中增加一行

*        hard    nofile           51200


扩大可开启进程数 nprocess /etc/security/limits.conf
在/etc/security/limits.conf配置文件中增加一行

*        hard    nproc           51200


最后修改/etc/pam.d/login文件添加

session required /lib64/security/pam_limits.so


重启系统以后使用 ulimit -a 命令查看是否生效。

三、禁用numa特性

新一代架构的NUMA不适合跑数据库,它本意是为了提高内存利用率,但是实际效果不好,反而可能导致一CPU的内存尚有剩余,但是另外一个不够用,发生swap的问题,因此建议关闭或者修改NUMA的调度机制。

1、修改/etc/grub.conf关闭NUMA,重启后生效。


kernel /vmlinuz-2.6.32-279.el6.x86_64 ro root=UUID=e01d6bb4-bd74-404f-855a-0f700fad4de0 rd_NO_LUKS rd_NO_LVM LANG=en_US.UTF-8 rd_NO_MD SYSFONT=latarcyrheb-sun1

6 crashkernel=auto  KEYBOARDTYPE=pc KEYTABLE=us rd_NO_DM elevator=deadline numa=off rhgb quiet


2、修改/etc/init.d/mysql或者mysqld_safe脚本,设置启动mysqld进程时的NUMA调度机制,例如。

在新版的mysqld_safe脚本中自带如下内容,所以不需要添加,你可以看看你的mysqld_safe脚本有没有如下内容。


if true && test $numa_interleave -eq 1

then

# Locate numactl, ensure it exists.

if ! my_which numactl > /dev/null 2>&1

then

log_error “numactl command not found, required for –numa-interleave”

exit 1

# Attempt to run a command, ensure it works.

elif ! numactl –interleave=all true

then

log_error “numactl failed, check if numactl is properly installed”

fi  # Launch mysqld with numactl.

cmd=”$cmd numactl –interleave=all”

elif test $numa_interleave -eq 1

then

log_error “–numa-interleave is not supported on this platform”

exit 1

fi


四、修改swappiness设置
swappiness是linux的一个内核参数,用来控制物理内存交换出去的策略.它允许一个百分比的值,最小的为0,最大的为100,改值默认是60.可以通过下面命令观察

# sysctl -a | grep swappiness

vm.swappiness = 60


这个设置值到底有什么影响呢?
vm.swappiness设置为0表示尽量少使用swap,100表示尽量将inactive的内存页交换到swap里或者释放cache(cache类似于预读的文件)。
inactive内存的意思是程序映射着,但是”长时间”不用的内存。我们可以利用vmstat查看系统里面有多少inactive的内存。

# vmstat -a 1

procs ———–memory———- —swap– —–io—- –system– —–cpu——

r  b   swpd   free  inact active   si   so    bi    bo   in   cs us sy id wa st

0  0 16930764 192752 3673320 28601732    0    0    19    31    0    0  1  0 99  0  0

1  0 16930764 192752 3673320 28601732    0    0     0     0 1136  271  0  0 100  0  0

0  0 16930764 192748 3673320 28601732    0    0     0    56 1167  325  1  0 99  0  0

0  0 16930764 192740 3673320 28601732    0    0     0    40 1039  164  0  0 100  0  0


在Centos7之前,这个值建议设置为0,但是在新版本的内核里面,这样设置可能导致OOM(内存溢出),然后kernel会杀掉使用内存最多的mysqld进程。

所以现在这个值推荐设置为1,设置方法如下:

在/etc/sysctl.conf文件中增加一行。


vm.swappiness = 1

# sysctl -p //运行这个命令,让配置立刻生效。

五、优化文件系统挂载参数。

首先关于使用什么文件系统,网上很多测试,烟花缭乱.大概的结论如下。

xfs > ext3:xfs性能优于ext3
ext4 > ext3:ext4性能优于ext3
ext4 ??? xfs :xfs和ext4谁更优秀?我说不太准…..

然后就是挂载文件系统使用的参数:


defaults,noatime,nodiratime,barrier=0(在xfs上使用nobarrier)


文件系统挂载参数是在/etc/fstab文件中修改,重启时候生效。
noatime表示不记录访问时间,nodiratime不记录目录的访问时间。
barrier=0,表示关闭barrier功能.barrier的主要目的是为了保证磁盘写数据的安全性,但是会降低性能。如果有BBU之类的电池备份电源保证控制卡不瞬间掉电,那么这个功能就可以放心大胆的关闭。

可以通过一下命令,查看配置是否生效.


# cat /proc/mounts

rootfs / rootfs rw 0 0

proc /proc proc rw,nosuid,nodev,noexec,relatime 0 0

sysfs /sys sysfs rw,seclabel,nosuid,nodev,noexec,relatime 0 0

devtmpfs /dev devtmpfs rw,seclabel,nosuid,relatime,size=8188388k,nr_inodes=2047097,mode=755 0 0

devpts /dev/pts devpts rw,seclabel,relatime,gid=5,mode=620,ptmxmode=000 0 0

tmpfs /dev/shm tmpfs rw,seclabel,nosuid,nodev,relatime 0 0

/dev/sda3 / ext4 rw,seclabel,relatime,noatime,nodiratime,barrier=0,data=ordered 0 0

none /selinux selinuxfs rw,relatime 0 0

devtmpfs /dev devtmpfs rw,seclabel,nosuid,relatime,size=8188388k,nr_inodes=2047097,mode=755 0 0

/proc/bus/usb /proc/bus/usb usbfs rw,relatime 0 0

none /proc/sys/fs/binfmt_misc binfmt_misc rw,relatime 0 0

/dev/sda1 /boot ext4 rw,seclabel,noatime,nodiratime,barrier=0,data=ordered 0 0

 类似资料:
  • Linux运行环境 QEMU用于模拟一台x86计算机,让ucore能够运行在QEMU上。为了能够正确的编译和安装 qemu,尽量使用最新版本的qemu,或者os ftp服务器上提供的qemu源码:qemu-1.1.0.tar.gz)。目前 qemu 能够支持最新的 gcc-4.x 编译器。例如:在 Ubuntu 12.04 系统中,默认得版本是 gcc-4.6.x (可以通过 gcc -v 或者

  • 1、操作系统的运行机制 计算机系统中,通常CPU执行两种不同性质的程序,一种是操作系统内核程序;另一种是用户自编程序或系统外城的应用程序。对操作系统而言,这两种程序的作用不同,前者是后者的管理者和控制者,因此“管理程序”要执行一些特权指令,而“被管理程序”出于安全性考虑,不能执行这些指令。所谓特权指令,是指计算集中不允许用户直接使用的指令,如IO指令、置中断指令。 操作系统在具体实现上划分了用户态

  • Host 环境 规格 操作系统 Ubuntu 18.04 构建系统 Catkin Build System CUDA(optional) 10.2 TensorRT(optional) 7.0.0 libtorch cxx11版本 pytorch 1.5 onnx 1.1 netron(optional) / Device 环境 规格 操作系统 ubuntu18.04 jetpack工具包 Jet

  • 本文向大家介绍linux系统安装Nginx Lua环境,包括了linux系统安装Nginx Lua环境的使用技巧和注意事项,需要的朋友参考一下 亦可参考官方安装指南: lua-nginx-module Installation 这是我总结的安装,供参考: 需要最新版的Nginx,LuaJIT,ngx_devel_kit,lua-nginx-module等安装文件: Nginx LuaJIT Lua

  • 运行环境即开发环境,目前支持Python2、Python3、Java8、Golang1.9及Nodejs8,版本及内置依赖库如下所示: 环境 版本 依赖库 Python2 2.7.13 httplib2、requests、redis、hiredis、gevent、fds、pillow 、python-dateutil、flask、gensim Python3 3.6.3 httplib2、requ

  • AST或字节码的解释过程只是在代码过程层面,不足以成为一个完整的运行,因为程序计算是需要数据和存储空间的,光有代码跑不起来,需要运行时环境,至少要有数据,实际情况中还需要一些其他信息。为讨论方便,在解释器中将运行时环境抽象为前述的env对象,通过一些接口来实现存取,这里先只讨论单执行序列,不考虑并发 env在前面的分析中总共就涉及了三个接口,get,set和set_exception(当然还应该有