目录
BIOS优化，阵列配置
- 关闭CPU节能，因为服务器品牌众多，BIOS设置不相同，主要是关闭CPU节能，如C1、DELLR730已经智能设置，直接有个performance选项关闭了CPU节能。
- 如果服务器是8块硬盘，建议两块做RAID1装系统，剩余6块做RAID10做数据分区，RAID1阵列缓存设置成 WriteThrough,RAID10设置成writeback,将有限阵列卡缓存给RAID10阵列用，如果是8块以上的盘，组建两组RAID10，两组缓存策略都是writeback,一组装系统以及存放顺序IO类型的数据，比如redolog,归档日志，mysql的binlog，一组做数据分区。
- 使用XFS文件系统，数据分区用XFS文件系统，挂载参数用defaults,noatime,nodiratime,nobarrier，记住根分区是不能用这个挂载参数，不然你根分区下的目录文件都没有访问时间，修改时间，只能用于数据库文件分区。
- 修改IO调度策略 io调度器修改为deadline，如果是ssd或pcie-ssd设备，则修改为noop，下列两种修改方式：
- 在线动态修改，重启失效
echo "deadline" >> /sys/block/sdb/queue/scheduler#这里sdb修改为实际的设备名称，例如sda，或者sdc。
- 永久生效修改/etc/grub.conf配置文件，在kernel那行最末尾加上 elevtor=deadline numa=off ，例如：
vim /etc/grub.confkernel /vmlinuz-2.6.32-504.el6.x86_64 ro root=UUID=af13b3dc-c142-42b7-8ed6-cb7c60608af2 rd_NO_LUKS KEYBOARDTYPE=pc KEYTABLE=us rd_NO_MD crashkernel=auto LANG=zh_CN.UTF-8 rd_NO_LVM rd_NO_DM rhgb quiet elevator=deadline numa=off#要当前生效可以这样设置cat /sys/block/sda/queue/scheduler echo deadline > /sys/block/sda/queue/scheduler
- 核实io调度器配置
cat /sys/block/sda/queue/scheduler noop anticipatory [deadline] cfq
- 关闭numa 新一代架构的NUMA不适用于跑数据库的场景 。它本意是为了提高内存利用率，但实际效果不好，反而可能导致一个CPU的内存尚有剩余，但另一个不够用，发生SWAP的问题，因此建议直接关闭或者修改 NUMA的调度机制。
- 修改/etc/grub.conf，关闭NUMA，重启后生效
#在kernel那行增加一个配置后重启生效，例如： kernel /vmlinuz-2.6.18-308.el5 ro root=LABEL=/1 elevator=deadline numa=off rhgb quiet
- 修改/etc/init.d/mysqld或者mysqld_safe脚本，设定启动mysqld进程时的NUMA调度机制，例如：
numactl -- interleave=all /usr/bin/mysqld_safe --datadir="$datadir" --socket="$socketfile" \--log-error="$errlogfile" --pid-file="$mypidfile" \--user=mysql >/dev/null 2>&1
操作系统基础优化
修改最大文件描述符，关闭selinux
ulimit -SHn 65535echo "ulimit -SHn 65535" >> /etc/rc.localcat >>/etc/security/limits.conf<
- 关闭不需要的服务，只留下crond，network，rsyslog，sshd ，sysstat，udev-post
内核参数调整
swappiness是Linux的一个内核参数，用来控制Linux物理RAM内存进行SWAP页交换的相对权重，尽量减少系统缓存被从内存中清除的情况。取值范围是0～100，vm.swappiness的值越低，Linux内核会尽量不进行SWAP交换页的操作，vm.swappiness的值越高，linux会越多的使用SWAP空间。Linux系统的默认值是60，当系统需要内存时，有60%的概率使用SWAP。对于大多数桌面系统设置为100，可以提高系统的整体性能；对于数据库应用服务器设置为0，可以提高物理内存的使用率，进而提高数据库服务响应性能。需要注意的是RHEL7以上版本，如果vm.swappiness = 0，有可能会由于OOM问题，导致mysqld进程被OOM-Killer进程杀掉。减少swap的使用率，如果设置为0，需要结合vm.overcommit_memory=2，可以尽量避免OOM，一般设置为1
vm.swappiness=1
默认值是3797，保证物理内存有足够空闲空间，防止突发性换页
vm.min_free_kbytes=204800
默认是100，增大这个参数设置了虚拟内存回收directory和i-node缓冲的倾向，这个值越大。越易回收,尽量保留可用内存
vm.vfs_cache_pressure=150
确保能持续将脏数据刷新到磁盘，避免瞬间I/O写，产生严重等待和设置MySQL中的innodb_max_dirty_pages_pct低一点原理类似
当文件系统缓存脏页数量达到系统内存百分之多少时（默认10%）就会触发pdflush/flush/kdmflush等后台回写进程运行，将一定缓存的脏页异步地刷入硬盘vm.dirty_background_ratio=5
当文件系统缓存脏页数量达到系统内存百分之多少时（默认20%），系统会停止所有的应用层的IO写操作，等待刷完数据后恢复IO。
vm.dirty_ratio=10
减少TIME_WAIT，提高TCP效率；
net.ipv4.tcp_tw_recycle=1net.ipv4.tcp_tw_reuse=1
安装jemalloc内存管理器
jemalloc内存分配方式与系统默认安装的glic的malloc内存分配方式相比，能提高MySQL的性能，降低了系统CPU和内存资源的利用,关于这方便的压测数据,请参考:http://www.linuxeye.com/Linux/1914.html
编译安装很简单wget http://www.canonware.com/download/jemalloc/jemalloc-3.6.0.tar.bz2tar xvf jemalloc-3.6.0.tar.bz2./configuremake && make install#已方便安装好mysql后使用，使用也很简单在[mysqld_safe] 加上malloc-lib= /usr/local/lib/libjemalloc.so
安装异步IO支持
为了提高磁盘操作性能，当前的数据库系统都采用异步IO（Asynchronous IO，AIO）的方式来处理磁盘操作。InnoDB存储引擎亦是如此。
在InnoDB1.1.x之前，AIO的实现通过InnoDB存储引擎中的代码来模拟实现。而从InnoDB 1.1.x开始（InnoDB Plugin不支持）， 提供了内核级别AIO的支持，称为Native AIO。因此在编译或者运行该版本MySQL时，需要libaio库的支持,centos最小化安装默认是没有安装的,安装也简单:yum install libaio-devel
网卡绑定软中断
网卡软中断不平衡，集中在一个CPU核心上（mpstat 查看%soft集中，通常是cpu0)，绑定软中断多个核心上,可以用两个脚本来绑定。自己喜欢用哪个都行:
vim set_irq_affinity.py#!/usr/bin/env python import re from os import system,popen from os import walk as walkdir from optparse import OptionParser RPS_CPUS_VALUE = 'ffffffff' RPS_FLOW_VALUE = '4096' RPS_RFS_DEFAULT = '0' interrupts_file = '/proc/interrupts' rps_cpus_list = [] rps_flow_list = [] #ENTRY_VALUE=32768 def get_device(): return re.findall(r'([a-z]+\d+)\s+Link.*',popen('ifconfig').read()) def get_rfs_rps_file(net_device): rps_path = '/sys/class/net/' + net_device + '/queues/' for s in walkdir(rps_path): if len(s[2]) == 2: rps_cpus_list.append('/'.join([s[0],s[2][0]])) rps_flow_list.append('/'.join([s[0],s[2][1]])) def file_hander(TARGET,VALUE='0'): try: f_hander = open(TARGET,'w') f_hander.write(VALUE) finally: f_hander.close() def set_rfs_rps(net_device): get_rfs_rps_file(net_device) def set_rps_cpus_value(PATH): file_hander(PATH,RPS_CPUS_VALUE) def set_rps_flow_value(PATH): file_hander(PATH,RPS_FLOW_VALUE) map(set_rps_cpus_value,rps_cpus_list) map(set_rps_flow_value,rps_flow_list) def unset_rfs_rps(net_device): get_rfs_rps_file(net_device) def unset_rps_cpus_value(PATH): file_hander(PATH,RPS_RFS_DEFAULT) def unset_rps_flow_value(PATH): file_hander(PATH,RPS_RFS_DEFAULT) map(unset_rps_cpus_value,rps_cpus_list) map(unset_rps_flow_value,rps_flow_list) def set_irq_balance(): stop_irq_balance = 'service irqbalance stop' system(stop_irq_balance) interrupts_ct = open(interrupts_file) cores_nr = len(interrupts_ct.readline().split()) # 获取CPU核心数 irq_bit = 0 while True: inter_line = interrupts_ct.readline() if inter_line == "": break js = inter_line.split() if len(js[-1]) > 5: if re.match(r'eth.-',js[-1][:5]): irq_nr = js[0][:-1] TARGET = '/proc/irq/%s/smp_affinity' %(irq_nr) VALUE = str(re.sub('0x','',hex(1 << irq_bit))) #1 << irq_bit 相对于2的N次方 ，hex() 二进制转十六进制 file_hander(TARGET,VALUE) irq_bit += 1 if irq_bit == cores_nr: irq_bit = 0 def unset_irq_balance(): start_irq_balance = 'service irqbalance start' system(start_irq_balance) def usage(): usage = '''================================================= Description: irq_balance_set && rfs_rps_set tools Usage: 加入到开机启动中
#!/bin/bashCORE_SUM="`grep -c '^processor' /proc/cpuinfo`"IRQ_SUM="`echo "1 2 4 8 10 20 40 80 100 200 400 800 1000 2000 4000 8000 10000 20000 40000 80000 100000 200000 400000 800000"| cut -d " " -f -${CORE_SUM}`"IRQ_NUM="`echo ${IRQ_SUM}`"for i in `grep -E '(eth[0-9]+|em[0-9]+)' /proc/interrupts | awk -F ":" '{print $1}' | sed 's/\ //g'`; do echo -e "${i}\t:`cat /proc/irq/${i}/smp_affinity`" y="`echo ${IRQ_NUM} | awk '{print $1}'`" echo ${y} > /proc/irq/${i}/smp_affinity#echo "echo ${y} > /proc/irq/${i}/smp_affinity" if [ "${y}" == "`echo ${IRQ_SUM} | awk '{print $NF}'`" ]; then IRQ_NUM="`echo ${IRQ_SUM}`" else IRQ_NUM="`echo ${IRQ_NUM} | sed 's/^\([0-9]\+\)\ \(.*\)/\2/g'`" fi echo -e "----\t `cat /proc/irq/${i}/smp_affinity`"done######Enable RPS (Receive Packet Steering)rfc=4096cc=$(grep -c processor /proc/cpuinfo)rsfe=$(echo $cc*$rfc | bc)sysctl -w net.core.rps_sock_flow_entries=$rsfefor fileRps in $(ls /sys/class/net/eth*/queues/rx-*/rps_cpus)do echo fff > $fileRpsdone for fileRfc in $(ls /sys/class/net/eth*/queues/rx-*/rps_flow_cnt)do echo $rfc > $fileRfcdone tail /sys/class/net/eth*/queues/rx-*/{rps_cpus,rps_flow_cnt} MySQL5.7安装配置
创建用户组
groupadd mysqluseradd -g mysql -s /sbin/nologin -M mysql
安装并创建数据目录
yum install wget gcc gcc-c++ make cmake ncurses-devel libtool zilib-devel openssl openssl-devel numactl -ytar xf mysql-5.7.16-linux-glibc2.5-x86_64.tar.gz -C /usr/localln -sv /usr/local/mysql-5.7.16-linux-glibc2.5-x86_64 /usr/local/mysqlmkdir -p /data/mysql3306/{data,logs,tmp}chown -R mysql:mysql /data/mysql3306/chown -R mysql:mysql /usr/local/mysql/ 创建/etc/my.cnf
#my.cnf[client]port = 3306socket = /data/mysql3306/data/mysql3306.sock [mysql]prompt="\\u@\\h:\\p [\\d]>"#pager="less -i -n -S"#tee=/data/mysql3306/query.logno-auto-rehash [mysqld]#miscuser = mysqlbasedir = /usr/local/mysqldatadir = /data/mysql3306/dataport = 3306socket = /data/mysql3306/tmp/mysql3306.sockevent_scheduler = 0tmpdir = /data/mysql3306/tmp#timeoutinteractive_timeout = 3600wait_timeout = 3600#character setcharacter-set-server = utf8open_files_limit = 65535max_connections = 500max_connect_errors = 100000lower_case_table_names =1#symi replication#rpl_semi_sync_master_enabled=1#rpl_semi_sync_master_timeout=1000 # 1 second#rpl_semi_sync_slave_enabled=1#logslog-output=fileslow_query_log = 1slow_query_log_file = slow.loglog-error = error.loglog_warnings = 2pid-file = mysql.pidlong_query_time = 1#log-slow-admin-statements = 1#log-queries-not-using-indexes = 1log-slow-slave-statements = 1#binlog#binlog_format = STATEMENTbinlog_format = rowserver-id = 13306log-bin = /data/mysql3306/logs/mysql-binbinlog_cache_size = 4Mmax_binlog_size = 256Mmax_binlog_cache_size = 1Msync_binlog = 0expire_logs_days = 10#procedurelog_bin_trust_function_creators=1#gtid-mode = onenforce-gtid-consistency=1\#relay logskip_slave_start = 1max_relay_log_size = 128Mrelay_log_purge = 1relay_log_recovery = 1relay-log=relay-binrelay-log-index=relay-bin.indexlog_slave_updates#slave-skip-errors=1032,1053,1062#skip-grant-tables#buffers & cachetable_open_cache = 2048table_definition_cache = 2048table_open_cache = 2048max_heap_table_size = 96Msort_buffer_size = 128Kjoin_buffer_size = 128Kthread_cache_size = 200query_cache_size = 0query_cache_type = 0query_cache_limit = 256Kquery_cache_min_res_unit = 512thread_stack = 192Ktmp_table_size = 96Mkey_buffer_size = 8Mread_buffer_size = 2Mread_rnd_buffer_size = 16Mbulk_insert_buffer_size = 32M#myisammyisam_sort_buffer_size = 128Mmyisam_max_sort_file_size = 1Gmyisam_repair_threads = 1#innodbinnodb_buffer_pool_size = 10Ginnodb_buffer_pool_instances = 1innodb_data_file_path = ibdata1:1024M:autoextendinnodb_flush_log_at_trx_commit = 2innodb_log_buffer_size = 8Minnodb_log_file_size = 100Minnodb_log_files_in_group = 3innodb_max_dirty_pages_pct = 50innodb_file_per_table = 1innodb_rollback_on_timeoutinnodb_status_file = 1innodb_io_capacity = 200transaction_isolation = READ-COMMITTEDinnodb_flush_method = O_DIRECT
5.7初始化
cd /usr/local/mysql./bin/mysqld --initialize #或者./bin/mysqld --initialize-insecure
5.7以下版本初始化
cd /usr/local/mysql./scripts/mysql_install_db --defaults-file=/etc/my.cnf
安全加固
delete from mysql.user where user!='root' or host!='localhost';truncate table mysql.db;drop database test;flush privileges;cat /data/mysql3306/logs/error.log |grep "password"2016-11-30T13:28:37.276714Z 1 [Note] A temporary password is generated for root@localhost: 6fT?TYzJI*Dg
环境变量
echo "export PATH=$PATH:/usr/local/mysql/bin" >> /etc/profilesoure /etc/profile
开机自启
cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqlchmod +x /etc/init.d/mysqlchkconfig add mysqlchkconfig mysql on