MySQL系列-源碼編譯安裝(v5.7.34)
一、系統(tǒng)環(huán)境要求
官方說明:
https://dev.mysql.com/doc/refman/5.7/en/source-installation-prerequisites.html
- CMake:編譯工具,用作所有平臺(tái)上的構(gòu)建框架。
- 需要SSL庫來支持加密連接,用于生成隨機(jī)數(shù)的熵以及其他與加密有關(guān)的操作。默認(rèn)情況下,構(gòu)建使用主機(jī)系統(tǒng)上安裝的OpenSSL庫。
- Boost C++庫是構(gòu)建MySQL所必需的。MySQL編譯需要特定的Boost版本。5.7.34版本需要的Boost版本是1.59.0
- 需要ncurses庫,一個(gè)能提供功能鍵定義(快捷鍵),屏幕繪制以及基于文本終端的圖形互動(dòng)功能的動(dòng)態(tài)庫。
- 足夠的可用內(nèi)存。若編譯時(shí)出現(xiàn)“內(nèi)部編譯器錯(cuò)誤”之類的問題,則可能是內(nèi)存太小。如果在虛擬機(jī)上編譯,請嘗試增加內(nèi)存分配。
- 需要Git版本控制系統(tǒng)來獲取開發(fā)源代碼。
本文中使用本地VM虛機(jī)部署測試。
OS:CentOS Linux release 7.8.2003 (Core)
虛機(jī)配置:2核CPU、4G內(nèi)存
關(guān)閉Selinux。
二、基礎(chǔ)環(huán)境
1.清理環(huán)境(清理系統(tǒng)自帶的Mariadb和boost)
CentOS 7 版本的系統(tǒng)默認(rèn)自帶安裝了MariaDB,需要先清理。
## 查詢已安裝的mariadb
- rpm -qa |grep mariadb
- 或
- yum list installed | grep mariadb
## 卸載mariadb包,文件名為上述命令查詢出來的文件
- rpm -e --nodeps mariadb-libs-5.5.65-1.el7.x86_64
- 或
- yum -y remove mariadb-libs.x86_64
## 檢查boost版本,如果有,則卸載boost-*等庫
- rpm -qa boost*
- yum -y remove boost-*
2.基礎(chǔ)庫及依賴包文件
- rpm -ivh http://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm
- yum -y install make patch gcc gcc-c++ git libaio libaio-devel ncurses ncurses-devel \
- perl bison bison-devel libxml libxml-devel libxml2 libxml2-devel zlib zlib-devel \
- libgcrypt glibc glibc-devel glib2 glib2-devel flex bzip2* curl* openssl-devel openssl
3.安裝cmake(編譯工具)
官網(wǎng):https://cmake.org/
- cd /data/tools
- wget https://cmake.org/files/v3.8/cmake-3.8.2.tar.gz
- tar xf cmake-3.8.2.tar.gz
- cd cmake-3.8.2
- ./bootstrap
- gmake
- make install
4.安裝jemalloc(內(nèi)存管理)
官網(wǎng):http://jemalloc.net/
內(nèi)存分配器,適合多線程下的內(nèi)存分配管理軟件。與其它內(nèi)存分配器相比,它最大的優(yōu)勢在于多線程情況下的高性能以及內(nèi)存碎片的減少。
- cd /data/tools
- wget https://github.com/jemalloc/jemalloc/releases/download/5.2.1/jemalloc-5.2.1.tar.bz2
- tar xjf jemalloc-5.2.1.tar.bz2
- cd jemalloc-5.2.1
- ./autogen.sh
- make && make install
- echo '/usr/local/lib' > /etc/ld.so.conf.d/local.conf
- ldconfig
5.安裝Boost庫
官網(wǎng):https://www.boost.org/
無需最新版本,本文中編譯安裝的5.7.34版本對應(yīng)需要的boost為1.59.0。
- cd /data/tools
- wget https://udomain.dl.sourceforge.net/project/boost/boost/1.59.0/boost_1_59_0.tar.gz
- tar xf boost_1_59_0.tar.gz
- chown -R root.root boost_1_59_0
- chmod -R 755 boost_1_59_0
- mv boost_1_59_0 /usr/local/boost159
三、安裝配置MySQL
1.添加mysql組及用戶
- groupadd -r mysql
- useradd -g mysql -r -s /sbin/nologin -M -d /data/mysql mysql
2.創(chuàng)建相關(guān)目錄及修改目錄屬性
## 數(shù)據(jù)目錄
- mkdir -p /data/mysql
## 修改目錄屬性
- chown mysql.mysql /data/mysql
- chmod 0700 /data/mysql
3.安裝MySQL
## 下載解壓
- cd /data/tools
- wget https://cdn.mysql.com/archives/mysql-5.7/mysql-5.7.34.tar.gz
- tar xf mysql-5.7.34.tar.gz
- cd mysql-5.7.34
## Cmake配置
- cmake . -DCMAKE_INSTALL_PREFIX=/usr/local/mysql-5.7.34 \
- -DMYSQL_DATADIR=/data/mysql -DSYSCONFDIR=/etc \
- -DMYSQL_TCP_PORT=3306 \
- -DMYSQL_UNIX_ADDR=/usr/local/mysql-5.7.34/mysql.sock \
- -DWITH_EXTRA_CHARSETS=all \
- -DDEFAULT_CHARSET=utf8mb4 \
- -DDEFAULT_COLLATION=utf8mb4_general_ci \
- -DWITH_INNOBASE_STORAGE_ENGINE=1 \
- -DWITH_MYISAM_STORAGE_ENGINE=1 \
- -DWITH_ARCHIVE_STORAGE_ENGINE=1 \
- -DWITH_FEDERATED_STORAGE_ENGINE=1 \
- -DWITH_BLACKHOLE_STORAGE_ENGINE=1 \
- -DWITH_PERFSCHEMA_STORAGE_ENGINE=1 \
- -DWITHOUT_EXAMPLE_STORAGE_ENGINE=1 \
- -DWITH_ZLIB=bundled -DWITH_SSL=system \
- -DENABLED_LOCAL_INFILE=1 \
- -DWITH_DEBUG=0 \
- -DMYSQL_MAINTAINER_MODE=0 \
- -DWITH_EMBEDDED_SERVER=0 \
- -DINSTALL_SHAREDIR=share \
- -DDOWNLOAD_BOOST=0 \
- -DWITH_BOOST=/usr/local/boost159 \
- -DCMAKE_EXE_LINKER_FLAGS="-ljemalloc"
## 編譯安裝
- make
- make install
- cd /usr/local/
- ln -sf mysql-5.7.34 mysql
備注:若make出錯(cuò)后要重新運(yùn)行配置,需要?jiǎng)h除CMakeCache.txt文件。
- make clean
- rm -f CMakeCache.txt
## Cmake配置參數(shù)說明
- -DCMAKE_INSTALL_PREFIX=/usr/local/mysql-5.7.34:MySQL安裝目錄路徑。
- -DMYSQL_DATADIR=/data/mysql:MySQL數(shù)據(jù)目錄路徑,初始化時(shí)目錄必須為空。
- -DSYSCONFDIR=/etc:指定配置文件my.cnf的安裝路徑。
- -DMYSQL_TCP_PORT=3306:指定MySQL服務(wù)TCP/IP連接的端口號(hào)為3306。
- -DMYSQL_UNIX_ADDR=/usr/local/mysql-5.7.34/mysql.sock:指定套接字連接的Unix套接字文件路徑。
- -DWITH_EXTRA_CHARSETS=all:指定包括的額外字符集,all表示所有。
- -DDEFAULT_CHARSET=utf8mb4:指定默認(rèn)字符集為utf8mb4,因?yàn)闅v史遺留問題,MySQL中的utf8不是真正的utf8,而是閹割版的,最長只有三個(gè)字節(jié),當(dāng)遇到四個(gè)字節(jié)的utf8編碼時(shí),會(huì)導(dǎo)致存儲(chǔ)異常。從5.5.3開始,使用utf8mb4實(shí)現(xiàn)完整的utf8。
- -DDEFAULT_COLLATION=utf8mb4_unicode_ci:指定排序規(guī)則,默認(rèn)為utf8mb4_0900_ai_ci,屬于utf8mb4_unicode_ci的一種。0900指的是Unicode校對算法版本,ai是指口音不敏感(as表示敏感),ci指不區(qū)分大小寫(cs表示區(qū)分)。utf8mb4_unicode_ci表示基于標(biāo)準(zhǔn)的的Unicode來排序和比較,能夠在各種語言之間精確排序,而utf8mb4_general_ci遇到某些特殊的字符集時(shí)排序結(jié)果可能不一致,準(zhǔn)確性較差,但是性能較好,比較和排序時(shí)候更快。
- -DWITH_INNOBASE_STORAGE_ENGINE=1:啟用INNOBASE存儲(chǔ)引擎。
- -DWITH_MYISAM_STORAGE_ENGINE=1:啟用MYISAM存儲(chǔ)引擎。
- -DWITH_ARCHIVE_STORAGE_ENGINE=1:啟用ARCHIVE存儲(chǔ)引擎
- -DWITH_FEDERATED_STORAGE_ENGINE=1:啟用FEDERATED存儲(chǔ)引擎。
- -DWITH_BLACKHOLE_STORAGE_ENGINE=1:啟用BLACKHOLE存儲(chǔ)引擎。
- -DWITH_PERFSCHEMA_STORAGE_ENGINE=1:啟用PERFSCHEMA存儲(chǔ)引擎。
- -DWITHOUT_EXAMPLE_STORAGE_ENGINE=1:不啟用或不編譯EXAMPLE存儲(chǔ)引擎。EXAMPLE存儲(chǔ)引擎是一個(gè)不做任何事情的存根引擎。它的目的是作為MySQL源代碼中的一個(gè)例子,用來演示如何開始編寫一個(gè)新存儲(chǔ)引擎。
- -DWITH_ZLIB=bundled:啟用libz庫支持,使用與發(fā)行版捆綁在一起的zlib庫。
- -DWITH_SSL=system:啟用ssl庫支持,使用系統(tǒng)的SSL庫,若不使用系統(tǒng)的請自定義路徑。
- -DENABLED_LOCAL_INFILE=1:表示能使用load data命令。
- -DWITH_DEBUG=0:禁用debug調(diào)試支持。
- -DMYSQL_MAINTAINER_MODE=0:關(guān)閉特定于MySQL維護(hù)人員的開發(fā)環(huán)境。
- -DWITH_EMBEDDED_SERVER=0:不構(gòu)建libmysqld嵌入式服務(wù)器庫。從MySQL 5.7.17開始不推薦使用libmysqld嵌入式服務(wù)器庫,并且已在MySQL 8.0中將其刪除。
- -DINSTALL_SHAREDIR=share:指定aclocal/mysql.m4安裝目錄
- -DDOWNLOAD_BOOST=0:禁止下載Boost源。
- -DWITH_BOOST=/usr/local/boost159:指定Boost庫目錄位置。
- -DCMAKE_EXE_LINKER_FLAGS="-ljemalloc" :使用jemalloc優(yōu)化MySQL內(nèi)存管理。
四、配置MySQL
1.創(chuàng)建配置文件
- vi /etc/my.cnf
- //輸入以下內(nèi)容
- [client]
- port = 3306
- socket = /usr/local/mysql/mysql.sock
- default-character-set = utf8mb4
- [mysqld]
- port = 3306
- socket = /usr/local/mysql/mysql.sock
- basedir = /usr/local/mysql
- datadir = /data/mysql
- character-set-server = utf8mb4
- collation-server = utf8mb4_general_ci
- init_connect = 'SET NAMES utf8mb4'
- server-id = 1
- log-slave-updates=true
- skip-external-locking
- skip-name-resolve
- back_log = 300
- table_open_cache = 128
- max_allowed_packet = 16M
- read_buffer_size = 8M
- read_rnd_buffer_size = 64M
- sort_buffer_size = 16M
- join_buffer_size = 8M
- key_buffer_size = 128M
- thread_cache_size = 16
- log-bin = mysql-bin
- binlog_format = row
- ######主從
- log-slave-updates = true
- ######慢日志
- slow_query_log = on
- long_query_time = 1
- slow_query_log_file = /data/mysql/db-slow.log
- gtid_mode = ON
- enforce_gtid_consistency = ON
- expire_logs_days = 7
- default_storage_engine = InnoDB
- innodb_buffer_pool_size = 1G
- innodb_data_file_path = ibdata1:10M:autoextend
- innodb_file_per_table = on
- innodb_write_io_threads = 4
- innodb_read_io_threads = 4
- innodb_thread_concurrency = 8
- innodb_purge_threads = 1
- innodb_flush_log_at_trx_commit = 1
- innodb_log_buffer_size = 8M
- innodb_log_file_size = 512M
- innodb_log_files_in_group = 3
- innodb_max_dirty_pages_pct = 90
- innodb_lock_wait_timeout = 60
- max_connections = 5000
- interactive_timeout = 28800
- wait_timeout = 28800
- sql_mode = STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION
- symbolic-links=0
- ######時(shí)間參數(shù)
- log_timestamps=SYSTEM
- [mysqldump]
- quick
- max_allowed_packet = 32M
- [mysql]
- no-auto-rehash
- default-character-set = utf8mb4
- [myisamchk]
- key_buffer_size = 64M
- sort_buffer_size = 64M
- read_buffer = 8M
- write_buffer = 8M
- [mysqlhotcopy]
- interactive-timeout
- [mysqld_safe]
- log-error = /data/mysql/mysql_err.log
- pid-file = /data/mysql/mysqld.pid
注:①上述配置僅供參考,請根據(jù)實(shí)際環(huán)境需求修改參數(shù)。
②query_cache_size 此參數(shù)配置在MySQL5.7.20就已經(jīng)過時(shí)了,而在MySQL8.0之后就已經(jīng)被移除了。
2.權(quán)限設(shè)置
- cd /usr/local/mysql
- chown -R mysql:mysql .
3.初始化數(shù)據(jù)庫
- /usr/local/mysql/bin/mysqld --initialize-insecure --user=mysql --basedir=/usr/local/mysql --datadir=/data/mysql
注:a.之前版本mysql_install_db是在mysql_basedir/script下,5.7放在了mysql_install_db/bin目錄下,且已被廢棄
b."--initialize"會(huì)生成一個(gè)隨機(jī)密碼(~/.mysql_secret),而"--initialize-insecure"不會(huì)生成密碼
c.--datadir目標(biāo)目錄下不能有數(shù)據(jù)文件
## 初始化完成提示:
##開啟SSL連接,安全性提高了,但是相對地降低了QPS,還是比較影響性能的,謹(jǐn)慎選擇!本文中不開啟!
- /usr/local/mysql/bin/mysql_ssl_rsa_setup
4.安裝MySQL的man幫助文件、頭文件及l(fā)ib庫
- cd /usr/local/mysql
- ## 手冊頁幫助文件
- echo "MANPATH /usr/local/mysql/man" >> /etc/man.config
- ## 頭文件
- ln -sv /usr/local/mysql/include /usr/include/mysql
- ## lib庫文件
- echo '/usr/local/mysql/lib' > /etc/ld.so.conf.d/mysql.conf
- ## 加載動(dòng)態(tài)庫文件
- ldconfig
5.配置MySQL環(huán)境變量
- echo '######MySQL' >> /etc/profile
- echo 'PATH=$PATH:/usr/local/mysql/bin' >> /etc/profile
- source /etc/profile
6.配置MySQL服務(wù)管理命令
- cd /usr/local/mysql
- cp support-files/mysql.server /etc/rc.d/init.d/mysqld
7.啟動(dòng)數(shù)據(jù)庫
- /etc/init.d/mysqld start
- /usr/local/mysql/bin/mysql --version && echo -e "\e[31m mysql install is OK\e[0m"
8.驗(yàn)證jemalloc優(yōu)化MySQL是否生效
- lsof -n | grep jemalloc | grep mysqld
五、服務(wù)管理
- 啟動(dòng):/etc/init.d/mysqld start
- 關(guān)閉:/etc/init.d/mysqld stop
- 重啟:/etc/init.d/mysqld restart
- 查看狀態(tài):/etc/init.d/mysqld status
- 配置開機(jī)啟動(dòng):echo "/etc/init.d/mysqld start" >> /etc/rc.local
六、配置root賬號(hào)密碼
## 設(shè)置本機(jī)登錄密碼
- mysql -uroot -p
- //因初始化數(shù)據(jù)時(shí)沒有設(shè)置密碼,可以按兩次確認(rèn)鍵進(jìn)入數(shù)據(jù)庫
- use mysql;
- update user set authentication_string=password('youpassword') where user='root' and host='localhost';
- FLUSH PRIVILEGES;
## MySQL 5.7.5 或更早之前的版本使用下面的命令設(shè)置密碼
- update user set password=PASSWORD('youpassword') where User='root';
***特別提醒注意的一點(diǎn):MySQL 5.7.6以及最新版本數(shù)據(jù)庫下的user表中已經(jīng)沒有Password字段了,而是將加密后的用戶密碼存儲(chǔ)于authentication_string字段。而且密碼的復(fù)雜性要求高,需有大小字母、數(shù)字、特殊字符。
## 設(shè)置遠(yuǎn)程登錄密碼
- GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'youpassword' WITH GRANT OPTION;
- FLUSH PRIVILEGES;
七、測試
1.創(chuàng)建測試數(shù)據(jù)庫
- mysql -uroot -p
- //輸入上述步驟中設(shè)置的密碼登錄數(shù)據(jù)庫
- ## 創(chuàng)建test庫,指定字符集及排序規(guī)則
- CREATE DATABASE test DEFAULT CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci;
- ## 查看
- show databases;
2.創(chuàng)建普通用戶及授權(quán)
- mysql -uroot -p
- //輸入上述步驟中設(shè)置的密碼登錄數(shù)據(jù)庫
- ## 切換至mysql庫
- use mysql;
- ## 創(chuàng)建用戶
- CREATE USER 'test'@'%' IDENTIFIED BY '123456';
- ## 授權(quán)
- GRANT select,insert,update,delete,create on test.* to 'test'@'%' ;
- ## 刷新權(quán)限
- FLUSH PRIVILEGES;
- ## 查看用戶
- select user,host from user;
- ## 查看test用戶權(quán)限
- show GRANTS for 'test'@'%';