MySQL的 SQL执行日志
MySQL的主要配置参数
MySQL忘记root密码
MySQL存储引擎
Invalid default value
MySQL数据库操作命令
MySQL数据类型及取值范围
删除名称包含相同前缀或关键词的数据表
性能相关
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 |
/proc/sys/net/ipv4/ip_local_port_range /proc/sys/net/ipv4/tcp_max_syn_backlog /proc/sys/net/ipv4/tcp_fin_timeout oom_adj or oom_score_adj echo 0 > /proc/sys/vm/swappiness vmstat 5 # 5表示每5秒钟,单位是 block,通常为1024 Bytes iostat -dx 5 # Little's law concurrency = (r/s + w/s) * (svctm/1000) # 查询执行中的事务 SELECT * FROM information_schema.INNODB_TRX; # 查看正在锁的事务 SELECT * FROM INFORMATION_SCHEMA.INNODB_LOCKS; # 查看等待锁的事务 SELECT * FROM INFORMATION_SCHEMA.INNODB_LOCK_WAITS; |
文件系统推荐XFS,ext4也可接受
http://collectl.sourceforge.net/
查询配置文件位置和加载顺序
1 |
mysqld --verbose --help | grep -A 1 'Default options' |
MySQL最小化配置文件(MySQL 8.0)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 |
[mysqld] # GENERAL datadir = /var/lib/mysql socket = /var/lib/mysql/mysql.sock pid_file = /var/lib/mysql/mysql.pid user = mysql port = 3306 # INNODB innodb_buffer_pool_size = <value> innodb_log_file_size = <value> innodb_file_per_table = 1 innodb_flush_method = O_DIRECT # LOGGING log_error = /var/lib/mysql/mysql-error.log log_slow_queries = /var/lib/mysql/mysql-slow.log # OTHER tmp_table_size = 32M max_heap_table_size = 32M max_connections = <value> thread_cache_size = <value> table_open_cache = <value> open_files_limit = 65535 # 可以更大,开销较小 [client] socket = /var/lib/mysql/mysql.sock port = 3306 |
innodb_dedicated_server通常占用50% – 75%的内存
innodb_thread_concurrency可先设置成和 CPU核数相同,然后再进行调优
MySQL的 SQL执行日志
1、查看正在执行的SQL 语句日志:
1 2 3 4 |
use information_schema; show processlist; # 或者: select * from information_schema.`PROCESSLIST` where info is not null; |
2、打开 SQL日志
这种日志占用磁盘空间比较大,建议在调试完成后进行关闭
1 2 3 4 5 6 7 8 9 10 11 |
SET GLOBAL log_output = 'TABLE'; SET GLOBAL general_log = 'ON'; // 开启日志 SET GLOBAL log_output = 'TABLE'; SET GLOBAL general_log = 'OFF'; // 关闭日志 # 或者存入文件 SET GLOBAL general_log_file=<span class="string">'/tmp/general.log'; SET GLOBAL general_log = 'ON';</span> <span class="ruby"><span class="hljs-constant"><span class="hljs-keyword"><span class="hljs-number"><span class="hljs-string">SELECT * from mysql.general_log ORDER BY event_time DESC; # 查询日志 truncate table mysql.general_log; #删除日志 # 读取 binlog mysqlbinlog -v --base64-output=DECODE-ROWS /var/log/mysql/xxx.log > xxx.txt # 还原 mysqlbinlog -v --base64-output=DECODE-ROWS --start-position=xxx --stop-position=xxx /var/log/mysql/bin-log.000001 </span></span></span></span></span> |
慢查询
1 2 3 4 5 6 7 8 9 10 11 |
show variables like 'slow_query_log'; # 查看慢查询状态 set global slow_query_log=on; # 命令行开启慢查询(重启失效) show variables like 'slow_query_log_file'; # 慢查询日志存放位置 show variables like 'long_query_time'; # 查看定为慢查询的时间(默认10秒) set global long_query_time=1; # 设置慢查询时间 # 配置文件 slow_query_log = 1 long_query_time = 1 # log_output = table slow_query_log_file = /var/log/mysql/slow.log |
大小写敏感性
lower_case_table_names可配置数据库和数据表的大小写敏感性
默认在Linux下,MySQL对表名和数据库名区分大小写,而在Windows下,MySQL默认情况是不区分大小写的
性能相关
开启 profiling可以让MySQL收集在SQL执行时所使用的资源情况:
1 2 3 4 5 |
select @@profiling; # 查看 set profiling=1; # 设置 show profiles; # 查看当前会话所产生的所有profiles show profile; # 查询执行时间 show profile for query xxx; # xxx 为 show profiles 中的 query id |
MySQL的主要配置参数
join_buffer_size
read_buffer_size
read_rnd_buffer_size
sort_buffer_size
设置方法如设置sort_buffer_size为4M:
SET GLOBAL sort_buffer_size = 1024 * 1024 * 4;
缓冲池内存
innodb_buffer_pool_size
建议设置为:总内存-(每个线程所需要的内存*连接数)-系统保留内存
key_buffer_size (MyISAM相关)
查询MyISAM表所占用的空间大小
1 |
select sum(index_length) from information_schema.tables where engine='myisam'; |
MySQL服务器I/O相关配置参数
InnoDB:
innodb_log_file_size(单个事务日志文件的大小)
innodb_log_files_in_group(个数)
事务日志总大小:innodb_log_file_size*innodb_log_files_in_group
innodb_log_buffer_size(日志缓冲文件大小通常32M-128M就足够了)
innodb_flush_log_at_trx_commit(刷新日志频繁程度,有三个值0,1,2)
0:日志缓冲每秒一次地被写到日志文件,并且对日志文件做到磁盘操作的刷新,
但是在一个事务提交不做任何操作。
1【默认】:在每个事务提交时,日志缓冲被写到日志文件,对日志文件做到磁盘操作的
刷新。
2【推荐】:在每个提交,日志缓冲被写到文件,但不对日志文件做到磁盘操作的刷新,
对日志文件每秒刷新一次。
其它建议配置:
可在my.cnf或my.ini文件中设置,需重启MySQL
innodb_flush_method=O_DIRECT
innodb_file_per_table=1
innodb_doublewrite=1
MyISAM:
delay_key_write
OFF:每次写操作后刷新键缓冲中的脏块到磁盘,安全,性能差
ON:只对在键表时指定了delay_key_write选项的表使用延迟刷新
ALL:对所有MyISAM表都使用延迟键写入
安全相关配置参数
expire_logs_days 指定自动清理binlog的天数
max_allowed_packet 控制MySQL可以接收的最大包的大小
skip_name_resolve 禁用DNS查找
sysdate_is_now 确保sysdate()返回确定性日期
read_only 禁止非super权限的用户写权限(从库启用)
skip_slave_start 禁用Slave自动恢复(从库启用)
sql_mode 设置MySQL所使用的SQL模式(strict_trans_tables, no_engine_substitution, no_zero_date, no_zero_in_date, only_full_group_by)
其它常用配置参数
sync_binlog 控制MySQL如何向磁盘刷新binlog(建议主库设为1)
tmp_table_size和max_heap_table_size控制内存临时表大小
max_connections 控制允许的最大的连接数
MySQL调优工具:MySQLTuner
MySQL忘记root密码
忘记MySQL密码的操作方法:
1.打开终端,输入以下代码
1 |
mysqld_safe --defaults-file=/etc/my.cnf --skip-grant-tables |
2.打开一个新终端
mysql -uroot -p
在弹出的密码框中直接回车进入数据库
3.修改root密码
1 2 |
update user set password=PASSWORD('******') where user='root'; flush privileges; |
MySQL中去除换行符和回车符
使用replace语句进行替换,然后update一下即可
1 |
replace(replace(字段名,char(10),''),char(13),'') |
MySQL启动、连接和断开
在Windows中如果将MySQL添加为服务可通过在命令行中(Win+R->cmd)使用如下指令来启动、停止MySQL服务
net start mysql
net stop mysql
连接MySQL可通过如下指令
mysql -hlocalhost -uroot -proot(假定通过root用户连接本地数据库,密码为root)
退出直接在命令行输入quit即可
MySQL存储引擎
通过以下指令可查看MySQL中支持的存储引擎
SHOW ENGINES;
可在其后添加\g或\G,基中\g相当于分号作为结尾,\G则起到美化显示的效果
另一种查询存储引擎的方法是输入如下指令:
SHOW VARIABLES LIKE ‘have%’;
删除名称包含相同前缀或关键词的数据表
通过以下语句就可以获取所有的drop table语句然后执行即可:
1 2 3 |
Select CONCAT( 'drop table ', table_name, ';' ) FROM information_schema.tables Where table_name LIKE '%keyword%'; |
在创建表格时出现类似这样的报错ERROR 1067 (42000): Invalid default value for …,猜测是字符集问题,因为默认值中使用的是中文,于是在命令行中执行set names gbk,然后在CREATE TABLE的最后一行添加了DEFAULT CHARSET=gbk用以设置表格的默认字符集,再次创建表格顺利执行。
Ignoring query to other database报错
出现这一问题纯粹是由于粗心所致,即误将mysql –uroot -p输入成了mysql -root -p,确实很奇怪,输入后者同样可以登入并不报错,只是要进行操作时就会出现Ignoring query to other database的报错
常见报错及解决方法
1548-Cannot load from mysql.proc. The table is probably corrupted
输入以下指令进行修复
mysql_upgrade -uroot -p
MySQL数据库操作命令
创建数据库:CREATE DATABASE 数据库名;
查看数据库:SHOW DATABASES;
选择数据库:USE 数据库名;
删除数据库:DROP DATABASE 数据库名;
1:使用SHOW语句找出在服务器上当前存在什么数据库:
mysql> SHOW DATABASES;
2:创建一个数据库MYSQLDATA
mysql> CREATE DATABASE MYSQLDATA;
3:选择你所创建的数据库
mysql> USE MYSQLDATA; (按回车键出现Database changed 时说明操作成功!)
4:查看现在的数据库中存在什么表
mysql> SHOW TABLES;
5:创建一个数据库表
mysql> CREATE TABLE MYTABLE (name VARCHAR(20), sex CHAR(1));
6:显示表的结构:
mysql> DESCRIBE MYTABLE;
7:往表中加入记录
mysql> insert into MYTABLE values (“hyq”,”M”);
8:用文本方式将数据装入数据库表中(例如D:/mysql.txt)
mysql> LOAD DATA LOCAL INFILE “D:/mysql.txt” INTO TABLE MYTABLE;
9:导入.sql文件命令(例如D:/mysql.sql)
mysql> use database;
mysql> source d:/mysql.sql;
10:删除表
mysql> drop TABLE MYTABLE;
11:清空表
mysql> delete from MYTABLE;
12:更新表中数据
mysql> update MYTABLE set sex=”f” where name=hyq;
此外,Linux下经常使用的命令:
1:导入数据库备份文件的方法:
root: mysql –u数据库帐户 –p密码 数据库名 < .sql备份文件
2:MySql的用户管理是通过User表来实现的,添加新用户常用的方法有两个,一是在User表插入相应的数据行,同时设置相应的权限;二是通过 GRANT命令创建具有某种权限的用户。其中GRANT的常用用法如下:
mysql> grant all privileges on 数据库明.* to 用户名@localhost identified by “密码”;
3:清空文件内容:
cat /dev/null > 文件名
4:添加帐户:
useradd 用户名 –d 目录名 –s /sbin/nologin(不允许该用户直接登录服务器)
5:设置帐户密码
passwd 用户名
特别注意:
刚安装好的MySql包含一个含空密码的root帐户和一个匿名帐户,这是很大的安全隐患,对于一些重要的应用我们应将安全性尽可能提高,在这里应把匿名帐户删除、 root帐户设置密码,可用如下命令进行:
use mysql;
delete from User where User=””;
update User set Password=PASSWORD(newpassword) where User=root;
启动:net start mySql;
进入:mysql -u root -p/mysql -h localhost -u root -p databaseName;
列出数据库:show databases;
选择数据库:use databaseName;
列出表格:show tables;
显示表格列的属性:show columns from tableName;
建立数据库:source fileName.txt;
匹配字符:可以用通配符_代表任何一个字符,%代表任何字符串;
增加一个字段:alter table tabelName add column fieldName dataType;
增加多个字段:alter table tabelName add column fieldName1 dataType,add columns fieldName2 dataType;
多行命令输入:注意不能将单词断开;当插入或更改数据时,不能将字段的字符串展开到多行里,否则硬回车将被储存到数据中;
增加一个管理员帐户:grant all privileges on *.* to user@localhost identified by “password”;
每条语句输入完毕后要在末尾填加分号’;’,或者填加’\g’也可以;
查询时间:select now();
查询当前用户:select user();
查询数据库版本:select version();
查询当前使用的数据库:select database();
1 2 3 |
SELECT ... FROM ... WHERE ... GROUP BY ... HAVING ... ORDER BY ... # 执行顺序 FROM > WHERE > GROUP BY > HAVING > SELECT的字段 > DISTINCT > ORDER BY > LIMIT |
1、删除student_course数据库中的students数据表:
rm -f student_course/students.*
2、备份数据库:(将数据库test备份)
mysqldump -u root -p test>c:\test.txt
备份表格:(备份test数据库下的mytable表格)
mysqldump -u root -p test.mytable>c:\test.txt
将备份数据导入到数据库:(导回test数据库)
mysql -u root -p test<c:\test.txt
3、创建临时表:(建立临时表zengchao)
create temporary table zengchao(name varchar(10));
4、创建表是先判断表是否存在
create table if not exists students(……);
5、从已经有的表中复制表的结构
create table table2 select * from table1 where 1<>1;
6、复制表
create table table2 select * from table1;
7、对表重新命名
alter table table1 rename as table2;
8、修改列的类型
alter table table1 modify id int unsigned;//修改列id的类型为int unsigned
alter table table1 change id sid int unsigned;//修改列id的名字为sid,而且把属性修改为int unsigned
9、创建索引
alter table table1 add index ind_id (id);
create index ind_id on table1 (id);
create unique index ind_id on table1 (id);//建立唯一性索引
10、删除索引
drop index idx_id on table1;
alter table table1 drop index ind_id;
11、联合字符或者多个列(将列id与”:”和列name和”=”连接)
select concat(id,’:’,name,’=’) from students;
12、limit(选出10到20条)<第一个记录集的编号是0>
select * from students order by id limit 9,10;
13、MySQL不支持的功能
事务,视图,外键和引用完整性,存储过程和触发器
14、MySQL会使用索引的操作符号
<,<=,>=,>,=,between,in,不带%或者_开头的like
15、使用索引的缺点
1)减慢增删改数据的速度;
2)占用磁盘空间;
3)增加查询优化器的负担;
当查询优化器生成执行计划时,会考虑索引,太多的索引会给查询优化器增加工作量,导致无法选择最优的查询方案;
16、分析索引效率
方法:在一般的SQL语句前加上explain;
分析结果的含义:
1)table:表名;
2)type:连接的类型,(ALL/Range/Ref)。其中ref是最理想的;
3)possible_keys:查询可以利用的索引名;
4)key:实际使用的索引;
5)key_len:索引中被使用部分的长度(字节);
6)ref:显示列名字或者”const”(不明白什么意思);
7)rows:显示MySQL认为在找到正确结果之前必须扫描的行数;
8)extra:MySQL的建议;
17、使用较短的定长列
1)尽可能使用较短的数据类型;
2)尽可能使用定长数据类型;
a)用char代替varchar,固定长度的数据处理比变长的快些;
b)对于频繁修改的表,磁盘容易形成碎片,从而影响数据库的整体性能;
c)万一出现数据表崩溃,使用固定长度数据行的表更容易重新构造。使用固定长度的数据行,每个记录的开始位置都是固定记录长度的倍数,可以很容易被检测到,但是使用可变长度的数据行就不一定了;
d)对于MyISAM类型的数据表,虽然转换成固定长度的数据列可以提高性能,但是占据的空间也大;
18、使用not null和enum
尽量将列定义为not null,这样可使数据的出来更快,所需的空间更少,而且在查询时,MySQL不需要检查是否存在特例,即null值,从而优化查询;
如果一列只含有有限数目的特定值,如性别,是否有效或者入学年份等,在这种情况下应该考虑将其转换为enum列的值,MySQL处理的更快,因为所有的enum值在系统内都是以标识数值来表示的;
19、使用optimize table
对于经常修改的表,容易产生碎片,使在查询数据库时必须读取更多的磁盘块,降低查询性能。具有可变长的表都存在磁盘碎片问题,这个问题对blob数据类型更为突出,因为其尺寸变化非常大。可以通过使用optimize table来整理碎片,保证数据库性能不下降,优化那些受碎片影响的数据表。 optimize table可以用于MyISAM和BDB类型的数据表。实际上任何碎片整理方法都是用mysqldump来转存数据表,然后使用转存后的文件并重新建数据表;
20、使用procedure analyse()
可以使用procedure analyse()显示最佳类型的建议,使用很简单,在select语句后面加上procedure analyse()就可以了;例如:
select * from students procedure analyse();
select * from students procedure analyse(16,256);
第二条语句要求procedure analyse()不要建议含有多于16个值,或者含有多于256字节的enum类型,如果没有限制,输出可能会很长;
21、使用查询缓存
1)查询缓存的工作方式:
第一次执行某条select语句时,服务器记住该查询的文本内容和查询结果,存储在缓存中,下次碰到这个语句时,直接从缓存中返回结果;当更新数据表后,该数据表的任何缓存查询都变成无效的,并且会被丢弃。
2)配置缓存参数:
变量:query_cache _type,查询缓存的操作模式。有3中模式,0:不缓存;1:缓存查询,除非与select sql_no_cache开头;2:根据需要只缓存那些以select sql_cache开头的查询;query_cache_size:设置查询缓存的最大结果集的大小,比这个值大的不会被缓存。
1 2 3 4 5 6 7 |
[mysqld] query_cache_size = 32M query_cache_type = 1 # 命令行查看 show variables like '%query_cache%'; SHOW STATUS LIKE 'qcache%'; |
22、调整硬件
1)在机器上装更多的内存;
2)增加更快的硬盘以减少I/O等待时间;
寻道时间是决定性能的主要因素,逐字地移动磁头是最慢的,一旦磁头定位,从磁道读则很快;
3)在不同的物理硬盘设备上重新分配磁盘活动;
如果可能,应将最繁忙的数据库存放在不同的物理设备上,这跟使用同一物理设备的不同分区是不同的,因为它们将争用相同的物理资源(磁头)。
MySQL数据类型及取值范围
Ignoring query to other database报错
出现这个报错通常是由于在登录到MySQL输入mysql -uroot -p时漏掉了-u中的u所致
修改root密码
修改root方法比较多,这里使用直接在用户中修改密码的方法:
1 2 3 |
> use mysql > update user set password=password("new_pass") where user="root"; > flush privileges; |
MySQL升级(Ubuntu)
以 Ubuntu 为例
1 2 3 4 5 |
sudo wget https://dev.mysql.com/get/mysql-apt-config_0.8.1-1_all.deb sudo dpkg -i mysql-apt-config_0.8.1-1_all.deb # 选择5.7或更新版本 sudo apt-get update sudo apt-get install mysql-server |
MySQL密码不符合要求
ERROR 1819 (HY000): Your password does not satisfy the current policy requirements
这一报错通常出现在较新的MySQL版本中,在MySQL命令行中输入
show variables like ‘validate_password%’;可查看到具体的要求
可以通过修改具体参数来调整实际的要求,有时我们在开发环境并不希望设置复杂的密码,此时可以在/etc/my.cnf中加入validate-password = off在取消这一限制。
[ERROR] InnoDB: Table mysql
.innodb_table_stats
not found.
这一问题通常发生在升级 MySQL版本时
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 |
CREATE TABLE `innodb_index_stats` ( `database_name` varchar(64) COLLATE utf8_bin NOT NULL, `table_name` varchar(64) COLLATE utf8_bin NOT NULL, `index_name` varchar(64) COLLATE utf8_bin NOT NULL, `last_update` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, `stat_name` varchar(64) COLLATE utf8_bin NOT NULL, `stat_value` bigint(20) unsigned NOT NULL, `sample_size` bigint(20) unsigned DEFAULT NULL, `stat_description` varchar(1024) COLLATE utf8_bin NOT NULL, PRIMARY KEY (`database_name`,`table_name`,`index_name`,`stat_name`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin STATS_PERSISTENT=0; CREATE TABLE `innodb_table_stats` ( `database_name` varchar(64) COLLATE utf8_bin NOT NULL, `table_name` varchar(64) COLLATE utf8_bin NOT NULL, `last_update` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, `n_rows` bigint(20) unsigned NOT NULL, `clustered_index_size` bigint(20) unsigned NOT NULL, `sum_of_other_index_sizes` bigint(20) unsigned NOT NULL, PRIMARY KEY (`database_name`,`table_name`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin STATS_PERSISTENT=0; CREATE TABLE `slave_master_info` ( `Number_of_lines` int(10) unsigned NOT NULL COMMENT 'Number of lines in the file.', `Master_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT 'The name of the master binary log currently being read from the master.', `Master_log_pos` bigint(20) unsigned NOT NULL COMMENT 'The master log position of the last read event.', `Host` char(64) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL DEFAULT '' COMMENT 'The host name of the master.', `User_name` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The user name used to connect to the master.', `User_password` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The password used to connect to the master.', `Port` int(10) unsigned NOT NULL COMMENT 'The network port used to connect to the master.', `Connect_retry` int(10) unsigned NOT NULL COMMENT 'The period (in seconds) that the slave will wait before trying to reconnect to the master.', `Enabled_ssl` tinyint(1) NOT NULL COMMENT 'Indicates whether the server supports SSL connections.', `Ssl_ca` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The file used for the Certificate Authority (CA) certificate.', `Ssl_capath` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The path to the Certificate Authority (CA) certificates.', `Ssl_cert` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The name of the SSL certificate file.', `Ssl_cipher` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The name of the cipher in use for the SSL connection.', `Ssl_key` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The name of the SSL key file.', `Ssl_verify_server_cert` tinyint(1) NOT NULL COMMENT 'Whether to verify the server certificate.', `Heartbeat` float NOT NULL, `Bind` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'Displays which interface is employed when connecting to the MySQL server', `Ignored_server_ids` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The number of server IDs to be ignored, followed by the actual server IDs', `Uuid` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The master server uuid.', `Retry_count` bigint(20) unsigned NOT NULL COMMENT 'Number of reconnect attempts, to the master, before giving up.', `Ssl_crl` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The file used for the Certificate Revocation List (CRL)', `Ssl_crlpath` text CHARACTER SET utf8 COLLATE utf8_bin COMMENT 'The path used for Certificate Revocation List (CRL) files', `Enabled_auto_position` tinyint(1) NOT NULL COMMENT 'Indicates whether GTIDs will be used to retrieve events from the master.', PRIMARY KEY (`Host`,`Port`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 STATS_PERSISTENT=0 COMMENT='Master Information'; CREATE TABLE `slave_relay_log_info` ( `Number_of_lines` int(10) unsigned NOT NULL COMMENT 'Number of lines in the file or rows in the table. Used to version table definitions.', `Relay_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT 'The name of the current relay log file.', `Relay_log_pos` bigint(20) unsigned NOT NULL COMMENT 'The relay log position of the last executed event.', `Master_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT 'The name of the master binary log file from which the events in the relay log file were read.', `Master_log_pos` bigint(20) unsigned NOT NULL COMMENT 'The master log position of the last executed event.', `Sql_delay` int(11) NOT NULL COMMENT 'The number of seconds that the slave must lag behind the master.', `Number_of_workers` int(10) unsigned NOT NULL, `Id` int(10) unsigned NOT NULL COMMENT 'Internal Id that uniquely identifies this record.', PRIMARY KEY (`Id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 STATS_PERSISTENT=0 COMMENT='Relay Log Information'; CREATE TABLE `slave_worker_info` ( `Id` int(10) unsigned NOT NULL, `Relay_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL, `Relay_log_pos` bigint(20) unsigned NOT NULL, `Master_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL, `Master_log_pos` bigint(20) unsigned NOT NULL, `Checkpoint_relay_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL, `Checkpoint_relay_log_pos` bigint(20) unsigned NOT NULL, `Checkpoint_master_log_name` text CHARACTER SET utf8 COLLATE utf8_bin NOT NULL, `Checkpoint_master_log_pos` bigint(20) unsigned NOT NULL, `Checkpoint_seqno` int(10) unsigned NOT NULL, `Checkpoint_group_size` int(10) unsigned NOT NULL, `Checkpoint_group_bitmap` blob NOT NULL, PRIMARY KEY (`Id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 STATS_PERSISTENT=0 COMMENT='Worker Information'; |
对 mysql 库执行完以上创建后在命令行中执行mysql_upgrade
MySQL误删除如何恢复
在配置文件的[mysqld]版块下添加:
1 2 3 4 5 |
server_id = 1 log_bin = /var/log/mysql/mysql-bin.log max_binlog_size = 1G binlog_format = row binlog_row_image = full |
注:需确保/var/log/mysql/存在且 mysql 用户拥有写入权限
方法1:进入数据库执行(mysql-bin.000001或其它文件)
1 |
show binlog events in 'mysql-bin.000001'; |
SHOW BINLOG EVENTS [IN ‘log_name
‘] [FROM pos
] [LIMIT [offset
,] row_count
]\
查看当前 bin_log 日志:show master logs;
通过文件也可查看
1 |
mysqlbinlog --no-defaults /var/log/mysql/mysql-bin.000001 | grep 'DELETE' |
查看Pos列确定所需进行恢复的命令位置,命令行中执行:
1 |
mysqlbinlog --start-position=xxxx --stop-position=xxxx /var/log/mysql/mysql-bin.000001 | mysql -uroot -p |
方法2:https://github.com/danfengcao/binlog2sql
mysql-bin 文件
默认在/var/lib/mysql下会产生大量的日志文件mysql-bin,时间累积会撑满磁盘,可通过配置文件设置保留天数,如:
1 2 |
# /etc/my.cnf expire_logs_days = 7 |
查看数据库及数据表大小
1 2 3 4 5 6 7 8 |
use information_schema; # 查询所有数据的大小 select concat(round(sum(data_length/1024/1024),2),'MB') as data from tables; # 查看数据库home的大小 select concat(round(sum(data_length/1024/1024),2),'MB') as data from tables where table_schema='home'; # 查看数据库home中 members 表的大小 select concat(round(sum(data_length/1024/1024),2),'MB') as data from tables where table_schema='home' and table_name='members'; |
常见问题
1、MySQL [Warning]: IP address ‘xxxx’ could not be resolved: Name or service not known
1 2 3 |
[mysqld] skip_host_cache skip-name-resolve=1 |
2、Specified key was too long; max key length is 767 bytes
默认 utf8一个字符为三个字节(255+1)*3-1=767,通常这一原因是由utf8mb4所致,此时在 varchar 达到192时就会报出如上错误。解决方案有:
- 修改编码为 utf8
- 减小 VARCHAR的长度
- 启用innodb_large_prefix
3、message: “Lock wait timeout exceeded; try restarting transaction”
1 2 3 |
SELECT * FROM information_schema.INNODB_TRX; # 查询得到trx_mysql_thread_id,执行 kill 命令 kill xxxx |
4、为何max_connection的修改未生效
1 2 3 4 5 6 7 8 9 |
# 查看 mysql> show variables like '%max_connections%'; # 临时修改 set GLOBAL max_connections=2000; set GLOBAL max_user_connections=1500; # 永久修改/etc/my.cnf [mysqld] max_connections = 2000 max_user_connections = 1500 |
可是通过修改 my.cnf 文件重启 MySQL服务后发现配置并未生效,首先检查/etc/security/limits.conf,检查是否有如下配置,如无则自行添加
1 2 3 4 5 |
* soft nofile 65535 * hard nofile 65535 # 或 mysql soft nofile 65535 mysql hard nofile 65535 |
接下编辑mysql.service或mysqld.service 服务文件
1 2 3 4 5 6 7 |
[Service] ... LimitNOFILE=65535 # 重启服务 systemctl daemon-reload systemctl restart mysql |
此时就生效了
5、MySQL 8 本地连接Authentication plugin ‘caching_sha2_password’ cannot be loaded:
1 |
ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY 'yourpassword'; |
6、Could not get JDBC Connection; nested exception is com.alibaba.druid.pool.GetConnectionTimeoutException
排查:
1 2 3 |
spring.datasource.removeAbandoned=true #是否开启超时自动回收连接 spring.datasource.removeAbandonedTimeout=180 #设置自动回收连接的超时时间 spring.datasource.removeAbandonedTimeout=180 #设置自动回收连接的超时时间 |