Alan Hou的个人博客

MySQL常见问题

MySQL的 SQL执行日志
MySQL的主要配置参数
MySQL忘记root密码
MySQL存储引擎
Invalid default value
MySQL数据库操作命令
MySQL数据类型及取值范围
删除名称包含相同前缀或关键词的数据表

性能相关

文件系统推荐XFS,ext4也可接受

http://collectl.sourceforge.net/

查询配置文件位置和加载顺序

MySQL最小化配置文件(MySQL 8.0)

innodb_dedicated_server通常占用50% – 75%的内存

innodb_thread_concurrency可先设置成和 CPU核数相同,然后再进行调优

MySQL的 SQL执行日志

1、查看正在执行的SQL 语句日志:

2、打开 SQL日志

这种日志占用磁盘空间比较大,建议在调试完成后进行关闭

慢查询

大小写敏感性

lower_case_table_names可配置数据库和数据表的大小写敏感性

默认在Linux下,MySQL对表名和数据库名区分大小写,而在Windows下,MySQL默认情况是不区分大小写的

性能相关

开启 profiling可以让MySQL收集在SQL执行时所使用的资源情况:

MySQL的主要配置参数

join_buffer_size
read_buffer_size
read_rnd_buffer_size
sort_buffer_size
设置方法如设置sort_buffer_size为4M:
SET GLOBAL sort_buffer_size = 1024 * 1024 * 4;
缓冲池内存
innodb_buffer_pool_size
建议设置为:总内存-(每个线程所需要的内存*连接数)-系统保留内存
key_buffer_size (MyISAM相关)
查询MyISAM表所占用的空间大小

MySQL服务器I/O相关配置参数
InnoDB:
innodb_log_file_size(单个事务日志文件的大小)
innodb_log_files_in_group(个数)
事务日志总大小:innodb_log_file_size*innodb_log_files_in_group
innodb_log_buffer_size(日志缓冲文件大小通常32M-128M就足够了)
innodb_flush_log_at_trx_commit(刷新日志频繁程度,有三个值0,1,2)
0:日志缓冲每秒一次地被写到日志文件,并且对日志文件做到磁盘操作的刷新,
但是在一个事务提交不做任何操作。
1【默认】:在每个事务提交时,日志缓冲被写到日志文件,对日志文件做到磁盘操作的
刷新。
2【推荐】:在每个提交,日志缓冲被写到文件,但不对日志文件做到磁盘操作的刷新,
对日志文件每秒刷新一次。

其它建议配置:
可在my.cnf或my.ini文件中设置,需重启MySQL
innodb_flush_method=O_DIRECT
innodb_file_per_table=1
innodb_doublewrite=1
MyISAM:
delay_key_write
OFF:每次写操作后刷新键缓冲中的脏块到磁盘,安全,性能差
ON:只对在键表时指定了delay_key_write选项的表使用延迟刷新
ALL:对所有MyISAM表都使用延迟键写入

安全相关配置参数
expire_logs_days 指定自动清理binlog的天数
max_allowed_packet 控制MySQL可以接收的最大包的大小
skip_name_resolve 禁用DNS查找
sysdate_is_now 确保sysdate()返回确定性日期
read_only 禁止非super权限的用户写权限(从库启用)
skip_slave_start 禁用Slave自动恢复(从库启用)
sql_mode 设置MySQL所使用的SQL模式(strict_trans_tables, no_engine_substitution, no_zero_date, no_zero_in_date, only_full_group_by)

其它常用配置参数
sync_binlog 控制MySQL如何向磁盘刷新binlog(建议主库设为1)
tmp_table_size和max_heap_table_size控制内存临时表大小
max_connections 控制允许的最大的连接数

MySQL调优工具:MySQLTuner

MySQL忘记root密码

忘记MySQL密码的操作方法:

1.打开终端,输入以下代码

2.打开一个新终端
mysql -uroot -p
在弹出的密码框中直接回车进入数据库
3.修改root密码

MySQL中去除换行符和回车符

使用replace语句进行替换,然后update一下即可

MySQL启动、连接和断开

在Windows中如果将MySQL添加为服务可通过在命令行中(Win+R->cmd)使用如下指令来启动、停止MySQL服务
net start mysql
net stop mysql
连接MySQL可通过如下指令
mysql -hlocalhost -uroot -proot(假定通过root用户连接本地数据库,密码为root)
退出直接在命令行输入quit即可

MySQL存储引擎

通过以下指令可查看MySQL中支持的存储引擎
SHOW ENGINES;
可在其后添加\g或\G,基中\g相当于分号作为结尾,\G则起到美化显示的效果
另一种查询存储引擎的方法是输入如下指令:
SHOW VARIABLES LIKE ‘have%’;

删除名称包含相同前缀或关键词的数据表

通过以下语句就可以获取所有的drop table语句然后执行即可:


Invalid default value

在创建表格时出现类似这样的报错ERROR 1067 (42000): Invalid default value for …,猜测是字符集问题,因为默认值中使用的是中文,于是在命令行中执行set names gbk,然后在CREATE TABLE的最后一行添加了DEFAULT CHARSET=gbk用以设置表格的默认字符集,再次创建表格顺利执行。

Ignoring query to other database报错

出现这一问题纯粹是由于粗心所致,即误将mysql –uroot -p输入成了mysql -root -p,确实很奇怪,输入后者同样可以登入并不报错,只是要进行操作时就会出现Ignoring query to other database的报错

常见报错及解决方法

1548-Cannot load from mysql.proc. The table is probably corrupted

输入以下指令进行修复

mysql_upgrade  -uroot  -p

MySQL数据库操作命令

创建数据库:CREATE DATABASE 数据库名;
查看数据库:SHOW DATABASES;
选择数据库:USE 数据库名;
删除数据库:DROP DATABASE 数据库名;

1:使用SHOW语句找出在服务器上当前存在什么数据库:
mysql> SHOW DATABASES;

2:创建一个数据库MYSQLDATA
mysql> CREATE DATABASE MYSQLDATA;

3:选择你所创建的数据库
mysql> USE MYSQLDATA; (按回车键出现Database changed 时说明操作成功!)

4:查看现在的数据库中存在什么表
mysql> SHOW TABLES;

5:创建一个数据库表
mysql> CREATE TABLE MYTABLE (name VARCHAR(20), sex CHAR(1));

6:显示表的结构:
mysql> DESCRIBE MYTABLE;

7:往表中加入记录
mysql> insert into MYTABLE values (“hyq”,”M”);

8:用文本方式将数据装入数据库表中(例如D:/mysql.txt)
mysql> LOAD DATA LOCAL INFILE “D:/mysql.txt” INTO TABLE MYTABLE;

9:导入.sql文件命令(例如D:/mysql.sql)
mysql> use database;
mysql> source d:/mysql.sql;

10:删除表

mysql> drop TABLE MYTABLE;

11:清空表
mysql> delete from MYTABLE;

12:更新表中数据
mysql> update MYTABLE set sex=”f” where name=hyq;

此外,Linux下经常使用的命令:

1:导入数据库备份文件的方法:
root: mysql –u数据库帐户 –p密码 数据库名 < .sql备份文件

2:MySql的用户管理是通过User表来实现的,添加新用户常用的方法有两个,一是在User表插入相应的数据行,同时设置相应的权限;二是通过  GRANT命令创建具有某种权限的用户。其中GRANT的常用用法如下:
mysql> grant all privileges on 数据库明.* to 用户名@localhost identified by “密码”;

3:清空文件内容:
cat /dev/null > 文件名

4:添加帐户:
useradd 用户名 –d 目录名 –s /sbin/nologin(不允许该用户直接登录服务器)

5:设置帐户密码
passwd 用户名

特别注意:
刚安装好的MySql包含一个含空密码的root帐户和一个匿名帐户,这是很大的安全隐患,对于一些重要的应用我们应将安全性尽可能提高,在这里应把匿名帐户删除、 root帐户设置密码,可用如下命令进行:
use mysql;
delete from User where User=””;
update User set Password=PASSWORD(newpassword) where User=root;

启动:net start mySql;
进入:mysql -u root -p/mysql -h localhost -u root -p databaseName;
列出数据库:show databases;
选择数据库:use databaseName;
列出表格:show tables;
显示表格列的属性:show columns from tableName;
建立数据库:source fileName.txt;
匹配字符:可以用通配符_代表任何一个字符,%代表任何字符串;
增加一个字段:alter table tabelName add column fieldName dataType;
增加多个字段:alter table tabelName add column fieldName1 dataType,add columns fieldName2 dataType;
多行命令输入:注意不能将单词断开;当插入或更改数据时,不能将字段的字符串展开到多行里,否则硬回车将被储存到数据中;
增加一个管理员帐户:grant all privileges on *.* to user@localhost identified by “password”;
每条语句输入完毕后要在末尾填加分号’;’,或者填加’\g’也可以;
查询时间:select now();
查询当前用户:select user();
查询数据库版本:select version();
查询当前使用的数据库:select database();

1、删除student_course数据库中的students数据表:
rm -f student_course/students.*

2、备份数据库:(将数据库test备份)
mysqldump -u root -p test>c:\test.txt
备份表格:(备份test数据库下的mytable表格)
mysqldump -u root -p test.mytable>c:\test.txt
将备份数据导入到数据库:(导回test数据库)
mysql -u root -p test<c:\test.txt

3、创建临时表:(建立临时表zengchao)
create temporary table zengchao(name varchar(10));

4、创建表是先判断表是否存在
create table if not exists students(……);

5、从已经有的表中复制表的结构
create table table2 select * from table1 where 1<>1;

6、复制表
create table table2 select * from table1;

7、对表重新命名
alter table table1 rename as table2;

8、修改列的类型
alter table table1 modify id int unsigned;//修改列id的类型为int unsigned
alter table table1 change id sid int unsigned;//修改列id的名字为sid,而且把属性修改为int unsigned

9、创建索引
alter table table1 add index ind_id (id);
create index ind_id on table1 (id);
create unique index ind_id on table1 (id);//建立唯一性索引

10、删除索引
drop index idx_id on table1;
alter table table1 drop index ind_id;

11、联合字符或者多个列(将列id与”:”和列name和”=”连接)
select concat(id,’:’,name,’=’) from students;

12、limit(选出10到20条)<第一个记录集的编号是0>
select * from students order by id limit 9,10;

13、MySQL不支持的功能
事务,视图,外键和引用完整性,存储过程和触发器

14、MySQL会使用索引的操作符号
<,<=,>=,>,=,between,in,不带%或者_开头的like

15、使用索引的缺点
1)减慢增删改数据的速度;
2)占用磁盘空间;
3)增加查询优化器的负担;
当查询优化器生成执行计划时,会考虑索引,太多的索引会给查询优化器增加工作量,导致无法选择最优的查询方案;

16、分析索引效率
方法:在一般的SQL语句前加上explain;
分析结果的含义:
1)table:表名;
2)type:连接的类型,(ALL/Range/Ref)。其中ref是最理想的;
3)possible_keys:查询可以利用的索引名;
4)key:实际使用的索引;
5)key_len:索引中被使用部分的长度(字节);
6)ref:显示列名字或者”const”(不明白什么意思);
7)rows:显示MySQL认为在找到正确结果之前必须扫描的行数;
8)extra:MySQL的建议;

17、使用较短的定长列
1)尽可能使用较短的数据类型;
2)尽可能使用定长数据类型;
a)用char代替varchar,固定长度的数据处理比变长的快些;
b)对于频繁修改的表,磁盘容易形成碎片,从而影响数据库的整体性能;
c)万一出现数据表崩溃,使用固定长度数据行的表更容易重新构造。使用固定长度的数据行,每个记录的开始位置都是固定记录长度的倍数,可以很容易被检测到,但是使用可变长度的数据行就不一定了;
d)对于MyISAM类型的数据表,虽然转换成固定长度的数据列可以提高性能,但是占据的空间也大;

18、使用not null和enum
尽量将列定义为not null,这样可使数据的出来更快,所需的空间更少,而且在查询时,MySQL不需要检查是否存在特例,即null值,从而优化查询;
如果一列只含有有限数目的特定值,如性别,是否有效或者入学年份等,在这种情况下应该考虑将其转换为enum列的值,MySQL处理的更快,因为所有的enum值在系统内都是以标识数值来表示的;

19、使用optimize table
对于经常修改的表,容易产生碎片,使在查询数据库时必须读取更多的磁盘块,降低查询性能。具有可变长的表都存在磁盘碎片问题,这个问题对blob数据类型更为突出,因为其尺寸变化非常大。可以通过使用optimize table来整理碎片,保证数据库性能不下降,优化那些受碎片影响的数据表。 optimize table可以用于MyISAM和BDB类型的数据表。实际上任何碎片整理方法都是用mysqldump来转存数据表,然后使用转存后的文件并重新建数据表;

20、使用procedure analyse()
可以使用procedure analyse()显示最佳类型的建议,使用很简单,在select语句后面加上procedure analyse()就可以了;例如:
select * from students procedure analyse();
select * from students procedure analyse(16,256);
第二条语句要求procedure analyse()不要建议含有多于16个值,或者含有多于256字节的enum类型,如果没有限制,输出可能会很长;

21、使用查询缓存
1)查询缓存的工作方式:
第一次执行某条select语句时,服务器记住该查询的文本内容和查询结果,存储在缓存中,下次碰到这个语句时,直接从缓存中返回结果;当更新数据表后,该数据表的任何缓存查询都变成无效的,并且会被丢弃。
2)配置缓存参数:
变量:query_cache _type,查询缓存的操作模式。有3中模式,0:不缓存;1:缓存查询,除非与select sql_no_cache开头;2:根据需要只缓存那些以select sql_cache开头的查询;query_cache_size:设置查询缓存的最大结果集的大小,比这个值大的不会被缓存。

22、调整硬件
1)在机器上装更多的内存;
2)增加更快的硬盘以减少I/O等待时间;
寻道时间是决定性能的主要因素,逐字地移动磁头是最慢的,一旦磁头定位,从磁道读则很快;
3)在不同的物理硬盘设备上重新分配磁盘活动;
如果可能,应将最繁忙的数据库存放在不同的物理设备上,这跟使用同一物理设备的不同分区是不同的,因为它们将争用相同的物理资源(磁头)。

MySQL数据类型及取值范围





函数

Ignoring query to other database报错

出现这个报错通常是由于在登录到MySQL输入mysql -uroot -p时漏掉了-u中的u所致

修改root密码

修改root方法比较多,这里使用直接在用户中修改密码的方法:

MySQL升级(Ubuntu)

以 Ubuntu 为例

 

MySQL密码不符合要求

ERROR 1819 (HY000): Your password does not satisfy the current policy requirements
这一报错通常出现在较新的MySQL版本中,在MySQL命令行中输入
show variables like ‘validate_password%’;可查看到具体的要求

可以通过修改具体参数来调整实际的要求,有时我们在开发环境并不希望设置复杂的密码,此时可以在/etc/my.cnf中加入validate-password = off在取消这一限制。

[ERROR] InnoDB: Table mysql.innodb_table_stats not found.

这一问题通常发生在升级 MySQL版本时

对 mysql 库执行完以上创建后在命令行中执行mysql_upgrade

MySQL误删除如何恢复

在配置文件的[mysqld]版块下添加:

注:需确保/var/log/mysql/存在且 mysql 用户拥有写入权限

方法1:进入数据库执行(mysql-bin.000001或其它文件)

SHOW BINLOG EVENTS [IN ‘log_name‘] [FROM pos] [LIMIT [offset,] row_count]\

查看当前 bin_log 日志:show master logs;

通过文件也可查看

查看Pos列确定所需进行恢复的命令位置,命令行中执行:

方法2:https://github.com/danfengcao/binlog2sql

mysql-bin 文件

默认在/var/lib/mysql下会产生大量的日志文件mysql-bin,时间累积会撑满磁盘,可通过配置文件设置保留天数,如:

查看数据库及数据表大小

常见问题

1、MySQL [Warning]: IP address ‘xxxx’ could not be resolved: Name or service not known

2、Specified key was too long; max key length is 767 bytes

默认 utf8一个字符为三个字节(255+1)*3-1=767,通常这一原因是由utf8mb4所致,此时在 varchar 达到192时就会报出如上错误。解决方案有:

3、message: “Lock wait timeout exceeded; try restarting transaction”

4、为何max_connection的修改未生效

可是通过修改 my.cnf 文件重启 MySQL服务后发现配置并未生效,首先检查/etc/security/limits.conf,检查是否有如下配置,如无则自行添加

接下编辑mysql.service或mysqld.service 服务文件

此时就生效了

5、MySQL 8 本地连接Authentication plugin ‘caching_sha2_password’ cannot be loaded:

6、Could not get JDBC Connection; nested exception is com.alibaba.druid.pool.GetConnectionTimeoutException

排查:

 

退出移动版