MySQL整体文档

2023年8月2日 09:29

https://dev.mysql.com/doc/refman/5.7/en/
https://bugs.mysql.com/

http://blog.51cto.com/oldboy/1959255
https://db-engines.com/en/ranking

1. 数据库简介

1.关系型数据库

关系型数据库的特点

  • 二维表
  • 典型产品Oracle传统企业,MySQL是互联网企业
  • 数据存取是通过SQL
  • 最大特点,数据安全性方面强(ACID)

people

姓名性别年龄住址
M25ID

address

住址国家城市街道
ID中国北京朝阳区北苑路108号

oracle

Oracle数据库版本

7–8i–9i–10g—11g–12c

Oracle的市场应用

市场份额第一,趋势递减
市场空间,传统企业
传统企业也在互联网化

mariadb

https://mariadb.com/kb/en/library/documentation/
TokuDB存储引擎 ----------- zabbix

sql server

微软和sysbase合作开发的产品,后来自己开发,windows平台
传统行业在用

DB2

市场占有量小
目前只有:国有银行(人行、中国银行、工商银行等)、中国移动应用

mysql

MySQL数据库版本介绍
5.0–5.1–5.5–5.6–5.7–8.0
MySQL的市场应用
中、大型互联网公司
市场空间:互联网领域第一
趋势明显
同源产品:MariaDB、perconaDB

非关系型数据库(nosql)

NoSQL,Not Only SQL
不是否定关系型数据库,而是作为补充
关注高性能,高并发,灵活性,忽略和上述无关的功能
典型产品:Redis(持久化缓存,两个半天)、MongoDB(最接近关系型数据的NoSQL)、Memcached
管理不适用SQL管理,而是用一些特殊的API或数据接口

NoSQL的分类、特点、典型产品

一些开源的NoSQL体系,如Facebook的Cassandra,Apache的Hbase, Redis,mongodb等

1、键值(Key-Value)存储数据库

使用哈希表。可以通过key来添加、查询或者删除数据,很高的性能和扩展性
典型产品:Memcache(新浪:Memcache持久化)、Redis(数据类型更丰富)、BerkeleyDB

2、列存储(column-oriented)数据库

典型产品:Cassandra,HBase

3、面向文档(Document-oriented)的数据库

典型产品:MongoDB(介于关系型数据库和非关系型数据库直接的产品),CouchDB

4、面向图形(Graphic)的数据库

典型产品:Neo4J,InfoGrid

memcache

1、key-value型数据库
2、纯内存数据库
3、持久化产品memcachedb(sina开发)

redis

http://www.redis.io/documentation
redis特点:
1、支持内存缓存,这个功能相当于memcached
2、支持持久化存储,这个功能相当于memcachedb,ttserver
3、数据类型更丰富,比其他key-value库功能更强
4、支持主从集群,分布式集群
5、支持队列等特殊功能
应用:缓存从存取memcached更改存取redis

为什么选择MySQL数据库

大多数使用Linux操作系统的大中小互联网网站都在使用MySQL数据库,
从大型的BAT(百度、阿里、腾讯)门户,到电商平台,分类门户等无一例外
都使用MySQL数据库
原因一下几点:
1、性能卓越,服务稳定,很少出现异常宕机;
2、开放源代码且无版权制约,自主性及使用成本低;
3、历史悠久,社区及用户非常活跃,遇到问题可以寻求帮助;
4、体积小,安装使用简单,易于维护,安装维护成本低;
5、品牌口碑效应,使企业无需考虑就直接使用,LAMP, LNMP流行架构;
6、支持多种操作系统,提供多种API接口,支持多种开发语言,特别对流行的php语言有很好的支持

mysql发展史

1979年,报表工具Unireg出现。
1985 年,以瑞典David Axmark为首,成立了一家公司(AB前身),IASM引擎出现。
1990年,提供SQL支持。
1999-2000年,MySQLAB公司成立,并公布源码,开源化。
2000年4月BDB引擎出现,支持事务。
2008年1月16号MySQL被Sun公司收购。
2009年04月20日Oracle收购Sun公司,MySQL转入Oracle 门下

MySQL的分类与升级

分类:社区版,商业版。 Alpha,Beta,RC, GA版
区别:
1、商业版组织管理与测试环节控制更严格,稳定性方面,比社区版更稳定
2、MySQL成熟产品,商业版与社区版之间性能方面相差不大
3、商业版不遵守GPL协议,社区版遵守GPL协议可以免费试用
4、商业版可以购买相关服务,享受7X24小时技术支持以及打补丁等服务,
但是用户必须为此支付服务费用
5、社区版维护只能靠社区提供,无法像商业版获得故障及补丁服务
Alpha版:
一般只在开发的公司内部运行,不对外公开
Beta版:
完成功能的开发和所有的测试工作之后的产品,不会存在较大的功能或性能BUG
RC版:
生产环境发布之前的一个小版本或称候选版,是根据Beta版测试结果,收集到的BUG
或缺陷之处等收集到的信息,进行修复和完善之后的一版产品
GA:
软件产品正式发布的版本

MySQL的产品路线

第一条:3.26–5.1版本
正宗后代
Centos5、6中默认有5.1版本
Centos7中默认是MariaDB
第二条:5.4–5.7 ,8.0版本
借鉴社区好的贡献,进一步开发的版本
主流版本:5.5 5.6 5.7
第三条:MySQL Cluster 6.0 版本&更高
类似于Oracle RAC,硬件要求高。
一般各大网站没有人用

生产环境如何选择MySQL版本

选择社区版的稳定GA版本
选择发布后6个月以上的GA版
要选择前后几个月没有大的BUG修复的版本,而不是大量修复BUG的几种版本
最好向后较长时间没有更新发布的版本
考虑开发人员开发程序使用的版本是否兼容你选的版本
优先企业非核心业务采用新版本的数据库GA版本软件
作为内部开发测试数据库环境,跑大概3-6个月时间
向DBA高手请教,或者在技术氛围好的群里和大家一起交流,使用真正的
高手们用过的好用的GA版本产品
经过上述工序后,若没有重要的功能BUG或性能瓶颈,则可以开始考虑
作为任何业务数据服务的后端数据软件

MySQL数据库的多种安装方法

1.RPM、Yum:安装方便、安装速度快,无法定制
2.二进制:不需要安装,解压即可使用,不能定制功能
3.编译安装:可定制,安装慢。
5.5之前:./configure make makeinstall
5.5之后:cmake gmake
4.先编译,然后制作rpm,制作yum库,然后yum安装。
简单、速度快、可定制,比较复杂制作时间长
企业选择安装方式
中小企业:以上方式都可以,运维偏向编译,dba偏向选择二进制。
大型企业:可以选择4

mysql安装配置(5.6)

安装依赖

yum groupinstall "Compatibility Libraries" "Development Tools"yum install -y gcc gcc-c++ automake autoconf git makeyum -y install cmake bison-devel ncurses-devel libaio-devel

获取mysql软件包

http://repo.mysql.com/yum/mysql-5.7-community/el/7/x86_64/mysql-community-release-el7-7.noarch.rpmhttp://repo.mysql.com/yum/mysql-5.7-community/el/7/x86_64/mysql-community-server-5.7.20-1.el7.x86_64.rpmhttps://downloads.mysql.com/archives/get/file/mysql-5.7.20-linux-glibc2.12-x86_64.tar.gzhttps://downloads.mysql.com/archives/get/file/mysql-5.7.20.tar.gz

配置编译选项

https://dev.mysql.com/doc/refman/5.6/en/source-configuration-options.html

cmake . -DCMAKE_INSTALL_PREFIX=/application/mysql-5.6.34 \-DMYSQL_DATADIR=/application/mysql-5.6.34/data \-DMYSQL_UNIX_ADDR=/application/mysql-5.6.34/tmp/mysql.sock \-DDEFAULT_CHARSET=utf8 \-DDEFAULT_COLLATION=utf8_general_ci \-DWITH_EXTRA_CHARSETS=all \-DWITH_INNOBASE_STORAGE_ENGINE=1 \-DWITH_FEDERATED_STORAGE_ENGINE=1 \-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \-DWITHOUT_EXAMPLE_STORAGE_ENGINE=1 \-DWITH_ZLIB=bundled \-DWITH_SSL=bundled \-DENABLED_LOCAL_INFILE=1 \-DWITH_EMBEDDED_SERVER=1 \-DENABLE_DOWNLOADS=1 \-DWITH_DEBUG=0

编译 && 安装

make && make install

12. 安装后操作

useradd -s /sbin/nologin mysql -Mln -s /application/mysql-5.6.34  /application/mysqlchown -R mysql.mysql /application/mysql/data/application/mysql/scripts/mysql_install_db --user=mysql --basedir=/application/mysql --datadir=/application/mysql/data/bin/cp /application/mysql/support-files/my-default.cnf /etc/my.cnf/bin/cp /application/mysql/support-files/mysql.server /etc/init.d/mysqldecho 'export PATH=/application/mysql/bin:$PATH' >> /etc/profile. /etc/profilechkconfig --add mysqld

启动错误
Starting MySQL.Logging to ‘/application/mysql-5.6.36/data/db01.err’.
171113 13:07:01 mysqld_safe Directory ‘/application/mysql-5.6.36/tmp’ for UNIX socket file don’t exists.
ERROR! The server quit without updating PID file (/application/mysql-5.6.36/data/db01.pid).
mkdir /application/mysql-5.6.36/tmp
chown -R mysql.mysql /application/mysql-5.6.36/tmp

mysql安装配置(5.7)

依赖

yum groupinstall "Compatibility Libraries" "Development Tools"yum install -y gcc gcc-c++ automake autoconf git makeyum -y install cmake bison-devel ncurses-devel libaio-devel

软件包存放目录

cd /server/toolswget https://downloads.mysql.com/archives/get/file/mysql-5.7.20.tar.gzwget https://downloads.mysql.com/archives/get/file/mysql-boost-5.7.20.tar.gztar xf mysql-5.7.20.tar.gztar xf mysql-boost-5.7.20.tar.gz

配置编译选项

https://blog.csdn.net/caimouse/article/details/73123178
Boost库是为C++语言标准库提供扩展的一些C++程序库的总称,由Boost社区组织开发、维护。
字符串和文本处理库
容器库
迭代器库
算法库
函数对象和高阶编程库
泛型编程库
模板元编程
预处理元编程库
并发编程库
数学和数字库
排错和测试库
数据结构库
图像处理库
输入输出库
跨语言混合编程库
内存管理库
解析库
编程接口库
综合类库
编译器问题的变通方案库

cmake . -DCMAKE_INSTALL_PREFIX=/application/mysql-5.7.20 \-DMYSQL_DATADIR=/application/mysql-5.7.20/data \-DMYSQL_UNIX_ADDR=/application/mysql-5.7.20/tmp/mysql.sock \-DDOWNLOAD_BOOST=1 \-DWITH_BOOST=/server/tools/mysql-5.7.20/boost \-DSYSCONFDIR=/etc \-DDEFAULT_CHARSET=utf8mb4 \-DDEFAULT_COLLATION=utf8mb4_general_ci \-DWITH_EXTRA_CHARSETS=all \-DWITH_INNOBASE_STORAGE_ENGINE=1 \-DWITH_FEDERATED_STORAGE_ENGINE=1 \-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \-DWITHOUT_EXAMPLE_STORAGE_ENGINE=1 \-DWITH_MYISAM_STORAGE_ENGINE=1 \-DWITH_ZLIB=bundled \-DWITH_SSL=bundled \-DENABLED_LOCAL_INFILE=1 \-DWITH_EMBEDDED_SERVER=1 \-DENABLE_DOWNLOADS=1 \-DWITH_DEBUG=0
cmake -DCMAKE_INSTALL_PREFIX=/usr/local/mysql-5.7.20 \-DMYSQL_USER=mysql \-DWITH_MYISAM_STORAGE_ENGINE=1 \-DWITH_INNOBASE_STORAGE_ENGINE=1 \-DEXTRA_CHARSETS=all \-DDEFAULT_CHARSET=utf8 \-DDEFAULT_COLLATION=utf8_general_ci \-DWITH_DEBUG=0 \-DMYSQL_MAINTAINER_MODE=0 \-DWITH_SSL:STRING=bundled \-DWITH_ZLIB:STRING=bundled \-DWITH_SYSTEMD=1 \-DDOWNLOAD_BOOST=1 \-DWITH_BOOST=./boost

编译 && 安装

内存建议> 2GB

make && make install

编译过程中的问题(编译到73% 内存消耗殆尽)
c++: internal compiler error: Killed (program cc1plus) Please submit a full bug report

授权

chown -R mysql.mysql /usr/local/mysql-5.7.20

初始化

/usr/local/mysql/bin/mysqld --initialize-insecure --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data

配置文件

/etc/my.cnf

[mysqld]basedir=/usr/local/mysqldatadir=/usr/local/mysql/datauser=mysqllog-error=/usr/local/mysql/data/error.log

服务管理文件(systemd管理)

https://dev.mysql.com/doc/refman/5.7/en/using-systemd.html
vim /etc/systemd/system/mysqld.service

[Unit]Description=MySQL ServerDocumentation=man:mysqld(8)Documentation=http://dev.mysql.com/doc/refman/en/using-systemd.htmlAfter=network.targetAfter=syslog.target[Install]WantedBy=multi-user.target[Service]User=mysqlGroup=mysqlExecStart=/usr/local/mysql/bin/mysqld --defaults-file=/etc/my.cnfLimitNOFILE = 5000

启动

systemctl start mysqld.service

修改root密码

mysqladmin -uroot -p password '123456'

体系结构原理

MySQL是一个典型的C/S服务架构

mysql自带的客户端程序

mysql
mysqladmin
mysqldump

mysqld服务端程序

二进制的程序,一个后台的守护进程
单进程多线程的服务结构
图片

MySQL环境变量

环境变量描述
AUTHENTICATION_LDAP_CLIENT_LOG客户端LDAP身份验证日志记录级别。
AUTHENTICATION_PAM_LOGPAM 身份验证插件调试日志记录设置。
CCC编译器的名称(用于运行CMake)。
CXXC ++编译器的名称(用于运行CMake)。
CCC编译器的名称(用于运行CMake)。
DBI_USERPerl DBI的默认用户名。
DBI_TRACEPerl DBI的跟踪选项。
HOMEmysql历史文件的默认路径是 $HOME/.mysql_history。
LD_RUN_PATH用于指定的位置libmysqlclient.so。
LIBMYSQL_ENABLE_CLEARTEXT_PLUGIN启用mysql_clear_password身份验证插件; 请参见第6.4.1.6节“客户端明文可插入认证”
LIBMYSQL_PLUGIN_DIR查找客户端插件的目录。
LIBMYSQL_PLUGINS客户端插件预加载。
MYSQL_DEBUG调试时调试跟踪选项。
MYSQL_GROUP_SUFFIX选项组后缀值(如指定 –defaults-group-suffix)。
MYSQL_HISTFILEmysql历史文件的路径。如果设置了此变量,则其值将覆盖默认值 $HOME/.mysql_history。
MYSQL_HISTIGNORE模式指定mysql不应该记录的语句$HOME/.mysql_history,或者 syslog是否 –syslog给出。
MYSQL_HOME服务器特定my.cnf文件所在目录的路径 。
MYSQL_HOSTmysql命令行客户端使用的默认主机名。
MYSQL_OPENSSL_UDF_DH_BITS_THRESHOLD最大密钥长度 CREATE_DH_PARAMETERS()。请参见 第12.19.2节“MySQL Enterprise Encryption用法和示例”
MYSQL_OPENSSL_UDF_DSA_BITS_THRESHOLD最大DSA密钥长度 CREATE_ASYMMETRIC_PRIV_KEY()。请参见第12.19.2节“MySQL Enterprise Encryption用法和示例”
MYSQL_OPENSSL_UDF_RSA_BITS_THRESHOLD最大RSA密钥长度 CREATE_ASYMMETRIC_PRIV_KEY()。请参见第12.19.2节“MySQL Enterprise Encryption用法和示例”
MYSQL_PS1要在mysql命令行客户端中使用的命令提示符。
MYSQL_PWD连接mysqld时的默认密码。使用它是不安全的。请参见 第6.1.2.1节“密码安全的最终用户指南”
MYSQL_TCP_PORT默认的TCP / IP端口号。
MYSQL_TEST_LOGIN_FILE.mylogin.cnf登录路径文件的名称。
MYSQL_TEST_TRACE_CRASH测试协议跟踪插件是否会崩溃客户端。见下表注释。
MYSQL_TEST_TRACE_DEBUG测试协议跟踪插件是否产生输出。见下表注释。
MYSQL_UNIX_PORT默认的Unix套接字文件名; 用于连接 localhost。
MYSQLX_TCP_PORTX Plugin默认的TCP / IP端口号。
MYSQLX_UNIX_PORTX Plugin默认的Unix套接字文件名; 用于连接localhost。
PATH用于shell来查找MySQL程序。
PKG_CONFIG_PATH的位置mysqlclient.pc pkg配置文件。见下表注释。
TMPDIR创建临时文件的目录。
TZ这应该设置为您当地的时区。请参见 第B.6.3.7节“时区问题”
UMASK创建文件时的用户文件创建模式。见下表注释。
UMASK_DIR创建目录时的用户目录创建模式。见下表注释。
USER连接到mysqld时Windows上的默认用户名 。

MySQL的连接方式

网络连接(TCP/IP)

mysql -uroot -poldboy123 -h 10.0.0.51

套接字(socket)

mysql -uroot -poldboy123 -S /tmp/mysql.sock

查看二进制文件内容
strings /application/mysql/bin/mysql |grep mysql.sock

MySQL的多实例

多实例是什么

一台机器上开启多个不同的服务端口(如:3306,3307)
运行多个MySQL服务进程,这些实例公用一套MySQL安装程序,
使用不同的my.cnf配置文件,启动程序,数据文件。
在提供服务时,多实例MySQL在逻辑上看来是各自独立的,
多个实例的自身是根据配置文件对应的设定值,来取得服务器的
相关硬件资源的多少。很多服务都可以有多个实例,
例如:tomcat,redis等

多实例的作用与问题

1、有效利用服务器资源,充分利用剩余的资源提供更多的服务
2、节约服务器资源,需要主从同步等技术时,多实例就再好不过了
3、资源互抢问题,当某个服务实例并发很高或者慢查询时,整个实例会消耗更多的内存、CPU、磁盘IO资源

多实例生产场景应用

1、资金紧张型公司的选择
2、并发访问不是特别大的业务
3、门户网站应用MySQL多实例的场景

配置方案

1、多个配置文件,多个启动程序(比较好,推荐)
2、单一配置文件,多个启动程序(官方推荐,耦合性太高,不好)
单机运行1~4个数据库实例

mysql多实例启动脚本

/data/3306/mysql

#!/bin/bashport=3306mysql_user="root"CmdPath="/application/mysql/bin"mysql_sock="/data/${port}/mysql.sock"mysqld_pid_file_path=/data/3306/mysql.pidstart(){    if [ ! -e "$mysql_sock" ];then      printf "Starting MySQL...\n"        /bin/sh ${CmdPath}/mysqld_safe --defaults-file=/data/${port}/my.cnf --user=root 2>&1 > /dev/null &        sleep 3    else        printf "MySQL is running...\n"        exit 1    fi}stop(){    if [ ! -e "$mysql_sock" ];then        printf "MySQL is stopped...\n"        exit 1    else        printf "Stoping MySQL...\n"        mysqld_pid=`cat "$mysqld_pid_file_path"`         if (kill -0 $mysqld_pid 2>/dev/null)           then             kill $mysqld_pid             sleep 2         fi    fi}restart(){    printf "Restarting MySQL...\n"    stop    sleep 2    start}case "$1" in    start)        start    ;;    stop)        stop    ;;    restart)        restart    ;;    *)        printf "Usage: /data/${port}/mysql {start|stop|restart}\n"esac

主配置文件my.cnf

/etc/my.cnf

......log_bin = /application/mysqlbinlog/mysql-binbinlog_cache_size = 4Mmax_binlog_cache_size = 2Gmax_binlog_size = 1Gexpire_logs_days = 7binlog-ignore-db = mysqlreplicate-ignore-db = mysqlskip-name-resolve......[client]port            = 3306socket          = /data/3306/mysql.sock[mysql]no-auto-rehash[mysqld]user    = mysqlport    = 3306socket  = /data/3306/mysql.sockbasedir = /application/mysqldatadir = /data/3306/dataopen_files_limit    = 1024back_log = 600max_connections = 800max_connect_errors = 3000table_open_cache = 614external-locking = FALSEmax_allowed_packet =8Msort_buffer_size = 1Mjoin_buffer_size = 1Mthread_cache_size = 100thread_concurrency = 2query_cache_size = 2Mquery_cache_limit = 1Mquery_cache_min_res_unit = 2k#default_table_type = InnoDBthread_stack = 192K#transaction_isolation = READ-COMMITTEDtmp_table_size = 2Mmax_heap_table_size = 2M#long_query_time = 1#log_long_format#log-error = /data/3306/error.log#log-slow-queries = /data/3306/slow.logpid-file = /data/3306/mysql.pid#log-bin = /data/3306/mysql-binrelay-log = /data/3306/relay-binrelay-log-info-file = /data/3306/relay-log.infobinlog_cache_size = 1Mmax_binlog_cache_size = 1Mmax_binlog_size = 2Mexpire_logs_days = 7key_buffer_size = 16Mread_buffer_size = 1Mread_rnd_buffer_size = 1Mbulk_insert_buffer_size = 1Mlower_case_table_names = 1skip-name-resolveslave-skip-errors = 1032,1062replicate-ignore-db=mysqlserver-id = 6innodb_additional_mem_pool_size = 4Minnodb_buffer_pool_size = 32M#innodb_data_file_path = ibdata1:128M:autoextendinnodb_file_io_threads = 4innodb_thread_concurrency = 8innodb_flush_log_at_trx_commit = 2innodb_log_buffer_size = 2Minnodb_log_file_size = 4Minnodb_log_files_in_group = 3innodb_max_dirty_pages_pct = 90innodb_lock_wait_timeout = 120innodb_file_per_table = 0[mysqldump]quickmax_allowed_packet = 2M[mysqld_safe]log-error=/data/3306/mysql_3306.errpid-file=/data/3306/mysql.pid

mysql配置文件读取顺序

https://dev.mysql.com/doc/refman/5.6/en/option-files.html

  • /etc/my.cnf
  • /etc/mysql/my.cnf
  • $MYSQL_HOME/my.cnf
  • ~/.my.cnf
  • defaults-extra-file
  • –defaults-file
/etc/my.cnf全球选择
/etc/mysql/my.cnf全球选择
SYSCONFDIR/my.cnf全球选择
$MYSQL_HOME/my.cnf特定于服务器的选项(仅限服务器)
defaults-extra-file指定的文件 –defaults-extra-file,如果有的话
~/.my.cnf用户特定选项
~/.mylogin.cnf用户特定的登录路径选项(仅限客户端)
mysqld先读取命令行配置,找不到,就读取配置文件,找不到,读取编译时的配置,最后读取mysqld默认的配置
Zabbix Agent获取MySQL数据
/etc/zabbix/.my.cnf
[mysql]host = localhostuser = rootpassword = 123456[mysqladmin]host = localhostuser = rootpassword = 123456

多实例配置文件

3307

 [mysqld]basedir=/application/mysqldatadir=/data/3307socket=/data/3307/mysql.socklog-error=/data/3307/mysql.loglog_bin=/data/3307/mysql-binbinlog_format=rowskip_name_resolve=1server_id=3307port=3307

3308

[mysqld]basedir=/application/mysqldatadir=/data/3308socket=/data/3308/mysql.socklog-error=/data/3308/mysql.loglog_bin=/data/3308/mysql-binbinlog_format=rowskip_name_resolve=1server_id=3308port=3308

3309

[mysqld]basedir=/application/mysqldatadir=/data/3309socket=/data/3309/mysql.socklog-error=/data/3309/mysql.loglog_bin=/data/3309/mysql-binbinlog_format=rowskip_name_resolve=1server_id=3309port=3309

mysql常用操作

mysql命令

mysql-u  用户名-p  密码-h  mysql服务器ip地址-S  套接字-P  端口

mysql 登录

mysql -uroot -poldboy -S /data/3306/mysql.sock

mysql 远程登录

mysql -h 10.0.0.51 -uoldboy -p123456 -S /data/3308/mysql.sock -P3308

登录数据库以后切换实例

mysql> system mysql -S /data/3307/mysql.sock

查看用户具有的权限

mysql> show grants for oldboy@'172.16.1.%'\G;

修改管理员密码

mysqladmin -S /data/3306/mysql.sock -uroot -p password 'oldboy123'

跳过用户登录mysql

第一步:修改对应实例的配置文件
vim my.cnf

[mysqld]skip-grant-tables

重启mysql实例
第二步:登录mysql实例

killall mysqldmysqld_safe --defaults-file=/data/3308/my.cnf --skip-grant-table &mysql -uroot -p -S /data/3308/mysql.sockmysql> update mysql.user set password = password("123456") where user = 'root'  and  host = 'localhost';flush privileges;

–skip-networking 禁止远程连接

命令前加空格,历史记录不显示

export HISTCONTROL=ignorespace

添加超级用户

mysql> grant all on *.* to admin@'%' identified by 'oldboy123' **with grant option**;

sql语句修改用户密码

修改密码

mysql> update mysql.user set password=password('oldboy') where user='root' and host='localhost';

刷新权限

mysql> flush privileges;

临时修改mysql提示符

mysql> prompt \u@\h>PROMPT set to '\u@\h>'root@localhost>prompt mysql>PROMPT set to 'mysql>'mysql>mysql>prompt \u>PROMPT set to '\u>'root>

查看mysql版本

方法1

mysql>** \s**--------------mysql  Ver 14.14 Distrib 5.5.32, for Linux (x86_64) using readline 5.1Connection id:          2Current database:       mysqlCurrent user:           root@localhostSSL:                    Not in useCurrent pager:          stdoutUsing outfile:          ''Using delimiter:        ;Server version:         5.5.32-log Source distributionProtocol version:       10Connection:             Localhost via UNIX socketServer characterset:    utf8Db     characterset:    utf8Client characterset:    utf8Conn.  characterset:    utf8UNIX socket:            /data/3306/mysql.sockUptime:                 23 min 24 secThreads: 2  Questions: 23  Slow queries: 0  Opens: 37  Flush tables: 1  Open tables: 30  Queries per second avg: 0.016

方法2

mysql> **select version();**+------------+| version()  |+------------+| 5.5.32-log |+------------+1 row in set (0.00 sec)

查看错误代码含义

perror 1505

sql语句

https://dev.mysql.com/doc/refman/5.7/en/sql-syntax.html
https://dev.mysql.com/doc/refman/5.7/en/functions.html
http://www.runoob.com/sql/sql-tutorial.html

sql分类

DDL(Data Definition Language)-数据定义语言(create alter drop)管理基础数据,
例如:库、表 运维要熟练,开发也要熟练

DCL(Data Control Language)-数据控制语言(grant revoke commit rollback),
用户授权、权限回收、数据提交回滚等 运维要熟练

DML(Data Manipulation Language)-数据操作语言(select insert delete update),
针对数据库里的表里的数据进行操作,记录 开发要熟练,运维要了解

数据库中的包含关系

数据库服务器—> 数据库(多个实例)—> 多个库—> 多个表—>多个字段(列)、记录(行)(数据)

帮助

mysql> ? contents;You asked for help about help category: "Contents"For more information, type 'help <item>', where <item> is one of the followingcategories:   Account Management   Administration   Compound Statements   Data Definition   Data Manipulation   Data Types   Functions   Functions and Modifiers for Use with GROUP BY   Geographic Features   Help Metadata   Language Structure   Plugins   Procedures   Storage Engines   Table Maintenance   Transactions   User-Defined Functions   Utility

库操作

第一步在mysql下执行:rehash;
第二步use在一个库中:use mysql;然后就可以愉快的使用了

创建数据库

create database <数据库名>;

查看已经创建的数据库信息

show create database oldboy\G;

创建数据库指定字符集

mysql> create database oldgirl CHARACTER SET gbk COLLATE gbk_chinese_ci;mysql> create database abc character set utf8 collate utf8_general_ci;

查看字符集和校对规则

show character set;

创建不同字符集格式的数据库命令

create database oldboy;   #<==默认数据库配置,相当于创建拉丁字符集数据库。create database oldboy_gbk DEFAULT CHARACTER SET gbk COLLATE gbk_chinese_ci;   #<==创建gbk字符集数据库create database oldboy_utf8 DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci;  #<==创建utf8字符集数据库

查看数据库

show databases like '%boy%';

查看当前所在数据库

mysql> select database();+------------+| database() |+------------+| NULL       |+------------+1 row in set (0.02 sec)

进入某个库

mysql> use mysql;Database changed

表结构操作

查看一个库中的表

mysql> show tables;+---------------------------+| Tables_in_mysql           |+---------------------------+| columns_priv              || db                        || event                     || func                      || general_log               || help_category             || help_keyword              || help_relation             || help_topic                || host                      || ndb_binlog_index          || plugin                    || proc                      || procs_priv                || proxies_priv              || servers                   || slow_log                  || tables_priv               || time_zone                 || time_zone_leap_second     || time_zone_name            || time_zone_transition      || time_zone_transition_type || user                      |+---------------------------+24 rows in set (0.18 sec)

创建表

create table 表名(字段名1 类型,字段名2 类型,字段名3 类型);create table student(id int(4) not null,name char(20) not null,age tinyint(2) NOT NULL default '0',dept varchar(16) default NULL);
CREATE TABLE `test` (`id` int(4) NOT NULL AUTO_INCREMENT,`name` char(20) NOT NULL,PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=UTF8;

创建一个表与之前的表结构相同

create table student_0 like student;

创建一个备份表

create table t1_1 as select * from t1;

查看已创建表的语句

mysql> show create table student\G;*************************** 1. row ***************************       Table: studentCreate Table: CREATE TABLE `student` (  `id` int(4) NOT NULL,  `name` char(20) NOT NULL,  `age` tinyint(2) NOT NULL DEFAULT '0',  `dept` varchar(16) DEFAULT NULL) ENGINE=InnoDB DEFAULT CHARSET=utf81 row in set (0.00 sec)

查看表结构

mysql> desc student;+-------+-------------+------+-----+---------+-------+| Field | Type        | Null | Key | Default | Extra |+-------+-------------+------+-----+---------+-------+| id    | int(4)      | NO   |     | NULL    |       || name  | char(20)    | NO   |     | NULL    |       || age   | tinyint(2)  | NO   |     | 0       |       || dept  | varchar(16) | YES  |     | NULL    |       |+-------+-------------+------+-----+---------+-------+4 rows in set (0.00 sec)

生产场景创建的表

某sns产品生产正式建表语句

use sns;set names gbk;CREATE TABLE `subject_comment_manager` (  `subject_comment_manager_id` bigint(12) NOT NULL auto_increment COMMENT '主键',  `subject_type` tinyint(2) NOT NULL COMMENT '素材类型',  `subject_primary_key` varchar(255) NOT NULL COMMENT '素材的主键',  `subject_title` varchar(255) NOT NULL COMMENT '素材的名称',  `edit_user_nick` varchar(64) default NULL COMMENT '修改人',  `edit_user_time` timestamp NULL default NULL COMMENT '修改时间',  `edit_comment` varchar(255) default NULL COMMENT '修改的理由',  `state` tinyint(1) NOT NULL default '1' COMMENT '0代表关闭,1代表正常',  PRIMARY KEY  (`subject_comment_manager_id`),  KEY `IDX_PRIMARYKEY` (`subject_primary_key`(32)),   #<==括号内的32表示对前32个字符做前缀索引。  KEY `IDX_SUBJECT_TITLE` (`subject_title`(32))  KEY `index_nick_type` (`edit_user_nick`(32),`subject_type`)  #<==联合索引,此行为新加的,用于给大家讲解的。实际表语句内没有此行。) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8;

增加字段

alter table 表名 add字段 类型 其他;
CREATE TABLE `test` (  `id` int(4) NOT NULL AUTO_INCREMENT,  `name` char(20) NOT NULL,  PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=latin1;CREATE TABLE `test` (  `id` int(4) NOT NULL AUTO_INCREMENT,  `name` char(20) NOT NULL,  PRIMARY KEY (`id`)) engine=innodb default charset=utf8;
alter table test add sex char(4);    #←增加性别列sexalter table test add age int(4) after name;   #在name字段后面添加age字段alter table test add qq varchar(15) first;    #在表最前面

增加1个字段

ALTER TABLE `etiantian` ADD `FIRSTPHOTO_URL` varchar(255) default NULL COMMENT '第一张图片URL'

增2个字段

ALTER TABLE `basic` ADD `adhtml_top`  varchar(1024) default NULL COMMENT '顶部广告html' , ADD `adhtml_right` varchar(1024) default NULL COMMENT '右侧广告html' ;

改变字段

alter table ett_ambiguity change ambiguity_state  ambiguity_state tinyint  comment '状态,默认1=正常,0=失效';ALTER TABLE `ett_photo`MODIFY COLUMN `PHOTO_DESCRIPTION` varchar(512) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL COMMENT '描述' AFTER PHOTO_TITLE`;

修改字段类型

mysql> alter table test modify age char(4) after name;Query OK, 6 rows affected (0.00 sec)Records: 6  Duplicates: 0  Warnings: 0

修改字段名称

mysql> alter table test change age oldboyage char(4) after name;Query OK, 6 rows affected (0.01 sec)Records: 6  Duplicates: 0  Warnings: 0

提示:工作中添加字段需求来自开发,运维或DBA拿着开发给的语句执行

修改表名

mysql> rename table test to oldboy;Query OK, 0 rows affected (0.00 sec)mysql> show tables;                +------------------+| Tables_in_oldboy |+------------------+| course           || oldboy           || sc               || student          || test1            |+------------------+5 rows in set (0.00 sec)mysql> alter table oldboy rename to test;Query OK, 0 rows affected (0.00 sec)mysql> show tables;                      +------------------+| Tables_in_oldboy |+------------------+| course           || sc               || student          || test             || test1            |+------------------+5 rows in set (0.00 sec)

表内容操作

插入数据

insert into 表名(字段名1,字段名2,...) values(值1,值2,...);
create table test(id int(4) not null auto_increment,name char(20) not null,primary key(id));mysql> insert into test(id,name) values(1,'oldboy');Query OK, 1 row affected (0.00 sec)mysql> select * from test;+----+--------+| id | name   |+----+--------+|  1 | oldboy |+----+--------+1 row in set (0.00 sec)mysql> insert into test(name) values('oldgirl');Query OK, 1 row affected (0.02 sec)mysql> select * from test;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | oldgirl |+----+---------+2 rows in set (0.00 sec)mysql> insert into test values(3,'inca');Query OK, 1 row affected (0.00 sec)mysql> select * from test;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | oldgirl ||  3 | inca    |+----+---------+3 rows in set (0.00 sec)

批量插入数据

mysql> insert into test values(4,'zuma'),(5,'kaka');Query OK, 2 rows affected (0.00 sec)Records: 2  Duplicates: 0  Warnings: 0mysql> select * from test;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | oldgirl ||  3 | inca    ||  4 | zuma    ||  5 | kaka    |+----+---------+5 rows in set (0.00 sec)INSERT INTO `test` VALUES (1,'oldboy'),(2,'oldgirl'),(3,'inca'),(4,'zuma'),(5,'kaka');insert into student_0 select * from student;

清空表中所有数据

mysql> truncate table test;Query OK, 0 rows affected (0.00 sec)

查询

查询中用到的关键词主要包含六个,并且他们的顺序依次为

select----from----where-----group by-----having------order by

其中select和from是必须的,其他关键词是可选的,这六个关键词的执行顺序
与sql语句的书写顺序并不是一样的,而是按照下面的顺序来执行
from–where–group by–having–select–order by

  • from:需要从哪个数据表检索数据
  • where:过滤表中数据的条件
  • group by:如何将上面过滤出的数据分组
  • having:对上面已经分组的数据进行过滤的条件
  • select:查看结果集中的哪个列,或列的计算结果
  • order by :按照什么样的顺序来查看返回的数据
mysql> select id,name from oldboy.test;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | oldgirl ||  3 | inca    ||  4 | zuma    ||  5 | kaka    |+----+---------+mysql> select * from test limit 2;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | oldgirl |+----+---------+2 rows in set (0.00 sec)mysql> select * from test limit 3;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | oldgirl ||  3 | inca    |+----+---------+3 rows in set (0.00 sec)mysql>** select * from test limit 1,3;**+----+---------+| id | name    |+----+---------+|  2 | oldgirl ||  3 | inca    ||  4 | zuma    |+----+---------+3 rows in set (0.00 sec)mysql> select * from test where name='oldboy';+----+--------+| id | name   |+----+--------+|  1 | oldboy |+----+--------+mysql> select * from test where id=5;+----+------+| id | name |+----+------+|  5 | kaka |+----+------+1 row in set (0.00 sec)mysql> select * from test where name='oldgirl';+----+---------+| id | name    |+----+---------+|  2 | oldgirl |+----+---------+1 row in set (0.00 sec)mysql> desc test;+-------+----------+------+-----+---------+----------------+| Field | Type     | Null | Key | Default | Extra          |+-------+----------+------+-----+---------+----------------+| id    | int(4)   | NO   | PRI | NULL    | auto_increment || name  | char(20) | NO   |     | NULL    |                |+-------+----------+------+-----+---------+----------------+2 rows in set (0.00 sec)mysql> select * from test where id>3 and name='oldgirl';Empty set (0.00 sec)mysql> select * from test where id<3 and name='oldgirl';+----+---------+| id | name    |+----+---------+|  2 | oldgirl |+----+---------+1 row in set (0.00 sec)mysql> select * from test where id>3 or name='oldgirl';+----+---------+| id | name    |+----+---------+|  2 | oldgirl ||  4 | zuma    ||  5 | kaka    |+----+---------+3 rows in set (0.00 sec)mysql> select * from test where id>3 or name='oldgirl' order by id desc;+----+---------+| id | name    |+----+---------+|  5 | kaka    ||  4 | zuma    ||  2 | oldgirl |+----+---------+3 rows in set (0.00 sec)

小结

一:查看表test中所有数据

(1)直接查询库下面表的数据

select * from oldboy.test;  #方法1:没有进入oldboy数据库的情况select id from oldboy.test;   #查看id列的方法select name from oldboy.test;   #查看name列的方法

(2)进入指定库查询表的数据

use oldboy;     #方法1:已经进入oldboy数据库的情况select * from test;

(3)查看MySQL数据库的用户与主机

select user,host from mysql.user;  #仅查看用户与主机select user,host,password from mysql.user;    #查看用户与主机与密码

二:根据指定条件查询表的部分信息

例子1:查看test表中的前2条信息

select * from test limit 2;

例子2:查看第1条记录后的两条记录

select * from test limit 1,2;

例子3:指定固定的条件查数据

select * from test where id = 1;  #查看指定行的记录,整型一般不需要加引号,不然会导致不经过索引。select * from test where name='oldgirl';  #查询字符串的话要加引号select * from test where id=2 and name='oldgirl';  #多个条件查询

例子4:指定固定条件范围查数据

select * from test where id>2 and id<5;      #多个条件,and取交集select * from test where id>2 or id<5;   #多个条件都成立,也就是显示id>2和id<5的所有条件都会显示出来

三:其他查询功能

(1)按照id号进行正向排序

select * from test order by id asc;

(2)按照id号进行倒序排序

select * from test order by id desc;

多表联查

mysql> select country.name from city,country where city.population<100 and country.code=city.countrycode;+----------+| name     |+----------+| Pitcairn |+----------+1 row in set (0.00 sec)mysql> select co.name from city as ci,country as co where ci.population<100 and co.code=ci.countrycode;+----------+| name     |+----------+| Pitcairn |+----------+1 row in set (0.00 sec)

排序

select * from city where countrycode='chn' order by population desc;

限制limit

mysql> select * from city where countrycode='chn' order by population desc limit 10;+------+--------------------+-------------+--------------+------------+| ID   | Name               | CountryCode | District     | Population |+------+--------------------+-------------+--------------+------------+| 1890 | Shanghai           | CHN         | Shanghai     |    9696300 || 1891 | Peking             | CHN         | Peking       |    7472000 || 1892 | Chongqing          | CHN         | Chongqing    |    6351600 || 1893 | Tianjin            | CHN         | Tianjin      |    5286800 || 1894 | Wuhan              | CHN         | Hubei        |    4344600 || 1895 | Harbin             | CHN         | Heilongjiang |    4289800 || 1896 | Shenyang           | CHN         | Liaoning     |    4265200 || 1897 | Kanton [Guangzhou] | CHN         | Guangdong    |    4256300 || 1898 | Chengdu            | CHN         | Sichuan      |    3361500 || 1899 | Nanking [Nanjing]  | CHN         | Jiangsu      |    2870300 |+------+--------------------+-------------+--------------+------------+10 rows in set (0.01 sec)select * from city where countrycode='chn' order by population desc limit 10 offset 10;

in语句

select name,population,countrycode from city where population in (2000000,3000000,4000000);

between and

select name,population,countrycode from city where population between 1000000 and 1000001;

group by

https://dev.mysql.com/doc/refman/5.7/en/group-by-handling.html
group by + 聚合函数(最大值、最小值等)

先分组聚合再筛选

select countrycode ,sum(population) from city group by countrycode having countrycode='CHN';

先筛选在分组聚合

select countrycode ,sum(population) from city where countrycode='CHN' group by countrycode;

union 结果集合并 用来代替or

按行合并

select name,population,countrycode from city where countrycode=‘CHN’ union select name,population,countrycode from city where population >10000000;

union all# 多表连接查询## sql数据准备```sqlCREATE DATABASE school CHARSET utf8;USE schoolCREATE TABLE student(sno INT NOT NULL PRIMARY KEY AUTO_INCREMENT COMMENT '学号',sname VARCHAR(20) NOT NULL COMMENT '姓名',sage TINYINT UNSIGNED NOT NULL COMMENT '年龄',ssex ENUM('f','m') NOT NULL DEFAULT 'm' COMMENT '性别')ENGINE=INNODB CHARSET=utf8;CREATE TABLE course(cno INT NOT NULL PRIMARY KEY COMMENT '课程编号',cname VARCHAR(20) NOT NULL COMMENT '课程名字',tno INT NOT NULL COMMENT '教师编号')ENGINE=INNODB CHARSET utf8;CREATE TABLE sc (sno INT NOT NULL COMMENT '学号',cno INT NOT NULL COMMENT '课程编号',score INT NOT NULL DEFAULT 0 COMMENT '成绩')ENGINE=INNODB CHARSET=utf8;CREATE TABLE teacher(tno INT NOT NULL PRIMARY KEY COMMENT '教师编号',tname VARCHAR(20) NOT NULL COMMENT '教师名字')ENGINE=INNODB CHARSET utf8;INSERT INTO student(sno,sname,sage,ssex)VALUES (1,'zhang3',18,'m');INSERT INTO student(sno,sname,sage,ssex)VALUES(2,'zhang4',18,'m'),(3,'li4',18,'m'),(4,'wang5',19,'f');INSERT INTO studentVALUES(5,'zh4',18,'m'),(6,'zhao4',18,'m'),(7,'ma6',19,'f');INSERT INTO student(sname,sage,ssex)VALUES('oldboy',20,'m'),('oldgirl',20,'f'),('oldp',25,'m');INSERT INTO teacher(tno,tname) VALUES(101,'oldboy'),(102,'hesw'),(103,'oldguo');DESC course;INSERT INTO course(cno,cname,tno)VALUES(1001,'linux',101),(1002,'python',102),(1003,'mysql',103);DESC sc;INSERT INTO sc(sno,cno,score)VALUES(1,1001,80),(1,1002,59),(2,1002,90),(2,1003,100),(3,1001,99),(3,1003,40),(4,1001,79),(4,1002,61),(4,1003,99),(5,1003,40),(6,1001,89),(6,1003,77),(7,1001,67),(7,1003,82),(8,1001,70),(9,1003,80),(10,1003,96);

传统连接

where A.ID=B.ID

select ci.name,ci.countrycode,ci.population,co.name from city as ci,country as co where ci.countrycode=co.code and ci.population<100;

内连接

自动连接 (natural join)
两个表有相同的字段countrycode

select name,countrycode,language,population from city natural join countrylanguage where population > 1000000 order by population;
mysql> desc city;+-------------+----------+------+-----+---------+----------------+| Field       | Type     | Null | Key | Default | Extra          |+-------------+----------+------+-----+---------+----------------+| ID          | int(11)  | NO   | PRI | NULL    | auto_increment || Name        | char(35) | NO   |     |         |                || CountryCode | char(3)  | NO   | MUL |         |                || District    | char(20) | NO   |     |         |                || Population  | int(11)  | NO   |     | 0       |                |+-------------+----------+------+-----+---------+----------------+5 rows in set (0.01 sec)mysql> desc countrylanguage;+-------------+---------------+------+-----+---------+-------+| Field       | Type          | Null | Key | Default | Extra |+-------------+---------------+------+-----+---------+-------+| CountryCode | char(3)       | NO   | PRI |         |       || Language    | char(30)      | NO   | PRI |         |       || IsOfficial  | enum('T','F') | NO   |     | F       |       || Percentage  | float(4,1)    | NO   |     | 0.0     |       |+-------------+---------------+------+-----+---------+-------+4 rows in set (0.00 sec)

上海市属于哪个国家

select ci.name,ci.countrycode,co.name from city as ci,country as co where ci.countrycode=co.code and ci.name='shanghai';select ci.name,ci.countrycode,co.name from city as ci join country as co on ci.countrycode=co.code and ci.name='shanghai';

外连接

left join

图片

select ci.name,ci.countrycode,co.name from city as ci left join country as co on ci.countrycode=co.code and ci.name='shanghai';

right join

图片

子查询

select name from country where code= (select countrycode from city where population > 10000000);select chnt.name,chnt.population from (select name,countrycode,population from city where countrycode='CHN') chnt limit 10;select chnt.name,chnt.population from (select name,countrycode,population from city where countrycode='CHN') chnt where chnt.population>5000000  limit 10;

使用explain查看select语句的执行计划

mysql> explain select * from test where name='oldboy'\G*************************** 1. row ***************************           id: 1  select_type: SIMPLE        table: test         type: ALLpossible_keys: NULL          key: NULL      key_len: NULL          ref: NULL         rows: 5        Extra: Using where1 row in set (0.00 sec)mysql> alter table test add index ind_name(name(8));Query OK, 0 rows affected (0.01 sec)Records: 0  Duplicates: 0  Warnings: 0mysql> explain select * from test where name='oldboy'\G*************************** 1. row ***************************           id: 1  select_type: SIMPLE        table: test         type: refpossible_keys: ind_name          key: ind_name      key_len: 24          ref: const         rows: 1        Extra: Using where1 row in set (0.00 sec)

更新数据

update 表名 set 字段=新值,… where 条件(一定要注意条件)
mysql> select * from test;+----+---------+| id | name    |+----+---------+|  1 | oldboy  ||  2 | **oldgirl** ||  3 | inca    ||  4 | zuma    ||  5 | kaka    |+----+---------+5 rows in set (0.00 sec)mysql> update test set name='bingbing' where name='oldgirl';Query OK, 1 row affected (0.00 sec)Rows matched: 1  Changed: 1  Warnings: 0mysql> select * from test;+----+--------+| id | name   |+----+--------+|  1 | oldboy ||  2 | bingbing ||  3 | inca   ||  4 | zuma   ||  5 | kaka   |+----+--------+5 rows in set (0.00 sec)

一次更新多个字段

update mysql.user setSelect_priv='Y',Insert_priv='Y',           Update_priv='Y',            Create_priv='Y', Delete_priv='Y',          Drop_priv='Y',            Reload_priv='Y',           Shutdown_priv='Y',         Process_priv='Y',          File_priv='Y',             Grant_priv='Y',            References_priv='Y',       Index_priv='Y',            Alter_priv='Y',            Show_db_priv='Y',          Super_priv='Y',            Create_tmp_table_priv='Y', Lock_tables_priv='Y',      Execute_priv='Y',          Repl_slave_priv='Y',       Repl_client_priv='Y',      Create_view_priv='Y',      Show_view_priv='Y',        Create_routine_priv='Y',   Alter_routine_priv='Y',    Create_user_priv='Y',      Event_priv='Y',            Trigger_priv='Y',          Create_tablespace_priv='Y'where user='root';

防止误操作MySQL数据库一例

在mysql命令加上选项-U后,当发出没有WHERE或LIMIT关键字的UPDATE或DELETE时,mysql程序就会拒绝执行

mysql -S /data/3306/mysql.sock -uroot -poldboy -U

删除数据

一行一行的删除

mysql> delete from test where id=3;Query OK, 1 row affected (0.00 sec)

全部删除数据

mysql> truncate table test;Query OK, 0 rows affected (0.00 sec)

适用场景:drop table 可以先 truncate table ,然后 drop table

通过状态删除表中的数据(update代替delete)

alter table student add status int default 1;mysql> select * from test where state=1;+----+---------+-------+| id | name    | state |+----+---------+-------+|  1 | oldboy  |     1 ||  2 | oldgirl |     1 ||  3 | inca    |     1 ||  4 | zuma    |     1 ||  5 | kaka    |     1 |+----+---------+-------+5 rows in set (0.00 sec)

删除数据

mysql> update test set state=0 where id=2;Query OK, 1 row affected (0.01 sec)Rows matched: 1  Changed: 1  Warnings: 0mysql> select * from test where state=1;+----+--------+-------+| id | name   | state |+----+--------+-------+|  1 | oldboy |     1 ||  3 | inca   |     1 ||  4 | zuma   |     1 ||  5 | kaka   |     1 |+----+--------+-------+4 rows in set (0.00 sec)

数据类型

https://dev.mysql.com/doc/refman/5.7/en/data-types.html

数字

字段类型占存储空间
TINYINT1B
SMALLINT2B
MEDIUMINT3B
INT4B
INTEGER4B
BIGINT8B
FLOAT(X)4 如果X<=24 或 8 如果25<=X<=53
FLOAT4B
DOUBLE8B
DOUBLE PRECISION8B
REAL8B

日期和时间类型

字段类型占存储空间
DATE3B
DATETIME8B
TIMESTAMP4B
TIME3B
YEAR1B
alter table student add bridate datetime;insert into student values(1,'zhang3',12,'1',now());

字符串类型

字段类型占存储空间
CHAR(M)M字节,1<=M<=255
VARCHAR(M)L+1 字节,在此 L<=M和1<=M<=255
TINYBLOB,TINYTEXTL+1字节,在此L<2^8
BLOB, TEXTL+2字节,在此L<2^16
MEDIUMBLOB, MEDIUMTEXTL+3字节,在此L<2^24
LONGBLOB, LONGTEXTL+4 字节,在此L<2^32
ENUM(‘value1’,‘value2’,…)1或2 字节,取决于枚举值的数目(最大值65535)
SET(‘value1’,‘value2’,…)1,2,3,4或8字节,取决于集合成员的数量(最多64个成员)

列属性

数据类型属性说明
数值unsigned无符号
仅整数AUTO_INCREMENT生成包含连续唯一整数值的序列
字符串CHARACTER SET指定要使用的字符集
字符串COLLATE指定字符集校对规则
字符串BINARY指定二进制整理
全部NULL或NOT NULL指示列是否可以包含NULL值
全部DEFAULT如果未为新记录指定值,则为其提供默认值

数据类型 CHAR和VARCHAR的区别

https://dev.mysql.com/doc/refman/5.7/en/char.html

CHAR(4)存储空间VARCHAR(4)存储空间
‘’’ ’4B‘’1B
‘ab’'ab ’4B‘ab’3B
‘abcd’‘abcd’4B‘abcd’5B
‘abcdefgh’‘abcd’4B‘abcd’5B

如何选择数据类型

考虑哪些数据类型和字符集可以最大限度地减少存储和磁盘I/O
使用固定长度数据类型:
–如果存储的所有字符串值的长度相同

使用可变长度数据类型:
–如果存储的字符串值不同
–对于多字节字符集

对于频繁使用的字符,使用占用空间较少的多字节字符集
–使用基本多文种平面(Basic Multilingual Plane, BMP) 之外的其他Unicode 字符集

函数

https://dev.mysql.com/doc/refman/5.7/en/func-op-summary-ref.html

ABS()返回绝对值
ACOS()返回反余弦
ADDDATE()将时间值(间隔)添加到日期值
ADDTIME()添加时间
AES_DECRYPT()使用AES解密
AES_ENCRYPT()使用AES加密
AND&&逻辑和
ANY_VALUE()抑制ONLY_FULL_GROUP_BY值拒绝
Area() (已弃用5.7.6)返回Polygon或MultiPolygon区域
AsBinary()AsWKB()(已弃用5.7.6)从内部几何格式转换为WKB
ASCII()返回最左侧字符的数值
ASIN()返回圆弧正弦
=分配值(作为SET 语句的一部分 ,或作为语句中SET子句的 一部分UPDATE
:=分配值
AsText()AsWKT()(已弃用5.7.6)从内部几何格式转换为WKT
ASYMMETRIC_DECRYPT()使用私钥或公钥解密密文
ASYMMETRIC_DERIVE()从非对称密钥导出对称密钥
ASYMMETRIC_ENCRYPT()使用私钥或公钥加密明文
ASYMMETRIC_SIGN()从摘要生成签名
ASYMMETRIC_VERIFY()验证签名是否与摘要匹配
ATAN()返回反正切
ATAN2()ATAN()返回两个参数的反正切
AVG()返回参数的平均值
BENCHMARK()反复执行表达式
BETWEEN … AND …检查值是否在值范围内
BIN()返回包含数字的二进制表示的字符串
BINARY将字符串转换为二进制字符串
BIT_AND()按位返回AND
BIT_COUNT()返回设置的位数
BIT_LENGTH()以位为单位返回参数长度
BIT_OR()按位返回OR
BIT_XOR()按位返回异或
&按位AND
~按位反转
|按位OR
^按位异或
Buffer() (已弃用5.7.6)返回距离几何体的给定距离内的点的几何
CASE案例运营商
CAST()将值转换为特定类型
CEIL()返回不小于参数的最小整数值
CEILING()返回不小于参数的最小整数值
Centroid() (已弃用5.7.6)返回质心作为一个点
CHAR()返回传递的每个整数的字符
CHAR_LENGTH()返回参数中的字符数
CHARACTER_LENGTH()CHAR_LENGTH()的同义词
CHARSET()返回参数的字符集
COALESCE()返回第一个非NULL参数
COERCIBILITY()返回字符串参数的归类强制性值
COLLATION()返回字符串参数的排序规则
COMPRESS()将结果作为二进制字符串返回
CONCAT()返回连接字符串
CONCAT_WS()返回与分隔符连接
CONNECTION_ID()返回连接的连接ID(线程ID)
Contains() (已弃用5.7.6)一个几何的MBR是否包含另一个几何的MBR
CONV()转换不同数字基数之间的数字
CONVERT()将值转换为特定类型
CONVERT_TZ()从一个时区转换为另一个时区
ConvexHull() (已弃用5.7.6)返回几何体的凸包
COS()返回余弦
COT()归还余切
COUNT()返回返回的行数
COUNT(DISTINCT)返回许多不同值的计数
CRC32()计算循环冗余校验值
CREATE_ASYMMETRIC_PRIV_KEY()创建私钥
CREATE_ASYMMETRIC_PUB_KEY()创建公钥
CREATE_DH_PARAMETERS()生成共享DH密钥
CREATE_DIGEST()从字符串生成摘要
Crosses() (已弃用5.7.6)一个几何是否与另一个几何相交
CURDATE()返回当前日期
CURRENT_DATE()CURRENT_DATECURDATE()的同义词
CURRENT_TIME()CURRENT_TIMECURTIME()的同义词
CURRENT_TIMESTAMP()CURRENT_TIMESTAMP同义词NOW()
CURRENT_USER()CURRENT_USER经过身份验证的用户名和主机名
CURTIME()返回当前时间
DATABASE()返回默认(当前)数据库名称
DATE()提取日期或日期时间表达式的日期部分
DATE_ADD()将时间值(间隔)添加到日期值
DATE_FORMAT()格式化日期指定
DATE_SUB()从日期中减去时间值(间隔)
DATEDIFF()减去两个日期
DAY()DAYOFMONTH()的同义词
DAYNAME()返回工作日的名称
DAYOFMONTH()返回月中的某一天(0-31)
DAYOFWEEK()返回参数的工作日索引
DAYOFYEAR()返回一年中的某一天(1-366)
DECODE() (已弃用5.7.2)解码使用ENCODE()加密的字符串
DEFAULT()返回表列的默认值
DEGREES()将弧度转换为度数
DES_DECRYPT() (已弃用5.7.6)解密一个字符串
DES_ENCRYPT() (已弃用5.7.6)加密字符串
Dimension() (已弃用5.7.6)几何尺寸
Disjoint() (已弃用5.7.6)两个几何形状的MBR是否不相交
Distance() (已弃用5.7.6)一个几何与另一个几何的距离
DIV整数除法
/分部运营商
ELT()返回索引号处的字符串
ENCODE() (已弃用5.7.2)编码一个字符串
ENCRYPT() (已弃用5.7.6)加密字符串
EndPoint() (已弃用5.7.6)LineString的终点
Envelope() (已弃用5.7.6)返回几何的MBR
=平等的运营商
<=>NULL-safe等于运算符
Equals() (已弃用5.7.6)两个几何的MBR是否相等
EXP()提升到的力量
EXPORT_SET()返回一个字符串,使得对于值位中设置的每个位,您获得一个on字符串,并且对于每个未设置的位,您将得到一个关闭字符串
ExteriorRing() (已弃用5.7.6)返回Polygon的外环
EXTRACT()提取部分日期
ExtractValue()使用XPath表示法从XML字符串中提取值
FIELD()后续参数中第一个参数的索引(位置)
FIND_IN_SET()第二个参数中第一个参数的索引(位置)
FLOOR()返回不大于参数的最大整数值
FORMAT()返回格式化为指定小数位数的数字
FOUND_ROWS()对于带有LIMIT子句的SELECT,返回的行数没有LIMIT子句
FROM_BASE64()解码base64编码的字符串并返回结果
FROM_DAYS()将日期号码转换为日期
FROM_UNIXTIME()将Unix时间戳格式化为日期
GeomCollFromText()GeometryCollectionFromText()(已弃用5.7.6)从WKT返回几何集合
GeomCollFromWKB()GeometryCollectionFromWKB()(已弃用5.7.6)从WKB返回几何集合
GeometryCollection()从几何构造几何集合
GeometryN() (已弃用5.7.6)从几何集合中返回第N个几何
GeometryType() (已弃用5.7.6)返回几何类型的名称
GeomFromText()GeometryFromText()(已弃用5.7.6)从WKT返回几何
GeomFromWKB()GeometryFromWKB()(已弃用5.7.6)从WKB返回几何
GET_FORMAT()返回日期格式字符串
GET_LOCK()获取命名锁
GLength() (已弃用5.7.6)返回LineString的长度
>大于运营商
>=大于或等于运营商
GREATEST()返回最大的参数
GROUP_CONCAT()返回连接的字符串
GTID_SUBSET()如果子集中的所有GTID也已设置,则返回true;否则返回true。否则是假的。
GTID_SUBTRACT()返回集合中不在子集中的所有GTID。
HEX()十进制或字符串值的十六进制表示
HOUR()提取小时
IF()如果/ else构造
IFNULL()Null if / else构造
IN()检查值是否在一组值内
INET_ATON()返回IP地址的数值
INET_NTOA()从数值返回IP地址
INET6_ATON()返回IPv6地址的数值
INET6_NTOA()从数值返回IPv6地址
INSERT()在指定位置插入子字符串,直到指定的字符数
INSTR()返回第一次出现的子串的索引
InteriorRingN() (已弃用5.7.6)返回Polygon的第N个内环
Intersects() (已弃用5.7.6)两个几何的MBR是否相交
INTERVAL()返回小于第一个参数的参数的索引
IS针对布尔值测试值
IS_FREE_LOCK()命名锁是否免费
IS_IPV4()参数是否为IPv4地址
IS_IPV4_COMPAT()参数是否是IPv4兼容的地址
IS_IPV4_MAPPED()参数是否是IPv4映射地址
IS_IPV6()参数是否是IPv6地址
IS NOT针对布尔值测试值
IS NOT NULLNOT NULL值测试
IS NULLNULL值测试
IS_USED_LOCK()命名锁是否正在使用; 返回连接标识符,如果为true
IsClosed() (已弃用5.7.6)几何是否封闭且简单
IsEmpty() (已弃用5.7.6)占位符功能
ISNULL()测试参数是否为NULL
IsSimple() (已弃用5.7.6)几何是否简单
JSON_APPEND() (已弃用5.7.9)将数据附加到JSON文档
JSON_ARRAY()创建JSON数组
JSON_ARRAY_APPEND()将数据附加到JSON文档
JSON_ARRAY_INSERT()插入JSON数组
JSON_ARRAYAGG()将结果集作为单个JSON数组返回
->评估路径后从JSON列返回值; 相当于JSON_EXTRACT()。
JSON_CONTAINS()JSON文档是否包含路径中的特定对象
JSON_CONTAINS_PATH()JSON文档是否包含路径中的任何数据
JSON_DEPTH()JSON文档的最大深度
JSON_EXTRACT()从JSON文档返回数据
->>在评估路径并取消引用结果后,从JSON列返回值; 相当于JSON_UNQUOTE(JSON_EXTRACT())。
JSON_INSERT()将数据插入JSON文档
JSON_KEYS()来自JSON文档的键数组
JSON_LENGTH()JSON文档中的元素数量
JSON_MERGE() (已弃用5.7.22)合并JSON文档,保留重复键。JSON_MERGE_PRESERVE()的弃用词不再使用
JSON_MERGE_PATCH()合并JSON文档,替换重复键的值
JSON_MERGE_PRESERVE()合并JSON文档,保留重复键
JSON_OBJECT()创建JSON对象
JSON_OBJECTAGG()将结果集作为单个JSON对象返回
JSON_PRETTY()以人类可读的格式打印JSON文档
JSON_QUOTE()引用JSON文档
JSON_REMOVE()从JSON文档中删除数据
JSON_REPLACE()替换JSON文档中的值
JSON_SEARCH()JSON文档中的值路径
JSON_SET()将数据插入JSON文档
JSON_STORAGE_SIZE()用于存储JSON文档的二进制表示的空间
JSON_TYPE()JSON值的类型
JSON_UNQUOTE()取消引用JSON值
JSON_VALID()JSON值是否有效
LAST_DAY返回参数的月份的最后一天
LAST_INSERT_ID()最后一次INSERT的AUTOINCREMENT列的值
LCASE()LOWER()的同义词
LEAST()返回最小的参数
LEFT()返回指定的最左边的字符数
<<左移
LENGTH()以字节为单位返回字符串的长度
<不到运营商
<=小于或等于运营商
LIKE简单的模式匹配
LineFromText()LineStringFromText()(已弃用5.7.6)从WKT构造LineString
LineFromWKB()LineStringFromWKB()(已弃用5.7.6)从WKB构造LineString
LineString()从Point值构造LineString
LN()返回参数的自然对数
LOAD_FILE()加载指定的文件
LOCALTIME()LOCALTIMENOW()的同义词
LOCALTIMESTAMPLOCALTIMESTAMP()NOW()的同义词
LOCATE()返回第一次出现的子串的位置
LOG()返回第一个参数的自然对数
LOG10()返回参数的以10为底的对数
LOG2()返回参数的base-2对数
LOWER()以小写形式返回参数
LPAD()返回字符串参数,使用指定的字符串进行左填充
LTRIM()删除前导空格
MAKE_SET()返回一组以逗号分隔的字符串,这些字符串具有相应的位设置位
MAKEDATE()创建年份和年中的日期
MAKETIME()从小时,分钟,秒创建时间
MASTER_POS_WAIT()阻止,直到从站已读取并应用所有更新到指定位置
MATCH执行全文搜索
MAX()返回最大值
MBRContains()一个几何的MBR是否包含另一个几何的MBR
MBRCoveredBy()一个MBR是否被另一个MBR覆盖
MBRCovers()一个MBR是否涵盖另一个MBR
MBRDisjoint()两个几何形状的MBR是否不相交
MBREqual() (已弃用5.7.6)两个几何的MBR是否相等
MBREquals()两个几何的MBR是否相等
MBRIntersects()两个几何的MBR是否相交
MBROverlaps()两个几何的MBR是否重叠
MBRTouches()两种几何形状的MBR是否接触
MBRWithin()一个几何的MBR是否在另一个几何的MBR内
MD5()计算MD5校验和
MICROSECOND()从参数返回微秒
MID()返回从指定位置开始的子字符串
MIN()返回最小值
-减号运算符
MINUTE()从论证中返回分钟
MLineFromText()MultiLineStringFromText()(已弃用5.7.6)从WKT构造MultiLineString
MLineFromWKB()MultiLineStringFromWKB()(已弃用5.7.6)从WKB构造MultiLineString
MOD()归还剩下的
%MOD模数运算符
MONTH()从过去的日期返回月份
MONTHNAME()返回月份名称
MPointFromText()MultiPointFromText()(已弃用5.7.6)从WKT构造MultiPoint
MPointFromWKB()MultiPointFromWKB()(已弃用5.7.6)从WKB构造MultiPoint
MPolyFromText()MultiPolygonFromText()(已弃用5.7.6)从WKT构造MultiPolygon
MPolyFromWKB()MultiPolygonFromWKB()(已弃用5.7.6)从WKB构造MultiPolygon
MultiLineString()从LineString值构造MultiLineString
MultiPoint()从Point值构造MultiPoint
MultiPolygon()从Polygon值构造MultiPolygon
NAME_CONST()导致列具有给定名称
NOT!否定价值
NOT BETWEEN … AND …检查值是否不在值范围内
!=<>不等于运营商
NOT IN()检查值是否不在一组值内
NOT LIKE简单模式匹配的否定
NOT REGEXPREGEXP的否定
NOW()返回当前日期和时间
NULLIF()如果expr1 = expr2,则返回NULL
NumGeometries() (已弃用5.7.6)返回几何集合中的几何数量
NumInteriorRings() (已弃用5.7.6)返回多边形内圈的数量
NumPoints() (已弃用5.7.6)返回LineString中的点数
OCT()返回包含数字的八进制表示的字符串
OCTET_LENGTH()LENGTH()的同义词
OLD_PASSWORD()返回PASSWORD 4.1之前实现的值
||OR逻辑或
ORD()返回参数最左侧字符的字符代码
Overlaps() (已弃用5.7.6)两个几何的MBR是否重叠
PASSWORD() (已弃用5.7.6)计算并返回密码字符串
PERIOD_ADD()将期间添加到年 - 月
PERIOD_DIFF()返回句点之间的月数
PI()返回pi的值
+加法运算符
Point()从坐标构造点
PointFromText() (已弃用5.7.6)从WKT构建点
PointFromWKB() (已弃用5.7.6)从WKB构造点
PointN() (已弃用5.7.6)从LineString返回第N个点
PolyFromText()PolygonFromText()(已弃用5.7.6)从WKT构造多边形
PolyFromWKB()PolygonFromWKB()(已弃用5.7.6)从WKB构造多边形
Polygon()从LineString参数构造多边形
POSITION()LOCATE()的同义词
POW()将引发的参数返回到指定的幂
POWER()将引发的参数返回到指定的幂
PROCEDURE ANALYSE() (已弃用5.7.18)分析查询的结果
QUARTER()从日期参数返回季度
QUOTE()转义参数以在SQL语句中使用
RADIANS()返回参数转换为弧度
RAND()返回随机浮点值
RANDOM_BYTES()返回一个随机字节向量
REGEXPstring是否匹配正则表达式
RELEASE_ALL_LOCKS()释放所有当前命名的锁
RELEASE_LOCK()释放命名锁
REPEAT()重复指定次数的字符串
REPLACE()替换指定字符串的出现次数
REVERSE()反转字符串中的字符
RIGHT()返回指定的最右边的字符数
>>右转
RLIKEstring是否匹配正则表达式
ROUND()围绕论点
ROW_COUNT()行数已更新
RPAD()追加指定次数的字符串
RTRIM()删除尾随空格
SCHEMA()DATABASE()的同义词
SEC_TO_TIME()将秒转换为’HH:MM:SS’格式
SECOND()返回秒(0-59)
SESSION_USER()USER()的同义词
SHA1()SHA()计算SHA-1 160位校验和
SHA2()计算SHA-2校验和
SIGN()返回参数的符号
SIN()返回参数的正弦值
SLEEP()睡几秒钟
SOUNDEX()返回soundex字符串
SOUNDS LIKE比较声音
SPACE()返回指定数量的空格的字符串
SQRT()返回参数的平方根
SRID() (已弃用5.7.6)返回几何的空间参考系统ID
ST_Area()返回Polygon或MultiPolygon区域
ST_AsBinary()ST_AsWKB()从内部几何格式转换为WKB
ST_AsGeoJSON()从几何体生成GeoJSON对象
ST_AsText()ST_AsWKT()从内部几何格式转换为WKT
ST_Buffer()返回距离几何体的给定距离内的点的几何
ST_Buffer_Strategy()为ST_Buffer()生成策略选项
ST_Centroid()返回质心作为一个点
ST_Contains()一个几何是否包含另一个
ST_ConvexHull()返回几何体的凸包
ST_Crosses()一个几何是否与另一个几何相交
ST_Difference()两个几何的返回点集差异
ST_Dimension()几何尺寸
ST_Disjoint()一个几何是否与另一个几何脱节
ST_Distance()一个几何与另一个几何的距离
ST_Distance_Sphere()两个几何形状之间的最小地球距离
ST_EndPoint()LineString的终点
ST_Envelope()返回几何的MBR
ST_Equals()一个几何是否与另一个几何相等
ST_ExteriorRing()返回Polygon的外环
ST_GeoHash()产生geohash值
ST_GeomCollFromText()ST_GeometryCollectionFromText()ST_GeomCollFromTxt()从WKT返回几何集合
ST_GeomCollFromWKB()ST_GeometryCollectionFromWKB()从WKB返回几何集合
ST_GeometryN()从几何集合中返回第N个几何
ST_GeometryType()返回几何类型的名称
ST_GeomFromGeoJSON()从GeoJSON对象生成几何
ST_GeomFromText()ST_GeometryFromText()从WKT返回几何
ST_GeomFromWKB()ST_GeometryFromWKB()从WKB返回几何
ST_InteriorRingN()返回Polygon的第N个内环
ST_Intersection()返回点设置两个几何的交集
ST_Intersects()一个几何是否与另一个相交
ST_IsClosed()几何是否封闭且简单
ST_IsEmpty()占位符功能
ST_IsSimple()几何是否简单
ST_IsValid()几何是否有效
ST_LatFromGeoHash()从geohash值返回纬度
ST_Length()返回LineString的长度
ST_LineFromText()ST_LineStringFromText()从WKT构造LineString
ST_LineFromWKB()ST_LineStringFromWKB()从WKB构造LineString
ST_LongFromGeoHash()从geohash值返回经度
ST_MakeEnvelope()两点左右的矩形
ST_MLineFromText()ST_MultiLineStringFromText()从WKT构造MultiLineString
ST_MLineFromWKB()ST_MultiLineStringFromWKB()从WKB构造MultiLineString
ST_MPointFromText()ST_MultiPointFromText()从WKT构造MultiPoint
ST_MPointFromWKB()ST_MultiPointFromWKB()从WKB构造MultiPoint
ST_MPolyFromText()ST_MultiPolygonFromText()从WKT构造MultiPolygon
ST_MPolyFromWKB()ST_MultiPolygonFromWKB()从WKB构造MultiPolygon
ST_NumGeometries()返回几何集合中的几何数量
ST_NumInteriorRing()ST_NumInteriorRings()返回多边形内圈的数量
ST_NumPoints()返回LineString中的点数
ST_Overlaps()一个几何是否与另一个重叠
ST_PointFromGeoHash()将geohash值转换为POINT值
ST_PointFromText()从WKT构建点
ST_PointFromWKB()从WKB构造点
ST_PointN()从LineString返回第N个点
ST_PolyFromText()ST_PolygonFromText()从WKT构造多边形
ST_PolyFromWKB()ST_PolygonFromWKB()从WKB构造多边形
ST_Simplify()返回简化几何
ST_SRID()返回几何的空间参考系统ID
ST_StartPoint()LineString的起始点
ST_SymDifference()返回点设置两个几何的对称差异
ST_Touches()一个几何是否接触另一个
ST_Union()返回点集两个几何的并集
ST_Validate()返回验证的几何体
ST_Within()一个几何是否在另一个之内
ST_X()返回Point的X坐标
ST_Y()返回Point的Y坐标
StartPoint() (已弃用5.7.6)LineString的起始点
STD()返回人口标准差
STDDEV()返回人口标准差
STDDEV_POP()返回人口标准差
STDDEV_SAMP()返回样本标准差
STR_TO_DATE()将字符串转换为日期
STRCMP()比较两个字符串
SUBDATE()使用三个参数调用时DATE_SUB()的同义词
SUBSTR()返回指定的子字符串
SUBSTRING()返回指定的子字符串
SUBSTRING_INDEX()在指定的分隔符出现次数之前从字符串返回子字符串
SUBTIME()减去时间
SUM()归还总和
SYSDATE()返回函数执行的时间
SYSTEM_USER()USER()的同义词
TAN()返回参数的正切值
TIME()提取传递的表达式的时间部分
TIME_FORMAT()格式化为时间
TIME_TO_SEC()返回转换为秒的参数
TIMEDIFF()减去时间
*乘法运算符
TIMESTAMP()使用单个参数,此函数返回日期或日期时间表达式; 有两个参数,参数的总和
TIMESTAMPADD()在datetime表达式中添加间隔
TIMESTAMPDIFF()从日期时间表达式中减去间隔
TO_BASE64()返回转换为base-64字符串的参数
TO_DAYS()返回转换为days的日期参数
TO_SECONDS()返回自0年以来转换为秒的日期或日期时间参数
Touches() (已弃用5.7.6)一个几何是否接触另一个
TRIM()删除前导和尾随空格
TRUNCATE()截断到指定的小数位数
UCASE()UPPER()的同义词
-更改参数的符号
UNCOMPRESS()解压缩压缩的字符串
UNCOMPRESSED_LENGTH()压缩前返回字符串的长度
UNHEX()返回包含数字的十六进制表示的字符串
UNIX_TIMESTAMP()返回Unix时间戳
UpdateXML()返回替换的XML片段
UPPER()转换为大写
USER()客户端提供的用户名和主机名
UTC_DATE()返回当前的UTC日期
UTC_TIME()返回当前的UTC时间
UTC_TIMESTAMP()返回当前的UTC日期和时间
UUID()返回通用唯一标识符(UUID)
UUID_SHORT()返回整数值通用标识符
VALIDATE_PASSWORD_STRENGTH()确定密码的强度
VALUES()定义INSERT期间要使用的值
VAR_POP()返回人口标准差异
VAR_SAMP()返回样本方差
VARIANCE()返回人口标准差异
VERSION()返回表示MySQL服务器版本的字符串
WAIT_FOR_EXECUTED_GTID_SET()等到给定的GTID在slave上执行。
WAIT_UNTIL_SQL_THREAD_AFTER_GTIDS()等到给定的GTID在slave上执行。
WEEK()返回周数
WEEKDAY()返回工作日索引
WEEKOFYEAR()返回日期的日历周(1-53)
WEIGHT_STRING()返回字符串的权重字符串
Within() (已弃用5.7.6)一个几何的MBR是否在另一个几何的MBR内
X() (已弃用5.7.6)返回Point的X坐标
XOR逻辑异或
Y() (已弃用5.7.6)返回Point的Y坐标
YEAR()回归年份
YEARWEEK()返回年份和星期
drop database if exists oldboy;create database oldboy charset utf8mb4 collate utf8mb4_bin;use oldboy;create table t_100w (id int,num int,k1 char(2),k2 char(4),dt timestamp);
delimiter //create  procedure rand_data(in num int)begindeclare str char(62) default 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789';declare str2 char(2);declare str4 char(4);declare i int default 0;while i<num doset str2=concat(substring(str,1+floor(rand()*61),1),substring(str,1+floor(rand()*61),1));set str4=concat(substring(str,1+floor(rand()*61),2),substring(str,1+floor(rand()*61),2));set i=i+1;insert into t_100w values (i,floor(rand()*num),str2,str4,now());end while;end;//delimiter ;
call rand_data(1000000);commit;

运算符

https://dev.mysql.com/doc/refman/5.7/en/non-typed-operators.html

控制流

https://dev.mysql.com/doc/refman/5.7/en/control-flow-functions.html
https://dev.mysql.com/doc/refman/5.7/en/flow-control-statements.html

IF(expr1,expr2,expr3)

如果expr1是TRUE (expr1 <> 0和expr1 <> NULL),则IF() 返回expr2。否则,它返回expr3

mysql> SELECT IF(1>2,2,3);        -> 3mysql> SELECT IF(1<2,'yes','no');        -> 'yes'

case

CASE value WHEN [compare_value] THEN result [WHEN [compare_value] THEN result ...] [ELSE result] END

第一个CASE语法返回 result第一个 为true的比较

CASE WHEN [condition] THEN result [WHEN [condition] THEN result ...] [ELSE result] END

第二种语法返回第一个条件为true的结果。如果没有比较或条件为真,则返回结果,或者如果没有 部分。 value=compare_value ELSENULLELSE

mysql> SELECT CASE 1 WHEN 1 THEN 'one' WHEN 2 THEN 'two' ELSE 'more' END;    -> 'one'mysql> SELECT CASE WHEN 1>0 THEN 'true' ELSE 'false' END;        -> 'true'

统计各位老师,所教课程的及格率

SELECT teacher.`tname`,course.`cname`,COUNT(CASE WHEN sc.`score`>60 THEN 1 END)/COUNT(sc.`score`)FROM teacherJOIN course ON teacher.`tno`=course.`tno`JOIN sc ON course.`cno`=sc.`cno`GROUP BY teacher.`tname`

统计每门课程:优秀(85分以上),良好(70-85),一般(60-70),不及格(小于60)的学生列表

SELECT course.`cname`, CASE WHEN sc.`score`>85 THEN student.`sname` END  AS 优秀,CASE WHEN sc.`score`>70 AND sc.`score`<=85 THEN student.`sname` END AS 良好 ,CASE WHEN sc.`score`>=60 AND sc.`score`<=70 THEN student.`sname` END  AS 一般, CASE WHEN sc.`score`<60 THEN student.`sname` END  AS 不及格FROM courseJOIN sc ON course.`cno`=sc.`cno`JOIN student ON sc.`sno`=student.`sno`
SELECT course.`cname`, GROUP_CONCAT(CASE WHEN sc.`score`>85 THEN student.`sname` END  ) AS 优秀,GROUP_CONCAT(CASE WHEN sc.`score`>70 AND sc.`score`<=85 THEN student.`sname` END) AS 良好,GROUP_CONCAT(CASE WHEN sc.`score`>=60 AND sc.`score`<=70 THEN student.`sname` END) AS 一般, GROUP_CONCAT(CASE WHEN sc.`score`<60 THEN student.`sname` END) AS 不及格FROM courseJOIN sc ON course.`cno`=sc.`cno`JOIN student ON sc.`sno`=student.`sno`GROUP BY course.`cname`

sql编程

case

CASE case_value    WHEN when_value THEN statement_list    [WHEN when_value THEN statement_list] ...    [ELSE statement_list]END CASE

CASE    WHEN search_condition THEN statement_list    [WHEN search_condition THEN statement_list] ...    [ELSE statement_list]END CASE

存储程序

DELIMITER |CREATE PROCEDURE p()  BEGIN    DECLARE v INT DEFAULT 1;    CASE v      WHEN 2 THEN SELECT v;      WHEN 3 THEN SELECT 0;      ELSE        BEGIN        END;    END CASE;  END;  |

if

IF search_condition THEN statement_list    [ELSEIF search_condition THEN statement_list] ...    [ELSE statement_list]END IF
DELIMITER //CREATE FUNCTION SimpleCompare(n INT, m INT)  RETURNS VARCHAR(20)  BEGIN    DECLARE s VARCHAR(20);    IF n > m THEN SET s = '>';    ELSEIF n = m THEN SET s = '=';    ELSE SET s = '<';    END IF;    SET s = CONCAT(n, ' ', s, ' ', m);    RETURN s;  END //DELIMITER ;

loop

[begin_label:] LOOP    statement_listEND LOOP [end_label]
CREATE PROCEDURE doiterate(p1 INT)BEGIN  label1: LOOP    SET p1 = p1 + 1;    IF p1 < 10 THEN      ITERATE label1;    END IF;    LEAVE label1;  END LOOP label1;  SET @x = p1;END;

while

[begin_label:] WHILE search_condition DO    statement_listEND WHILE [end_label]
CREATE PROCEDURE dowhile()BEGIN  DECLARE v1 INT DEFAULT 5;  WHILE v1 > 0 DO    ...    SET v1 = v1 - 1;  END WHILE;END;

MySQL 元数据

1、数据库、表对象的一些定义信息都可以称之为元数据
2、数据库的一些状态统计

元数据是存放到数据库的系统表(基表)

Information_schema使用

DESC information_schema.TABLES
TABLE_SCHEMA    ---->库名TABLE_NAME      ---->表名ENGINE          ---->引擎TABLE_ROWS      ---->表的行数AVG_ROW_LENGTH  ---->表中行的平均行(字节)INDEX_LENGTH    ---->索引的占用空间大小(字节)
show tables from information_schema;

tables 表

查看数据库中所有表

select table_name from tables;

查看每个库的所有表

SELECT TABLE_SCHEMA,GROUP_CONCAT(TABLE_NAME)FROM TABLESGROUP BY TABLE_SCHEMA;

查看world、oldboy库中有哪些表

mysql> select table_name,table_schema from tables where table_schema='world' or table_schema='oldboy';+-----------------+--------------+| table_name      | table_schema |+-----------------+--------------+| student         | oldboy       || student_0       | oldboy       || city            | world        || country         | world        || countrylanguage | world        |+-----------------+--------------+5 rows in set (0.00 sec)

查看数据库中innodb引擎表

mysql> select table_name,table_schema from tables where engine='innodb';+----------------------+--------------+| table_name           | table_schema |+----------------------+--------------+| innodb_index_stats   | mysql        || innodb_table_stats   | mysql        || slave_master_info    | mysql        || slave_relay_log_info | mysql        || slave_worker_info    | mysql        || student              | oldboy       || student_0            | oldboy       || city                 | world        || country              | world        || countrylanguage      | world        |+----------------------+--------------+

查看数据库中共有多少表

mysql> select count(table_name) from tables;+-------------------+| count(table_name) |+-------------------+|               144 |+-------------------+1 row in set (0.00 sec)

concat拼接

select concat("mysqldump ", "-uroot", " -poldboy123", "table_schema", " ", "table_name"," >/tmp/",table_schema,"_",table_name,".sql") from information_schema.tables;select concat("mysqldump ", "-uroot", " -poldboy123", "table_schema", " ", "table_name"," >/tmp/",table_schema,"_",table_name,".sql") from information_schema.tables into outfile "/tmp/bak.sh";

分库分表备份

vim /etc/my.cnf

secure-file-priv=/tmp       
select concat("mysqldump ", "-uroot", " -p123 ",TABLE_SCHEMA," ",TABLE_NAME," >/bak/",TABLE_SCHEMA,"_",TABLE_NAME,".sql")from information_schema.tables into outfile '/tmp/tabbak.sh';

备份所有表结构

create table world.city_0 like world.city;mysql -e 'select concat("create table ",table_schema,".",table_name,"_0"," like ",table_schema,".",table_name)from information_schema.tables;'|grep -v concat

查看每张表占用磁盘空间大小

SELECT TABLE_SCHEMA,TABLE_NAME, TABLE_ROWS*AVG_ROW_LENGTH+INDEX_LENGTHFROM TABLESWHERE TABLE_SCHEMA='world';

每个库占用磁盘空间大小

SELECT TABLE_SCHEMA,SUM(TABLE_ROWS*AVG_ROW_LENGTH+INDEX_LENGTH)FROM TABLESGROUP BY TABLE_SCHEMA

数据库占用磁盘空间总大小

SELECT SUM(TABLE_ROWS*AVG_ROW_LENGTH+INDEX_LENGTH)FROM TABLES

统计数据量

SELECT  CONCAT(table_schema, '.', table_name) AS "Name"  ,CONCAT(ROUND(table_rows / 1000, 2), 'K') AS "Rows"  ,CONCAT(ROUND(data_length / ( 1024 * 1024  ), 2), 'M') AS "Row Size"  ,CONCAT(ROUND(index_length / ( 1024 * 1024  ), 2), 'M') AS "Index Size"  ,CONCAT(ROUND(( data_length + index_length ) / ( 1024 * 1024  ), 2), 'M') AS "Total"  ,ROUND(index_length / data_length, 2) "Row / Index Ratio"  FROM information_schema.TABLES  ORDER BY data_length + index_length DESC  LIMIT 10; 

等待事件查看

SELECT r.trx_id waiting_trx_id ,r.trx_mysql_thread_id waiting_thread ,r.trx_query waiting_query ,b.trx_id blocking_trx_id ,b.trx_mysql_thread_id blocking_thread ,b.trx_query blocking_query FROM information_schema.innodb_lock_waits w JOIN information_schema.innodb_trx b ON b.trx_id = w.blocking_trx_id JOIN information_schema.innodb_trx r ON r.trx_id = w.requesting_trx_id;

Show命令的使用介绍

http://dev.mysql.com/doc/refman/5.7/en/show.html

用户和权限

图片

查看当前登录用户

方法1

mysql> system whoamiroot

方法2

mysql> **select user();**+----------------+| user()         |+----------------+| root@localhost |+----------------+1 row in set (0.00 sec)

添加、查看, 收回权限

mysql> grant all on *.* to oldboy@'172.16.1.%' identified by 'oldboy123';Query OK, 0 rows affected (0.00 sec)mysql> show grants for oldboy@'172.16.1.%'\G*************************** 1. row ***************************Grants for oldboy@172.16.1.%: GRANT ALL PRIVILEGES ON *.* TO 'oldboy'@'172.16.1.%' IDENTIFIED BY PASSWORD '*FE28814B4A8B3309DAC6ED7D3237ADED6DA1E515'1 row in set (0.00 sec)mysql> revoke select ON *.* from 'oldboy'@'172.16.1.%';Query OK, 0 rows affected (0.00 sec)mysql> show grants for oldboy@'172.16.1.%'\G*************************** 1. row ***************************Grants for oldboy@172.16.1.%: GRANT INSERT, UPDATE, DELETE, CREATE, DROP, RELOAD, SHUTDOWN, PROCESS, FILE, REFERENCES, INDEX, ALTER, SHOW DATABASES, SUPER, CREATE TEMPORARY TABLES, LOCK TABLES, EXECUTE, REPLICATION SLAVE, REPLICATION CLIENT, CREATE VIEW, SHOW VIEW, CREATE ROUTINE, ALTER ROUTINE, CREATE USER, EVENT, TRIGGER, CREATE TABLESPACE ON *.* TO 'oldboy'@'172.16.1.%' IDENTIFIED BY PASSWORD '*FE28814B4A8B3309DAC6ED7D3237ADED6DA1E515'1 row in set (0.00 sec)

mysql中的权限

SELECT
INSERT
UPDATE
DELETE
CREATE
DROP
RELOAD
SHUTDOWN
PROCESS
FILE
REFERENCES
INDEX
ALTER
SHOW DATABASES
SUPER
CREATE TEMPORARY TABLES
LOCK TABLES
EXECUTE
REPLICATION SLAVE
REPLICATION CLIENT
CREATE VIEW
SHOW VIEW
CREATE ROUTINE
ALTER ROUTINE
CREATE USER
EVENT
TRIGGER
CREATE TABLESPACE

权限授予表格列含义
ALL [PRIVILEGES]“ all privileges ”的同义词服务器管理
ALTERAlter_priv
ALTER ROUTINEAlter_routine_priv存储例程
CREATECreate_priv数据库,表或索引
CREATE ROUTINECreate_routine_priv存储例程
CREATE TABLESPACECreate_tablespace_priv服务器管理
CREATE TEMPORARY TABLESCreate_tmp_table_priv
CREATE USERCreate_user_priv服务器管理
CREATE VIEWCreate_view_priv查看
DELETEDelete_priv
DROPDrop_priv数据库,表或视图
EVENTEvent_priv数据库
EXECUTEExecute_priv存储例程
FILEFile_priv服务器主机上的文件访问
GRANT OPTIONGrant_priv数据库,表或存储例程
INDEXIndex_priv
INSERTInsert_priv表或列
LOCK TABLESLock_tables_priv数据库
PROCESSProcess_priv服务器管理
PROXY请参阅proxies_priv表服务器管理
REFERENCESReferences_priv数据库或表
RELOADReload_priv服务器管理
REPLICATION CLIENTRepl_client_priv服务器管理
REPLICATION SLAVERepl_slave_priv服务器管理
SELECTSelect_priv表或列
SHOW DATABASESShow_db_priv服务器管理
SHOW VIEWShow_view_priv查看
SHUTDOWNShutdown_priv服务器管理
SUPERSuper_priv服务器管理
TRIGGERTrigger_priv
UPDATEUpdate_priv表或列
USAGE“ no privileges ”的同义词服务器管理

创建用户

CREATE USER 'username'@'localhost' IDENTIFIED BY 'passwd';mysql> create user oldgirl@'10.0.0.%' identified by '123456';Query OK, 0 rows affected (0.00 sec)mysql> show grants for oldgirl@'10.0.0.%'\G*************************** 1. row ***************************Grants for oldgirl@10.0.0.%: GRANT USAGE ON *.* TO 'oldgirl'@'10.0.0.%' IDENTIFIED BY PASSWORD '*6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9'1 row in set (0.00 sec)

创建一个权限和root一样大的system用户

grant all on *.* to 'system'@'localhost' identified by '123456' with grant option;

查看用户

select user,host,password from mysql.user;MySQL5.7mysql> select user,host,authentication_string from mysql.user;+---------------+-----------+-------------------------------------------+| user          | host      | authentication_string                     |+---------------+-----------+-------------------------------------------+| root          | localhost | *6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9 || mysql.session | localhost | *THISISNOTAVALIDPASSWORDTHATCANBEUSEDHERE || mysql.sys     | localhost | *THISISNOTAVALIDPASSWORDTHATCANBEUSEDHERE |+---------------+-----------+-------------------------------------------+3 rows in set (0.00 sec)

删除用户

方法1

mysql> drop user 'oldgirl'@'10.0.0.%';

方法2

mysql> delete from mysql.user where host='127.0.0.1';mysql> delete from mysql.user where user='oldgirl';

刷新权限
直接对表内容的修改,需要刷新权限

mysql> flush privileges;

授权

mysql> grant all on *.* to oldgirl@'10.0.0.%';Query OK, 0 rows affected (0.00 sec)mysql> show grants for oldgirl@'10.0.0.%'\G*************************** 1. row ***************************Grants for oldgirl@10.0.0.%: GRANT ALL PRIVILEGES ON *.* TO 'oldgirl'@'10.0.0.%' IDENTIFIED BY PASSWORD '*6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9'1 row in set (0.00 sec)mysql> grant all on *.* to oldgirl@'10.0.0.0/255.255.255.0';

权限规则

给库授权相当于给目录授权
给表授权相当于给文件授权
权限取并集

生产环境从库(只读)用户的授权

GRANT SELECT ON `blog`.* TO 'blog'@'10.0.0.%' identified by 'oldboy456';

mysqladmin的相关命令

mysqladmin password oldboy123  #<==设置密码mysqladmin -uroot -poldboy123 password oldboy  #<==修改密码mysqladmin -uroot -poldboy123 status   #<==查看状态mysqladmin -uroot -poldboy123 extended-status    #<==show global status;mysqladmin -uroot -poldboy123 -S /data/3306/mysql.sock -i 1 statusmysqladmin -uroot -poldboy123 flush-logsmysqladmin -uroot -poldboy123 processlistmysqladmin -uroot -poldboy123 processlist -i 1 实时跟踪。watch mysqladmin -uroot -poldboy123 processlistmysqladmin -uroot -poldboy123 shutdown  #<==关闭mysqlmysqladmin -uroot -poldboy123 variables  #<==show variablesmysqladmin支持下列命令create databasename:创建一个新数据库;drop databasename:删除一个数据库及其所有表;extended-status:给出服务器的一个扩展状态消息;flush-hosts:清空所有缓存的主机;flush-logs:清空所有日志;flush-tables:清空所有表;flush-privileges:再次装载授权表(同reload);kill id,id,...:杀死mysql线程;password 新口令:将老密码改为新密码;ping:检查mysqld是否活着;processlist:显示服务其中活跃线程列表;reload:重载授权表;refresh:清空所有表并关闭和打开日志文件;shutdown:关掉服务器;status:给出服务器的简短状态消息;variables:打印出可用变量;version:得到服务器的版本信息。

http://man.linuxde.net/mysqladmin

mysql相关命令

mysql [OPTIONS] [database]   #命令方式 - , --help         #显示帮助信息并退出 -I, --help          #显示帮助信息并退出 --auto-rehash       #自动补全功能,就像linux里面,按Tab键出提示差不多,下面有例子 -A, --no-auto-rehash  #默认状态是没有自动补全功能的。-A就是不要自动补全功能 -B, --batch         #mysql不使用历史文件,禁用交互 (Enables --silent) --character-sets-dir=name   #字体集的安装目录                     --default-character-set=name    #设置数据库的默认字符集 -C, --compress      #在客户端和服务器端传递信息时使用压缩 -#, --debug[=#]     #bug调用功能 -D, --database=name #使用哪个数据库 --delimiter=name    #mysql默认命令结束符是分号,下面有例子 -e, --execute=name  #执行mysql的sql语句 -E, --vertical      #垂直打印查询输出 -f, --force         #如果有错误跳过去,继续执行下面的 -G, --named-commands /*Enable named commands. Named commands mean this program's internal commands; see mysql> help . When enabled, the named commands can be used from any line of the query, otherwise only from the first line, before an enter. Disable with --disable-named-commands. This option is disabled by default.*/ -g, --no-named-commands /*Named commands are disabled. Use \* form only, or use named commands only in the beginning of a line ending with a semicolon (;) Since version 10.9 the client now starts with this option ENABLED by default! Disable with '-G'. Long format commands still work from the first line. WARNING: option deprecated; use --disable-named-commands instead.*/ -i, --ignore-spaces #忽视函数名后面的空格. --local-infile      #启动/禁用 LOAD DATA LOCAL INFILE. -b, --no-beep       #sql错误时,禁止嘟的一声 -h, --host=name     #设置连接的服务器名或者Ip -H, --html          #以html的方式输出 -X, --xml           #以xml的方式输出 --line-numbers      #显示错误的行号 -L, --skip-line-numbers  #忽略错误的行号 -n, --unbuffered    #每执行一次sql后,刷新缓存 --column-names      #查寻时显示列信息,默认是加上的 -N, --skip-column-names  #不显示列信息 -O, --set-variable=name  #设置变量用法是--set-variable=var_name=var_value --sigint-ignore     #忽视SIGINT符号(登录退出时Control-C的结果) -o, --one-database  #忽视除了为命令行中命名的默认数据库的语句。可以帮跳过日志中的其它数据库的更新。 --pager[=name]      #使用分页器来显示查询输出,这个要在linux可以用more,less等。 --no-pager          #不使用分页器来显示查询输出。 -p, --password[=name] #输入密码 -P, --port=#        #设置端口 --prompt=name       #设置mysql提示符 --protocol=name     #使用什么协议 -q, --quick         #不缓存查询的结果,顺序打印每一行。如果输出被挂起,服务器会慢下来,mysql不使用历史文件。 -r, --raw           #写列的值而不转义转换。通常结合--batch选项使用。 --reconnect         #如果与服务器之间的连接断开,自动尝试重新连接。禁止重新连接,使用--disable-reconnect。 -s, --silent        #一行一行输出,中间有tab分隔 -S, --socket=name   #连接服务器的sockey文件 --ssl               #激活ssl连接,不激活--skip-ssl --ssl-ca=name       #CA证书 --ssl-capath=name   #CA路径 --ssl-cert=name     #X509 证书 --ssl-cipher=name   #SSL cipher to use (implies --ssl). --ssl-key=name      #X509 密钥名 --ssl-verify-server-cert #连接时审核服务器的证书 -t, --table         #以表格的形势输出 --tee=name          #将输出拷贝添加到给定的文件中,禁时用--disable-tee --no-tee            #根--disable-tee功能一样 -u, --user=name     #用户名 -U, --safe-updates  #Only allow UPDATE and DELETE that uses keys. -U, --i-am-a-dummy  #Synonym for option --safe-updates, -U. -v, --verbose       #输出mysql执行的语句 -V, --version       #版本信息 -w, --wait          #服务器down后,等待到重起的时间 --connect_timeout=# #连接前要等待的时间 --max_allowed_packet=# #服务器接收/发送包的最大长度 --net_buffer_length=# #TCP / IP和套接字通信缓冲区大小。 --select_limit=#    #使用--safe-updates时SELECT语句的自动限制 --max_join_size=#   #使用--safe-updates时联接中的行的自动限制 --secure-auth       #拒绝用(pre-4.1.1)的方式连接到数据库 --server-arg=name   #Send embedded server this as a parameter. --show-warnings     #显示警告

mysql变量查看与设置

mysql> show variables like '%key_buffer%';+-----------------+----------+| Variable_name   | Value    |+-----------------+----------+| key_buffer_size | 16777216 |+-----------------+----------+1 row in set (0.00 sec)mysql> set global key_buffer_size = 1024*1024*8;Query OK, 0 rows affected (0.00 sec)mysql> show variables like '%key_buffer%';+-----------------+---------+| Variable_name   | Value   |+-----------------+---------+| key_buffer_size | 8388608 |+-----------------+---------+1 row in set (0.00 sec)

show命令

show databases; #列出所有数据库show tables; #列出默认数据库中的表show tables from <database_name>  #列出指定数据库中的表show columns from <table_name> #显示表的列结构show processlist; #查看数据库里正在执行的SQL语句,可能无法看全完整SQL语句。show full processlist;  #查看正在执行的完整SQL语句,完整显示。set global key_buffer_size = 1024*1024*32 #不重启数据库调整数据库参数,直接生效,重启后失效。show variables; #查看数据库的配置参数信息,例如:my.cnf里参数的生效情况。show variables like '%log_bin%';"kill ID  #杀掉SQL线程的命令,ID为线程号。show session status #查看当前会话的数据库状态信息show status; #列出当前数据库状态show global status; #查看整个数据库运行状态信息,很重要,要分析并要做好监控。show engine innodb status; #显示innodb引擎的性能状态(早期版本show innodb status)show index from <table_name>  #显示表中有关索引和索引列的信息show character set; #显示可用的字符集及其默认整理show collation;  #显示每个字符集的整理

索引

https://dev.mysql.com/doc/refman/5.7/en/optimization-indexes.html

索引介绍

数据库的索引就像书的目录一样,如果在字段上建立了索引,那么以索引列为查询条件时可以加快查询数据的速度

索引类型

BTREE:B+树索引 包括 主键、唯一、普通索引
HASH:HASH索引
FULLTEXT:全文索引
RTREE:R树索引

创建主键索引

1、在建表时,可以增加创建主键索引的语句

create table student(id int(4) not null AUTO_INCREMENT,name char(20) not null,age tinyint(2) NOT NULL default '0',dept varchar(16) default NULL,primary key(id),KEY index_name(name));

提示:
1、primary key(id) 主键
2、KEY index_name(name) name字段普通索引
在唯一值多的列上建索引查询效率高

create table student(id int(4) not null,name char(20) not null,age tinyint(2) NOT NULL default '0',dept varchar(16) default NULL);
mysql> show create table student\G;*************************** 1. row ***************************       Table: studentCreate Table: CREATE TABLE `student` (  `id` int(4) NOT NULL AUTO_INCREMENT,  `name` char(20) NOT NULL,  `age` tinyint(2) NOT NULL DEFAULT '0',  `dept` varchar(16) DEFAULT NULL,  PRIMARY KEY (`id`),  KEY `index_name` (`name`)) ENGINE=InnoDB DEFAULT CHARSET=utf81 row in set (0.00 sec)
mysql> desc student;+-------+-------------+------+-----+---------+----------------+| Field | Type        | Null | Key | Default | Extra          |+-------+-------------+------+-----+---------+----------------+| id    | int(4)      | NO   | PRI | NULL    | auto_increment || name  | char(20)    | NO   | MUL | NULL    |                || age   | tinyint(2)  | NO   |     | 0       |                || dept  | varchar(16) | YES  |     | NULL    |                |+-------+-------------+------+-----+---------+----------------+4 rows in set (0.00 sec)
create table student(id int(4) not null,name char(20) not null,age tinyint(2) NOT NULL default '0',dept varchar(16) default NULL,primary key(id),KEY index_name(name));

创建主键索引

alter table student change id id int primary key auto_increment;

提示:只有int类型且为primary key 才可以使用 auto_increment

alter table student change column id id int(4) not null auto_increment primary key;

查看索引

mysql> show index from student\G;*************************** 1. row ***************************        Table: student   Non_unique: 0     Key_name: PRIMARY Seq_in_index: 1  Column_name: id    Collation: A  Cardinality: 0     Sub_part: NULL       Packed: NULL         Null:   Index_type: BTREE      Comment:Index_comment:*************************** 2. row ***************************        Table: student   Non_unique: 1     Key_name: index_name Seq_in_index: 1  Column_name: name    Collation: A  Cardinality: 0     Sub_part: NULL       Packed: NULL         Null:   Index_type: BTREE      Comment:Index_comment:2 rows in set (0.00 sec)mysql> show index from student where column_name='dept'\G;*************************** 1. row ***************************        Table: student   Non_unique: 1     Key_name: ind_dept Seq_in_index: 1  Column_name: dept    Collation: A  Cardinality: 0     Sub_part: NULL       Packed: NULL         Null: YES   Index_type: BTREE      Comment:Index_comment:1 row in set (0.00 sec)

删除索引

alter table student drop index index_name;drop index index_name on test;

删除主键(带自增的主键不能被删除) 工作中没有这么做的

alter table student drop primary key;

添加索引

添加索引的速度取决于当时的数据量,数据量越大,创建索引越慢
生产场景:
如果数据量特别大的时候,不适合建立索引,会影响用户访问,曾经400-500条记录的表,建立索引,花了90-180秒
尽量选择在业务低谷时建立索引

alter table student add index index_name(name);
create index index_name on test(name);

对字段的前n个字符创建普通索引

给student表的dept字段前8个字节创建索引

create index index_dept on student(dept(8));alter table student add index index_dept(name(8));

为表的多个字段创建联合索引

create index index_name_dept on student(name,dept);

多字段联合索引(不同字段,不同字符)

create index ind_name_dept on student(name(8),dept(10));

统计表记录的唯一值

mysql> select count(user && host) from mysql.user;+---------------------+| count(user && host) |+---------------------+|                   2 |+---------------------+1 row in set (0.00 sec)mysql> select count(distinct user,host) from mysql.user;+---------------------------+| count(distinct user,host) |+---------------------------+|                         2 |+---------------------------+1 row in set (0.00 sec)mysql> select count(user) from mysql.user;+-------------+| count(user) |+-------------+|           2 |+-------------+1 row in set (0.00 sec)mysql> select count(distinct user) from mysql.user;+----------------------+| count(distinct user) |+----------------------+|                    1 |+----------------------+1 row in set (0.00 sec)

提示:尽量在唯一值多的大表上建立索引

提示:按条件列查询数据时,联合索引是有前缀生效特性的
index(a,b,c)
仅a, ab, abc 三个查询条件列可以走索引
b, bc, ac, c 等无法使用索引了
尽量把最常用作为查询条件的列,放在第一位置,也可以多列创建联合主键

创建唯一索引(非主键)

mysql> create unique index uni_ind_name on student(name);Query OK, 0 rows affected (0.11 sec)Records: 0  Duplicates: 0  Warnings: 0mysql> desc student;+-------+-------------+------+-----+---------+----------------+| Field | Type        | Null | Key | Default | Extra          |+-------+-------------+------+-----+---------+----------------+| id    | int(11)     | NO   | PRI | NULL    | auto_increment || name  | char(20)    | NO   | **UNI** | NULL    |                || age   | tinyint(2)  | NO   |     | 0       |                || dept  | varchar(16) | YES  |     | NULL    |                |+-------+-------------+------+-----+---------+----------------+4 rows in set (0.00 sec)
alter table testtab add unique index inx_uni(name);

执行计划

https://dev.mysql.com/doc/refman/5.7/en/explain-output.html
explain 或 desc

查看执行计划,是否走索引

mysql> explain select name from country  where name like "c%" limit 10;+----+-------------+---------+------+---------------+------+---------+------+------+-------------+| id | select_type | table   | type | possible_keys | key  | key_len | ref  | rows | Extra       |+----+-------------+---------+------+---------------+------+---------+------+------+-------------+|  1 | SIMPLE      | country | ALL  | NULL          | NULL | NULL    | NULL |  239 | Using where |+----+-------------+---------+------+---------------+------+---------+------+------+-------------+

type : 表示MySQL在表中找到所需行的方式,又称“访问类型”,
常见类型如下:
ALL, index, range, ref, eq_ref, const, system, NULL
从左到右,性能从最差到最好

ALL:Full Table Scan, MySQL将遍历全表以找到匹配的行
index:Full Index Scan,index与ALL区别为index类型只遍历索引树
range:索引范围扫描,对索引的扫描开始于某一点,返回匹配值域的行。
显而易见的索引范围扫描是带有between或者where子句里带有<,>查询。
当mysql使用索引去查找一系列值时,例如IN()和OR列表,也会显示range(范围扫描),当然性能上面是有差异的。

ref:使用非唯一索引扫描或者唯一索引的前缀扫描,返回匹配某个单独值的记录行

eq_ref:类似ref,区别就在使用的索引是唯一索引,对于每个索引键值,表中只有一条记录匹配,简单来说,
就是多表连接中使用primary key或者 unique key作为关联条件

const、system:当MySQL对查询某部分进行优化,并转换为一个常量时,使用这些类型访问。
如将主键置于where列表中,MySQL就能将该查询转换为一个常量

NULL:MySQL在优化过程中分解语句,执行时甚至不用访问表或索引,
例如从一个索引列里选取最小值可以通过单独索引查找完成。

压力测试

 mysqlslap --defaults-file=/etc/my.cnf \--concurrency=100 --iterations=1 --create-schema='oldboy' \--query="select * from oldboy.t_100w where k2='780P'" engine=innodb \--number-of-queries=2000 -uroot -p123 -verbose

查看是否有索引

show index from country;

查看唯一值数量,查看是否合适做索引

mysql> select count(distinct name) from country;+----------------------+| count(distinct name) |+----------------------+|                  239 |+----------------------+mysql> select count(name) from country;+-------------+| count(name) |+-------------+|         239 |+-------------+

创建索引

mysql> alter table country add index name_idx(name);Query OK, 0 rows affected (0.02 sec)Records: 0  Duplicates: 0  Warnings: 0

再次查看执行计划,是否走索引

mysql> explain select name from country  where name like "c%" limit 10;+----+-------------+---------+-------+---------------+----------+---------+------+------+--------------------------+| id | select_type | table   | type  | possible_keys | key      | key_len | ref  | rows | Extra                    |+----+-------------+---------+-------+---------------+----------+---------+------+------+--------------------------+|  1 | SIMPLE      | country | range | name_idx      | name_idx | 52      | NULL |   22 | Using where; Using index |+----+-------------+---------+-------+---------------+----------+---------+------+------+--------------------------+

view视图

视图方便查询,便于程序可读

create view view_l_aa as select * from test1 where name='aa';

mysql日志

https://dev.mysql.com/doc/refman/5.7/en/server-logs.html

错误日志

mysql的错误日志(error log)记录mysql服务进程mysqld在启动/关闭或运行过程中遇到的错误信息
配置方法
方法1

log_error= /application/mysql-5.6.34/data/mysql-db01.err

方法2

mysqld_safe --defaults-file=/etc/my.cnf --log-error=/application/mysql-5.6.34/data/mysql-db01.err &
mysql> show variables like "%log_error%";+---------------+---------------------------------+| Variable_name | Value                           |+---------------+---------------------------------+| log_error     | /data/3306/mysql_oldboy3306.err |+---------------+---------------------------------+1 row in set (0.00 sec)

普通查询日志(general query log)

普通查询日志(general query log),记录客户端连接信息和执行的sql语句信息

[root@MySQL ~]# grep gene /data/3306/my.cnfgeneral_log = ongeneral_log_file = /data/3306/data/MySQL_oldboy.log
mysql> set global general_log_file = "/data/3306/data/MySQL_oldboy.log";Query OK, 0 rows affected (0.04 sec)mysql> show variables like 'general_log%';+------------------+----------------------------------+| Variable_name    | Value                            |+------------------+----------------------------------+| general_log      | ON                               || general_log_file | /data/3306/data/MySQL_oldboy.log |+------------------+----------------------------------+2 rows in set (0.00 sec)mysql> set global general_log = on; Query OK, 0 rows affected (0.03 sec)

慢查询日志

mysql> show variables like '%slow_query%';+---------------------+----------------------------------------------------+| Variable_name       | Value                                              |+---------------------+----------------------------------------------------+| slow_query_log      | OFF                                                || slow_query_log_file | /application/mysql-5.6.34/data/mysql-db01-slow.log |+---------------------+----------------------------------------------------+
slow_query_log = onlong_query_time = 1                  #超过1秒,记录到slow log 里log_queries_not_using_indexes         # 没有走索引的语句,slow log 里log-slow-queries = /data/3306/slow.log   # slow log 文件min_examined_row_limit = 1000       #记录查询结果大于1000条的sql语句

慢日志切割

[root@db01 data]# mv slow.log slow_$(date +%F).log[root@db01 data]# mysqladmin flush-log

mysqldumpslow

/path/mysqldumpslow-s c -t 10 /database/mysql/slow-log这会输出记录次数最多的10条SQL语句

-s 是表示按照何种方式排序,c、t、l、r分别是按照运行次数、时间、查询时间、返回的记录数来排序,ac、at、al、ar,表示相应的倒叙;

-t 是top n的意思,即为返回前面多少条的数据;

-g后边可以写一个正则匹配模式,大小写不敏感的;

例子:/path/mysqldumpslow-s r -t 10 /database/mysql/slow-log得到返回记录集最多的10个查询。/path/mysqldumpslow-s t -t 10 -g “left join”/database/mysql/slow-log得到按照时间排序的前10条里面含有左连接的查询语句。

mysqlsla分析慢查询
mysqlsla分析案例
http://blog.itpub.net/7607759/viewspace-692828/

慢查询日志分析工具mysqlsla或pt-query-digest(推荐)
pt-query-diges,mysqldumpslow, mysqlsla, myprofi, mysql-explain-slow-log, mysqllogfilter 比较

二进制日志(binlog)

二进制日志(binary log)介绍

 二进制日志,记录数据的增删改(insert,update,delete,create,drop,alter)的相关信息,用户主从复制及增量恢复的基础

二进制日志(binary log)调整

mysql> show variables like '%log_bin%';+---------------------------------+------------------------------------------------+| Variable_name                   | Value                                          |+---------------------------------+------------------------------------------------+| log_bin                         | ON                                             || log_bin_basename                | /application/mysql-5.6.34/data/mysql-bin       || log_bin_index                   | /application/mysql-5.6.34/data/mysql-bin.index || log_bin_trust_function_creators | OFF                                            || log_bin_use_v1_row_events       | OFF                                            || sql_log_bin                     | ON                                             |+---------------------------------+------------------------------------------------+[root@db01 ~]# grep log-bin /data/3306/my.cnflog-bin = /data/3306/mysql-binbinlog_format=row

临时不记录binlog

mysql> set session sql_log_bin = OFF;Query OK, 0 rows affected (0.00 sec)

二进制日志log-bin作用

1、以二进制形式记录对数据库进行的写操作SQL语句
2、用于MySQL主从复制
3、增量数据备份及恢复

set sql_log_bin=0source /opt/new.sql

binlog文件切割条件

1、数据库重启,自动切割新文件
2、mysqladmin -S /data/3306/mysql.sock -uroot -poldboy flush-logs
3、文件达到1.1G,自动切割

查看binlog方法

mysqlbinlog mysql-bin.000001show master status;show binary logs;show binlog events in 'mysql-bin.000001';

查看binlog日志详细内容

mysqlbinlog --base64-output=decode-rows -v mysql-bin.000007

mysqlbinlog 命令筛选指定库的数据

mysqlbinlog -d blog mysql-bin.000001 -r /root/blog.sql
mysqlbinlog --base64-output=decode-rows -d blog -v /application/mysql/data/mysql-bin.000001 -r /root/blog.sql

注意:只有切入数据库(use 库名)再插入数据才能在binlog中找到数据

mysqlbinlog oldboy-bin.000009 --start-position=8826 --stop-position=8975 -r pos.sql

删除binlog日志方法

1、设置参数自动删除

expire_logs_days = 7     #<==删除7天前的日志

2、从头删到指定的文件位置

mysql> purge binary logs to 'mysql-bin.000004';      # mysql-bin.000004 不会被删除Query OK, 0 rows affected (0.03 sec)

3、按照时间删除

mysql> PURGE MASTER LOGS BEFORE '2016-08-28 13:00:00';Query OK, 0 rows affected (0.02 sec)

4、删除3天前的binlog日志

mysql> PURGE MASTER LOGS BEFORE DATE_SUB(NOW( ), INTERVAL 3 DAY);Query OK, 0 rows affected (0.00 sec)

清除所有binlog, 从零开始记录binlog

mysql> reset master;Query OK, 0 rows affected (0.01 sec)

查看binlog事件

show binlog events in 'mysql-bin.000002';

mysql binlog三种模式

STATEMENT模式

默认为STATEMENT模式(语句模式)
每一条被修改数据的sql都会记录到master的bin-log中,slave在复制的时候sql进程会解析成和原来master端执行过的相同的sql来再次执行
优点: 记录的记录简单,内容少
statement 下的优点首先解决了row 下的缺点,不需要记录每一行数据的变化,减少bin-log日志量,节约磁盘IO,提高性能。因为它只需要记录在master上执行的语句的细节,以及执行语句时候的上下文的信息
缺点:导致主从不一致
由于它是记录的执行语句,所以,为了让这些语句再slave端也能正确执行,那么它还必须记录每条语句在执行的时候的一些相关信息,也就是上下文信息,以保证所有语句在slave端执行的时候能够得到和在master端执行时候相同的结果。另外就是,由于mysql现在发展比较快,很多的新功能不断的加入,使mysql的复制遇到了不小的挑战,自然复制的时候涉及到越复杂的内容,bug也就越容易出现。在statement下,目前已经发现的就有不少情况会造成mysql的复制出现问题,主要是修改数据的时候使用了某些特定的函数或者功能的时候会出现,比如:sleep()函数在有些版本中就不能正确复制,在存储过程中使用了last_insert_id()函数,可能会使slave和master上得到不一致的id等等。由于row是基于每一行来记录的变化,所以不会出现类似的问题
永久设置

binlog_format = 'STATEMENT'

临时设置

 mysql> set global binlog_format = 'STATEMENT';Query OK, 0 rows affected (0.00 sec)

查看

mysql> show variables like "%binlog_format%";+---------------+-----------+| Variable_name | Value     |+---------------+-----------+| binlog_format | STATEMENT |+---------------+-----------+

ROW

行级模式
优点:记录数据很细(逐行),主从复制容易保持一致
缺点:占用大量磁盘空间,降低磁盘性能
永久设置

binlog_format = 'ROW'

临时设置

mysql> set global binlog_format = '**ROW**';Query OK, 0 rows affected (0.00 sec)

MIXED(混合)

智能模式
永久设置

binlog_format = 'MIXED'

临时设置

mysql> set global binlog_format = '**MIXED**';Query OK, 0 rows affected (0.00 sec)

企业场景如何选择binlog的模式

1、互联网公司,使用mysql的功能相对少(存储过程、触发器、函数)
选择默认的语句模式,statement 中小公司
2、公司如果用到使用mysql的特殊功能(存储过程、触发器、函数)
则选择mixed模式
3、公司如果用到使用mysql的特殊功能(存储过程、触发器、函数),又希望数据最大化一致,此时最好ROW模式

字符集

https://dev.mysql.com/doc/refman/5.7/en/charset-unicode-utf8mb3.html

字符集介绍

简单地说,字符集就是一套文字符号及其编码、比较规则的集合,第一个计算机字符集ASCII
mysql数据库字符集包括 字符集(CHARACTER)和 校对规则(COLLATION)两个概念,其中,字符集是用来定义mysql数据字符串的存储方式。而校对规则是定义比较字符串的方式

编译mysql时候,指定字符集了,这样以后建库的时候就直接create database oldboy;
二进制安装mysql,我们没有指定字符集,此时字符集默认latin1,此时需要建立建UTF8字符集的库,就需要指定UTF8字符集建库

create database oldboy DEFAULT CHARACTER SET UTF8 DEFAULT COLLATE=utf8_general_ci;

mysql数据库常见字符集介绍

在互联网环境中,使用mysql时常用的字符集
常用字符集一个汉字长度(字节)说明
GBK2不是国际标准,对中文环境支持的很好
UTF83中英文混合的环境,建议使用此字符集,用的比较多的
latin11mysql的默认字符集
utf8mb44UTF-8 Unicode,移动互联网

mysql如何选择合适的字符集

1、如果处理各种各样的文字,发布到不同语言国家地区,应该选Unicode字符集,对mysql来说就是UTF-8(每个汉字三字节),如果应用需要处理英文,仅有少量汉字UTF-8更好
2、如果只需支持中文,并且数据量很大,性能要求也很高,可选GBK(定长 每个汉字占双字节,英文也占双字节),如果需大量运算,比较排序等,定长字符集,更快,性能高
3、处理移动互联网业务,可能需要使用utf8mb4字符集

查看支持的字符集

mysql> show character set;+----------+-----------------------------+---------------------+--------+| Charset  | Description                 | Default collation   | Maxlen |+----------+-----------------------------+---------------------+--------+| big5     | Big5 Traditional Chinese    | big5_chinese_ci     |      2 || dec8     | DEC West European           | dec8_swedish_ci     |      1 || cp850    | DOS West European           | cp850_general_ci    |      1 || hp8      | HP West European            | hp8_english_ci      |      1 || koi8r    | KOI8-R Relcom Russian       | koi8r_general_ci    |      1 || latin1   | cp1252 West European        | latin1_swedish_ci   |      1 || latin2   | ISO 8859-2 Central European | latin2_general_ci   |      1 || swe7     | 7bit Swedish                | swe7_swedish_ci     |      1 || ascii    | US ASCII                    | ascii_general_ci    |      1 || ujis     | EUC-JP Japanese             | ujis_japanese_ci    |      3 || sjis     | Shift-JIS Japanese          | sjis_japanese_ci    |      2 || hebrew   | ISO 8859-8 Hebrew           | hebrew_general_ci   |      1 || tis620   | TIS620 Thai                 | tis620_thai_ci      |      1 || euckr    | EUC-KR Korean               | euckr_korean_ci     |      2 || koi8u    | KOI8-U Ukrainian            | koi8u_general_ci    |      1 || gb2312   | GB2312 Simplified Chinese   | gb2312_chinese_ci   |      2 || greek    | ISO 8859-7 Greek            | greek_general_ci    |      1 || cp1250   | Windows Central European    | cp1250_general_ci   |      1 || gbk      | GBK Simplified Chinese      | gbk_chinese_ci      |      2 |show charset;

查看校对规则

show collation;

ci:大小写不敏感
cs或bin:大小写敏感

配置文件设置字符集

character-set-server=utf8

查看字符集

mysql> show variables like 'character_set%';+--------------------------+-------------------------------------------+| Variable_name            | Value+--------------------------+-------------------------------------------+| character_set_client     | utf8            #客户端字符集| character_set_connection | utf8            #客户端连接字符集| character_set_database   | utf8            #数据库字符集,配置文件指定或建库建表指定| character_set_filesystem | binary           #文件系统字符集| character_set_results    | utf8            #客户端返回结果字符集| character_set_server     | utf8           #服务器字符集,配置文件指定或建库建表指定| character_set_system     | utf8          #系统字符集| character_sets_dir       | /application/mysql-5.5.32/share/charsets/ |+--------------------------+-------------------------------------------+8 rows in set (0.00 sec)

修改客户端字符集

方法一

mysql> set names latin1;                Query OK, 0 rows affected (0.00 sec)mysql> show variables like 'character_set%';+--------------------------+-------------------------------------------+| Variable_name            | Value                                     |+--------------------------+-------------------------------------------+| character_set_client     | latin1                                    || character_set_connection | latin1                                    || character_set_database   | gbk                                       || character_set_filesystem | binary                                    || character_set_results    | latin1                                    || character_set_server     | utf8                                      || character_set_system     | utf8                                      || character_sets_dir       | /application/mysql-5.5.49/share/charsets/ |+--------------------------+-------------------------------------------+8 rows in set (0.00 sec)SET character_set_client = gbk;SET character_set_results = gbk;SET character_set_connection = gbk;

方法2

my.cnf

[client]default-character-set=gbk

方法3

mysql -uroot -poldboy123 -S /data/3307/mysql.sock --default-character-set=latin1

修改服务器端字符集

1、配置文件
my.cnf

[mysqld]character-set-server=gbk

2、命令行

set  character_set_server=gbk;set  character_set_database=gbk;

防止乱码

客服端字符集

character_set_clientcharacter_set_connectioncharacter_set_results

控制
a、 set names gbk;
set character_set_client=gbk;
b、 mysql -uroot -poldboy -S /data/3306/mysql.sock --default-character-set=latin1
c、 配置文件my.cnf
[client]
default-character-set=gbk

数据库字符集

character_set_databasecharacter_set_server

控制
a、配置文件

[mysqld]character-set-server=gbk    #<==适合5.5

b、命令行

set character_set_server=gbk;set character_set_database=gbk;

建库指定字符集

建库

create database oldboy DEFAULT CHARACTER SET gbk COLLATE gbk_chinese_ci;

建表

CREATE TABLE `test`(   `id` int(4) NOT NULL AUTO_INCREMENT,   `name`  char(20) NOT NULL,   PRIMARY KEY(`id`)) ENGINE=InnoDB DEFAULT CHARSET=gbk;

linux系统服务端字符集

[root@oldboy ~]# cat /etc/sysconfig/i18nLANG="zh_CN.UTF-8"

ssh 客户端字符集

UTF-8

库修改字符集

alter database oldboy CHARACTER SET latin1 COLLATE = latin1_swedish_ci;alter database oldboy CHARACTER SET utf8 collate utf8_general_ci;

表修改字符集

alter table test CHARACTER SET latin1;  

字符集修改问题,对新数据生效,对老数据不行

alter table test character set=gbk collate gbk_chinese_ci;alter database oldboy CHARACTER SET latin1 COLLATE= latin1_swedish_ci;

引擎

https://dev.mysql.com/doc/refman/5.7/en/innodb-storage-engine.html

什么是存储引擎

在讲清楚什么是存储引擎之前,我们先来个比喻,我们都知道录制一个视频文件,可以转成不同的格式如mp4,avi,wmv等,而存在我们电脑的磁盘上也会存在于不同类型的文件系统中如windows里常见的ntfs,fat32,存在于linux里常见的ext3,ext4,xfs,但是,给我们或者用户看到实际视频内容都是一样的。直观区别是,占用系统的空间大小与清晰程度可能不同
数据库引擎是用于存储、处理和保护数据的核心服务
数据库的引擎 ==== 操作系统的文件系统

特征支持
B树索引
备份/时间点恢复**(在服务器中实现,而不是在存储引擎中实现。)**
群集数据库支持没有
聚集索引
压缩数据
数据缓存
加密数据是(通过加密功能在服务器中实现;在MySQL 5.7及更高版本中,支持静态数据表空间加密。)
外键支持
全文搜索索引是(在MySQL 5.6及更高版本中可以使用InnoDB对FULLTEXT索引的支持。)
地理空间数据类型支持
地理空间索引支持是(在MySQL 5.7及更高版本中可以使用InnoDB对地理空间索引的支持。)
哈希索引否(InnoDB在内部利用哈希索引来实现其自适应哈希索引功能。)
索引缓存
锁定粒度
MVCC
复制支持(在服务器中实现,而不是在存储引擎中实现。)
存储限制64TB
T树索引没有
transaction
更新数据字典的统计信息

图片

功能

数据读写
数据安全
提高性能
热备份
自动故障恢复
高可用方面支持

常用的存储引擎

innodb myisam memory NDB.BLACKHOLE

Innodb 目前MySQL版本的默认存储引擎,支持事务,支持行级锁,默认情况下表结构单独形成一个文件,表数据则统一在ibdata1文件中

MyISAM 老版本MySQL的默认存储引擎,不支持事务,表级锁,但是由于表创建的时候会创建独立的三个文件(表定义,表数据,表索引),所以适合文件级的迁移;另外,查询全表count(*)是直接从统计资料获取,所以速度非常快

Memory 数据存储在内存中,保证极高的数据存取速度,但关闭或者崩溃后数据会丢失,一般都用Redis代替

查看默认的存储引擎

select @@default_storage_engine;show variabbles like '%engine%';

查看支持的存储引擎

mysql> show engines;+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+| Engine             | Support | Comment                                                        | Transactions | XA   | Savepoints |+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+| InnoDB             | DEFAULT | Supports transactions, row-level locking, and foreign keys     | YES          | YES  | YES        || CSV                | YES     | CSV storage engine                                             | NO           | NO   | NO         || MyISAM             | YES     | MyISAM storage engine                                          | NO           | NO   | NO         || BLACKHOLE          | YES     | /dev/null storage engine (anything you write to it disappears) | NO           | NO   | NO         || PERFORMANCE_SCHEMA | YES     | Performance Schema                                             | NO           | NO   | NO         || MRG_MYISAM         | YES     | Collection of identical MyISAM tables                          | NO           | NO   | NO         || ARCHIVE            | YES     | Archive storage engine                                         | NO           | NO   | NO         || MEMORY             | YES     | Hash based, stored in memory, useful for temporary tables      | NO           | NO   | NO         || FEDERATED          | NO      | Federated MySQL storage engine                                 | NULL         | NULL | NULL       |+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+

查看数据库中myisam引擎的表

select table_schema,table_name,engine from tables where engine='myisam';

设置存储引擎类型

1、在启动配置文件中设置服务器存储引擎

[mysqld]default-storage-engine=<Storage Engine>

2、使用SET 命令为当前客户机会话设置

SET @@storage_engine=<Storage Engine>;

3、在CREATE TABLE 语句指定

CREATE TABLE t (iINT) ENGINE = <Storage Engine>;

myisam

MyISAM引擎是mysql关系数据库管理系统的默认存储引擎(mysql5.5.5以前)。这种mysql表存储结构从旧的ISAM代码扩展出许多有用的功能。在新版本的mysql中,InnoDB引擎由于其对事务参照完整性,以及更高的并发性等优点开始逐步的取MyISAM引擎
提示:mysql5.1数据库的默认存储引擎为MyISAM
每一个MyISAM的表都对应于硬盘上的三个文件。这三个文件有一样的文件名,但是有不同的扩展名指示其类型用途:frm文件保存表的定义,这个文件并不是MyISAM引擎的一部分,而是服务器的一部分;MYD保存表的数据;MYI是表的索引文件。MYD和MYI是MyISAM的关键点

MyISAM引擎特点

1、不支持事务
事务是指逻辑上的一组操作,组成这组操作的各个单元,要么全成功要么全失败
2、表级锁定,数据更新时锁定整个表:其锁定机制是表级锁定,这虽然可以让锁定的实现成本很小但是也同时大大降低了其并发性能
3、读写互相阻塞:不仅会在写入的时候阻塞读取,MyISAM还会在读取的时候阻塞写入,但读本身并不会阻塞另外的读
4、只会缓存索引:MyISAM可以通过key_buffer_size缓存索引,以大大提高访问性能减少磁盘IO,但是这个缓存区只会缓存索引,而不会缓存数据
5、读取速度较快。占用资源相对少
6、不支持外键约束,但支持全文索引
7、MyISAM引擎是MySQL5.5.5前缺省的存储引擎

MyISAM引擎适用的生产业务场景

1、不需要事务支持的业务(例如转账就不行)
2、一般为读数据比较多的应用,读写都频繁场景不适用,读多或者写多的都适合
3、读写并发访问相对较低的业务(纯读纯写高并发也可以)(锁定机制问题)
4、数据修改相对较少的业务(阻塞问题)
5、以读为主的业务,例如:数据库系统表、www,blog,图片信息数据库,用户数据库,商品库等业务
6、对数据一致性要求不是非常高的业务(不支持事务)
7、硬件资源比较差的机器可以用MyISAM(占用资源少)
小结:单一对数据库的读或写操作都可以使用MyISAM,所谓单一就是尽量纯读,或者纯写(insert,update,delete)等
8、使用读写分离的MySQL从库可以使用MyISAM

MyISAM引擎重要参数

key_buffer_size = 1024M

session级别参数

session 级别参数 每线程独占,不能太大

sort_buffer_size = 1Mjoin_buffer_size = 1M

InnoDB引擎

图片

什么是InnoDB引擎

  InnoDB引擎是mysql数据库的另一个重要的存储引擎,正成为目前mysql AB所发行新版的标准,被包含在所有二进制安装包里。和其它的存储引擎相比,InnoDB引擎的优点是支持兼容ACID的事务(类似于PostgreSQL),以及参数完整性(即对外键的支持)

innodb特点

1、row-level locking
2、full-text search indexes
3、data caches
4、index caches
5、transactions
6、占用资源多
7、读写阻塞与事务隔离级别相关
8、支持外键

innoDB引擎适用的生产业务场景

1、需要事务支持的业务(具有较好的事务特性)
2、行级锁定对高并发有很好的适应能力,但需要确保查询是通过索引完成
3、数据读写及更新都较为频繁的场景,如:BBS,SNS,微博,微信等
4、数据一致性要求较高的业务,例如:充值转账,银行卡转账
5、硬件设备内存较大,可以利用InnoDB较好的缓存能力来提高内存利用率,尽可能减少磁盘IO

InnoDB引擎调优精要

1、主键尽可能小,避免给Secondary index带来过大的空间负担
2、建立有效索引避免全表扫描,因为会使用表锁
3、尽可能缓存所有的索引和数据,提高响应速度,减少磁盘IO消耗
4、在大批量小插入的时候,尽量自己控制事务而不要使用autocommit自动提交。有开关可以控制提交方式
5、合理设置innodb_flush_log_at_trx_commit参数值,不要过度追求安全性
如果innodb_flush_log_at_trx_commit的值为0,log buffer 每秒就会被刷写日志文件到磁盘,提交事务的时候不做任何操作
6、避免主键更新,因为这会带来大量的数据移动

innodb_additional_mem_pool_size = 16Minnodb_buffer_pool_size = 2048Minnodb_data_file_path = ibdata1:1024M:autoextendinnodb_file_io_threads = 4innodb_thread_concurrency = 8innodb_flush_log_at_trx_commit = 2innodb_log_buffer_size = 16Minnodb_log_file_size = 128Minnodb_log_files_in_group = 3innodb_max_dirty_pages_pct = 90innodb_lock_wait_timeout = 120innodb_file_per_table = 0innodb_file_per_tableinnodb_data_home_dir = /data/xxxinnodb_log_group_home_dir=/data/xxx

Innodb引擎重要参数

innodb_additional_mem_pool_size = 4M #用来设置InnoDB存储的数据目录信息和其他内部数据结构的内存池大小。应用程序里的表越多,你需要在这里面分配越多的内存。对于一个相对稳定的应用,这个参数的大小也是相对稳定的,也没有必要预留非常大的值。如果InnoDB用广了这个池内的内存,InnoDB开始从操作系统分配内存,并且往MySQL错误日志写警告信息。默认为1MB,当发现错误日志中已经有相关的警告信息时,就应该适当的增加该参数的大小。

innodb_buffer_pool_size = 64M #InnoDB使用一个缓冲池来保存索引和原始数据,设置越大,在存取表里面数据时所需要的磁盘I/O越少。强烈建议不要武断地将InnoDB的Buffer Pool值配置为物理内存的50%~80%,应根据具体环境而定。

innodb_data_file_path = ibdata1:128M:autoextend #设置配置一个可扩展大小的尺寸为128MB的单独文件,名为ibdata1.没有给出文件的位置,所以默认的是在MySQL的数据目录内。

innodb_file_io_threads = 4 #InnoDB中的文件I/O线程。通常设置为4,如果是windows可以设置更大的值以提高磁盘I/O

innodb_thread_concurrency = 8 #你的服务器有几个CPU就设置为几,建议用默认设置,一般设为8。

innodb_flush_log_at_trx_commit = 1 #设置为0就等于innodb_log_buffer_size队列满后在统一存储,默认为1,也是最安全的设置。

innodb_log_buffer_size = 2M #默认为1MB,通常设置为8~16MB就足够了。

innodb_log_file_size = 32M #确定日志文件的大小,更大的设置可以提高性能,但也会增加恢复数据库的时间。

innodb_log_files_in_group = 3 #为提高性能,MySQL可以以循环方式将日志文件写到多个文件。推荐设置为3。

innodb_max_dirty_pages_pct = 90 #InnoDB主线程刷新缓存池中的数据。
innodb_lock_wait_timeout = 120 #InnoDB事务被回滚之前可以等待一个锁定的超时秒数。InnoDB在它自己的锁定表中自动检测事务死锁并且回滚事务。InnoDB用locak tables 语句注意到锁定设置。默认值是50秒。

innodb_file_per_table = 0 #InnoDB为独立表空间模式,每个数据库的每个表都会生成一个数据空间。0关闭,1开启。

表空间

图片

共享表空间

查看共享表空间

mysql> show variables like '%innodb_data_file%';+-----------------------+------------------------+| Variable_name         | Value                  |+-----------------------+------------------------+| innodb_data_file_path | ibdata1:12M:autoextend |+-----------------------+------------------------+

设置共享表空间

[mysqld]innodb_data_file_path=ibdata1:50M;ibdata2:50M:autoextend

2018-04-08 17:04:16 15141 [ERROR] InnoDB: Data file ./ibdata1 is of a different size 768 pages (rounded down to MB) than specified in the .cnf file 3200 pages!

echo 768*16/1024 |bc12
[mysqld]innodb_data_file_path=ibdata1:12M;ibdata2:50M:autoextend

独立表空间模式

1、除了系统表空间之外,InnoDB还在数据库目录中创建另外的表空间,用于每个InnoDB表的.ibd文件
2、InnoDB创建的每个新表在数据库目录中设置一个.ibd文件来搭配表的.frm文件。
3、可以使用innodb_file_per_table选项控制此设置
4、更改该设置仅会更改已创建的新表的默认值。

innodb_file_per_table=0 #InnoDB为独立表空间模式,每个数据库的每个表都会生成一个数据空间。0 关闭 , 1 开启

MySQL5.6 默认开启独立表空间模式

mysql> show variables like '%innodb_file_per%';+-----------------------+-------+| Variable_name         | Value |+-----------------------+-------+| innodb_file_per_table | ON    |+-----------------------+-------+

独立表空间优点
1、每个表都有自己独立的表空间
2、每个表的数据和索引都会存在自己的表空间中
3、可以实现单表在不同的数据库中移动
4、空间可以回收(除drop table操作外,表空间不能自己回收)
图片

使用表空间模拟数据恢复

1、创建一个表结构相同的表

create table city_bak as select * from city;

2、删除新创建表的表空间

alter table t1 discard tablespace;

表空间文件消失
[root@db01 lufei]# ls /application/mysql/data/lufei/
db.opt t1.frm

3、拷贝备份数据文件(ibd文件)到当前数据库目录并授权

[root@db01 lufei]# cp /backup/full/lufei/t1.ibd /application/mysql/data/lufei/[root@db01 lufei]# chown -R mysql.mysql /application/mysql/data/lufei/t1.ibd[root@db01 lufei]# ls /application/mysql/data/lufei/db.opt  t1.frm  t1.ibd

4、导入表空间

alter table t1 import tablespace;

修改引擎

mysql> ALTER TABLE student  ENGINE = MyISAM;Query OK, 9 rows affected (0.21 sec)Records: 9  Duplicates: 0  Warnings: 0

使用sed对备份内容进行引擎转换

mysqldump  > oldboy_1.sqlnohup sed -e 's#MyISAM#InnoDB#g' oldboy.sql > oldboy_1.sql &mysql < oldboy_1.sql

独立命令

mysql_convert_table_format  --user=root --password=oldboy123 --socket=/data/3306/mysql.sock --engine=MyISAM oldboy t2依赖:yum -y install perl-DBI perl-DBD-MySQL perl-Time-HiRes

生产环境中如何批量更改mysql引擎

一般来说这样的需求不多见,但偶尔也会有,在这里我们推荐使用sed对备份内容进行引擎转换的方式,当然了,不要忘了修改my.cnf使之支持并能高效的使用对应的引擎

mysq命令语句修改

alter table oldboy engine=innodb;alter table oldboy engine=myisam;

数据库事务

 简单的说,事务就是指逻辑上的一组sql语句操作,组成这组操作的各个sql语句,

执行时要么全成功要么全失败
例如:oldboy给oldgirl转账5块钱,流程如下
a、从oldboy银行卡取出5块,计算式money-5
b、把上面5块钱打入oldgirl的账户上,oldgirl收到5块,money+5
上述转账的过程,对应的sql语句为

update oldboy_account set money=money-5 where name='oldboy';update oldgirl_account set money=money+5 where name='oldgirl';

事务的四大特性(ACID)

1、原子性(Atomicity
事务是一个不可分割的单位,事务中的所有sql等操作要么都发生,要么都不发生
原子(atom)指化学反应不可再分的基本微粒,原子在化学反应中不可分割
2、一致性(Consistency
事务发生前和发生后,数据的完整性必须保持一致
3、隔离性(Isolation)
当并发访问数据库时,一个正在执行的事务在执行完毕前,对于其它的会话是不可见的,多个并发事务之间的数据是相互隔离的。还记得备份的参数么 --single-transaction
4、持久性(Durability)
一个事务一旦被提交,它对数据库中的数据改变就是永久性的。如果出了错误,事务也不允许撤销,只能通过“补偿性事务”

事务提交和事务回滚

set global autocommit=on #开启自动提交
rollback 回滚事务
commit 提交事务
提示:事务引擎基于表的,所以要在表上插入、更新测试事务的特性

mysql> show global variables like "%autocommit%";+---------------+-------+| Variable_name | Value |+---------------+-------+| autocommit    | ON    |+---------------+-------+1 row in set (0.00 sec)mysql> set global autocommit=Off;

MYSQL的事务控制语句

START TRANSACTION(或BEGIN):显式开始一个新事务SAVEPOINT:分配事务过程中的一个位置,以供将来引用ROLLBACK:取消当前事务所做的更改ROLLBACK TO SAVEPOINT:取消在savepoint之后执行的更改RELEASE SAVEPOINT:删除savepoint标识符COMMIT:永久记录当前事务所做的更改SET AUTOCOMMIT:为当前连接禁用或启用默认autocommit模式

设置自动提交(关闭)

永久设置

/etc/my.cnf autocommit=0

临时设置

mysql> set session  autocommit=0;mysql> set global autocommit=0;

事务日志redo

Redo是什么?

  • redo,顾名思义“重做日志”,是事务日志的一种。
    作用是什么?
  • 在事务ACID过程中,实现的是“D”持久化的作用。

redo日志两个文件
ib_logfile0
ib_logfile1

redo 记录页的变化信息
图片

事务日志undo

回滚段
事务槽
undo是什么?

  • undo,顾名思义“回滚日志”,是事务日志的一种。
    作用是什么?
  • 在事务ACID过程中,实现的是“C”一致性的作用。

undo 记录页变化之前的数据(快照)
图片

事务中的锁

什么是’锁’?

  • '锁’顾名思义就是锁定的意思。
    '锁’的作用是什么?
  • 在事务ACID过程中,“锁”和“隔离级别”一起来实现“I”隔离性的作用

图片
锁的粒度:
1、MyIasm:低并发锁——表级锁
2、Innodb:高并发锁——行级锁

四种隔离级别

[mysqld]transaction-isolation = REPEATABLE-READ

READ UNCOMMITTED

  • 允许事务查看其他事务所进行的未提交更改

READ COMMITTED

  • 允许事务查看其他事务所进行的已提交更改

REPEATABLE READ

  • 确保每个事务的SELECT 输出一致(InnoDB的默认级别)

SERIALIZABLE

  • 将一个事务的结果与其他事务完全隔离

mysql 备份

https://www.percona.com

备份数据作用

1、恢复数据到测试库的时候
2、人为通过SQL语句将数据删除的时候
3、做数据库主从复制的时候

物理备份

直接复制的数据库文件,恢复比较快
XtraBackup

逻辑备份

逻辑备份指备份出的文件是可读的,一般为文本文件
常用备份工具:mysqldump
就是以SQL语句的形式,将数据导出成文件
优点:简单、方便、可靠
导出的数据可以跨平台、跨版本、跨软件
缺点:速度慢
mysqldump是mysql官方自带的逻辑备份工具,还能实现分库分表备份
应用场景:
1、适用于数据量不是特别大的场景,打包前50G以内的数据库数据
2、跨版本、系统升级时候用mysqldump迁移数据

全量备份 ----- mysqldump
增量备份 ----- binlog
启用

log-bin = mysql-binsync-binlog = 1innodb_support_xa = 1

逻辑备份—mysqldump命令

mysqldump重要参数说明
-B, --databases 在备份数据中增加建库及use库的语句,同时可以直接接多个库名,备份多个库
-A, --all-databases 备份所有的数据库
-d 只备份表结构(sql语句形式)
**-t ** 只备份表数据(sql语句形式)
-T 将库表和数据分离成不同的文件,数据是纯文本,表结构是SQL语句
-F,–flush-logs 刷新binlog日志,生成新binlog文件
–master-data={1|2} 在备份结果中增加binlog日志文件名及对应的binlog位置点(即
change master…语句)值为1 ,不注释 , 值为2, 注释
此参数执行时会打开–lock-all-tables功能,除非有–single-transaction在,使用此
参数时会关闭–lock-tables功能
-x,–lock-all-tables 备份时对所有数据库的表执行全局读锁
-l,–lock-tables 锁定所有的表为只读
–single-transaction 在备份innodb引擎数据表时,通常启用该选项来获取一个一致性的数据快照
备份,它的工作原理是设定本次备份会话的隔离级别为REPEATABLE READ,
并将整个备份放在一个事务中,以确保执行本次dump会话时,不会看到其他
连接会话已经提交了的数据,即备份开始时刻的数据是什么样备份出来就是
什么样子,也就相当于锁表备份数据,但是这个参数允许备份期间写入数据
-R,–routines 备份存储过程和函数数据
**–triggers ** 备份触发器数据
–compact 只显示很少的有用输出,适合学习和测试环境调试用
-c, --complete-insert 使用包含列名称的完整INSERT语句
-e, --extended-insert 使用多行INSERT语法

mysqldump命令可以将数据库中的数据备份成一个文本文件。表的结构和表中的数据将存储在生成的文本文件中
mysqldump命令需要权限
select, show view trigger lock tables

mysql> select concat("mysqldump"," -uroot -p123456 " ,table_schema," ",table_name, " ",">/backup/",table_name,".sql") from information_schema.tables;

只导出表结构

mysqldump  -d --triggers=false>xx.sql

只导数据

mysqldump  -t --triggers=false>xx.sql

只导出触发器

mysqldump  -tdn  --triggers>xx.sql

只导出存储过程

mysqldump  -Rtdn --triggers=false>xx.sql特别关注--single-transaction--master-data=1|2   是否加入change  master信息--where=name-c, --complete-insert  使用包含列名称的完整INSERT语句-e, --extended-insert  使用多行INSERT语法
mysqldump  -S /data/3306/mysql.sock -t -c -e --single-transaction --master-data=2 --triggers=false  oldboy student --where "name='oldboy'"  -uroot -poldboy  > student_data.sql
mysqldump --master-data=2 **-B** oldboy|gzip>/opt/oldboy.sql.gz

single-transaction:
针对innodb引擎表,可以不锁表,在一个事物中拿到一个一致性快照
(1) set session transaction isolation level repeatable read
使当前session的事物级别为可重复读
(2)start transaction /*!40100 with consistent snapshot */
开始一个事物并且获得一个一致性快照,获得最新的LSN
(3)unlocktables
释放锁,这也解释了为什么说使用mysqldump不会锁表

myisam引擎企业生产备份命令(适合所有引擎或混合引擎)

mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock -A -B -R --master-data=2 -x |gzip >/opt/alL__$(date +%F).sql.sql.gz

提示:-F也可以不用,与–master-data有些重复

innodb引擎企业生产备份命令:推荐使用的

mysqldump -uroot -poldboy123 -S /data/3306/mysql.sock -A -B -R --master-data=2 --single-transaction |gzip >/opt/alL__$(date +%F).sql.sql.gz若数据库开启gtid,则需增加选项   --set-gtid-purged=OFF不加--set-gtid-purged=OFF ,则恢复数据时不记录binlog
mysqldump -u用户名 -p密码 -A -B -R --ignore-table=库.表 --ignore-table=库.表  --master-data=2 --single-transaction --log-error=/error.log > all.sql

备份单表

mysqldump  dbname  tablename  > dbname_tablename.sql

备份多个库

mysqldump -B  dbname1 dbname2  > db.sql

备份一个库的多个表

mysqldump  dbname  tablename1  tablename2  tablename3  > dbname_tablename.sql
select concat("mysqldump ",table_schema," ",table_name," >/data/backup/",table_schema,"_",table_name,".sql") from information_schema.tables where table_schema not in('sys','information_schema','performance_schema') into outfile '/tmp/mysqldump.sh';

数据库恢复

sql文件恢复

set sql_log_bin=0source /opt/new.sql

导入windows 下 sql文件
cat new.sql
set names utf8;
use oldboy
insert into test(name) values(‘小陶’);
提示:如果UTF8数据库,人工编辑的SQL文件,格式建议为“UTF8没有签名”格式

binlog文件恢复

二进制日志非常关键
1、完成时间点的数据库恢复
2、数据库的复制需要
Tip: 备份二进制之前可以执行flush logs 生成一个新的二进制日志文件,然后备份之前的二进制文件,而且如果进行数据库全备之前执行flush logs , 恢复时不需要去定位日志的起点

恢复方法

mysqlbinlog mysql-bin.0000001|mysql -uroot -p databasemysqlbinlog mysql-bin.000000[1-9] |mysql -uroot -p databasemysqlbinlog -d test mysql-bin.000001 > /tmp/test.sql

数据恢复演练

use worldupdate city set countrycode='CHN' where countrycode='JPN';delete from city where countrycode ='USA';delete from city where countrycode <> 'CHN';delete from city where name='tokyo';

要求:恢复到tokyo被删除之前的状态

mysql优化

https://dev.mysql.com/doc/refman/5.7/en/optimization.html

硬件层面优化

数据库物理机采购
服务器硬件配置调整
服务器BIOS调整
阵列卡调整

操作系统层面优化

 操作系统及MySQL实例选择 文件系统层优化  linux内核参数优化 

mysql数据库层面优化
my.cnf参数优化
关于库表的设计规范

SQL语句的优化

现场抓慢查询sql语句

show full processlist; (登录数据库现场抓,连续执行2次,超过2秒)

mysql -S /data/3306/mysql.sock -uroot -poldboy -e "show full processlist;"|grep -vi "sleep"

1、

mysql> show full processlist;

2、explain 语句检查索引执行情况

explain select * from test where name='oldboy'\G;explain select SQL_NO_CACHE * from test where name='oldboy'\G;

1)查看已经创建的索引情况

show index from test\G;

2)统计表记录的唯一值

select count(distinct name) from test;

3)通过唯一值的数量找出需要建索引的列,对需要建立索引的条件列建立索引
生产场景,大表高峰期不能建立索引,(300万条记录以上)

alter table test add index index_name(name);

4) 慢查询语句发给开发人员

平时抓慢查询sql语句

重要不紧急:记录以及分析慢查询日志
1、配置参数记录慢查询语句

slow_query_log = onlong_query_time = 1                  #超过1秒,记录到slow log 里log_queries_not_using_indexes         # 没有走索引的语句,slow log 里log-slow-queries = /data/3306/slow.log   # slow log 文件min_examined_row_limit = 1000       #记录查询结果大于1000条的sql语句

2、 按天切割慢查询日志,如果并发太大可以按小时
1)mv 然后flush进程
2)cp复制,然后利用>清空
3)定时任务

mv /data/3306/slow.log /opt/$( date +%F)_slow.logmysqladmin -uroot -poldboy -S /data/3306/mysql.sock flush-logs

分析mysql慢查询日志的好工具–mysqlsla
http://blog.itpub.net/7607759/viewspace-692828
慢查询日志工具
pt-query-digest mysqldumpslow mysqlsla myprofi mysql-explain-slow-log mysqllogfilter

mysql profiler

http://www.cnblogs.com/ggjucheng/archive/2012/11/15/2772058.html

MySQL 的 Query Profiler 是一个使用非常方便的 Query 诊断分析工具,通过该工具可以获取一条Query 在整个执行过程中多种资源的消耗情况,如 CPU,IO,IPC,SWAP 等,以及发生的 PAGE FAULTS,CONTEXT SWITCHE 等等,同时还能得到该 Query 执行过程中 MySQL 所调用的各个函数在源文件中的位置

开启profiling

mysql> set profiling=1;Query OK, 0 rows affected, 1 warning (0.00 sec)

查询

mysql> show profiles;+----------+------------+----------------+| Query_ID | Duration   | Query          |+----------+------------+----------------+|        1 | 0.00026025 | show profiling |+----------+------------+----------------+1 row in set, 1 warning (0.00 sec)mysql> show profile cpu for query 1;+---------------+----------+----------+------------+| Status        | Duration | CPU_user | CPU_system |+---------------+----------+----------+------------+| starting      | 0.000220 | 0.000000 |   0.000000 || freeing items | 0.000031 | 0.000000 |   0.000000 || cleaning up   | 0.000009 | 0.000000 |   0.000000 |+---------------+----------+----------+------------+3 rows in set, 1 warning (0.00 sec)mysql> show profile memory for query 1;+---------------+----------+| Status        | Duration |+---------------+----------+| starting      | 0.000220 || freeing items | 0.000031 || cleaning up   | 0.000009 |+---------------+----------+3 rows in set, 1 warning (0.00 sec)mysql> show profile cpu,memory,block io for query 1;+---------------+----------+----------+------------+--------------+---------------+| Status        | Duration | CPU_user | CPU_system | Block_ops_in | Block_ops_out |+---------------+----------+----------+------------+--------------+---------------+| starting      | 0.000220 | 0.000000 |   0.000000 |            0 |             0 || freeing items | 0.000031 | 0.000000 |   0.000000 |            0 |             0 || cleaning up   | 0.000009 | 0.000000 |   0.000000 |            0 |             0 |+---------------+----------+----------+------------+--------------+---------------+3 rows in set, 1 warning (0.00 sec)

3、网站集群架构上的优化
4、流程,制度,安全优化

纵向拆表

创建新表

CREATE TABLE `country_1` (  `Code` char(3) NOT NULL DEFAULT '',  `Name` char(52) NOT NULL DEFAULT '',  `Continent` enum('Asia','Europe','North America','Africa','Oceania','Antarctica','South America') NOT NULL DEFAULT 'Asia',  PRIMARY KEY (`Code`),  KEY `name_idx` (`Name`)) ENGINE=InnoDB DEFAULT CHARSET=latin1

从旧表导入数据到新表

insert into country_1(code,name,continent) select code,name,continent from country;

横向拆表

create table country_1_p1 like country_1;insert into country_1_p1 select code,name,continent from country_1 order by code limit 100;create table country_1_p2 like country_1;insert into country_1_p2 select code,name,continent from country_1 order by code limit 139 offset 100;


参考文章:https://blog.csdn.net/wuxingge/article/details/100774549

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时候联系我们修改或删除,在此表示感谢。

特别提醒:

1、请用户自行保存原始数据,为确保安全网站使用完即被永久销毁,如何人将无法再次获取。

2、如果上次文件较大或者涉及到复杂运算的数据,可能需要一定的时间,请耐心等待一会。

3、请按照用户协议文明上网,如果发现用户存在恶意行为,包括但不限于发布不合适言论妄图

     获取用户隐私信息等行为,网站将根据掌握的情况对用户进行限制部分行为、永久封号等处罚。

4、如果文件下载失败可能是弹出窗口被浏览器拦截,点击允许弹出即可,一般在网址栏位置设置

5、欢迎将网站推荐给其他人,网站持续更新更多功能敬请期待,收藏网站高效办公不迷路。

      



登录后回复

共有0条评论