一百万数据索引实例測试–mysql[通俗易懂]

一百万数据索引实例測试–mysql

大家好,又见面了,我是全栈君。

推荐书籍:http://pan.baidu.com/s/1sjJIyRV

任务描写叙述:

如果一高频查询例如以下 
SELECT * FROM user WHERE area=’amoy’ AND sex=0 ORDER BY last_login DESC limit 30; 
怎样建立索引?描写叙述考虑的过程

user表例如以下: 
初始化100W条数据,当中。area要通过IP查询生成,sex为 0,1 随机

CREATE TABLE user ( 
id int(10) NOT NULL AUTOINCREMENT COMMENT ‘自增编号’, 
username varchar(30) NOT NULL DEFAULT ‘0’ COMMENT ‘用户名’, 
password varchar(30) NOT NULL DEFAULT ‘0’ COMMENT ‘密码’, 
area varchar(30) NOT NULL COMMENT ‘地址’, 
sex int(10) NOT NULL COMMENT ‘性别0,男;1,女。

‘, 
last_login int(10) NOT NULL COMMENT ‘近期一次登录时间戳’, 
PRIMARY KEY (id
) ENGINE=InnoDB AUTO
INCREMENT=892013 DEFAULT CHARSET=latin1

终于我的索引 
(last_login,area)

数据例如以下:http://pan.baidu.com/s/1eQy0eQI

一百万数据索引实例測试--mysql[通俗易懂]

測试结果:http://pan.baidu.com/s/1jGn2AcY
一百万数据索引实例測试--mysql[通俗易懂]

索引原则:

1.where和order by等的字段建立索引

2.使用唯一索引:对于last_login,area等字段反复的次数比較少,能够使用索引;而sex无非就两个值:性别1。男;2。不值得索引

3.多列索引:不要为每个列单独建立索引。这样并不能将mysql索引的效率最大化。使用“索引合并策略”

4.选择合理的索引列顺序:索引列的顺序意味着索引首先依照最左列进行排序。然后是第二列,以此类推。如(lastlogin,area)会先依照 lastlogin 进行排序。然后才是area。

5.将选择性最高的索引放到前面。也就是会所依照这个条件搜索到的数据最少,选择性就越高。比方选择性:last_login> area> sex。

6.索引不是越多越好。适合的索引能够提高查询效率。可是会减少写入效率。依据项目保持两者的平衡性最好了。

总结上面,首先sex不适合建立索引,有没有索引对于效率的提升意义不大,其次索引会依照最左列进行排序,因此将last_login放到最前面

測试过程:

user表 
没有不论什么索引的查询相关日志: 
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.57s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.56s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.55s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.59s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.55s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.55s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.57s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.58s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.57s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.57s 
共花费时间:5.66s

建立索引area: 
ALTER TABLE user ADD INDEX index_area (area) ; 
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.06s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.10s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.04s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.11s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.20s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.07s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.04s 
共花费时间:0.66s 
可见。建立area以后对性能的影响是巨大的(5.66/0.66 约为8.5758倍) 
删除索引:ALTER TABLE user DROP INDEX index_area
删除area索引发现时间又变成了0.57s

建立lastlogin索引: 
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY last
login DESC limit 30; 0.03s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.09s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY last
login DESC limit 30; 0.51s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY last
login DESC limit 30; 0.04s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.07s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY last
login DESC limit 30; 0.04s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last_login DESC limit 30; 0.06s 
共花费时间:0.87s 
相同可以提升性能(5.66/0.87 约为6.5057倍)

建立sex索引: 
ALTER TABLE user ADD INDEX index_sex (sex) ; 
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.87s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.87s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.87s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.89s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.88s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.87s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.86s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.88s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.87s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.87s 
共花费时间:8.73s 
相同可以提升性能(5.66s/8.73 约为0.6483倍)效率反而减少了??求解? 
建立这个sex索引还不如不建。

删除索引: 
ALTER TABLE user DROP INDEX index_sex
发现时间又变成了0.57s左右,

建立两个单独的索引: 
ALTER TABLE user 
ADD INDEX index_area (area) , 
ADD INDEX index_last_login (last_login) ;

SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.09s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.33s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.21s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.28s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.03s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.67s

发现建立两个单独的索引还不如仅仅建立一个索引 
删除索引: 
发现时间又变成了0.57s左右。

建立一个的联合索引: 
ALTER TABLE user 
ADD INDEX index_last_login_area (last_login,area) , 
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.00s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.00s 
额。第二条数据这是怎么了,我測试了5次都在这附近晃悠哈!

 
这尼玛。找对索引啦。就该这么建立,查询不出来须要的时间啦!预计就是我们须要的索引啦!

!!

删除索引: 
发现时间又变成了0.57s左右,

建立一个的联合索引: 
ALTER TABLE user 
ADD INDEX index_sex_last_login_area (sex,last_login,area
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.18s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.17s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.81s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.04s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.01s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.03s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.04s 
sex怎么总是你在拖后腿啊!

把你调整到索引的最后一个吧。 
删除索引: 
发现时间又变成了0.57s左右,

建立一个的联合索引: 
ALTER TABLE user 
ADD INDEX index_last_login_area_sex (area,last_login,sex
SELECT * FROM user WHERE area=’美国ATT用户’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.03s 
SELECT * FROM user WHERE area=’泰国’ AND sex=0 ORDER BY last
login DESC limit 30; 0.07s 
SELECT * FROM user WHERE area=’台湾省台湾大宽频’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.50s 
SELECT * FROM user WHERE area=’美国弗吉尼亚州’ AND sex=0 ORDER BY last
login DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’德国奔驰汽车’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.05s 
SELECT * FROM user WHERE area=’台湾省中华电信’ AND sex=0 ORDER BY last
login DESC limit 30; 0.06s 
SELECT * FROM user WHERE area=’韩国’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’拉美地区’ AND sex=0 ORDER BY last
login DESC limit 30; 0.02s 
SELECT * FROM user WHERE area=’美国纽约(Prudential)’ AND sex=0 ORDER BY lastlogin DESC limit 30; 0.04s 
SELECT * FROM user WHERE area=’印度尼西亚’ AND sex=0 ORDER BY last
login DESC limit 30; 0.06s

综上所述:1.建立索引不一定可以加快查询效率如sex这样的给反复次数特别多的列添加索引如sex这样的会减少查询效率,详细的原因有待查找 
2.给反复次数比較少的列添加索引还是可以大幅度提高效率 
3.给where和orderby之后的字段加入索引才会加快查询效率 
4.为每个列单独建立索引,不能将索引的效率最大化,应该使用索引合并策略,即依据查询条件。建立联合索引 
5.联合索引的顺序问题:将选择性高的索引放到前面 
6.依据资料建立索引意味着索引依照最左列进行排序,然后事第二列。以此类推。如(lastlogin ,area)就会依照lastlogin进行排序,然后才是area 
7.依据这次的这个查询条件来说最好的索引是:ALTER TABLE userADD INDEX index_last_login_area (last_login,area)。

在公司能有个机会。查看资料和实践索引真的非常不错哈!

推荐书籍:高性能mysql(第三版)

PDF版本号的:http://pan.baidu.com/s/1sjJIyRV

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-用户IM,转载请注明出处:https://javaforall.cn/116567.html原文链接:https://javaforall.cn

【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛

【官方授权 正版激活】: 官方授权 正版激活 支持Jetbrains家族下所有IDE 使用个人JB账号...

(0)
blank

相关推荐

  • 【Java 8 新特性】Java LocalDate 转 Date

    【Java 8 新特性】Java LocalDate 转 DateJavaLocalDate转Date1.使用LocalDate.atTime2.使用LocalDate.atStartOfDay3.使用LocalDateTime.of4.使用Timestamp.valueOf完整示例参考文献在这一页,我们将提供如何将java.time.LocalDate转换成java.util.Date。LocalDate表示一个格式为yyyy-MM-dd的日期,如2019-05-08。我们可以使用以下方法和构造函数来创建一个Date对象。1.Date.f

  • vscode注释快捷键失效_qt注释快捷键

    vscode注释快捷键失效_qt注释快捷键注释有两种,如果是单行注释,可以使用快捷键【ctrl】+【/】来注释。这样就能单行注释代码,样式为://Wearedevelopers注释错了想要取消,再按一遍即可。如果是多行注释(块注释),那么快捷键为【Alt】+【Shift】+【A】样式为:/*Wearedevelopers*/同样的再按一遍即可取消。你也可以选择代码,使用上方菜单的【编辑】来手动注释代码。

  • WPF TextBox模仿PasswordBox的密码显示功能

    WPF TextBox模仿PasswordBox的密码显示功能WPFTextBox显示密码,模仿PasswordBox的功能

  • 这些软件太强了,Windows必装!尤其程序员!

    这些软件太强了,Windows必装!尤其程序员!Windows可谓是大多数人的生产力工具,集娱乐办公于一体,虽然在程序员这个群体中都说苹果是信仰,但是大部分不都是从Windows过来的,而且现在依然有很多的程序员用Windows。所以,今天我就把我私藏的Windows必装的软件分享给大家,如果有一个你没有用过甚至没有听过,那你就赚了????,这可都是提升你幸福感的高效率生产力工具哦!走起!????NO、1ScreenToGif屏幕,摄像头和白板…

  • ORACLE控制处理函数COALESCE()和NVL()

    ORACLE控制处理函数COALESCE()和NVL()1.语法COALESCE(expression,value1,value2……,valuen)2.说明主流数据库系统都支持COALESCE()函数,这个函数主要用来进行空值处理,其参数格式如下:COALESCE(expression,value1,value2……,valuen)COALESCE()函数的第一个参数expression为待检测的表达式,而其后的参数个数不定。COALESCE()函数将会返回包括expression在内的所有参数中的第一个非空表达式。

  • ireport使用教程_insertselective用法

    ireport使用教程_insertselective用法一、iReport与JasperReport简介1.1   简介JasperReport是报表的引擎部分,界面设计是用iReport。为什么选择这两个软件呢?因为这两个软件都是开源的,即免费的(虽然某些文档收费,但是磨灭不了我们使用它的理由)。JasperReport是一个报表制作程序,用户按照它制定的规则编写一个XML文件,然后得到用户需要输出的格式文件。它支持输出的文件格式

发表回复

您的电子邮箱地址不会被公开。

关注全栈程序员社区公众号