HandlerSocket的安装实例及性能测试[通俗易懂]

HandlerSocket的安装实例及性能测试[通俗易懂] 一HandlerSocket简介Hanldersocket是一个MySQL守护进程插件,它让应用程序可以将MySQL当NoSQL使,Hanldersocket的主要目的是与存储引擎,如InnoDB交互,而不需要SQL相关的开销。访问MySQL表时,Hanldersocket仍然需要打开和关闭表,但不是每次访问都要求打开和关闭,因此减少了互斥争夺,极大地提高了系统性能,当流量变小时,Ha…

大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

 

一 HandlerSocket简介

Hanldersocket是一个MySQL守护进程插件,它让应用程序可以将MySQL当NoSQL使,Hanldersocket的主要目的是与存储引擎,如InnoDB交互,而不需要SQL相关的开销。访问MySQL表时,Hanldersocket仍然需要打开和关闭表,但不是每次访问都要求打开和关闭,因此减少了互斥争夺,极大地提高了系统性能,当流量变小时,Hanldersocket会关闭表,因此它永远不会阻止管理命令(DDL)。

 HandlerSocket的安装实例及性能测试[通俗易懂]

下图是MySQL+Memcached的常见架构模式:

HandlerSocket的安装实例及性能测试[通俗易懂]

 

二 测试环境准备

(一) 源码安装mysql5.5.x

准备工作:

新建用户和用户组

groupadd mysql

useradd -g mysql mysql

 

1:下载:

cmake-2.8.3.tar.gz

make-3.82.tar.gz

mysql-5.5.8.tar.gz

 

2:解压安装前2个包

 

tar zxvf  cmake-2.8.3.tar.gz

cd cmake-2.8.3

./configure

make

make install

tar zxvf make-3.82.tar.gz

cd make-3.8.2

./configure

make

make install

 

3:解压并安装mysql-5.5.8.tar.gz

tar zxvf mysql-5.5.8.tar.gz

cd mysql-5.5.8

 

cmake . \

-DCMAKE_INSTALL_PREFIX=/mysql/mysqldir \

-DMYSQL_DATADIR=/mysql/mysqldir/data \

-DWITH_INNOBASE_STORAGE_ENGINE=1 \

-DMYSQL_TCP_PORT=3306 \

-DMYSQL_UNIX_ADDR==/mysql/mysqldir/data/mysql.sock \

-DMYSQL_USER=mysql \

-DWITH_DEBUG=0

 

make

make install

 

完成后进入MYSQL安装目录

 

cd /mysql/mysqldir

cp support-files/ my-medium.cnf /etc/my.cnf

cp support-files/mysql.server /etc/init.d/mysql.

vi /etc/my.cnf

将数据目录和套接字文件修改为实际值.

 

修改权限

chown mysql:mysql /etc/my.cnf

chown mysql:mysql /etc/init.d/mysql.

chown -R mysql:mysql /mysql/mysqldir

 

设置root用户密码

mysqladmin –uroot password “newpassword”

 

切换用户进入安装目录

su – mysql

cd /mysql/mysqldir

cp scripts/mysql_install_db .

./mysql_install_db

 

启动MYSQL

/etc/init.d/mysql start

(二) 安装HandlerSocket插件

大概安装步骤如下:
1 .下载

http://github.com/ahiguti/HandlerSocket-Plugin-for-MySQL

2.编译 HandlerSocket客户端和服务器端程序:

./configure –with-mysql-source=… –with-mysql-bindir=… ; make; make install

在my.cnf中加入以下内容:

[mysqld]

  loose_handlersocket_port = 9998

    # the port number to bind to (for read requests)

  loose_handlersocket_port_wr = 9999

    # the port number to bind to (for write requests)

  loose_handlersocket_threads = 16

    # the number of worker threads (for read requests)

  loose_handlersocket_threads_wr = 1

    # the number of worker threads (for write requests)

  open_files_limit = 65535

    # to allow handlersocket accept many concurrent

    # connections, make open_files_limit as large as

    # possible.

3.安装插件

mysql> INSTALL PLUGIN ‘HandlerSocket’ SONAME ‘HandlerSocket.so’;

mysql>SHOW PLUGINS; # 查看插件是否加载成功

4.安装perl客户端

cd  perl-Net-HandlerSocket/

perl Makefile.PL ;

make ;

make test ;

make install ;

安装完毕,重启mysql server

/etc/init.d/mysql restart;

 

注:不需要修改mysql的源代码。
mysql需要5.1或者以后版本。

(三) 安装Perl的相关模块DBI、DBD

1.安装DBI

下载DBI-1.609.tar.g;

tar –xvzf DBI-1.609.tar.gz;

cd DBI-1.609;

perl Makefile.PL ;

make;

make test;

make install;

2.安装DBD

下载DBI-1.609.tar.g;

tar –xvzf DBD-mysql-4.012.tar.gz;

cd DBD-mysql-4.012;

perl Makefile.PL ;

make;

make test;

make install;

三 测试

(一) 创建测试数据库及测试表

CREATE DATABASE test;

CREATE TABLE `test` (

 `test_id` int(10) unsigned NOT NULL,

 `test_score` int(10),

 PRIMARY KEY (`test_id`),

 KEY `INDEX_01` (`test_score`)

 ) ENGINE=InnoDB;

(二) 插入数据脚本

1.HandlerSocket插入脚本

HandlerInsert.pl:

 

#!/usr/bin/perl

 

use strict;

use warnings;

 

use Net::HandlerSocket;

my $args = { host => ‘localhost’, port => 9997 };

my $hs = new Net::HandlerSocket($args);

my $res = $hs->open_index(0, ‘test’, ‘test’, ‘PRIMARY’, ‘test_id,test_score’);

die $hs->get_error() if $res != 0;

 

#INSERT

for (my $line = 1; $line < $ARGV[0]; ++$line)

{

    $res = $hs->execute_single(0,’+’, [ $line, $line + 1 ],1,0);

}

print “$ARGV[0] rows affected\n”;

 

$hs->close();

 

使用说明:
./HandlerInsert.pl 需要插入的记录数

如:

./HandlerInsert.pl 100000

则插入100000条记录。

 

2.mysql插入数据脚本

MysqlInsert.pl:

#!/usr/bin/perl

 

#load module

use DBI;

 

#connect

my $dbh = DBI->connect(“DBI:mysql:database=test;host=localhost”, “root”, “uestc8020”, {‘RaiseError’

=> 1});

 

#execute INSERT query

 

for (my $line = 0; $line < $ARGV[0]; ++$line)

{

    my $rows = $dbh->do(“INSERT INTO test (test_id, test_score) VALUES ($line, $line + 1)”);

}

print “$ARGV[0] row(s) affected\n”;

 

# clean up

$dbh->disconnect();

使用说明:
./ MysqlInsert.pl 需要插入的记录数

如:

./ MysqlInsert.pl 100000

则插入100000条记录。

(三) 查询数据脚本

1.HandlerSocket查询脚本

HandlerQuery.pl:

#!/usr/bin/perl

use strict;

use warnings;

use Net::HandlerSocket;

#1. establishing a connection

my $args = { host => ‘localhost’, port => 9998 };

my $hs = new Net::HandlerSocket($args);

 

#2. initializing an index so that we can use in main logics.

# MySQL tables will be opened here (if not opened)

my $res = $hs->open_index(0, ‘test’, ‘test’, ‘INDEX_01’, ‘test_id,test_score’);

die $hs->get_error() if $res != 0;

 

#3. main logic

#fetching rows by id

#execute_single (index id, cond, cond value, max rows, offset)

for (my $number = 0; $number < $ARGV[0]; ++$number)

{

    $res = $hs->execute_single(0, ‘=’, [ 500000 ], 1, 0);

}

#4. closing the connection

$hs->close();

./ HandlerQuery.pl 查询次数

如:

./ HandlerQuery.pl 100000

查询100000次。

2.mysql查询脚本

MysqlQuery.pl:

#!/usr/bin/perl

 

#load module

use DBI;

 

#connect

my $dbh = DBI->connect(“DBI:mysql:database=test;host=localhost”, “root”, “uestc8020”, {‘RaiseError’

=> 1});

 

 

#execute SELECT query

for (my $number = 0; $number < $ARGV[0]; ++$number)

{

    my $sth = $dbh->prepare(“SELECT * from  test where test_score = 500000”);

    $sth->execute();

}

 

$dbh->disconnect();

./ MysqlQuery.pl 查询次数

如:

./ MysqlQuery.pl 100000

查询100000次。

(四) 测试结果

1.插入数据

插入100万条数据所需要的时间

HandlerSocket:

HandlerSocket的安装实例及性能测试[通俗易懂]

Mysql:

   HandlerSocket的安装实例及性能测试[通俗易懂]

插入数据性能(消耗时间)、

   HandlerSocket的安装实例及性能测试[通俗易懂]

2.查询数据

进行10万次查询所需要的时间

HandlerSocket:

HandlerSocket的安装实例及性能测试[通俗易懂]

Mysql:

 

HandlerSocket的安装实例及性能测试[通俗易懂]

 

查询数据性能(QPS)

    HandlerSocket的安装实例及性能测试[通俗易懂]

 

总结

对于插入时的QPS,HandlerSocket内部采用的是Bulk Insert操作,按理来说HandlerSocket应该占有很大优势。但从测试结果可以看出,插入时的QPS上HandlerSocket与Mysql差距不打,稍微占有优势,这和网上的测试结果有一定的出入。笔者认为,这可能是因为插入的数据量有关,由于相关的硬件限制,这次测试最多只插入了100万条记录,而网上的测试则是上千万的数据量。

对于查询时的QPS,测试结果与网上的测试相符,从可以看出,HandlerSocket明显占有比较大的优势,这与它的实现方式有关。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-用户IM,转载请注明出处:https://javaforall.cn/172631.html原文链接:https://javaforall.cn

【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛

【官方授权 正版激活】: 官方授权 正版激活 支持Jetbrains家族下所有IDE 使用个人JB账号...

(0)


相关推荐

  • VS导入没有.sln文件的项目[通俗易懂]

    VS导入没有.sln文件的项目[通俗易懂]关于在VS中导入没有.sln文件的.net项目     导入的是一个网站项目,步骤是先创建一个空白的解决方案,再在解决方案中点击右键,添加一个现有网站项目,再选择相应的项目文件,即可进行网站的运行。如果在运行过程中出现xxx.cs文件中不存在该类型的命名或命名空间,那么极有可能是相应的.net框架版本不一致导致,所以在点击该项目的属性页中调整相应的框架版本,即可进行相应的网站项目运行。…

  • python句柄是什么意思_python窗口句柄

    python句柄是什么意思_python窗口句柄文件句柄的实例:通过句柄定位未见读取的起始位置以及大文件的分块读取为了使用读文件函数,需要使用相对于PHP脚本的路径为他们指出要读取的文件,然而,大多数PHP的文件函数使用一种稍有区别的机制访问文件,这种机制与连接数据库的机制非常相似,该过程使用fopen()函数进行“连接”,使用fclose函数“断开连接”。fopen函数的返回值是一个PHP文件指针,也被称为文件句柄,一旦拥有了文件句柄…

  • linux目录结构详解_简述linux系统中的目录结构

    linux目录结构详解_简述linux系统中的目录结构前言平常linux系统用的也不少,那么linux下的每个目录都是用来干什么的,小伙伴们有仔细研究过吗?让我们来了解下吧Linux系统目录结构登录系统后,在当前命令窗口下输入命令:[root@

  • sql server jdbc

    sql server jdbc

  • webstorm激活码2019(注册激活)

    (webstorm激活码2019)2021最新分享一个能用的的激活码出来,希望能帮到需要激活的朋友。目前这个是能用的,但是用的人多了之后也会失效,会不定时更新的,大家持续关注此网站~IntelliJ2021最新激活注册码,破解教程可免费永久激活,亲测有效,下面是详细链接哦~https://javaforall.cn/100143.html…

  • activation code2020激活码【在线破解激活】

    activation code2020激活码【在线破解激活】,https://javaforall.cn/100143.html。详细ieda激活码不妨到全栈程序员必看教程网一起来了解一下吧!

发表回复

您的电子邮箱地址不会被公开。

关注全栈程序员社区公众号