首页 / 编程技术 / 教程详解

MySQL两种表存储结构性能比较测试过程

时间:2016-02-24 14:20 来源: 我爱IT技术网作者:佚名

欢迎您访问我爱IT技术网，今天小编为你分享的编程技术是：【MySQL两种表存储结构性能比较测试过程】，下面是详细的分享！

MySQL两种表存储结构性能比较测试过程

MySQL支持的两种主要表存储格式MyISAM，InnoDB，上个月做个项目时，先使用了InnoDB，结果速度特别慢，1秒钟只能插入10几条。后来换成MyISAM格式，一秒钟插入上万条。当时觉的这两个表的性能也差别太大了吧。后来自己推测，不应该差别这么慢，估计是写的插入语句有问题，决定做个测试：

测试环境：Redhat Linux9，4CPU，内存2G，MySQL版本为4.1.6-gamma-standard

测试程序：Python＋Python-MySQL模块。

测试方案：

1、MyISAM格式分别测试，事务和不用事务两种情况：

2、InnoDB格式分别测试AutoCommit＝1（不用begin transaction和用begin transaction模式），AutoCommit=0 （不用begin transaction和用begin transaction模式）四种情况。

测试方法为插入10000条记录。为了测试不互相影响，单独建立了专用的测试表，建表语句如下：

1、MyISAM不用事务表：

以下为引用的内容：

CREATE TABLE `MyISAM_NT` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=MyISAM;

2、MyISAM用事务表：

以下为引用的内容：

CREATE TABLE `MyISAM_TS` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=MyISAM;

3、InnoDB关闭AutoCommit，不用事务：

以下为引用的内容：

CREATE TABLE `INNODB_NA_NB` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

4、InnoDB关闭AutoCommit，用事务：

以下为引用的内容：

CREATE TABLE `INNODB_NA_BE` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

5、InnoDB开启AutoCommit，不用事务：

以下为引用的内容：

CREATE TABLE `INNODB_AU_NB` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

6、InnoDB开启AutoCommit，用事务：

以下为引用的内容：

CREATE TABLE `INNODB_AU_BE` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

测试的Python脚本如下：

#!/usr/bin/env Python

'''

MyISAM,InnoDB性能比较

作者：空心菜（Invalid）

时间：2004-10-22

以下为引用的内容：

'''

import MySQLdb

import sys

import os

import string

import time

c=None

testtables=[("MyISAM_NT",None,0),

("MyISAM_TS",None,1),

("INNODB_NA_NB",0,0),

("INNODB_NA_BE",0,1),

("INNODB_AU_NB",1,0),

("INNODB_AU_BE",1,1)

]

def BeginTrans():

print "ExecSQL:BEGIN;"

c.execute("BEGIN;")

return

def Commit():

print "ExecSQL:COMMIT;"

c.execute("COMMIT;")

return

def AutoCommit(flag):

print "ExecSQL:Set AUTOCOMMIT="+str(flag)

c.execute("Set AUTOCOMMIT="+str(flag))

return

def getcount(table):

#print "ExecSQL:select count(*) from "+table

c.execute("select count(*) from "+table)

return c.fetchall()[0][0]

def AddTable (Table,TableId,TableString):

sql="INSERT INTO "+Table+"(TableId, TableString) VALUES( "+ TableId+ ",'" + TableString +"')"

try:

c.execute(sql)

except MySQLdb.OperationalError,error:

print "AddTable Error:",error

return -1;

return c.rowcount

def main():

argv=sys.argv

if len(argv) < 2:

print 'Usage:',argv[0],' TableId TestCount \n'

sys.exit(1)

global c #MySQL访问cursor

db_host="localhost"

db_name="demo"

db_user="root"

db_user_passwd=""

print "Config:[%s %s/%s %s] DB\n"%(db_host,db_user,db_user_passwd,db_name)

if len(argv) > 2:

tableid=argv[1]

testcount=int(argv[2]) #

for test in testtables:

#每次操作前都重写建立数据库连接

以下为引用的内容：

try:

mdb=MySQLdb.connect(db_host, db_user, db_user_passwd, db_name)

except MySQLDb.OperationalError,error:

print "Connect MySQL[%s %s/%s %s] DB Error:"%(db_host,db_user,db_user_passwd,db_name),error,"\n"

sys.exit(1)

else:

c=mdb.cursor()

table,autocommit,trans=test

starttime=time.time()

print table," ",time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

if autocommit !=None:

AutoCommit(autocommit)

if trans==1:

BeginTrans()

for i in xrange(testcount):

tablestring="%020d"%i

if (AddTable(table,tableid,tablestring)<1):

print "AddTable Error",tablestring

if trans==1:

Commit()

print time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

endtime=time.time()

usedtime=endtime-starttime

print table,"count:",getcount(table)," used time:",usedtime

c.close()

mdb.close()

if __name__=='__main__':

main()

测试结果如下：

Config:[localhost root/ demo] DB

MyISAM_NT 04-10-22 16:33:24

04-10-22 16:33:26

MyISAM_NT count: 10000 used time: 2.1132440567

MyISAM_TS 04-10-22 16:33:26

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:33:29

MyISAM_TS count: 10000 used time: 2.65475201607

INNODB_NA_NB 04-10-22 16:33:29

ExecSQL:Set AUTOCOMMIT=0

04-10-22 16:33:31

INNODB_NA_NB count: 10000 used time: 2.51947999001

INNODB_NA_BE 04-10-22 16:33:31

ExecSQL:Set AUTOCOMMIT=0

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:33:35

INNODB_NA_BE count: 10000 used time: 3.85625100136

INNODB_AU_NB 04-10-22 16:33:35

ExecSQL:Set AUTOCOMMIT=1

04-10-22 16:34:19

INNODB_AU_NB count: 10000 used time: 43.7153041363

INNODB_AU_BE 04-10-22 16:34:19

ExecSQL:Set AUTOCOMMIT=1

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:34:22

INNODB_AU_BE count: 10000 used time: 3.14328193665

结论：

由此得知影响速度的主要原因是AUTOCOMMIT默认设置是打开的，

我当时的程序没有显式调用BEGIN;开始事务，导致每插入一条都自动Commit，严重影响了速度。

算来也是个低级错误！

相关参考：

http://dev.mysql.com/doc/MySQL/en/COMMIT.html

http://dev.mysql.com/doc/MySQL/en/InnoDB_and_AUTOCOMMIT.html

以上所分享的是关于MySQL两种表存储结构性能比较测试过程，下面是编辑为你推荐的有价值的用户互动：

　　相关问题：如何测试MySQL的系统的性能

　　答：有一些有用的工具可以测试MySQL 和基于MySQL 的系统的性能。这里将演示如何利用这些工具进行测试。 mysqlslap mysqlslap可以模拟服务器的负载，并输出计时信息。它包含在MySQL 5.1 的发行包中，应该在MySQL 4.1或者更新的版本中都可以使用。测试... >>详细

　　相关问题：几个常见的MySQL性能测试工具

　　答：其实单独压测数据库意义不太大，还是要和实际应用连接起来测试比较好些。另外说点，你要是真的想单独测数据库的话，也没问题的。可以用Jmeter或者loadrunner 这两个主流的测试工具。监控的话，你需要找几个DB的监控软件，可以看下实际问题出在... >>详细

　　相关问题：mysql写存储过程对单表插入测试数据，出问题

　　答：什么问题啊？？？大妹子，错误提示和存储过程代码贴出来 >>详细

<上一篇下一篇>

评论列表（网友评论仅供网友表达个人看法，并不表明本站同意其观点或证实其描述）

我爱IT技术网专注编程技术和教育培训，助你提升自我价值！
Copyright © 2012-2017 我爱IT技术网 (www.52ij.com) 版权所有。
郑重声明：未经许可，本站任何技术教程不得转载。我爱IT技术网教育平台QQ交流群：6538112 皖ICP备10017427号