当前位置: 首页 > 图文教程 > 数据库 > MYSQL > MySQL两种表存储结构性能比较测试过程

MYSQL
MySQL忘记密码恢复密码的实现方法
mysql 时间转换函数的使用方法
使用mysql的disctinct group by查询不重复记录
mysql备份恢复mysqldump.exe几个常用用例
超详细mysql left join,right join,inner join用法分析
mysql 5.0.67最新版替代MySQL 5.0.51b版本官方下载
比较详细的MySQL字段类型说明
mysql 记录不存在时插入 记录存在则更新的实现方法
MYSQL基础之连接MYSQL、修改密码、添加用户
mysql数据库优化必会的几个参数中文解释
mysql中文排序注意事项与实现方法
MySQL 5.0触发器参考教程
MySQL5创建存储过程的示例
MYSQL5 masterslave数据同步配置方法
mysql数据库导出xml的实现方法
MySql增加用户、授权、修改密码等语句
Mysql默认设置的危险性分析
用MySQL创建数据库和数据库表代码
Mysql如何避免全表扫描的方法
mysql的校对规则引起的问题分析

MYSQL 中的 MySQL两种表存储结构性能比较测试过程


出处:互联网   整理: 软晨网(RuanChen.com)   发布: 2009-10-17   浏览: 74 ::
收藏到网摘: n/a

MySQL支持的两种主要表存储格式MyISAM,InnoDB,上个月做个项目时,先使用了InnoDB,结果速度特别慢,1秒钟只能插入10几条。后来换成MyISAM格式,一秒钟插入上万条。当时觉的这两个表的性能也差别太大了吧。后来自己推测,不应该差别这么慢,估计是写的插入语句有问题,决定做个测试:

测试环境:Redhat Linux9,4CPU,内存2G,MySQL版本为4.1.6-gamma-standard

测试程序:Python+Python-MySQL模块。

测试方案:

1、MyISAM格式分别测试,事务和不用事务两种情况:

2、InnoDB格式分别测试AutoCommit=1(不用begin transaction和用begin transaction模式),AutoCommit=0 (不用begin transaction和用begin transaction模式)四种情况。

测试方法为插入10000条记录。为了测试不互相影响,单独建立了专用的测试表,建表语句如下:

1、MyISAM不用事务表:

2、MyISAM用事务表:

以下为引用的内容:

CREATE TABLE `MyISAM_TS` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=MyISAM;

3、InnoDB关闭AutoCommit,不用事务:

以下为引用的内容:

CREATE TABLE `INNODB_NA_NB` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

4、InnoDB关闭AutoCommit,用事务:

以下为引用的内容:

CREATE TABLE `INNODB_NA_BE` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

5、InnoDB开启AutoCommit,不用事务:

以下为引用的内容:

CREATE TABLE `INNODB_AU_NB` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

6、InnoDB开启AutoCommit,用事务:

以下为引用的内容:

CREATE TABLE `INNODB_AU_BE` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

测试的Python脚本如下:

#!/usr/bin/env Python

'''

MyISAM,InnoDB性能比较

作者:空心菜(Invalid)

时间:2004-10-22

以下为引用的内容:

'''

import MySQLdb

import sys

import os

import string

import time

c = None

testtables = [("MyISAM_NT",None,0),

("MyISAM_TS",None,1),

("INNODB_NA_NB",0,0),

("INNODB_NA_BE",0,1),

("INNODB_AU_NB",1,0),

("INNODB_AU_BE",1,1)

]

def BeginTrans():

print "ExecSQL:BEGIN;"

c.execute("BEGIN;")

return

def Commit():

print "ExecSQL:COMMIT;"

c.execute("COMMIT;")

return

def AutoCommit(flag):

print "ExecSQL:Set AUTOCOMMIT = "+str(flag)

c.execute("Set AUTOCOMMIT = "+str(flag))

return

def getcount(table):

#print "ExecSQL:select count(*) from "+table

c.execute("select count(*) from "+table)

return c.fetchall()[0][0]

def AddTable (Table,TableId,TableString):

sql = "INSERT INTO "+Table+"(TableId, TableString) VALUES( "+ TableId+ ",'" + TableString +"')"

try:

c.execute(sql)

except MySQLdb.OperationalError,error:

print "AddTable Error:",error

return -1;

return c.rowcount

def main():

argv = sys.argv

if len(argv) < 2:

print 'Usage:',argv[0],' TableId TestCount \n'

sys.exit(1)

global c #MySQL访问cursor

db_host = "localhost"

db_name = "demo"

db_user = "root"

db_user_passwd = ""

print "Config:[%s %s/%s %s] DB\n"%(db_host,db_user,db_user_passwd,db_name)

if len(argv) > 2:

tableid = argv[1]

testcount = int(argv[2]) #

for test in testtables:

#每次操作前都重写建立数据库连接

以下为引用的内容:

try:

mdb = MySQLdb.connect(db_host, db_user, db_user_passwd, db_name)

except MySQLDb.OperationalError,error:

print "Connect MySQL[%s %s/%s %s] DB Error:"%(db_host,db_user,db_user_passwd,db_name),error,"\n"

sys.exit(1)

else:

c = mdb.cursor()

table,autocommit,trans = test

starttime = time.time()

print table," ",time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

if autocommit != None:

AutoCommit(autocommit)

if trans == 1:

BeginTrans()

for i in xrange(testcount):

tablestring = "%020d"%i

if (AddTable(table,tableid,tablestring)<1):

print "AddTable Error",tablestring

if trans == 1:

Commit()

print time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

endtime = time.time()

usedtime = endtime-starttime

print table,"count:",getcount(table)," used time:",usedtime

c.close()

mdb.close()

if __name__ == '__main__':

main()

测试结果如下:

Config:[localhost root/ demo] DB

MyISAM_NT 04-10-22 16:33:24

04-10-22 16:33:26

MyISAM_NT count: 10000 used time: 2.1132440567

MyISAM_TS 04-10-22 16:33:26

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:33:29

MyISAM_TS count: 10000 used time: 2.65475201607

INNODB_NA_NB 04-10-22 16:33:29

ExecSQL:Set AUTOCOMMIT = 0

04-10-22 16:33:31

INNODB_NA_NB count: 10000 used time: 2.51947999001

INNODB_NA_BE 04-10-22 16:33:31

ExecSQL:Set AUTOCOMMIT = 0

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:33:35

INNODB_NA_BE count: 10000 used time: 3.85625100136

INNODB_AU_NB 04-10-22 16:33:35

ExecSQL:Set AUTOCOMMIT = 1

04-10-22 16:34:19

INNODB_AU_NB count: 10000 used time: 43.7153041363

INNODB_AU_BE 04-10-22 16:34:19

ExecSQL:Set AUTOCOMMIT = 1

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:34:22

INNODB_AU_BE count: 10000 used time: 3.14328193665

结论:

由此得知影响速度的主要原因是AUTOCOMMIT默认设置是打开的,

我当时的程序没有显式调用BEGIN;开始事务,导致每插入一条都自动Commit,严重影响了速度。

算来也是个低级错误!

相关参考:

http://dev.mysql.com/doc/MySQL/en/COMMIT.html

http://dev.mysql.com/doc/MySQL/en/InnoDB_and_AUTOCOMMIT.html