mysql还是mdb2_mysql两种表存储结构myisam和innodb的性能比较测试

MyISAM:这个是默认类型,它是基于传统的ISAM类型,ISAM是Indexed

Sequential Access Method (有索引的顺序访问方法)

的缩写,它是存储记录和文件的标准方法.与其他存储引擎比较,MyISAM具有检查和修复表格的大多数工具.

MyISAM表格可以被压缩,而且它们支持全文搜索.它们不是事务安全的,而且也不支持外键

InnoDB:这种类型是事务安全的.它与BDB类型具有相同的特性,它们还支持外键.InnoDB表格速度很快.具有比BDB还丰富的特性,因此如果需要一个事务安全的存储引擎,建议使用它.

MyISAM和InnoDB的区别:

InnoDB默认情况下的事务是打开的(set autocommit =

0)就是说每插入一条记录时候,InnoDB类型的表都会把它当作一个单独的事务来处理.

所以如果我们插入了10000条记录,而且没有将事务关闭,那么InnoDB类型的表会把它当作10000个事务来处理,此时插入的总时间是很多的,这个时候一定要首先把事务关掉再插入,这样的速度就很快了

MySQL支持的两种主要表存储格式MyISAM,InnoDB,上个月做个项目时,先使用了InnoDB,结果速度特别慢,1秒钟只能插入10几条。后来换成MyISAM格式,一秒钟插入上万条。当时决定这两个表的性能也差别太大了吧。后来自己推测,不应该差别这么慢,估计是写的插入语句有问题,决定做个测试:

测试环境:Redhat

Linux9,4CPU,内存2G,MySQL版本为4.1.6-gamma-standard

测试程序:Python+Python-MySQL模块。

测试方案:

1、MyISAM格式分别测试,事务和不用事务两种情况:

2、InnoDB格式分别测试AutoCommit=1(不用begin

transaction和用begin transaction模式),

AutoCommit=0 (不用begin transaction和用begin

transaction模式)四种情况。

测试方法为插入10000条记录。为了测试不互相影响,单独建立了专用的测试表,建表语句如下:

1、MyISAM不用事务表:

CREATE TABLE `MyISAM_NT` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=MyISAM;

2、MyISAM用事务表:

CREATE TABLE `MyISAM_TS` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=MyISAM;

3、InnoDB关闭AutoCommit,不用事务:

CREATE TABLE `INNODB_NA_NB` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

4、InnoDB关闭AutoCommit,用事务:

CREATE TABLE `INNODB_NA_BE` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

5、InnoDB开启AutoCommit,不用事务:

CREATE TABLE `INNODB_AU_NB` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

6、InnoDB开启AutoCommit,用事务:

CREATE TABLE `INNODB_AU_BE` (

`TableId` int(11) NOT NULL default '0',

`TableString` varchar(21) NOT NULL default ''

) ENGINE=InnoDB;

测试的Python脚本如下:

#!/usr/bin/env Python

'''

MyISAM,InnoDB性能比较

作者:空心菜(Invalid)

时间:2004-10-22

'''

import MySQLdb

import sys

import os

import string

import time

c = None

testtables = [("MyISAM_NT",None,0),

("MyISAM_TS",None,1),

("INNODB_NA_NB",0,0),

("INNODB_NA_BE",0,1),

("INNODB_AU_NB",1,0),

("INNODB_AU_BE",1,1)

]

def BeginTrans():

print "ExecSQL:BEGIN;"

c.execute("BEGIN;")

return

def Commit():

print "ExecSQL:COMMIT;"

c.execute("COMMIT;")

return

def AutoCommit(flag):

print "ExecSQL:Set Set ExecSQL:select count(*) from "+table

c.execute("select count(*) from "+table)

return c.fetchall()[0][0]

def AddTable (Table,TableId,TableString):

sql = "INSERT INTO "+Table+"(TableId, TableString) VALUES( "+

TableId+ ",'" + TableString +"')"

try:

c.execute(sql)

except MySQLdb.OperationalError,error:

print "AddTable Error:",error

return -1;

return c.rowcount

def main():

argv = sys.argv

if len(argv) < 2:

print 'Usage:',argv[0],' TableId TestCount \n'

sys.exit(1)

global c #mysql访问cursor

db_host = "localhost"

db_name = "demo"

db_user = "root"

db_user_passwd = ""

print "Config:[%s %s/%s %s]

DB\n"%(db_host,db_user,db_user_passwd,db_name)

if len(argv) > 2:

tableid = argv[1]

testcount = int(argv[2]) #

for test in testtables:

#每次操作前都重写建立数据库连接

try:

mdb = MySQLdb.connect(db_host, db_user, db_user_passwd,

db_name)

except MySQLDb.OperationalError,error:

print "Connect Mysql[%s %s/%s %s] DB

Error:"%(db_host,db_user,db_user_passwd,db_name),error,"\n"

sys.exit(1)

else:

c = mdb.cursor()

table,autocommit,trans = test

starttime = time.time()

print table," ",time.strftime("%y-%m-%d

%H:%M:%S",time.localtime())

if autocommit != None:

AutoCommit(autocommit)

if trans == 1:

BeginTrans()

for i in xrange(testcount):

tablestring = "%020d"%i

if (AddTable(table,tableid,tablestring)<1):

print "AddTable Error",tablestring

if trans == 1:

Commit()

print time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

endtime = time.time()

usedtime = endtime-starttime

print table,"count:",getcount(table)," used

time:",usedtime

c.close()

mdb.close()

if __name__ == '__main__':

main()

测试结果如下:

Config:[localhost root/ demo] DB

MyISAM_NT 04-10-22 16:33:24

04-10-22 16:33:26

MyISAM_NT count: 10000 used time: 2.1132440567

MyISAM_TS 04-10-22 16:33:26

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:33:29

MyISAM_TS count: 10000 used time: 2.65475201607

INNODB_NA_NB 04-10-22 16:33:29

ExecSQL:Set AUTOCOMMIT = 0

04-10-22 16:33:31

INNODB_NA_NB count: 10000 used time: 2.51947999001

INNODB_NA_BE 04-10-22 16:33:31

ExecSQL:Set AUTOCOMMIT = 0

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:33:35

INNODB_NA_BE count: 10000 used time: 3.85625100136

INNODB_AU_NB 04-10-22 16:33:35

ExecSQL:Set AUTOCOMMIT = 1

04-10-22 16:34:19

INNODB_AU_NB count: 10000 used time: 43.7153041363

INNODB_AU_BE 04-10-22 16:34:19

ExecSQL:Set AUTOCOMMIT = 1

ExecSQL:BEGIN;

ExecSQL:COMMIT;

04-10-22 16:34:22

INNODB_AU_BE count: 10000 used time: 3.14328193665

结论:

由此得知影响速度的主要原因是AUTOCOMMIT默认设置是打开的,

我当时的程序没有显式调用BEGIN;开始事务,导致每插入一条都自动Commit,严重影响了速度。

算来也是个低级错误!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/443239.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

numpy维度交换_如何将2个不同维度的numpy数组相乘

默认情况下&#xff0c;ND数组(例如A)与一维1(B)的乘法是在最后一个轴上执行的&#xff0c;这意味着乘法A * B仅在下有效A.shape[-1] len(B)要在另一个轴上将A与B相乘而不是-1&#xff0c;一种解决方法是在相乘前后交换A的轴&#xff1a;要在轴“ axis”上乘以A和B&#xff0c…

diff算法阮一峰_【重学数据结构与算法(JS)】字符串匹配算法(三)——BM算法

前言文章的一开头&#xff0c;还是要强调下字符串匹配的思路将模式串和主串进行比较从前往后比较从后往前比较2. 匹配时&#xff0c;比较主串和模式串的下一个位置3. 失配时,在模式串中寻找一个合适的位置如果找到&#xff0c;从这个位置开始与主串当前失配位置进行比较如果未找…

远程mysql定时删除数据_mysql定时备份数据库 删除历史文件 将备份数据库传送到另外服务器...

定时备份数据库脚本并压缩删除历史文件1.创建备份脚本vim mysql-backup.sh#!/bin/bashbakdate %y-%m-%d-%Htool/usr/local/mysql/bin/mysqldump$tool -uroot -p密码 --lock-all-tables --all-databases | gzip > /路径/$bak\.sql.gzfind 路径 -name "name_*.sql.gz&q…

python input 拖入路径 去除转义 空格_python学习笔记(基础-2)(转载)

1.输出用print()在括号中加上字符串&#xff0c;就可以向屏幕上输出指定的文字。2.输入如果要让用户从电脑输入一些字符怎么办&#xff1f;Python提供了一个input()&#xff0c;可以让用户输入字符串&#xff0c;并存放到一个变量里。输入是Input&#xff0c;输出是Output&…

mysql和mdy_Liunx下安装MySql

1.安装数据库&#xff1a;执行命令 yum -y install mysql-server2.启动数据库&#xff1a;安装完毕&#xff0c;执行命令service mysqld start3.登录数据库&#xff1a;mysql -u root -p回车后输入密码(mysql的默认用户名是root&#xff0c;密码为空)4.使用数据库&#xff1a;登…

python websocket服务器https_Socket与WebSocket以及http与https重新总结

Socket与WebSocket以及http与https重新总结一.Socket网络中的Socket是一个抽象的接口 &#xff0c;而是为了方便使用TCP或UDP而抽象出来的一层 &#xff0c;可以理解为网络中连接的两端。通常被叫做套接字接口.二.WebSocketWebSocket就是其中一种&#xff0c;是为了创建一种双向…

python微博评论爬虫_详解用python写网络爬虫-爬取新浪微博评论 基于Python的新浪微博爬虫研究...

怎样爬取新浪微博的评论信息针对八爪鱼在微博的应用上&#xff0c;除了用户信息之外还包括话题内容方面的采集&#xff0c;目前绝大多数企业均在微博设有官方微博&#xff0c;八爪鱼可以协助企业快速及时的抓取与企业产品相关联的话题信息&#xff0c;规则市场内有配置好的规则…

韩顺平 mysql sqlhelper类_(最全)韩顺平jsp购物车源代码(包含数据库)

【实例简介】韩顺平的jsp购物车项目,所有源码都在,包含数据库,是网络上最全的【实例截图】【核心代码】myshopping└── myshopping├── myshopping│ ├── src│ │ ├── com│ │ │ └── hsp│ │ │ ├── domain│ │ │ │ ├── B…

c#和python更适合爬虫_python在爬虫方面有哪些优势呢?

python是一门非常不错的编程语言&#xff0c;通俗易懂、适合零基础入门&#xff0c;尤其是爬虫领域有着独特的优势&#xff0c;成为了首选编程语言。Python是一种计算机程序设计语言&#xff0c;是一种动态的、面向对象的脚本语言。Python最初被设计用于编写自动化脚本(shell)&…

mysql创建独立表空间_InnoDB独立表空间

在查看MySQL的数据库文件的时候会发现&#xff0c;MyISAM存储引擎类型的表会有三个文件&#xff0c;*.frm,*.MYD,*.MYI&#xff0c;但是InnoDB存储引擎的文件只有一个*.frm&#xff0c;原来是因为InnoDB没有开启独立表空间&#xff0c;执行如下命令可以看到&#xff1a;mysql&g…

python os模块方法_python os模块方法总结

在python中os是一个非常常用的模块&#xff0c;下面是对os中方法的总结(实验为Mac环境)1 . os.name &#xff1a;输出字符串指示使用的平台&#xff0c;windows是nt, linux/unix/mac是posix>>> os.nameposix>>>2 . os.getcwd() :获取当前目录>>> …

java button中文乱码_java解决中文乱码的几种写法

工作中总会遇到中文乱码问题&#xff0c;以导出文件&#xff0c;文件名称是中文的话&#xff0c;下载下来的文件名称会乱码问题&#xff0c;总结了几种解决文件名乱码的写法&#xff0c;仅供参考。首先定义一个汉语字符串String zhName "错误码模板";一、java.net.U…

java jframe添加面板_JFrame添加组件的两种方式

对JFrame添加组件有两种方式&#xff1a;1) 用getContentPane()方法获得JFrame的内容面板&#xff0c;再对其加入组件&#xff1a;frame.getContentPane().add(childCompontent)常分开来写Container containergetContentPanel();(隐式的this.getContentPanel()) ;得到jframe的内…

java 德生读卡器对接程序_德生TSW-F4 社保卡读卡器.rar

【实例简介】德生TSW-F4 社保卡读卡器测试程序以及动态库&#xff0c;出厂自带程序【实例截图】【核心代码】b79d6d98-2fcb-4e20-ab26-8f7aa14b320c└── 德生TSW-F4 社保卡读卡器├── TSW-F4 U系列读写器随机软件_20120907│ ├── Dll│ │ ├── F4.h│ │ ├…

ios 数组越界奔溃库_iOS中防止数组越界之后发生崩溃

在iOS开发中有时会遇到数组越界的问题&#xff0c;从而导致程序崩溃。为了防止程序崩溃&#xff0c;我们就要对数组越界进行处理。通过上网查资料&#xff0c;发现可以通过为数组写一个分类来解决此问题。基本思路&#xff1a;为NSArray写一个防止数组越界的分类。分类中利用ru…

java map与set的区别_Java中的Set,List,Map的区别是什么?

对JAVA的集合的理解是想对于数组数组是大小固定的&#xff0c;并且同一个数组只能存放类型一样的数据(基本类型/引用类型)JAVA集合可以存储和操作数目不固定的一组数据。所有的JAVA集合都位于 java。util包中&#xff01;JAVA集合只能存放引用类型的的数据&#xff0c;不能存放…

java怎么使用泛型_java泛型 7 泛型的基本介绍和使用

现在开始深入学习Java的泛型了&#xff0c;以前一直只是在集合中简单的使用泛型&#xff0c;根本就不明白泛型的原理和作用。泛型在java中&#xff0c;是一个十分重要的特性&#xff0c;所以要好好的研究下。一、泛型的基本概念泛型的定义&#xff1a;泛型是JDK 1.5的一项新特性…

java铝轮_为速度而生 JAVA Fuoco铝合金气动公路

人类在追求速度的历史上一直在不断创新&#xff0c;从两个轮子的自行车&#xff0c;到四个轮字的汽车&#xff0c;再到螺旋桨的飞机&#xff0c;追求速度是人类与生俱来的天性。就如同公路车的用途非常多&#xff0c;综合型公路车、耐力型公路车、爬坡型公路车&#xff0c;但唯…

erlang mysql性能瓶颈,Erlang Mysql:如何防止SQL注入

Im very new to erlang and I need to code something which inserts rows in a MySQL Database.How can I prevent SQL Injections with Erlang? Is there also something like prepared statements in other Languages or how should I do it?Thanks for your replies.解决…

下列哪个不是java的数据类型_下面哪个不是Java基本数据类型?()

采集血标本时&#xff0c;错误的操作是A&#xff0e;血清标本应注入干燥试管B&#xff0e;生化检验标本在空腹时采集试比较脂肪酸β&#xff0d;氧化与生物合成的差异。调节水平衡的激素主要是A.胰岛素 B.甲状旁腺激素 C.血管升压素 D求比50克多5克的数是多少&#xff1f;列式是…