C++博客-flyonok-文章分类-mysql

MySQL中MyISAM引擎与InnoDB引擎性能简单测试

flyonok — Wed, 25 Jun 2008 12:35:00 GMT

[硬件配置]
CPU : AMD2500+ (1.8G)
内存: 1G/现代
硬盘: 80G/IDE

[软件配置]
OS : Windows XP SP2
SE : PHP5.2.1
DB : MySQL5.0.37
Web: IIS6

[MySQL表结构]

CREATE TABLE `myisam` (
   `id` int(11) NOT NULL auto_increment,
   `name` varchar(100) default NULL,
   `content` text,
  PRIMARY KEY   (`id`)
) ENGINE=MyISAM DEFAULT CHARSET=gbk;

CREATE TABLE `innodb` (
   `id` int(11) NOT NULL auto_increment,
   `name` varchar(100) default NULL,
   `content` text,
  PRIMARY KEY   (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=gbk;

[数据内容]

$name = "heiyeluren";
$content = "MySQL支持数个存储引擎作为对不同表的类型的处理器。MySQL存储引擎包括处理事务安全表的引擎和处理非事务安全表的引擎：· MyISAM管理非事务表。它提供高速存储和检索，以及全文搜索能力。MyISAM在所有MySQL配置里被支持，它是默认的存储引擎，除非你配置 MySQL默认使用另外一个引擎。 ·MEMORY存储引擎提供“内存中”表。MERGE存储引擎允许集合将被处理同样的MyISAM表作为一个单独的表。就像MyISAM一样， MEMORY和MERGE存储引擎处理非事务表，这两个引擎也都被默认包含在MySQL中。释：MEMORY存储引擎正式地被确定为HEAP引擎。· InnoDB和BDB存储引擎提供事务安全表。BDB被包含在为支持它的操作系统发布的MySQL-Max二进制分发版里。InnoDB也默认被包括在所有MySQL 5.1二进制分发版里，你可以按照喜好通过配置MySQL来允许或禁止任一引擎。·EXAMPLE存储引擎是一个“存根”引擎，它不做什么。你可以用这个引擎创建表，但没有数据被存储于其中或从其中检索。这个引擎的目的是服务，在MySQL源代码中的一个例子，它演示说明如何开始编写新存储引擎。同样，它的主要兴趣是对开发者。";

[插入数据-1] (innodb_flush_log_at_trx_commit=1)
MyISAM 1W：3/s
InnoDB 1W：219/s

MyISAM 10W：29/s
InnoDB 10W：2092/s

MyISAM 100W：287/s
InnoDB 100W：没敢测试

[插入数据-2] (innodb_flush_log_at_trx_commit=0)
MyISAM 1W：3/s
InnoDB 1W：3/s

MyISAM 10W：30/s
InnoDB 10W：29/s

MyISAM 100W：273/s
InnoDB 100W：423/s

[插入数据3] (innodb_buffer_pool_size=1024M)
InnoDB 1W：3/s
InnoDB 10W：33/s
InnoDB 100W：607/s

[插入数据4] (innodb_buffer_pool_size=256M, innodb_flush_log_at_trx_commit=1, set autocommit=0)

InnoDB 1W：3/s
InnoDB 10W：26/s
InnoDB 100W：379/s

[MySQL 配置文件] (缺省配置)

# MySQL Server Instance Configuration File
[client]
port=3306

[mysql]
default-character-set=gbk

[mysqld]
port=3306
basedir="C:/mysql50/"
datadir="C:/mysql50/Data/"
default-character-set=gbk
default-storage-engine=INNODB
sql-mode="STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION"
max_connections=100

query_cache_size=0
table_cache=256
tmp_table_size=50M
thread_cache_size=8
myisam_max_sort_file_size=100G
myisam_max_extra_sort_file_size=100G
myisam_sort_buffer_size=100M
key_buffer_size=82M
read_buffer_size=64K
read_rnd_buffer_size=256K
sort_buffer_size=256K

innodb_additional_mem_pool_size=4M
innodb_flush_log_at_trx_commit=1
innodb_log_buffer_size=2M
innodb_buffer_pool_size=159M
innodb_log_file_size=80M
innodb_thread_concurrency=8

【总结】

可以看出在MySQL 5.0里面，MyISAM和InnoDB存储引擎性能差别并不是很大，针对InnoDB来说，影响性能的主要是 innodb_flush_log_at_trx_commit 这个选项，如果设置为1的话，那么每次插入数据的时候都会自动提交，导致性能急剧下降，应该是跟刷新日志有关系，设置为0效率能够看到明显提升，当然，同样你可以SQL中提交“SET AUTOCOMMIT = 0”来设置达到好的性能。另外，还听说通过设置innodb_buffer_pool_size能够提升InnoDB的性能，但是我测试发现没有特别明显的提升。

基本上我们可以考虑使用InnoDB来替代我们的MyISAM引擎了，因为InnoDB自身很多良好的特点，比如事务支持、存储过程、视图、行级锁定等等，在并发很多的情况下，相信InnoDB的表现肯定要比MyISAM强很多，当然，相应的在my.cnf中的配置也是比较关键的，良好的配置，能够有效的加速你的应用。

如果不是很复杂的Web应用，非关键应用，还是可以继续考虑MyISAM的，这个具体情况可以自己斟酌。

参考URL：
http://dev.mysql.com/doc/refman/5.1/zh/index.html
http://dev.mysql.com/doc/refman/5.1/zh/storage-engines.html#innodb

flyonok 2008-06-25 20:35 发表评论

MySQL常见问题解答及技巧

flyonok — Fri, 20 Jun 2008 02:47:00 GMT

　首先你应该试着找出问题mysqld守护进程是否死掉或你的问题是否与你的客户有关。你可以用mysqladmin version检查你的mysqld服务器正常执行了多长时间，如果mysqld死了，你可以在文件“mysql-data-directory/'hostname'.err”中找到其原因。
使用MySQL时的一些常见错误

　　MySQL server has gone away

　　常见的原因是服务器超时了并且关闭了连接。缺省地，如果没有事情发生，服务器在 8个小时后关闭连接。你可在启动mysqld时通过设置wait_timeout变量改变时间限制。

如果mysqld得到一个太大或不正常的包，它认为客户出错了并关闭连接。

常见问题集锦

　MySQL总是崩溃

首先你应该试着找出问题mysqld守护进程是否死掉或你的问题是否与你的客户有关。你可以用mysqladmin version检查你的mysqld服务器正常执行了多长时间，如果mysqld死了，你可以在文件“mysql-data-directory/'hostname'.err”中找到其原因。

　　使用MySQL时的一些常见错误

如果mysqld得到一个太大或不正常的包，它认为客户出错了并关闭连接。

　　Can't connect to [local] MySQL server

　　通常意味着没有一个MySQL服务器运行在系统上或当试图连接mysqld服务器时，你正在使用一个错误的套接字文件或TCP/IP端口。

　　检查(使用ps)服务器上是否有一个名为mysqld的进程启动

　　如果一个mysqld进程正在运行，可以通过尝试这些不同的连接来检查服务器

shell> mysqladmin version

shell> mysqladmin variables

shell> mysqladmin -h `hostname` version variables

shell> mysqladmin -h `hostname` --port=3306 version

shell> mysqladmin -h 'ip for your host' version

shell> mysqladmin --socket=/tmp/mysql.sock version

注意hostname命令使用反引号“`”而非正引号“'”；这些导致hostname输出（即，当前主机名）被代替进mysqladmin命令中。

　　Host '...' is blocked错误

Host 'hostname' is blocked because of many connection errors.

Unblock with 'mysqladmin flush-hosts'

这意味着，mysqld已经得到了大量(max_connect_errors)的主机'hostname'的在中途被中断了的连接请求。在 max_connect_errors次失败请求后，mysqld认定出错了(象来字一个黑客的攻击)，并且阻止该站点进一步的连接，直到某人执行命令 mysqladmin flush-hosts。

缺省地，mysqld在10个连接错误后阻塞一台主机。你可以通过象这样启动服务器很容易地调整它：

shell> safe_mysqld -O max_connect_errors=10000 &

　　Too many connections错误

意味着已经有max_connections个客户连接了mysqld服务器。

如果你需要比缺省(100)更多的连接，那么你应该重启mysqld，用更大的 max_connections 变量值。

　　Out of memory错误

mysql: Out of memory at line 42, 'malloc.c'

mysql: needed 8136 byte (8k), memory in use: 12481367 bytes (12189k)

ERROR 2008: MySQL client ran out of memory

　　注意，错误指向了MySQL客户mysql。这个错误的原因很简单，客户没有足够的内存存储全部结果。

首先检查你的查询是否正确

　Packet too large错误

　　一个MySQL客户或mysqld服务器得到一个比max_allowed_packet个字节长的包

　　可以通过用mysql --set-variable=max_allowed_packet=8M指定一个更大的缓冲区来启动客户程序。

　　The table is full错误

　　这个错误发生在内存临时表变得比tmp_table_size字节大时。

　　Commands out of sync in client错误

　　正在以错误的次序调用客户函数！

　　Ignoring user错误

Found wrong password for user: 'some_user@some_host'; Ignoring user

　　这意味着在mysqld启动时或在它再次装载权限表时，它在user表中找到了一个有一个无效口令的条目。结果，条目简单地被权限系统忽略。

　　Table 'xxx' doesn't exist错误

　　数据库和表名件是区分大小写的！可以用SHOW TABLES检查你在当前数据库中有哪个表。

　　从一个文本文件运行SQL命令

　　可以把SQL命令放在一个文件中并且告诉mysql从该文件读取其输入：创造一个文本文件“text_file”，它包含要执行的命令。然后如下调用mysql：

shell> mysql database < text_file

　　或

shell> mysql < text_file

　　启动有USE db_name语句的文本文件。

　　怎样重新设置一个忘记的口令

　　如果忘记了MySQL的root用户的口令，可以使用如下方法恢复：

　　通过发送一个kill（不是kill -9)到mysqld服务器来关闭mysqld服务器。pid 被保存在一个.pid文件中，通常在MySQL数据库目录中：

　　kill `cat /mysql-data-directory/hostname.pid`

　　你必须是一个UNIX root用户或运行服务器的相同用户做这个。

　　使用--skip-grant-tables选项重启mysqld。

用mysql -h hostname mysql连接mysqld服务器并且用一条GRANT命令改变口令。见7.26 GRANT和REVOKE句法。也可以用mysqladmin -h hostname -u user password 'new password' 进行。

　　用mysqladmin -h hostname flush-privileges或用SQL命令FLUSH PRIVILEGES来装载权限表。

　　使用DATE列的问题

　　DATE值的格式是'YYYY-MM-DD'。

　　改变一张表中列的顺序

　　在一个应用程序中，应该决不基于他们的位置使用SELECT * 检索列，因为被返回的列的顺序永远不能保证；对数据库的一个简单改变可能导致应用程序相当有戏剧性地失败。

　　可以使用如下方法改变：

　　以正确的列顺序创建一张新表。

　　执行INSERT INTO new_table SELECT fields-in-new_table-order FROM old_table.

　　删除或改名old_table。

　　ALTER TABLE new_table RENAME old_table。

　　数据库复制

MySQL(至今)没有数据库复制，但是有一些如何实现的信息。

　　复制一个数据库最一般的方法是使用更新日志。

char与varchar的区别

对于MyISAM表，尽量使用Char，对于那些经常需要修改而容易形成碎片的myisam和isam数据表就更是如此

对于MyISAM表，尽量使用Char，对于那些经常需要修改而容易形成碎片的myisam和isam数据表就更是如此，它的缺点就是占用磁盘空间；

对于InnoDB表，因为它的数据行内部存储格式对固定长度的数据行和可变长度的数据行不加区分（所有数据行共用一个表头部分，这个标头部分存放着指向各有关数据列的指针），所以使用char类型不见得会比使用varchar类型好。事实上，因为char类型通常要比 varchar类型占用更多的空间，所以从减少空间占用量和减少磁盘i/o的角度，使用varchar类型反而更有利

flyonok 2008-06-20 10:47 发表评论

mysql -- event

flyonok — Tue, 17 Jun 2008 09:36:00 GMT

create event call_proc_audit_alert
on schedule at timestamp('2008-06-18 2:00:00') + interval 1 day
do call PROCESS_AUDIT_AND_ALERT;

show variables like '%scheduler%';

看看时间调度开关有没有打开,如果是OFF,就要打开
set global event_scheduler = on;

最好是当mysql启动的时候就打开

flyonok 2008-06-17 17:36 发表评论

mysql--预处理函数

flyonok — Fri, 13 Jun 2008 09:23:00 GMT

在程序中使用了mysql_stmt系列预处理函数，发现mysql_stmt_execute出现错误，但错误号为0；
调整参数
show global status like "open%";

show global variables like '%open%';

flush tables;

SHOW GLOBAL STATUS LIKE 'Opened_tables'

set global table_open_cache = 200;(table_cache)

set global max_connections = 100;

open_files = 2048
ulimit -n 2048

wait_timeout = 600

察看mysql的进程数
show processlist;
察看sleep进程的信息
netstat -ntp | grep :端口号
根据以上命令可以查到与mysql连接的程序的名称
netstat -ntp | grep 进程号

调试程序:strace -p

重新运行程序，发现没有了。晕。。。

总结：mysql中有个超时重连机制，由参数wait_timeout决定，缺省时28800秒；如果这个参数设置太小，就会导致客户端老是重连，从而预处理句柄实效，数据无法处理。解决方法，使用缺省值，客户端不使用重连机制。

flyonok 2008-06-13 17:23 发表评论

mysql root password

flyonok — Tue, 27 May 2008 18:26:00 GMT

如果 MySQL 正在运行，首先杀之： killall -TERM mysqld。
启动 MySQL ：bin/safe_mysqld --skip-grant-tables &
就可以不需要密码就进入 MySQL 了。
然后就是
>use mysql
>update user set password=password("new_pass") where user="root";
>flush privileges;
重新杀 MySQL ，用正常方法启动 MySQL
一定注意：很多新手没有用password=password("...")，而是直接password="..."所以改掉密码不好使

flyonok 2008-05-28 02:26 发表评论

mysql dump

flyonok — Mon, 12 May 2008 06:08:00 GMT

使用mysql的时候，经常遇到要导入导出数据库结构的情况
使用mysqldump和mysql能够比较方便的达到目的：
1、使用mysqldump导出
mysqldump --add-drop-database --add-drop-table --create-option --default-character-set=utf8 --extended-insert --routines -u suntang -p customdb_new > customdb_new.sql

--no-data 指明不需要数据，只需要数据库结构

如果数据库太大，可以启用压缩，mysqldump dbname -h hostname | gzip > dbname.sql.gz -u username -p

2、使用mysql导入
./mysql -e "source /root/audit/customdb0512.sql" customdb -h localhost -u root -p

another way:
mysql -p
password:
./path/name.sql

flyonok 2008-05-12 14:08 发表评论