Mysql的MEMORY引擎的性能

HappyWin

大家好，今天做了一个mysql的MEMORY数据引擎的测试，发现其速度并不比MyISAM引擎快，我建了两个表结构一模一样的表，一个id是自增长的，另外两个字段一个是string，一个是bigint，测试结果是：
都插入500000条记录，两个引擎用的时间都是34分钟左右。
奇怪的是查询效率，两种引擎查询的条件是一样的，运行的每条语句也一模一样，但结果是效率几乎相同。

下面是我用来查询的脚本，插入的也类似：

1. #!/bin/bash
   
2. for ((i=100;i<=600;i++))
   
3. do
   
4.     echo "select * from testTable where intB > $i;" | mysql -uroot -ptest test > /dev/null
   
5. done
   

复制代码

我的问题是：
1. mysql插入50万的数据用半个多小时，感觉效率不是很快，这个有人做过类似测试吗？
2. 理论上讲，MEMORY引擎应该快很多，但为啥感觉没什么效果？
3. 查询效率理论上讲在MEMORY里面的应该快很多，但没看到区别，那MEMORY重启mysql还丢数据，这个引擎到底优势在哪里呢？
4. 谁有my.cnf文件的配置原则类的文档？我想可能调优一下能好些？

多谢各位指点。

HappyWin

对了，忘了说一下我机器的配置，Intel I7的cpu，12G内存

cenalulu

memory 快在数据的获取避免的 从磁盘load的过程，也就避免的机械硬盘寻道这么一个比较慢的操作。更白话一点就是 普通硬盘和固态硬盘的速度差距。

wolfop

memory 快在数据的获取避免的 从磁盘load的过程，也就避免的机械硬盘寻道这么一个比较慢的操作。更白话一点 ...
cenalulu 发表于 2010-06-28 15:45

太简单化了，SDD再快能快过内存？内存带宽都是以GB/S来计算，你后面恐怕要用USP-V DS8000配SSD外加主机插几十块HBA卡才可能到这个带宽。更不用说延迟，内存延迟是ns级别，IO怎么也是ms级别（包括上OS下文切换，中断，等等带来）。

wolfop

大家好，今天做了一个mysql的MEMORY数据引擎的测试，发现其速度并不比MyISAM引擎快，我建了两个表结构一模一 ...
HappyWin 发表于 2010-06-27 12:30

我记得DEFAULT情况下，HEAP表有大小限制，好像不超过128M。如果你没改那个my.cf，超过这个限制，好像自己动变成myisam表。
MEMORY tables are never converted to disk tables. To ensure that you
don’t accidentally do anything foolish, you can set the max_heap_table_size
system variable to impose a maximum size on MEMORY tables. For individual tables,
you can also specify a MAX_ROWS table option in the CREATE TABLE statement
你自己检查一下。

cenalulu

太简单化了，SDD再快能快过内存？内存带宽都是以GB/S来计算，你后面恐怕要用USP-V DS8000配SSD外加主机插 ...
wolfop 发表于 2010-06-28 16:03

    所以说了是大白话么- -

Coolriver

你试把那个大于号,换成=号,试一下效果.
你的结果集每次太大了.

或是你限制一下结果集大小试一下,加一个limit .

ever027

还有你得加上sql_no_cache吧

HappyWin

多谢楼上各位的耐心解答，我已经设置了max_heap_table_size = 1024M， 应该是起作用了，因为我重启msqlservre，这个表的数据会被清空，看起来确实是在memory里面。

至于结果集确实是大了点，但我的疑问是，对于同样大小的结果集，为啥myIsam引擎跟MEMORY引擎性能没看出区别呢？按说应该有区别才对。

sql_no_cache是为了避免mysql对结果进行缓存，对我这个测试有影响吗？可能是测试用的语句echo "select * from testTable where intB > $i;" | mysql -uroot -ptest每次都会重新启动一个process链接数据库对性能有影响，但这些对两种引擎都是一样的啊。

多谢各位，希望有应验的朋友一起分享。

xiao7ng

回复 5# wolfop


    不会的,超过限制报错.做全表扫描,我相信memory还是比较快的,还有他的hash索引做等值查询也不错.不过我不喜欢memory表,没想象的那么出色,数据不能持久化等等