1. MongoDB 在数据存储上按命名空间来划分，一个 collection 是一个命名空间，一个索引也是一个命名空间
2. 同一个命名空间的数据被分成很多个 Extent，Extent 之间使用双向链表连接
3. 在每一个 Extent 中，保存了具体每一行的数据，这些数据也是通过双向链接连接的
4. 每一行数据存储空间不仅包括数据占用空间，还可能包含一部分附加空间，这使得在数据 update 变大后可以不移动位置
5. 索引以 BTree 结构实现

• 第 1 步：先记录一条事务记录，将要修改的多行记录的修改值写到里面，并设置其状态为 init（如果这时候操作中断，那么在重新启动时，会判断到他处于 init 状态，从而将其保存的多行修改操作应用到具体的行上）
• 第 2 步：然后更新具体要修改的行，将刚才写的事务记录的标识写到它的 tran 字段中
• 第 3 步：将事务记录的状态从 init 变成 pending（如果在这时候操作中断，那么在重新启动时，会判断到它的状态是 pending 的，这时候查看其所有对应的多条要修改的记录，如果其 tran 有值，那么就进行第 4 步，如果没值，说明第 4 步已经执行过了，直接将其状态从 pending 变成 commited 了就行）
• 第 4 步：将需要修改的多条记录的相应值修改了，并且 unset 掉之前的 tran 字段
• 第 5 步：将事务记录那一条的状态从 pending 变成 commited，事务完成

        其实上面的步骤并不罕见，在支持事务的 DBMS 中，其事务原子性提交的保证大多都与上面类似。其实事务记录的 tran 那条记录，就类似于这些 DBMS 中的 redolog 一样。

mysql -h localhost -u eric -p saker

mysql -h 127.0.0.1 -u eric -p saker

这两个命令在skip-networking 开启的时候localhost能正常登录mysql,但是127.0.0.1不能。具体原因如下：

大多数程序将主机名localhost和IP地址127.0.0.1 视作“本地服务器”的同义词。

但在UNIX系统中，MySQL 有所不同：
出现localhost时，MySQL会尝试使用一个Unix domain socket 文件来连接本地服务器。

要强制使用TCP/IP连接到本地服务器，那就使用IP地址 127.0.0.1 而不是主机名localhost。
可以通过指定 --protocol=tcp 选项来强制使用TCP/IP进行连接

1). 备份初始数据。

关闭所有相关的数据更新操作程序，或者对要备份的数据库加锁，避免更新，然后用 tar 备份到从服务器上。或者可以用mysqlhotcopy。

2). 需要在主服务器上，配置日志功能

这需要重启服务，使其启用日志功能。配置文件 my.cnf 可以放在 mysql 的安装目录中。

[mysqld] 
server-id=1
 log-bin=mydb-bin
 binlog-do-db=mydb  

重启服务后，可以在数据目录下，看见该数据库的日志文件，并且可以通过 "show master status"，查看到主服务器的状态。

3). 设置备用用户

mysql>GRANT REPLICATION SLAVE ON *.* TO backup@'localhost' IDENTIFIED BY 'backup';

这里之所以用本地连接，是因为后面采用 ssh 隧道连接 mysql

4). 设置从服务器

[mysqld]
 server-id=2
 master-host=127.0.0.1
 master-port=3307
 master-user=backup
 master-password=backup
 master-connect-retry=10
 report-host=127.0.0.1 

5). 远程连接隧道

ssh -f -N -4 -L 3307:127.0.0.1:3306 mysqlm@remotemysql  

6). 启动从服务器

可以通过 "show processlist"，查看备份情况。并且可以查看mysql的错误日志，了解是否连接正常，同步备份功能是否工作正常。

Amoeba for MySQL 位于Client、Database Server(s)之间，具有负载均衡、高可用性、sql过滤、可承受高并发、读写分离、Query Route（解析sql query语句，并且根据条件与预先设定的规则，请求到指定的目标数据库。可并发请求多台数据库合并结果）、对客户端透明，能降低数据切分带来的复杂多数据库结构、数据切分规则给应用带来的影响。适用mysql 4.1或者以上版本（mysql 协议版本：10）暂时不支持事务、DDL语句目前只会分配给默认的数据库执行，运行环境至少需要运行 mysql 4.1以上服务, Java 1.5或以上版本。
Amoeba与mysql proxy存在一些区别。在mysql proxy上面如果想要读写分离并且读集群、写集群机器比较多情况下，用mysql proxy 需要自己写一个LUA脚本，目前mysql proxy没有现成的比较好的lua脚本。amoeba只需要进行相关的配置就可以满足需求。

一、Mysql Master/Slave 结构之下的读写分离：
Master： serverM （主库，接收写操作）
slaves：serverA、serverB、serverC（3个辅库，只读操作）

amoeba提供读写分离pool相关配置，可配置serverA、serverB、serverC形成一个虚拟的virtualSlave,该配置提供LB,failover/failbackup功能.
 
<dbServer name="virtualSlave" virtual="true"> 
    <poolConfig> 
        <className>com.meidusa.amoeba.server.MultipleServerPool</className> 
        <!-- 负载均衡参数 1=ROUNDROBIN , 2=WEIGHTBASED --> 
        <property name="loadbalance">1</property> 
                  
        <!-- 参与该pool负载均衡的poolName列表以逗号分割 --> 
        <property name="poolNames">serverA,serverB,serverC</property> 
    </poolConfig> 
</dbServer> 

<dbServer name="virtualSlave" virtual="true">
 <poolConfig>
  <className>com.meidusa.amoeba.server.MultipleServerPool</className>
  <!-- 负载均衡参数 1=ROUNDROBIN , 2=WEIGHTBASED -->
  <property name="loadbalance">1</property>
    
  <!-- 参与该pool负载均衡的poolName列表以逗号分割 -->
  <property name="poolNames">serverA,serverB,serverC</property>
 </poolConfig>
</dbServer>

如果不启用数据切分功能，那么只需要配置QueryRouter属性
wirtePool=serverM
readPool=virtualSlave

<queryRouter> 
    <className>com.meidusa.amoeba.mysql.parser.MysqlQueryRouter</className> 
    <property name="LRUMapSize">1500</property> 
    <property name="defaultPool">serverM</property> 
 
    <property name="writePool">serverM</property> 
    <property name="readPool">virtualSlave</property> 
 
    <property name="needParse">true</property> 
</queryRouter> 

 <queryRouter>
  <className>com.meidusa.amoeba.mysql.parser.MysqlQueryRouter</className>
  <property name="LRUMapSize">1500</property>
  <property name="defaultPool">serverM</property>

  <property name="writePool">serverM</property>
  <property name="readPool">virtualSlave</property>

  <property name="needParse">true</property>
 </queryRouter>

client发送过来的update/insert/delete语句被发送到wirtePool，将select语句发送到readPool机器执行。

二、数据切分方面：
这方面amoeba显然也很容易，举个数据切分例子：

select * from user_event where user_id='test' and  gmt_create between Sysdate() -1 and Sysdate()

如果根据gmt_create 时间进行数据切分，比如6个月进行切分一次，amoeba提供利用类似sql表达式进行数据切分：

规则1：GMT_CREATE > to_date('2008-01-01','yyyy-mm-dd') and GMT_CREATE < to_date('2008-05-31','yyyy-mm-dd')

规则1对应服务器1

规则2：GMT_CREATE > to_date('2008-06-01','yyyy-mm-dd') and GMT_CREATE < to_date('2008-12-31','yyyy-mm-dd')

规则2对应服务器2
上面的sql的条件 gmt_create 与规则里面的的gmt_create 进行交集判断，如果存在交集则表示符合规则，则会将sql转移到 规则1 的相应的服务器上面执行。

利用amoeba写出这种类似规则很容易，但是要想做到数据切分以后可线性扩容，那么这样的规则需要自己根据业务实际情况进行设置。amoeba可同时将 sql并发分发到多台服务器、然后将结果合并再反馈给客户端，而且amoeba内部采用无阻塞模式，工作线程是不会等待的,并发请求多台 database server情况下，客户端等待的时间基本上面是性能最差的那台database server＋amoeba内部解析协议时间。

中文文档地址： http://amoeba.sourceforge.net/amoeba.pdf
amoeba 未来发展方向： http://amoeba.sourceforge.net/amoeba-big-picture.pdf

文件下载： http://www.sourceforge.net/projects/amoeba
amoeba 开发者博客: http://amoeba.meidusa.com

mysql数据库备份一般使用命令mysqldump，这个命令会在屏幕打印指定数据库、数据表的创建的SQL语句和数据表中数据的插入SQL语句。该命令导出的SQL语句在不同数据库之间是可移植的。

mysqldump还可以同时导出包含sql语句的文件和以特定符号分割的数据文件

下面介绍mysqldump的用法：

mysqldump的用法有三种：

mysqldump [options] database_name [table1 table2 ...]

备份特定数据库，可以指定特定表，以空格分隔

mysqldump [options] --database database1 database2

备份特定数据库

mysqldump [options] --all-database / mysqldump [options] -A

备份所有数据库

mysqldump还有很多选项，下面根据选项的使用频率依次介绍

--user=user_name / -u user_name

连接数据库的用户，-u后面的空格可有可无

--password[=password] / -p[password]

注意-p后面跟密码时，中间不能间隔空格号，表示连接数据库用户对应的密码

--host=host_name / -h host_name

注意-h后面一定要有空格，数据库所在服务器的ip地址或者域名

--port=port_num / -P port_num

服务器上数据库通讯使用的端口号，-P后的空格可有可无

--result-file=file / -r file

指定输出的信息到文件，而终端不输出文字

使用该选项要好于终端的输出重定向，因为重定向可能会发生字符编码的问题

=====================================================================================

--tab=path / -T path

产生tab分割的数据文件。对于每个转储的表，mysqldump创建一个包含创建表的CREATE TABLE语句的tbl_name.sql文件，和一个包含其数据的tbl_name.txt文件。选项值定义写入文件的目录。默认情况，.txt数据文件的格式是在列值和每行后面的新行之间使用tab字符。可以使用--fields-xxx和--行--xxx选项明显指定格式。

需要注意的是：该选项其实是间接调用了两个命令，第一个命令类似SHOW CREATE TABLE，第二个产生数据文件的命令等同于SELECT … INTO OUTFILE '文件路径'，所以和SELECT … INTO OUTFILE的特点相同，产生的数据文件只能存到服务器中，而不能存到客户机，所以对指定的目录路径path是针对服务器操作系统的，并且对目录路径path要有读写的用户权限。如果想把类似的数据格式化导出文件存到客户机，可以参考$ >mysql -e "SELECT …  FROM … WHERE … " > file_path

--fields-terminated-by=

该选项连同-T选项一起使用，规定了数据域以什么结束，参数为字符串，默认为\t

--fields-enclosed-by=

该选项连同-T选项一起使用，规定了数据域用什么符号扩起来，默认为空，一般可以是双引号、括号等

--fields-optionally-enclosed-by=

该选项连同-T选项一起使用，规定了数据域可以用什么符号括起来，因为为只有部分数据用这些符号括起来

--fields-escaped-by=

该选项连同-T选项一起使用，规定了转义字符，参数为字符，默认为\

--lines-terminated-by=

该选项连同-T选项一起使用，规定了数据行以什么结束，参数为字符串，windows默认为\r\n

=====================================================================================

--add-drop-database

在每个CREATE DATABASE语句前添加DROP DATABASE语句

--compatible=name

产生与其它数据库系统或旧的MySQL服务器更兼容的输出。值可以为ansi（标准SQL）、mysql323、mysql40、postgresql、oracle、mssql、db2、maxdb、no_key_options、no_table_options或者no_field_options。同时使用几个选项，要用逗号将它们隔开

No_key_options不输出mysql专用索引选项

No_table_options不输出mysql专用表选项，如ENGINE=MyISAM

No_field_options不输出mysql专用列选项

--compact

产生少量输出，该选项相当于--comments=0、--skip-add-drop-table、--no-set-name、--skip-disable-key和--skip-add-locking一起使用

--comments[={0|1}]

如果设置为 0，禁止转储文件中的其它信息，例如程序版本、服务器版本和主机。--skip-comments与--comments=0的结果相同， 默认值为1，即包括额外信息

--compress / -C

如果客户端和服务器都支持压缩，则压缩双方传送的所有信息

--default-character-set=charset

使用charsetas默认字符集，如果没有指定，mysqldump使用utf8

--delayed-insert

使用INSERT DELAYED语句插入行

--default-character-set=charset

使用charset作为默认字符集

--allow-keywords

允许创建关键字列名，应在每个列名前面加上表名前缀

====================================================================================

--opt

该选项应该同时代表优化(optimize)和选项(option)意思，默认开启，相当于同时开启以下多个选项，省得用户每次都键入选项：--add-drop-table --add-locking --create-option --disable-keys --extended-insert --lock-tables --quick --set-charset。它可以给出很快的转储操作并产生一个可以很快装入MySQL服务器的转储文件。可以用--skip-opt禁用。要想只禁用确信用-opt启用的选项，使用--skip形式；例如，--skip-add-drop-tables或--skip-quick

该选项比较重要，但是由于默认开启，所以不常用

--add-drop-table

在每个CREATE TABLE语句前添加DROP TABLE语句

--add-locking

用LOCK TABLES和UNLOCK TABLES语句引用每个表转储，重载转储文件时插入得更快

--create-option

在CREATE TABLE语句中包括所有MySQL表选项

--disable-keys / -K

对于每个表，用ALTER TABLE tbl_name DISABLE KEYS;和ALTER TABLE tbl_name ENABLE KEYS;语句引用INSERT语句。因为在插入所有行后创建索引，所以这样可以更快地装载转储文件，该选项只适合MyISAM表。

--extended-insert / -e

默认开启，使用包括几个VALUES的多行INSERT语法。这样使转储文件更小，重载文件时可以加速插入

--lock-tables，-l

开始转储前锁定所有表。用READ LOCAL锁定表以允许并行插入MyISAM表。对于事务表例如InnoDB和BDB，--single-transaction是一个更好的选项，因为它不根本需要锁定表。

--quick，-q

该选项用于转储大的表。它强制mysqldump从服务器一次一行地检索表中的行而不是检索所有行并在输出前将它缓存到内存中

--set-charset

将SET NAMES default_character_set加到输出中。该选项默认启用。要想禁用SET NAMES语句，使用--skip-set-charset

=====================================================================================

--complete-insert / -c

使用包括列名的完整的INSERT语句

--single-transaction

该选项从服务器转储数据之前发出一个BEGIN SQL语句。它只适用于事务表，例如InnoDB和BDB，因为然后它将在发出BEGIN而没有阻塞任何应用程序时转储一致的数据库状态。

当使用该选项时，应记住只有InnoDB表能以一致的状态被转储。例如，使用该选项时任何转储的MyISAM或HEAP表仍然可以更改状态。

--single-transaction选项和--lock-tables选项是互斥的，因为LOCK TABLES会使任何挂起的事务隐含提交。要想转储大的表，应结合--quick使用该选项

--lock-all-tables，-x

所有数据库中的所有表加锁。在整体转储过程中通过全局读锁定来实现。该选项自动关闭--single-transaction和--lock-tables

--hex-blob

使用十六进制符号转储二进制字符串列(例如，'abc' 变为0x616263)。影响到的列有BINARY、VARBINARY、BLOB

命令行下具体用法如下： 

mysqldump -u用戶名 -p密码 -d 数据库名 表名 > 脚本名;

导出整个数据库结构和数据
mysqldump -h localhost -uroot -p123456 database > dump.sql

导出单个数据表结构和数据
mysqldump -h localhost -uroot -p123456  database table > dump.sql