|
ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: - <?php
$ ~8 T9 ^2 a" S* {* H4 i - return array(( F& Q" J2 D" ]
- 'DB_DEPLOY_TYPE' => 1, // 设置分布式数据库支持
& V1 y$ j; P& g0 ]$ | - 'DB_RW_SEPARATE' => true, // 分布式数据库的读写是否分离
$ h7 ^' D( M0 ~, ^, ?( O - 'DB_TYPE' => 'mysql', // 数据库类型3 s0 L$ Q0 p. r( c7 P: t
- 'DB_HOST' => '192.168.33.110,192.168.33.111,192.168.33.112', // 数据库服务器地址% K$ Y# y+ y+ N. b1 `
- 'DB_NAME' => 'kp_account', // 数据库名称
" R) O1 m+ Y0 G - 'DB_USER' => 'root,root,root', // 数据库用户名) O0 o* l+ k: r& b+ v3 L
- 'DB_PWD' => '', // 数据库密码
9 R) f/ o- ~* o( g - 'DB_PORT' => '3306,3306,3306', // 数据库端口
3 h2 d: k# m+ D6 J - 'DB_PREFIX' => 'acc_', // 数据表前缀
# l* c' e, g3 v/ Q8 z/ c8 X - 'DB_MASTER_NUM' => 2
2 Z' w3 v* a1 W: z6 o! F' p - );
复制代码 ; E. ?0 `7 Z) V2 ~
在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 还可以设置DB_SLAVE_NO 指定某个服务器进行读操作。 小结: TP框架内置的分布式数据库处理,在默认的情况下,如果没有设置DB_MASTER_NUM参数,就会是默认第一个数据库作为写操作,其他是读数据库;如果设置了DB_MASTER_NUM参数,例如上面的数据库配置信息里面把DB_MASTER_NUM参数设置为2,在没有并发的情况下,写操作一直会是192.168.33.111这个数据库;有不对的地方还望多多指教! ----------------------------------------------------------------------------------------------------------------------------------------------------[color=rgba(0, 0, 0, 0.87)]ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 [color=rgba(0, 0, 0, 0.87)]配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下:
7 q' `( Y2 t6 s, |- //分布式数据库配置定义
" ~+ M( y$ Z- U# ~. ~ - 'DB_DEPLOY_TYPE'=> 1, // 设置分布式数据库支持& O$ |* ?, \9 f: g
- 'DB_TYPE' => 'mysql', //分布式数据库类型必须相同
& L* w' G3 b9 p) z. s - 'DB_HOST' => '192.168.0.1,192.168.0.2',/ u, \1 A# f5 Y g+ w+ z. b' y J
- 'DB_NAME' => 'thinkphp', //如果相同可以不用定义多个& p9 e. N3 m2 |; f8 d1 f9 F# J( B& F
- 'DB_USER' => 'user1,user2',9 N F, c/ H5 e' \5 f( f
- 'DB_PWD' => 'pwd1,pwd2',1 |) |# i( `7 b
- 'DB_PORT' => '3306',/ G# z7 @( L6 m4 u2 E- C0 M6 x3 ]
- 'DB_PREFIX' => 'think_',
复制代码 [color=rgba(0, 0, 0, 0.87)]连接的数据库个数取决于DB_HOST定义的数量,所以即使是两个相同的IP也需要重复定义,但是其他的参数如果存在相同的可以不用重复定义,例如:; M5 ?5 s# J( ]
0 C* t" P+ X8 S- D; ^[color=rgba(0, 0, 0, 0.87)]和
: U" E# V4 o9 I) {[color=rgba(0, 0, 0, 0.87)]等效。
. @) }4 z( m/ O7 W' W- 'DB_USER'=>'user1', & _! a( T/ T l6 O
- 'DB_PWD'=>'pwd1',
复制代码 [color=rgba(0, 0, 0, 0.87)]和/ f$ @+ A6 v1 O; |& [3 g5 J. S
'DB_USER'=>'user1,user1', 'DB_PWD'=>'pwd1,pwd1',
1 G9 U" T2 {9 f6 J3 l[color=rgba(0, 0, 0, 0.87)]等效。 [color=rgba(0, 0, 0, 0.87)]还可以设置分布式数据库的读写是否分离,默认的情况下读写不分离,也就是每台服务器都可以进行读写操作,对于主从式数据库而言,需要设置读写分离,通过下面的设置就可以: [color=rgba(0, 0, 0, 0.87)]在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 [color=rgba(0, 0, 0, 0.87)]还可以设置DB_SLAVE_NO 指定某个服务器进行读操作 [color=rgba(0, 0, 0, 0.87)]3.2.3版本开始,如果从数据库连接错误,会自动切换到主数据库连接。 % I6 F: l; J/ @8 H0 D
[color=rgba(0, 0, 0, 0.87)]调用模型的CURD操作的话,系统会自动判断当前执行的方法的读操作还是写操作,如果你用的是原生SQL,那么需要注意系统的默认规则: [color=rgba(0, 0, 0, 0.87)]写操作必须用模型的execute方法,读操作必须用模型的query方法[color=rgba(0, 0, 0, 0.87)],否则会发生主从读写错乱的情况。
4 P# ]/ @/ V6 v; l, ~
3 P, R2 o0 I" c; x; o注意:主从数据库的数据同步工作不在框架实现,需要数据库考虑自身的同步或者复制机制。/ x7 m* @: x- @
----------------------------------------------------------------------------------------------------------------------------------------------------
- u) o5 J0 R1 u" F1.分布式数据库是什么: tp的分布式数据库主要是通过该配置: 'DB_DEPLOY_TYPE' => 1,// 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器) 2.主从服务器的读写分离是什么: 主从数据库即为一个主数据库会有对应n个从数据库,而从数据库只能有一个对应的从数据库。主从数据库中写的操作需要使用主数据库,而读操作使用从数据库。主数据库与从数据库始终保持数据一致性。其中保持数据库一致的原理即为当主数据库数据发生变化时,会将操作写入到主数据库日志中,而从数据库会不停的读取主数据库的日志保存到自己的日志系统中,然后进行执行,从而保持了主从数据库一致。
+ q% L5 E5 @7 y 3.详解 - C1 x3 t" F1 a/ H- C$ x
一、单一数据库的连接 在使用的时候,单一数据库的连接配置非常简单。我们只需要在配置文件中配置一下的信息即可。 - 'DB_TYPE' => 'mysql', 8 U! m; Y1 P+ d( P
- 'DB_HOST' => '192.168.5.102', + C, Q. m9 d6 r4 `
- 'DB_NAME' => 'databasename',
% Y+ v9 w+ Z) p& \ - 'DB_USER' => 'user', " w, o% j. _; c
- 'DB_PWD' => 'password', 5 U5 ]# A% u# P4 B9 U& Q
- 'DB_PORT' => '3306', ; t8 P1 \8 L7 ^! ~& P: i& }2 q
- 'DB_PREFIX' => 'onmpw_',
复制代码设置完成以后就可以使用了。默认情况下就是单一的数据库连接。 二、分布式数据库的连接 单一数据库的连接很简单,我们着重分析一下分布式数据库的连接。 - 'DB_TYPE' => 'mysql',
0 U5 _7 Q$ _/ u# ^5 F9 q0 V; e# u+ j - 'DB_HOST' => '192.168.5.191,192.168.5.88,192.168.5.103', ; d0 w5 y6 ]) x2 k6 s
- 'DB_NAME' => 'test,test,test',
* b2 ], @3 q- |& H* T# W# Q$ G - 'DB_USER' => 'masteruser,slaveuser,slaveuser', / k8 k ]) x O
- 'DB_PWD' => 'masterpass,slavepass,slavepass',
& A7 r. O: H! u9 S+ [ - 'DB_PORT' => '3306', + N2 x, ]0 x% N4 Q( l6 I# H
- 'DB_PREFIX' => '', 6 j( n, J: v5 P+ F
- 'DB_DEPLOY_TYPE' => 1, // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器)
! v" ]" q I( V, ?9 b3 A - 'DB_RW_SEPARATE' => true, // 数据库读写是否分离 主从式有效 2 H! O" ?- V- v3 ^ e' D" m$ A
- 'DB_MASTER_NUM' => 1, // 读写分离后 主服务器数量
( z3 M! s$ I$ v* \. o - 'DB_SLAVE_NO' => '', // 指定从服务器序号
复制代码按照以上配置就可以连接分布式数据库了。 下面我们看下面几个选项 ‘DB_HOST’ 分布式数据库,有几台服务器就要填写几个服务器地址,每个地址之间用逗号隔开。如果是主从式分布的话,前面的地址要是主数据库的地址。 对于下面的用户名和密码还有监听端口之类的,当然是有几个就写几个。如果各个数据库的用户名和密码都一样的话,可以只写一个。 对于这些选项的解析的代码如下 - $_config['username'] = explode(',',$this->config['username']); ) O3 |1 }! \/ R0 a$ v/ U+ l
- $_config['password'] = explode(',',$this->config['password']); * o: O1 G* s2 D3 K" l2 E9 V* A
- $_config['hostname'] = explode(',',$this->config['hostname']);
. e: }; l$ b, v! ~ - $_config['hostport'] = explode(',',$this->config['hostport']);
$ w2 }6 e6 A( |( y - $_config['database'] = explode(',',$this->config['database']); + h7 ?- J( q, Q
- $_config['dsn'] = explode(',',$this->config['dsn']);
- A& K: Y: _1 e, P2 H# n - $_config['charset'] = explode(',',$this->config['charset']);
复制代码
: f9 g% P5 _5 A4 r/ q k‘DB_DEPLOY_TYPE’=>1 1 表示是分布式, 0 表示的是集中式(也就是单一服务器)。 该选项的实现是在类 Think\Db\Dirver中 - protected function initConnect($master=true) {
; f# Q; \" L1 D1 l- P' X) l$ k5 s - if(!empty($this->config['deploy']))
8 [0 C% Q* q* ]6 [5 J - // 采用分布式数据库
/ D0 J f4 b1 ~0 ^% `. y - $this->_linkID = $this->multiConnect($master); r) F" d: x; i- Z
- else 2 ~( d3 v+ _8 j* l
- // 默认单数据库
. J, }9 V4 r# D( n5 b E - if ( !$this->_linkID ) $this->_linkID = $this->connect();
: v( L0 s( M3 ]1 x! C - }
复制代码
/ e( W/ I) R( K$this->config[‘deploy’]表示的就是’DB_DEPLOY_TYPE’这个配置选项,上面的配置在使用之前都已经经过解析了,配置项都在$this->config数组中。至于是如何解析配置文件的,这里我们不做介绍,感兴趣的可以参考Think\Db类。 $this->multiConnect()函数就是用来进行分布式连接的,如果’DB_DEPLOY_TYPE’选项设置为1,该函数就会执行。否则直接执行$this->connect()函数。 ‘DB_RW_SEPARATE’=>true true 表示读写分离;false表示读写不分离。 这里需要注意的是,读写分离是以主从式数据库系统为前提的。该选项设置为true的时候主数据库写,从数据库读。 - if($this->config['rw_separate']){ + u, [% s( w5 u7 B Y) u
- // 主从式采用读写分离
/ s( y e* ` K8 T `! p) | - if($master)
0 U% ~+ i% I9 i* q3 K - // 主服务器写入
2 M( ^5 f$ G( ?: V% l) I1 O* Z - $r = $m; 8 R3 k! ^% X7 V) O* C+ p+ }
- else{
+ v) O- c7 G7 q& J0 e' f$ u - if(is_numeric($this->config['slave_no'])) {// 指定服务器读 " p# i9 @* Z/ f" p( j) p+ Y
- $r = $this->config['slave_no'];
% r0 S4 C& ~3 g, t5 {1 ^ - }else{ 0 H9 U$ A% R- l6 Q( e
- // 读操作连接从服务器 - W- |. s2 |8 A
- $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 j' f& `$ Y; i2 _+ E7 H: E5 e
- }
4 y& q& Y6 C. n: K - }
0 g2 `) D* D( D% n$ M - }else{ % W# B2 S0 R) G9 V* R- _& F2 M/ F
- // 读写操作不区分服务器 % b" B5 O2 l4 q8 p" c5 @
- $r = floor(mt_rand(0,count($_config['hostname'])-1)); // 每次随机连接的数据库 - @6 {% I& }; G+ `
- }
复制代码
+ v) a/ _4 G0 s) O) u% T6 p# u& z% j$this->config[‘rw_separate’] 为true的时候采用读写分离,为false的时候读写不分离。读写分离为什么必须是主从式的呢?因为从服务器不能写只能读,如果向从服务器写入数据的话,数据是没法同步的。这样就会造成数据不一致的情况。所以说,如果我们的系统是主从式的话,我们必须采用读写分离。也就是说DB_RW_SEPARATE选项必须配置为true。 'DB_MASTER_NUM'=>1 该选项后面的数字表示读写分离后,主服务器的数量。因此该选项也是用于主从式数据库系统。 下面的代码是选择主服务器。 $m = floor(mt_rand(0,$this->config['master_num']-1)); 主从式数据库读取的时候选择从服务器读的核心代码 $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 其中$this->config[‘master_num’]表示主服务器的数量。 'DB_SLAVE_NO'=> '' 指定从服务器的序号,用于读取数据。如果不设置,则根据主服务器的数量计算书从服务器的数量,然后从中随机选取一台进行读取。 if(is_numeric($this->config['slave_no'])) {// 指定服务器读
8 V5 |. e y+ Y* y$ N* e $r = $this->config['slave_no'];- B+ w3 _# @ x4 x; J
}else{6 P/ y+ E4 }/ V# v8 O
// 读操作连接从服务器1 Q" f* C. U1 Y: _9 q; Q
$r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库! N% @. G; ]+ n R0 s, U1 @: ?0 l
} 以上是对每个选项的作用的实现代码进行了一个简单的说明。 下面我们来看其连接的部分 - if($m != $r ){ , c* v/ `3 s1 b1 m8 J
- $db_master = array( " P0 W) i x" V1 T
- 'username' => isset($_config['username'][$m])?$_config['username'][$m]:$_config['username'][0],
% J/ I: I7 N7 k, }" T, C6 W1 s - 'password' => isset($_config['password'][$m])?$_config['password'][$m]:$_config['password'][0],
: n2 @) m3 ^3 z6 r - 'hostname' => isset($_config['hostname'][$m])?$_config['hostname'][$m]:$_config['hostname'][0],
4 p( B$ G6 u5 C; {; }: c; S - 'hostport' => isset($_config['hostport'][$m])?$_config['hostport'][$m]:$_config['hostport'][0],
, n. { e4 ]1 |8 i- |6 P - 'database' => isset($_config['database'][$m])?$_config['database'][$m]:$_config['database'][0], ' ]# F; J, N7 L/ ^' v
- 'dsn' => isset($_config['dsn'][$m])?$_config['dsn'][$m]:$_config['dsn'][0],
) y! F8 |9 c- } - 'charset' => isset($_config['charset'][$m])?$_config['charset'][$m]:$_config['charset'][0], 2 R6 r% r) D$ O
- ); , j) J! D& v o; @! B
- } 8 s4 o$ U$ r, ~+ c) r. a9 y- J$ W
- $db_config = array( + Z$ U' o% ~( S6 L& E7 R
- 'username' => isset($_config['username'][$r])?$_config['username'][$r]:$_config['username'][0],
) s. _. }, P* M, b. z& \ - 'password' => isset($_config['password'][$r])?$_config['password'][$r]:$_config['password'][0],
! F2 u! Q- F$ _6 e/ z0 |! U- N5 B2 u: ~ - 'hostname' => isset($_config['hostname'][$r])?$_config['hostname'][$r]:$_config['hostname'][0],
$ e. j9 Y& ?8 P% s. X6 F& k5 x - 'hostport' => isset($_config['hostport'][$r])?$_config['hostport'][$r]:$_config['hostport'][0],
+ ~# I$ B& o6 e5 }: e - 'database' => isset($_config['database'][$r])?$_config['database'][$r]:$_config['database'][0],
$ n/ B1 S4 A" D - 'dsn' => isset($_config['dsn'][$r])?$_config['dsn'][$r]:$_config['dsn'][0],
# H! [- _! f" o - 'charset' => isset($_config['charset'][$r])?$_config['charset'][$r]:$_config['charset'][0],
A, H5 l0 c! S/ x/ | - );
% ^! T- K4 [+ _# ?: m - return $this->connect($db_config,$r,$r == $m ? false : $db_master);
复制代码 ' M- G1 f' ]9 a; j6 K0 j( i
看到这,我觉得大家应该对上面在介绍各个配置选项的代码的时候其中的$r和$m是什么作用了。 现在我们来看 $r == $m ? false : $db_master ,如果数据库读写不分离的情况下,读写是一台服务器的话 传给connect函数的值为false。或者是如果是主从分离的写的情况下传给connect的值也为false。通过上面代码我们看到,如果$r和$m不相等的情况下,会设置$db_master。其实也就是相当于一台备用的,如果选择的$r服务器出现故障不能连接,将会去连接$db_master。 connect()函数的第三个参数其实是表示当$db_config这台服务器连接故障时是否选择备用的连接。false表示不重连,其它值即表示重新连接。 其核心代码如下 - try{ # i; M7 X7 l+ ]) A3 C9 u
- if(empty($config['dsn'])) { 1 U n7 |. n* X6 w- f, F& R
- $config['dsn'] = $this->parseDsn($config); % t" Z5 w% e! v
- } r( h* Y# T- y0 }+ c1 d
- if(version_compare(PHP_VERSION,'5.3.6','<=')){ ( B3 `- K8 `& W+ x" O% l, V
- // 禁用模拟预处理语句 , K+ w- X c }* b2 E
- $this->options[PDO::ATTR_EMULATE_PREPARES] = false; . v {4 x \6 `4 d ~" X
- } % i! G% r: N' W4 @7 s7 m
- $this->linkID[$linkNum] = new PDO( $config['dsn'], $config['username'], $config['password'],$this->options); . ^! W% F$ ]& @& V
- }catch (\PDOException $e) { $ d7 W- I9 M. D' z* \
- if($autoConnection){ //$autoConnection不为false,而是默认的主服务器
$ H8 {+ p# P; R - trace($e->getMessage(),'','ERR');
7 \# j1 x" j. Y. q3 s& I0 l - return $this->connect($autoConnection,$linkNum); //出现异常,使用递归函数重新连接
7 q" Y1 T- R7 _4 Z7 W# l* b - }elseif($config['debug']){
, B8 B1 e1 V" N( T O P - E($e->getMessage());
% @! ]% K+ A h% X( U) k3 r# @ - } 5 x* V, k8 L$ X( g3 ^1 l
- }
复制代码这种方式,对于主从式来说,$r和$m肯定不会相同。因此如果说在读取数据的时候,选择的那台从服务器出现故障的话,那主服务器即是备用的,最后会去主服务器读取。能保证数据读取的时效性。 4 P: S, v( C7 m0 ~
# I5 d, t) B. c( J* S
$ ]4 }/ [/ q7 C- n" V, ^, I! h |