|
ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: - <?php
! f+ H) v5 Q6 c; Q9 x - return array(
g" d9 F6 c+ v: i" | - 'DB_DEPLOY_TYPE' => 1, // 设置分布式数据库支持/ h9 U+ \8 o6 |9 ?' W" Q/ }0 i
- 'DB_RW_SEPARATE' => true, // 分布式数据库的读写是否分离$ R. @0 ?) d9 o% v+ }: X* x
- 'DB_TYPE' => 'mysql', // 数据库类型
4 I H, R& E' N$ |! Z - 'DB_HOST' => '192.168.33.110,192.168.33.111,192.168.33.112', // 数据库服务器地址5 D( ~! p! {) r e
- 'DB_NAME' => 'kp_account', // 数据库名称! M# [! X; [% q" V" o, ~
- 'DB_USER' => 'root,root,root', // 数据库用户名3 j+ a4 ]+ l# |1 N$ l/ n3 |
- 'DB_PWD' => '', // 数据库密码: a6 x( d' p& B: L
- 'DB_PORT' => '3306,3306,3306', // 数据库端口
) v; s5 J" [9 s S, n - 'DB_PREFIX' => 'acc_', // 数据表前缀
+ d5 [6 `$ Z* C+ P: g/ I - 'DB_MASTER_NUM' => 2( T3 n9 ~; G7 p" `8 B
- );
复制代码
+ y2 L" z1 P" a0 O/ x2 S7 d1 s在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 还可以设置DB_SLAVE_NO 指定某个服务器进行读操作。 小结: TP框架内置的分布式数据库处理,在默认的情况下,如果没有设置DB_MASTER_NUM参数,就会是默认第一个数据库作为写操作,其他是读数据库;如果设置了DB_MASTER_NUM参数,例如上面的数据库配置信息里面把DB_MASTER_NUM参数设置为2,在没有并发的情况下,写操作一直会是192.168.33.111这个数据库;有不对的地方还望多多指教! ----------------------------------------------------------------------------------------------------------------------------------------------------[color=rgba(0, 0, 0, 0.87)]ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 [color=rgba(0, 0, 0, 0.87)]配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: 7 s7 O4 f( m( b q1 P0 i' o" ^
- //分布式数据库配置定义+ T, t, C% A9 a. |) s8 ]
- 'DB_DEPLOY_TYPE'=> 1, // 设置分布式数据库支持+ d/ i1 t# l" B; J. \
- 'DB_TYPE' => 'mysql', //分布式数据库类型必须相同
4 u1 G4 j# d. m9 d" a - 'DB_HOST' => '192.168.0.1,192.168.0.2',
) z1 u- o8 f9 G9 m4 c - 'DB_NAME' => 'thinkphp', //如果相同可以不用定义多个
: I0 |, ^, z' I+ N9 s - 'DB_USER' => 'user1,user2',$ P: j6 u1 b* q0 |& V
- 'DB_PWD' => 'pwd1,pwd2',
' a9 a& v: b" W% w; m# `, ` Z - 'DB_PORT' => '3306',
7 v2 p$ G( i7 J' M& f - 'DB_PREFIX' => 'think_',
复制代码 [color=rgba(0, 0, 0, 0.87)]连接的数据库个数取决于DB_HOST定义的数量,所以即使是两个相同的IP也需要重复定义,但是其他的参数如果存在相同的可以不用重复定义,例如:3 n/ V) n$ ]( [3 B3 r4 A
, R) T3 ^( O+ H; G. E
[color=rgba(0, 0, 0, 0.87)]和/ F3 n5 `4 B2 [* M2 u; a- y& i
[color=rgba(0, 0, 0, 0.87)]等效。
( N& |3 L; a* ?( Q6 ]- 'DB_USER'=>'user1',
, F% r. e+ R# L' ]. P5 F - 'DB_PWD'=>'pwd1',
复制代码 [color=rgba(0, 0, 0, 0.87)]和
' v9 i& x/ G+ j'DB_USER'=>'user1,user1', 'DB_PWD'=>'pwd1,pwd1',4 x, H. I$ b* ? q3 b, I2 N% z
[color=rgba(0, 0, 0, 0.87)]等效。 [color=rgba(0, 0, 0, 0.87)]还可以设置分布式数据库的读写是否分离,默认的情况下读写不分离,也就是每台服务器都可以进行读写操作,对于主从式数据库而言,需要设置读写分离,通过下面的设置就可以: [color=rgba(0, 0, 0, 0.87)]在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 [color=rgba(0, 0, 0, 0.87)]还可以设置DB_SLAVE_NO 指定某个服务器进行读操作 [color=rgba(0, 0, 0, 0.87)]3.2.3版本开始,如果从数据库连接错误,会自动切换到主数据库连接。 + s% e2 J9 [2 Z$ \" {( @; T% y
[color=rgba(0, 0, 0, 0.87)]调用模型的CURD操作的话,系统会自动判断当前执行的方法的读操作还是写操作,如果你用的是原生SQL,那么需要注意系统的默认规则: [color=rgba(0, 0, 0, 0.87)]写操作必须用模型的execute方法,读操作必须用模型的query方法[color=rgba(0, 0, 0, 0.87)],否则会发生主从读写错乱的情况。
; z. }! C3 p3 M+ @5 t
/ o" Y: l7 c* z3 f1 |注意:主从数据库的数据同步工作不在框架实现,需要数据库考虑自身的同步或者复制机制。
: ?! K+ ]. s( F3 J0 e, i----------------------------------------------------------------------------------------------------------------------------------------------------9 ~7 m+ ?% p8 }) ^0 l7 n
1.分布式数据库是什么: tp的分布式数据库主要是通过该配置: 'DB_DEPLOY_TYPE' => 1,// 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器) 2.主从服务器的读写分离是什么: 主从数据库即为一个主数据库会有对应n个从数据库,而从数据库只能有一个对应的从数据库。主从数据库中写的操作需要使用主数据库,而读操作使用从数据库。主数据库与从数据库始终保持数据一致性。其中保持数据库一致的原理即为当主数据库数据发生变化时,会将操作写入到主数据库日志中,而从数据库会不停的读取主数据库的日志保存到自己的日志系统中,然后进行执行,从而保持了主从数据库一致。
& `$ l& Y$ r( ], N1 W 3.详解
" d# W6 |& q, ^; I6 K7 h一、单一数据库的连接 在使用的时候,单一数据库的连接配置非常简单。我们只需要在配置文件中配置一下的信息即可。 - 'DB_TYPE' => 'mysql', " k( u! t8 t: C/ ?0 H
- 'DB_HOST' => '192.168.5.102',
& N; z& S/ s: T. ~- ? - 'DB_NAME' => 'databasename',
2 \! J# Y0 G+ { [ - 'DB_USER' => 'user', 1 ~' |1 d" u0 u( T1 M! s( P* T
- 'DB_PWD' => 'password', ) b& h' D( \6 y. p$ a8 D3 Q' s
- 'DB_PORT' => '3306',
5 m3 T- y8 h, ~7 d; @ - 'DB_PREFIX' => 'onmpw_',
复制代码设置完成以后就可以使用了。默认情况下就是单一的数据库连接。 二、分布式数据库的连接 单一数据库的连接很简单,我们着重分析一下分布式数据库的连接。 - 'DB_TYPE' => 'mysql', + ~+ G$ Y% _9 K! q6 W( P
- 'DB_HOST' => '192.168.5.191,192.168.5.88,192.168.5.103', / B S: c' K% d0 i! P
- 'DB_NAME' => 'test,test,test',
0 ?! w1 q2 P4 i6 k2 q - 'DB_USER' => 'masteruser,slaveuser,slaveuser',
: f" n' O3 `; H4 E: \" m; p - 'DB_PWD' => 'masterpass,slavepass,slavepass', 9 w4 y: d& l) M' H+ [8 Y* h
- 'DB_PORT' => '3306', 4 n$ ]: a( n1 R8 m# a3 c) j4 I$ c4 T
- 'DB_PREFIX' => '', : s9 Q a2 v2 Y8 k9 C2 b) x
- 'DB_DEPLOY_TYPE' => 1, // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器)
" o. Q7 G' N! A0 L. ~& \ - 'DB_RW_SEPARATE' => true, // 数据库读写是否分离 主从式有效 ( @# s, W8 }. K8 ^/ `' p9 h& I
- 'DB_MASTER_NUM' => 1, // 读写分离后 主服务器数量
+ n- F8 M4 z6 e/ S" E! r! d - 'DB_SLAVE_NO' => '', // 指定从服务器序号
复制代码按照以上配置就可以连接分布式数据库了。 下面我们看下面几个选项 ‘DB_HOST’ 分布式数据库,有几台服务器就要填写几个服务器地址,每个地址之间用逗号隔开。如果是主从式分布的话,前面的地址要是主数据库的地址。 对于下面的用户名和密码还有监听端口之类的,当然是有几个就写几个。如果各个数据库的用户名和密码都一样的话,可以只写一个。 对于这些选项的解析的代码如下 - $_config['username'] = explode(',',$this->config['username']); 8 g$ o; G& p4 {. I/ L
- $_config['password'] = explode(',',$this->config['password']); ! J6 N& `# X% M A
- $_config['hostname'] = explode(',',$this->config['hostname']);
$ R) A/ q6 Y4 h! t3 h$ M - $_config['hostport'] = explode(',',$this->config['hostport']); " f, b+ w( B; @3 M: f6 |
- $_config['database'] = explode(',',$this->config['database']); : E- J& Z8 F1 H) f! f
- $_config['dsn'] = explode(',',$this->config['dsn']); ) y" w7 v0 ~$ j# h' T
- $_config['charset'] = explode(',',$this->config['charset']);
复制代码 5 Z% j) b* v! `( R% U# w: F4 v
‘DB_DEPLOY_TYPE’=>1 1 表示是分布式, 0 表示的是集中式(也就是单一服务器)。 该选项的实现是在类 Think\Db\Dirver中 - protected function initConnect($master=true) { / h1 l0 h( \" Q" E; w+ z* b
- if(!empty($this->config['deploy']))
4 K) d0 W/ z% J! h" |. u0 P - // 采用分布式数据库
9 S" U) ^; U$ n5 J2 i8 l6 `5 a8 `* m - $this->_linkID = $this->multiConnect($master);
: m6 R( W2 J/ U5 N7 J - else 2 \/ S; c9 O6 X- ]% G6 s
- // 默认单数据库
9 `! Y( I% z4 c* S - if ( !$this->_linkID ) $this->_linkID = $this->connect();
S# Z, ?4 C; W) V8 L) N& {; p - }
复制代码 / s( S: ~" {) T. O
$this->config[‘deploy’]表示的就是’DB_DEPLOY_TYPE’这个配置选项,上面的配置在使用之前都已经经过解析了,配置项都在$this->config数组中。至于是如何解析配置文件的,这里我们不做介绍,感兴趣的可以参考Think\Db类。 $this->multiConnect()函数就是用来进行分布式连接的,如果’DB_DEPLOY_TYPE’选项设置为1,该函数就会执行。否则直接执行$this->connect()函数。 ‘DB_RW_SEPARATE’=>true true 表示读写分离;false表示读写不分离。 这里需要注意的是,读写分离是以主从式数据库系统为前提的。该选项设置为true的时候主数据库写,从数据库读。 - if($this->config['rw_separate']){ : n7 {( M6 T4 i7 A* n
- // 主从式采用读写分离
5 A/ z/ L( L( j5 l2 h" ^( M - if($master)
! P5 b* `! s0 f2 I: ~( ~ - // 主服务器写入 + b- C: z+ @7 @5 K8 B8 ?0 g
- $r = $m;
: K! t7 k. l C* E - else{
8 L0 F1 D# {4 X: p( s2 x1 p @: r - if(is_numeric($this->config['slave_no'])) {// 指定服务器读
* ^+ G, [$ g m: V6 R/ q - $r = $this->config['slave_no']; 8 ]4 c% w |+ w. o) G+ s; p& n5 g
- }else{
' z6 }5 s( B j) s5 {, ^3 O3 z6 q1 v - // 读操作连接从服务器 $ B* r6 E% c; l, k+ K% m, V" {
- $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库
: Z2 j+ R# y9 |7 |3 O - }
& o3 f0 f' @5 I) v! F - }
" c7 `! y+ v& H8 \1 d& { - }else{ : R! {# _9 s/ E4 ]' w# o+ [9 \ m
- // 读写操作不区分服务器 ! [0 b* `* R0 ^
- $r = floor(mt_rand(0,count($_config['hostname'])-1)); // 每次随机连接的数据库 0 Q' t$ i- |$ e) n
- }
复制代码 5 \" ~* U4 k! w7 P( M$ N
$this->config[‘rw_separate’] 为true的时候采用读写分离,为false的时候读写不分离。读写分离为什么必须是主从式的呢?因为从服务器不能写只能读,如果向从服务器写入数据的话,数据是没法同步的。这样就会造成数据不一致的情况。所以说,如果我们的系统是主从式的话,我们必须采用读写分离。也就是说DB_RW_SEPARATE选项必须配置为true。 'DB_MASTER_NUM'=>1 该选项后面的数字表示读写分离后,主服务器的数量。因此该选项也是用于主从式数据库系统。 下面的代码是选择主服务器。 $m = floor(mt_rand(0,$this->config['master_num']-1)); 主从式数据库读取的时候选择从服务器读的核心代码 $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 其中$this->config[‘master_num’]表示主服务器的数量。 'DB_SLAVE_NO'=> '' 指定从服务器的序号,用于读取数据。如果不设置,则根据主服务器的数量计算书从服务器的数量,然后从中随机选取一台进行读取。 if(is_numeric($this->config['slave_no'])) {// 指定服务器读( b; A5 q9 }% B9 h: k5 u! a0 C, z/ u |
$r = $this->config['slave_no'];
+ J9 Q5 D9 ]- S% P I5 E}else{
$ D2 e$ v2 V' h // 读操作连接从服务器
$ p6 f) v" g. W% x $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库1 u* H, _! ^# s( q9 ]" C$ P
} 以上是对每个选项的作用的实现代码进行了一个简单的说明。 下面我们来看其连接的部分 - if($m != $r ){ " \0 H$ n: a: C# t5 e* |3 a
- $db_master = array( & V+ G6 R; D- a
- 'username' => isset($_config['username'][$m])?$_config['username'][$m]:$_config['username'][0], 8 n& b, b( ?1 i, t& \
- 'password' => isset($_config['password'][$m])?$_config['password'][$m]:$_config['password'][0], 5 ~9 }$ F& V. v- T/ f
- 'hostname' => isset($_config['hostname'][$m])?$_config['hostname'][$m]:$_config['hostname'][0],
1 x7 t- b+ f6 s) t9 I( j6 S) ] - 'hostport' => isset($_config['hostport'][$m])?$_config['hostport'][$m]:$_config['hostport'][0],
5 k6 o. B1 z8 |% m$ a - 'database' => isset($_config['database'][$m])?$_config['database'][$m]:$_config['database'][0],
, c7 B q& V+ S+ i1 Z - 'dsn' => isset($_config['dsn'][$m])?$_config['dsn'][$m]:$_config['dsn'][0],
9 t9 X. e( {! p3 ]2 `1 i. w - 'charset' => isset($_config['charset'][$m])?$_config['charset'][$m]:$_config['charset'][0], ( k+ d. c( J3 P) A: X+ O
- ); ' S! F* d, y- I/ H R
- }
: n4 H9 j, B* F - $db_config = array( & W1 J6 r$ _( k( h7 z+ S2 ^/ m' m
- 'username' => isset($_config['username'][$r])?$_config['username'][$r]:$_config['username'][0],
8 Z p3 ^- E0 P, B - 'password' => isset($_config['password'][$r])?$_config['password'][$r]:$_config['password'][0],
8 ]* k. a" p& d# Q" `! u - 'hostname' => isset($_config['hostname'][$r])?$_config['hostname'][$r]:$_config['hostname'][0], 5 f$ h9 X$ I2 W R- e* ?, ]
- 'hostport' => isset($_config['hostport'][$r])?$_config['hostport'][$r]:$_config['hostport'][0], L% U' {$ x, @6 z6 s
- 'database' => isset($_config['database'][$r])?$_config['database'][$r]:$_config['database'][0], 3 }% P3 X& H7 b. l. M W
- 'dsn' => isset($_config['dsn'][$r])?$_config['dsn'][$r]:$_config['dsn'][0], # G# [0 B$ ?/ k6 m2 f4 O- P1 p9 U
- 'charset' => isset($_config['charset'][$r])?$_config['charset'][$r]:$_config['charset'][0],
1 v1 `" u1 f" P) ]) D - ); / Z4 x* L" V1 f2 o9 |. e y& u
- return $this->connect($db_config,$r,$r == $m ? false : $db_master);
复制代码
) \1 R7 F# m0 p( a" Z: }7 s看到这,我觉得大家应该对上面在介绍各个配置选项的代码的时候其中的$r和$m是什么作用了。 现在我们来看 $r == $m ? false : $db_master ,如果数据库读写不分离的情况下,读写是一台服务器的话 传给connect函数的值为false。或者是如果是主从分离的写的情况下传给connect的值也为false。通过上面代码我们看到,如果$r和$m不相等的情况下,会设置$db_master。其实也就是相当于一台备用的,如果选择的$r服务器出现故障不能连接,将会去连接$db_master。 connect()函数的第三个参数其实是表示当$db_config这台服务器连接故障时是否选择备用的连接。false表示不重连,其它值即表示重新连接。 其核心代码如下 - try{ 0 h9 K: g( L. x* S7 Q; e H
- if(empty($config['dsn'])) {
1 ^8 L% S3 o/ D' j1 Q - $config['dsn'] = $this->parseDsn($config); - }, I/ a0 a" t2 v4 {
- }
. g6 `" E, [' U( t1 B9 R. V - if(version_compare(PHP_VERSION,'5.3.6','<=')){
7 ~. b1 c7 {( @6 F3 V9 ^1 S' \ - // 禁用模拟预处理语句 1 B6 Q9 x' Y1 S8 z# M
- $this->options[PDO::ATTR_EMULATE_PREPARES] = false; 7 _3 m, y7 j- D5 }* A3 n
- }
- d# P# b Q/ b# U - $this->linkID[$linkNum] = new PDO( $config['dsn'], $config['username'], $config['password'],$this->options);
# ?2 T$ n x7 ^ - }catch (\PDOException $e) {
' a3 w+ ]- \. @% j8 e% i! q* J1 l - if($autoConnection){ //$autoConnection不为false,而是默认的主服务器 / G/ O1 i3 s* N# [2 P
- trace($e->getMessage(),'','ERR');
; o Q6 _3 N. { {3 z - return $this->connect($autoConnection,$linkNum); //出现异常,使用递归函数重新连接
* G: _+ o' u2 ~- ^$ X - }elseif($config['debug']){ & W% c" e, g' C6 ^& `
- E($e->getMessage());
& r: I1 f$ I r2 J$ S4 h0 V0 q - } ( j0 g( r# q0 `* F/ K4 o
- }
复制代码这种方式,对于主从式来说,$r和$m肯定不会相同。因此如果说在读取数据的时候,选择的那台从服务器出现故障的话,那主服务器即是备用的,最后会去主服务器读取。能保证数据读取的时效性。 - m& m0 [$ k# n' v* U
4 N- i6 Q* g1 U/ x1 F: ~( H
Q+ X* }4 V* \& k# d: G |