|
ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: - <?php$ ?' A' N) Y: `; d
- return array(- q+ F( w6 [& o* W
- 'DB_DEPLOY_TYPE' => 1, // 设置分布式数据库支持. E0 f6 N2 N9 j1 v( t+ q6 b
- 'DB_RW_SEPARATE' => true, // 分布式数据库的读写是否分离2 W( Z+ M& o+ K; G/ w& ^4 ?
- 'DB_TYPE' => 'mysql', // 数据库类型% s) C8 }& a+ ?4 L6 M8 l
- 'DB_HOST' => '192.168.33.110,192.168.33.111,192.168.33.112', // 数据库服务器地址
/ s$ [ J# c7 @* v, \1 s - 'DB_NAME' => 'kp_account', // 数据库名称
C0 H+ V. ?- X - 'DB_USER' => 'root,root,root', // 数据库用户名
* t _/ F2 ?9 c1 R" B8 N1 y - 'DB_PWD' => '', // 数据库密码2 l- t/ S+ P0 X( C- W( G+ D6 Y# c
- 'DB_PORT' => '3306,3306,3306', // 数据库端口
1 K* Q) _+ B* F, \: t w$ C - 'DB_PREFIX' => 'acc_', // 数据表前缀
3 E L6 T- z9 X+ p4 b/ y - 'DB_MASTER_NUM' => 2; j3 v L0 \+ p" W5 N, a
- );
复制代码
( Q* j6 L. I# i* J P9 y9 O在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 还可以设置DB_SLAVE_NO 指定某个服务器进行读操作。 小结: TP框架内置的分布式数据库处理,在默认的情况下,如果没有设置DB_MASTER_NUM参数,就会是默认第一个数据库作为写操作,其他是读数据库;如果设置了DB_MASTER_NUM参数,例如上面的数据库配置信息里面把DB_MASTER_NUM参数设置为2,在没有并发的情况下,写操作一直会是192.168.33.111这个数据库;有不对的地方还望多多指教! ----------------------------------------------------------------------------------------------------------------------------------------------------[color=rgba(0, 0, 0, 0.87)]ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 [color=rgba(0, 0, 0, 0.87)]配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: : T( e' y5 o" I
- //分布式数据库配置定义8 S, e+ \5 r+ |7 Y& @; p& s
- 'DB_DEPLOY_TYPE'=> 1, // 设置分布式数据库支持! T* P% j9 m+ M# e
- 'DB_TYPE' => 'mysql', //分布式数据库类型必须相同
# V! s% Y" }7 g' i; y$ r! J7 [+ [ - 'DB_HOST' => '192.168.0.1,192.168.0.2',
! ~; N& d- O6 @) a5 q4 G - 'DB_NAME' => 'thinkphp', //如果相同可以不用定义多个$ j$ [, o, _. u+ B+ b6 j: O
- 'DB_USER' => 'user1,user2',: `' Q. b6 C. f! G5 x" E
- 'DB_PWD' => 'pwd1,pwd2',5 A- C0 p; S- P C! H" r8 q9 F: T6 K
- 'DB_PORT' => '3306',( L, ^" i- E) Y# l1 c
- 'DB_PREFIX' => 'think_',
复制代码 [color=rgba(0, 0, 0, 0.87)]连接的数据库个数取决于DB_HOST定义的数量,所以即使是两个相同的IP也需要重复定义,但是其他的参数如果存在相同的可以不用重复定义,例如:9 P( h- c! {, j
4 S5 Z$ H+ G" j2 j. C
[color=rgba(0, 0, 0, 0.87)]和* g, Z/ u( T( n* L X, X
[color=rgba(0, 0, 0, 0.87)]等效。
; W. `. V: S$ R$ }1 p& B& p4 e& @- 'DB_USER'=>'user1',
! U" p: @6 \* ]: n/ X1 ~. @ - 'DB_PWD'=>'pwd1',
复制代码 [color=rgba(0, 0, 0, 0.87)]和
8 J- e3 T& E! \; M% R- U" h9 Y'DB_USER'=>'user1,user1', 'DB_PWD'=>'pwd1,pwd1',
! N( l+ q! S: W; z/ ]/ [) F2 S- O[color=rgba(0, 0, 0, 0.87)]等效。 [color=rgba(0, 0, 0, 0.87)]还可以设置分布式数据库的读写是否分离,默认的情况下读写不分离,也就是每台服务器都可以进行读写操作,对于主从式数据库而言,需要设置读写分离,通过下面的设置就可以: [color=rgba(0, 0, 0, 0.87)]在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 [color=rgba(0, 0, 0, 0.87)]还可以设置DB_SLAVE_NO 指定某个服务器进行读操作 [color=rgba(0, 0, 0, 0.87)]3.2.3版本开始,如果从数据库连接错误,会自动切换到主数据库连接。 ! d( f9 c' E6 T' I$ g3 ~$ C
[color=rgba(0, 0, 0, 0.87)]调用模型的CURD操作的话,系统会自动判断当前执行的方法的读操作还是写操作,如果你用的是原生SQL,那么需要注意系统的默认规则: [color=rgba(0, 0, 0, 0.87)]写操作必须用模型的execute方法,读操作必须用模型的query方法[color=rgba(0, 0, 0, 0.87)],否则会发生主从读写错乱的情况。& [# l" Z& E' w C! `
- v/ H8 ?9 B, Z l1 \
注意:主从数据库的数据同步工作不在框架实现,需要数据库考虑自身的同步或者复制机制。
6 U/ O8 r* U: N' p l5 X1 H----------------------------------------------------------------------------------------------------------------------------------------------------: W2 ?! i/ A2 G" a- c3 {7 A
1.分布式数据库是什么: tp的分布式数据库主要是通过该配置: 'DB_DEPLOY_TYPE' => 1,// 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器) 2.主从服务器的读写分离是什么: 主从数据库即为一个主数据库会有对应n个从数据库,而从数据库只能有一个对应的从数据库。主从数据库中写的操作需要使用主数据库,而读操作使用从数据库。主数据库与从数据库始终保持数据一致性。其中保持数据库一致的原理即为当主数据库数据发生变化时,会将操作写入到主数据库日志中,而从数据库会不停的读取主数据库的日志保存到自己的日志系统中,然后进行执行,从而保持了主从数据库一致。* t" ]+ T/ E o4 E# O. C9 q
3.详解 ( C. b) i% |% d) }0 B
一、单一数据库的连接 在使用的时候,单一数据库的连接配置非常简单。我们只需要在配置文件中配置一下的信息即可。 - 'DB_TYPE' => 'mysql', ' s* O, z7 ]- m
- 'DB_HOST' => '192.168.5.102',
+ W9 }# F& y6 N7 T. T" }$ F - 'DB_NAME' => 'databasename', * e9 V% z6 Q7 n# A5 H) f
- 'DB_USER' => 'user',
$ _+ U2 Q Z9 [& A( d8 r - 'DB_PWD' => 'password',
% C4 X- W3 n. j, \# r d - 'DB_PORT' => '3306', / z2 h' X: e# n; m- z; p( ^' ~
- 'DB_PREFIX' => 'onmpw_',
复制代码设置完成以后就可以使用了。默认情况下就是单一的数据库连接。 二、分布式数据库的连接 单一数据库的连接很简单,我们着重分析一下分布式数据库的连接。 - 'DB_TYPE' => 'mysql',
6 x; r5 n. j) z' V0 L - 'DB_HOST' => '192.168.5.191,192.168.5.88,192.168.5.103', 6 a8 I0 Z6 E$ O- a* i5 q% q$ p
- 'DB_NAME' => 'test,test,test',
7 Y. {2 K; Y: R. N - 'DB_USER' => 'masteruser,slaveuser,slaveuser',
$ J {' b3 u, b; j - 'DB_PWD' => 'masterpass,slavepass,slavepass', : B% u7 J8 V& @# z9 O; H
- 'DB_PORT' => '3306',
' ?6 |& _( C' k( w, H, N* G; I* w - 'DB_PREFIX' => '',
5 \: X q% U# p# B - 'DB_DEPLOY_TYPE' => 1, // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器)
7 C: M' Z+ J# Z. T1 y+ s0 } - 'DB_RW_SEPARATE' => true, // 数据库读写是否分离 主从式有效 3 J' M/ R( A( x5 O' r
- 'DB_MASTER_NUM' => 1, // 读写分离后 主服务器数量 $ K& C# B4 m( p$ o1 B) L
- 'DB_SLAVE_NO' => '', // 指定从服务器序号
复制代码按照以上配置就可以连接分布式数据库了。 下面我们看下面几个选项 ‘DB_HOST’ 分布式数据库,有几台服务器就要填写几个服务器地址,每个地址之间用逗号隔开。如果是主从式分布的话,前面的地址要是主数据库的地址。 对于下面的用户名和密码还有监听端口之类的,当然是有几个就写几个。如果各个数据库的用户名和密码都一样的话,可以只写一个。 对于这些选项的解析的代码如下 - $_config['username'] = explode(',',$this->config['username']);
9 J* k1 x) s( [- y" X% C - $_config['password'] = explode(',',$this->config['password']); 9 P' ?( v5 p7 [9 y
- $_config['hostname'] = explode(',',$this->config['hostname']);
& N( E" T7 l' H4 K9 R - $_config['hostport'] = explode(',',$this->config['hostport']);
4 G: T- k2 g* o - $_config['database'] = explode(',',$this->config['database']);
; g" y* V8 {1 F- F8 j - $_config['dsn'] = explode(',',$this->config['dsn']);
4 p) ?9 t7 ]) V: c$ L - $_config['charset'] = explode(',',$this->config['charset']);
复制代码 & m" k8 x% a! K$ j/ O, W1 Z
‘DB_DEPLOY_TYPE’=>1 1 表示是分布式, 0 表示的是集中式(也就是单一服务器)。 该选项的实现是在类 Think\Db\Dirver中 - protected function initConnect($master=true) {
/ {+ A5 L7 V2 y' C - if(!empty($this->config['deploy'])) 3 `* J: u8 l8 d& P' a( M1 F7 q! {2 G
- // 采用分布式数据库 ) n2 y' ^# ]& Q: g; i" Y
- $this->_linkID = $this->multiConnect($master); . G" V' ?- Q5 | L! {/ }+ r
- else
/ P3 c5 i0 K7 e1 F - // 默认单数据库
5 \1 N% y% \+ J+ _% p) Y8 ` - if ( !$this->_linkID ) $this->_linkID = $this->connect();
' w& ?/ M5 B* X2 R - }
复制代码
$ y2 q8 M2 K; \( @' g$this->config[‘deploy’]表示的就是’DB_DEPLOY_TYPE’这个配置选项,上面的配置在使用之前都已经经过解析了,配置项都在$this->config数组中。至于是如何解析配置文件的,这里我们不做介绍,感兴趣的可以参考Think\Db类。 $this->multiConnect()函数就是用来进行分布式连接的,如果’DB_DEPLOY_TYPE’选项设置为1,该函数就会执行。否则直接执行$this->connect()函数。 ‘DB_RW_SEPARATE’=>true true 表示读写分离;false表示读写不分离。 这里需要注意的是,读写分离是以主从式数据库系统为前提的。该选项设置为true的时候主数据库写,从数据库读。 - if($this->config['rw_separate']){
% D. O) t2 f4 T+ @ - // 主从式采用读写分离 ) d$ J; Y: [" c4 W1 \" `
- if($master) # _# E" ~* `, D- B7 @
- // 主服务器写入 6 m! p" [; I/ a# M9 G
- $r = $m; * g3 j8 }% i" s
- else{
/ q$ T+ Y; @" z, K" l% } - if(is_numeric($this->config['slave_no'])) {// 指定服务器读 ; c1 e4 o8 b, ^6 ^
- $r = $this->config['slave_no'];
" J# Y' p& e3 \: K+ C - }else{ 0 q& |" C6 u1 p) G6 F9 T
- // 读操作连接从服务器 & B% R2 |" c3 u2 ?- h$ m4 ]' `
- $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 ( a$ e7 ?: n; e7 b0 ^4 l0 ^
- } 0 ?, Z7 x: B# p: E- Y2 L- N1 a
- }
2 E$ u1 F$ ]3 w, y1 a - }else{ $ _2 p. `2 [# n" ]
- // 读写操作不区分服务器
1 T2 r8 L2 ~( d9 F. S, d4 E - $r = floor(mt_rand(0,count($_config['hostname'])-1)); // 每次随机连接的数据库 4 E( U, b* k4 A3 S
- }
复制代码 . d( m0 y; O; w1 O
$this->config[‘rw_separate’] 为true的时候采用读写分离,为false的时候读写不分离。读写分离为什么必须是主从式的呢?因为从服务器不能写只能读,如果向从服务器写入数据的话,数据是没法同步的。这样就会造成数据不一致的情况。所以说,如果我们的系统是主从式的话,我们必须采用读写分离。也就是说DB_RW_SEPARATE选项必须配置为true。 'DB_MASTER_NUM'=>1 该选项后面的数字表示读写分离后,主服务器的数量。因此该选项也是用于主从式数据库系统。 下面的代码是选择主服务器。 $m = floor(mt_rand(0,$this->config['master_num']-1)); 主从式数据库读取的时候选择从服务器读的核心代码 $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 其中$this->config[‘master_num’]表示主服务器的数量。 'DB_SLAVE_NO'=> '' 指定从服务器的序号,用于读取数据。如果不设置,则根据主服务器的数量计算书从服务器的数量,然后从中随机选取一台进行读取。 if(is_numeric($this->config['slave_no'])) {// 指定服务器读5 N% ^/ ] o) }' x2 [+ z% z2 V
$r = $this->config['slave_no'];
( v1 H3 U8 ]; V: a6 m7 Z h1 u}else{
! \( m* Y6 p% A" |) K+ | // 读操作连接从服务器& l5 l9 a H S3 Y/ h
$r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库- \8 b8 w6 E: Q; L% @
} 以上是对每个选项的作用的实现代码进行了一个简单的说明。 下面我们来看其连接的部分 - if($m != $r ){
, F6 d" \0 P0 M1 U6 D - $db_master = array(
. Z) @5 }( b/ M8 H - 'username' => isset($_config['username'][$m])?$_config['username'][$m]:$_config['username'][0],
6 r. C! \0 n" m* P" s+ n& d3 V7 W - 'password' => isset($_config['password'][$m])?$_config['password'][$m]:$_config['password'][0], ; d* d3 G3 D+ P% |0 o' X2 k( T
- 'hostname' => isset($_config['hostname'][$m])?$_config['hostname'][$m]:$_config['hostname'][0], $ P) ~. d/ H7 n
- 'hostport' => isset($_config['hostport'][$m])?$_config['hostport'][$m]:$_config['hostport'][0], * ^9 n8 z% v" r; Q$ m$ I8 K3 ]) I; G
- 'database' => isset($_config['database'][$m])?$_config['database'][$m]:$_config['database'][0],
6 J$ M& D# O8 O/ \4 Q d* M2 L - 'dsn' => isset($_config['dsn'][$m])?$_config['dsn'][$m]:$_config['dsn'][0],
4 b% `9 ~% a0 H6 U - 'charset' => isset($_config['charset'][$m])?$_config['charset'][$m]:$_config['charset'][0],
. {$ D+ W* C! Y6 c - );
( A" C/ D5 o- P - } 2 u! c O5 m! d1 |
- $db_config = array( & Y" d/ l6 D E" Y" }
- 'username' => isset($_config['username'][$r])?$_config['username'][$r]:$_config['username'][0], & j. d. Z7 c1 j$ j% d) X: \
- 'password' => isset($_config['password'][$r])?$_config['password'][$r]:$_config['password'][0],
/ `% d& n4 e: ^& q+ t - 'hostname' => isset($_config['hostname'][$r])?$_config['hostname'][$r]:$_config['hostname'][0],
. U$ U/ ^+ c( L* o7 V* a% \ - 'hostport' => isset($_config['hostport'][$r])?$_config['hostport'][$r]:$_config['hostport'][0],
0 o# ^' U& i) d. ] - 'database' => isset($_config['database'][$r])?$_config['database'][$r]:$_config['database'][0],
+ e$ w" r5 y3 K: M6 J - 'dsn' => isset($_config['dsn'][$r])?$_config['dsn'][$r]:$_config['dsn'][0],
# p/ F) ]& g) ]' H, J3 a& `/ b - 'charset' => isset($_config['charset'][$r])?$_config['charset'][$r]:$_config['charset'][0],
8 _3 X2 X! j: @! F - ); . S; X9 A7 I# Q% f5 A) x
- return $this->connect($db_config,$r,$r == $m ? false : $db_master);
复制代码 1 |% n. M n. m
看到这,我觉得大家应该对上面在介绍各个配置选项的代码的时候其中的$r和$m是什么作用了。 现在我们来看 $r == $m ? false : $db_master ,如果数据库读写不分离的情况下,读写是一台服务器的话 传给connect函数的值为false。或者是如果是主从分离的写的情况下传给connect的值也为false。通过上面代码我们看到,如果$r和$m不相等的情况下,会设置$db_master。其实也就是相当于一台备用的,如果选择的$r服务器出现故障不能连接,将会去连接$db_master。 connect()函数的第三个参数其实是表示当$db_config这台服务器连接故障时是否选择备用的连接。false表示不重连,其它值即表示重新连接。 其核心代码如下 - try{ p- ]' }) {6 D
- if(empty($config['dsn'])) {
6 _2 i* u) r4 m& R( v$ \6 ? - $config['dsn'] = $this->parseDsn($config); " E. _0 q1 T4 N0 F' @
- }
* R. ]9 Y d; H. I/ P5 J1 {, z/ L* g - if(version_compare(PHP_VERSION,'5.3.6','<=')){ 5 t( o7 S' A' S- `; d2 V5 ?/ F
- // 禁用模拟预处理语句
' d/ B' k5 h1 N# r, I - $this->options[PDO::ATTR_EMULATE_PREPARES] = false; 2 P; V0 n2 y. n# n1 ?
- }
. G9 ~$ V: X' U; e - $this->linkID[$linkNum] = new PDO( $config['dsn'], $config['username'], $config['password'],$this->options);
0 G$ }! S8 v2 l1 f, G - }catch (\PDOException $e) { ! v+ E1 E- J3 `! l8 }4 z
- if($autoConnection){ //$autoConnection不为false,而是默认的主服务器 4 J/ ^' V% l0 ^# }& ^/ z/ l- J
- trace($e->getMessage(),'','ERR');
% E7 Y& L E# F7 |8 F$ s - return $this->connect($autoConnection,$linkNum); //出现异常,使用递归函数重新连接
7 W1 }5 o8 ^8 e+ D2 s& P5 ^9 D - }elseif($config['debug']){ % C' k5 F* ^4 J/ g" X' h
- E($e->getMessage()); # G2 J; H1 R. T$ Y& Y) _9 a
- }
, |4 B! B; j! i% w, M' j9 } - }
复制代码这种方式,对于主从式来说,$r和$m肯定不会相同。因此如果说在读取数据的时候,选择的那台从服务器出现故障的话,那主服务器即是备用的,最后会去主服务器读取。能保证数据读取的时效性。 5 ]; T5 L& N% R% e& u! Y
2 V1 x: m: _; _: |1 H5 y7 v6 [4 b( i. k: b, n
|