|
ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下: - <?php
) x! a$ @" c' ~9 _8 J/ t' Q! T( V - return array(
* K/ {1 H$ V/ {+ l. P- v4 A" x3 O$ m - 'DB_DEPLOY_TYPE' => 1, // 设置分布式数据库支持! S: r; P2 N9 H L0 v3 W* w
- 'DB_RW_SEPARATE' => true, // 分布式数据库的读写是否分离/ B2 @$ [3 E B' p7 y
- 'DB_TYPE' => 'mysql', // 数据库类型; ^: _: @/ S7 u% U, R* [9 N2 H
- 'DB_HOST' => '192.168.33.110,192.168.33.111,192.168.33.112', // 数据库服务器地址
' T8 @* x# I8 i4 o' Q# a - 'DB_NAME' => 'kp_account', // 数据库名称
' Y+ O4 q6 m7 A& G# n; L; w: I - 'DB_USER' => 'root,root,root', // 数据库用户名
6 N& y& F- n2 F& J1 Z# F - 'DB_PWD' => '', // 数据库密码' S, c f- b/ r( G! V, N5 R4 w- c6 c
- 'DB_PORT' => '3306,3306,3306', // 数据库端口% R2 O; I5 {$ f
- 'DB_PREFIX' => 'acc_', // 数据表前缀4 I# n$ ^' J* j0 v( n6 l
- 'DB_MASTER_NUM' => 2! u6 X$ C: P- \! r" I
- );
复制代码
+ z: c- {6 U9 w D" ]在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 还可以设置DB_SLAVE_NO 指定某个服务器进行读操作。 小结: TP框架内置的分布式数据库处理,在默认的情况下,如果没有设置DB_MASTER_NUM参数,就会是默认第一个数据库作为写操作,其他是读数据库;如果设置了DB_MASTER_NUM参数,例如上面的数据库配置信息里面把DB_MASTER_NUM参数设置为2,在没有并发的情况下,写操作一直会是192.168.33.111这个数据库;有不对的地方还望多多指教! ----------------------------------------------------------------------------------------------------------------------------------------------------[color=rgba(0, 0, 0, 0.87)]ThinkPHP内置了分布式数据库的支持,包括主从式数据库的读写分离,但是分布式数据库必须是相同的数据库类型。 [color=rgba(0, 0, 0, 0.87)]配置DB_DEPLOY_TYPE 为1 可以采用分布式数据库支持。如果采用分布式数据库,定义数据库配置信息的方式如下:
, V( V, @$ `" G% X- //分布式数据库配置定义! h& K$ v/ i6 _( v5 ], U
- 'DB_DEPLOY_TYPE'=> 1, // 设置分布式数据库支持
: r! i, u8 R8 p3 H - 'DB_TYPE' => 'mysql', //分布式数据库类型必须相同
% o, I0 [0 [+ i! N9 [) c - 'DB_HOST' => '192.168.0.1,192.168.0.2',0 A' D2 i0 w3 z. o5 s& L- Z
- 'DB_NAME' => 'thinkphp', //如果相同可以不用定义多个, {, k( S4 `' h- U
- 'DB_USER' => 'user1,user2',
* j+ s& P% T: Y# L - 'DB_PWD' => 'pwd1,pwd2',, P* h. X8 K# |5 l" O* Q6 z: d
- 'DB_PORT' => '3306',5 d' _; N# ~: M+ \* q- Y4 B4 Y
- 'DB_PREFIX' => 'think_',
复制代码 [color=rgba(0, 0, 0, 0.87)]连接的数据库个数取决于DB_HOST定义的数量,所以即使是两个相同的IP也需要重复定义,但是其他的参数如果存在相同的可以不用重复定义,例如:8 S9 z8 F& O4 n' u" v
- p1 s9 M' v1 G! m4 H[color=rgba(0, 0, 0, 0.87)]和
) A9 ~. D1 I/ I) o* c, V3 P+ r[color=rgba(0, 0, 0, 0.87)]等效。+ Z0 H& W' {# l; N
- 'DB_USER'=>'user1', 8 `2 r* F h8 @0 Z" i# L
- 'DB_PWD'=>'pwd1',
复制代码 [color=rgba(0, 0, 0, 0.87)]和
4 u0 m L' v4 `% ^( L8 Z'DB_USER'=>'user1,user1', 'DB_PWD'=>'pwd1,pwd1',
! X; M+ P+ ~! _, k/ g[color=rgba(0, 0, 0, 0.87)]等效。 [color=rgba(0, 0, 0, 0.87)]还可以设置分布式数据库的读写是否分离,默认的情况下读写不分离,也就是每台服务器都可以进行读写操作,对于主从式数据库而言,需要设置读写分离,通过下面的设置就可以: [color=rgba(0, 0, 0, 0.87)]在读写分离的情况下,默认第一个数据库配置是主服务器的配置信息,负责写入数据,如果设置了DB_MASTER_NUM参数,则可以支持多个主服务器写入。其它的都是从数据库的配置信息,负责读取数据,数量不限制。每次连接从服务器并且进行读取操作的时候,系统会随机进行在从服务器中选择。 [color=rgba(0, 0, 0, 0.87)]还可以设置DB_SLAVE_NO 指定某个服务器进行读操作 [color=rgba(0, 0, 0, 0.87)]3.2.3版本开始,如果从数据库连接错误,会自动切换到主数据库连接。 + ]1 j# x* {0 ~+ |/ n
[color=rgba(0, 0, 0, 0.87)]调用模型的CURD操作的话,系统会自动判断当前执行的方法的读操作还是写操作,如果你用的是原生SQL,那么需要注意系统的默认规则: [color=rgba(0, 0, 0, 0.87)]写操作必须用模型的execute方法,读操作必须用模型的query方法[color=rgba(0, 0, 0, 0.87)],否则会发生主从读写错乱的情况。( D. T) t/ |3 h3 q: d
& N8 H6 I- V" j' {7 u" V注意:主从数据库的数据同步工作不在框架实现,需要数据库考虑自身的同步或者复制机制。% Z! Q0 O" R) O& w- E9 J
----------------------------------------------------------------------------------------------------------------------------------------------------$ {+ K, ?: X. R* R7 M8 @
1.分布式数据库是什么: tp的分布式数据库主要是通过该配置: 'DB_DEPLOY_TYPE' => 1,// 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器) 2.主从服务器的读写分离是什么: 主从数据库即为一个主数据库会有对应n个从数据库,而从数据库只能有一个对应的从数据库。主从数据库中写的操作需要使用主数据库,而读操作使用从数据库。主数据库与从数据库始终保持数据一致性。其中保持数据库一致的原理即为当主数据库数据发生变化时,会将操作写入到主数据库日志中,而从数据库会不停的读取主数据库的日志保存到自己的日志系统中,然后进行执行,从而保持了主从数据库一致。 w- Y4 Z- @# E$ a0 z: z) w# K
3.详解 9 G7 |3 H) o7 G/ A- s9 N+ ?
一、单一数据库的连接 在使用的时候,单一数据库的连接配置非常简单。我们只需要在配置文件中配置一下的信息即可。 - 'DB_TYPE' => 'mysql', ' p$ b) B4 L' F1 n
- 'DB_HOST' => '192.168.5.102',
m- d) `0 T9 H3 w; o. |5 i - 'DB_NAME' => 'databasename', K+ _, @7 d* ]- x
- 'DB_USER' => 'user', 6 _+ g& [& H T U+ k
- 'DB_PWD' => 'password',
4 m/ k$ ]: q3 w0 }1 ? - 'DB_PORT' => '3306', + p# t* ^" I. Y, J6 d) _8 l: ]
- 'DB_PREFIX' => 'onmpw_',
复制代码设置完成以后就可以使用了。默认情况下就是单一的数据库连接。 二、分布式数据库的连接 单一数据库的连接很简单,我们着重分析一下分布式数据库的连接。 - 'DB_TYPE' => 'mysql', ; q3 v: z# R1 C3 b6 ^( I0 }1 R
- 'DB_HOST' => '192.168.5.191,192.168.5.88,192.168.5.103', 5 k# o1 P" C% g3 B
- 'DB_NAME' => 'test,test,test', y* D' f! s9 R& S+ k: Z# \
- 'DB_USER' => 'masteruser,slaveuser,slaveuser',
9 A+ R O/ h2 O* S. a& F" z- ^% @" L - 'DB_PWD' => 'masterpass,slavepass,slavepass', $ S1 j# t4 a. ^! _% L- h" r
- 'DB_PORT' => '3306', 2 R: o( o N' ?/ n7 J9 K9 O4 i
- 'DB_PREFIX' => '',
, c/ O3 l7 Q% Y1 R7 v: r7 I' e - 'DB_DEPLOY_TYPE' => 1, // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器) % e, e$ B3 I2 A7 T8 E) Z; e
- 'DB_RW_SEPARATE' => true, // 数据库读写是否分离 主从式有效 / Y; ~# [4 q) c# e- z
- 'DB_MASTER_NUM' => 1, // 读写分离后 主服务器数量 5 @, N0 R1 b# K! W) x, |% _0 r9 e
- 'DB_SLAVE_NO' => '', // 指定从服务器序号
复制代码按照以上配置就可以连接分布式数据库了。 下面我们看下面几个选项 ‘DB_HOST’ 分布式数据库,有几台服务器就要填写几个服务器地址,每个地址之间用逗号隔开。如果是主从式分布的话,前面的地址要是主数据库的地址。 对于下面的用户名和密码还有监听端口之类的,当然是有几个就写几个。如果各个数据库的用户名和密码都一样的话,可以只写一个。 对于这些选项的解析的代码如下 - $_config['username'] = explode(',',$this->config['username']);
8 l' l+ |7 m& {0 K+ H - $_config['password'] = explode(',',$this->config['password']); + O: l% D2 t5 x
- $_config['hostname'] = explode(',',$this->config['hostname']); 6 ~5 F: w" O, f
- $_config['hostport'] = explode(',',$this->config['hostport']); ' C) R5 E; J$ ` {3 x
- $_config['database'] = explode(',',$this->config['database']); % i5 X; U7 n& O
- $_config['dsn'] = explode(',',$this->config['dsn']); . m3 ~" q1 g, Z9 I; F# S
- $_config['charset'] = explode(',',$this->config['charset']);
复制代码
4 h% T! z' _7 E. v# z0 P( S" G6 Q‘DB_DEPLOY_TYPE’=>1 1 表示是分布式, 0 表示的是集中式(也就是单一服务器)。 该选项的实现是在类 Think\Db\Dirver中 - protected function initConnect($master=true) { 6 k' x& \* Q$ x# o3 z
- if(!empty($this->config['deploy']))
6 V' d( w& b/ ]9 Z( G - // 采用分布式数据库
; ?8 l& g2 `1 X M; F! U - $this->_linkID = $this->multiConnect($master); 5 b& _/ L# F8 ]+ m) A. O# b
- else
$ s, T6 [2 c1 X1 z. R- a7 v - // 默认单数据库 1 }' V6 z2 p+ N" \+ u' G9 @* o, W
- if ( !$this->_linkID ) $this->_linkID = $this->connect(); ) Q2 p6 G' J% y: _
- }
复制代码 . J( O4 E/ i! K1 }, Y
$this->config[‘deploy’]表示的就是’DB_DEPLOY_TYPE’这个配置选项,上面的配置在使用之前都已经经过解析了,配置项都在$this->config数组中。至于是如何解析配置文件的,这里我们不做介绍,感兴趣的可以参考Think\Db类。 $this->multiConnect()函数就是用来进行分布式连接的,如果’DB_DEPLOY_TYPE’选项设置为1,该函数就会执行。否则直接执行$this->connect()函数。 ‘DB_RW_SEPARATE’=>true true 表示读写分离;false表示读写不分离。 这里需要注意的是,读写分离是以主从式数据库系统为前提的。该选项设置为true的时候主数据库写,从数据库读。 - if($this->config['rw_separate']){ 3 L2 `* y) S0 Y) S, i
- // 主从式采用读写分离
' m) Y" `+ p4 F; |& L7 @6 ] - if($master)
; k( C4 a+ i2 D; d- n - // 主服务器写入
P- A3 t7 M) i - $r = $m;
: O V; m8 T7 L; h- u - else{ 4 `& Y$ q) ~2 n4 s" f# `. D
- if(is_numeric($this->config['slave_no'])) {// 指定服务器读 . T9 Z+ w1 v" u3 {; l. ` B
- $r = $this->config['slave_no'];
; f1 Y# t' [! [- R' M$ J+ R - }else{
8 O) i& d/ I- I - // 读操作连接从服务器 , ^9 C g- {* h! I" w& [1 `4 {
- $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库
) h% w( ^' Y' P% M/ I - } + @" Q j X$ e8 A; H* Y u" J- v4 Y
- }
4 W& F5 X B6 p7 S4 J+ _ - }else{
. M) }: A6 ^0 X: W! b' B - // 读写操作不区分服务器
! f8 z2 c% ?; [6 R9 f2 e, f8 ] - $r = floor(mt_rand(0,count($_config['hostname'])-1)); // 每次随机连接的数据库
8 w- I3 r( q8 b" J$ f- f - }
复制代码 " w5 F$ r2 z! o* k! k! _! O* o
$this->config[‘rw_separate’] 为true的时候采用读写分离,为false的时候读写不分离。读写分离为什么必须是主从式的呢?因为从服务器不能写只能读,如果向从服务器写入数据的话,数据是没法同步的。这样就会造成数据不一致的情况。所以说,如果我们的系统是主从式的话,我们必须采用读写分离。也就是说DB_RW_SEPARATE选项必须配置为true。 'DB_MASTER_NUM'=>1 该选项后面的数字表示读写分离后,主服务器的数量。因此该选项也是用于主从式数据库系统。 下面的代码是选择主服务器。 $m = floor(mt_rand(0,$this->config['master_num']-1)); 主从式数据库读取的时候选择从服务器读的核心代码 $r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库 其中$this->config[‘master_num’]表示主服务器的数量。 'DB_SLAVE_NO'=> '' 指定从服务器的序号,用于读取数据。如果不设置,则根据主服务器的数量计算书从服务器的数量,然后从中随机选取一台进行读取。 if(is_numeric($this->config['slave_no'])) {// 指定服务器读/ b" F! }. d9 S' W( D* G8 i) G
$r = $this->config['slave_no'];8 p) z6 f! p7 y! A
}else{# v" G+ S+ X1 g" n3 w2 r$ P! J
// 读操作连接从服务器# I* S) r/ ~: U! m- d5 p
$r = floor(mt_rand($this->config['master_num'],count($_config['hostname'])-1)); // 每次随机连接的数据库8 }- F* a* @/ m' Z, C. r
} 以上是对每个选项的作用的实现代码进行了一个简单的说明。 下面我们来看其连接的部分 - if($m != $r ){
( d# ~8 {) t7 u! ^7 n" j q7 m" o - $db_master = array(
4 F; [* r+ N+ h" ? - 'username' => isset($_config['username'][$m])?$_config['username'][$m]:$_config['username'][0], , j) M, Y3 P# w- _5 B$ X2 x! O
- 'password' => isset($_config['password'][$m])?$_config['password'][$m]:$_config['password'][0],
6 L8 I/ `7 g9 m w! a - 'hostname' => isset($_config['hostname'][$m])?$_config['hostname'][$m]:$_config['hostname'][0],
/ p- O( }* _& R - 'hostport' => isset($_config['hostport'][$m])?$_config['hostport'][$m]:$_config['hostport'][0],
5 j9 e) U7 L4 Q8 {9 c1 i - 'database' => isset($_config['database'][$m])?$_config['database'][$m]:$_config['database'][0],
! o6 E4 u: s4 N- c2 |3 E - 'dsn' => isset($_config['dsn'][$m])?$_config['dsn'][$m]:$_config['dsn'][0], 3 a% X) G% H% T L( }7 N( k# {" e
- 'charset' => isset($_config['charset'][$m])?$_config['charset'][$m]:$_config['charset'][0],
8 h t+ w L. a - ); Y: L3 W+ O+ |( k2 k+ k9 q2 r
- }
X% Q: u% T2 W4 N4 c) k+ ` - $db_config = array(
. s2 X0 ]5 h8 |8 @9 r4 ~. O - 'username' => isset($_config['username'][$r])?$_config['username'][$r]:$_config['username'][0],
" z% Y8 w) g) \" y/ }; k - 'password' => isset($_config['password'][$r])?$_config['password'][$r]:$_config['password'][0], , R# c0 k; }6 P9 S% b3 L7 Q7 |
- 'hostname' => isset($_config['hostname'][$r])?$_config['hostname'][$r]:$_config['hostname'][0],
; d+ r! x- D- f7 {. [ - 'hostport' => isset($_config['hostport'][$r])?$_config['hostport'][$r]:$_config['hostport'][0], . D' ]0 Y- A7 C/ l( e
- 'database' => isset($_config['database'][$r])?$_config['database'][$r]:$_config['database'][0], & ?* d6 L" {) E8 x& E$ {; X) R% N
- 'dsn' => isset($_config['dsn'][$r])?$_config['dsn'][$r]:$_config['dsn'][0], 2 d" a8 [# N+ E( H: \( J
- 'charset' => isset($_config['charset'][$r])?$_config['charset'][$r]:$_config['charset'][0],
: N! r! h# w! X8 S - );
( C+ B& U7 @; X& ?# F+ O3 p - return $this->connect($db_config,$r,$r == $m ? false : $db_master);
复制代码 * t$ [) Q7 {8 F! [8 r( f ?9 N8 w
看到这,我觉得大家应该对上面在介绍各个配置选项的代码的时候其中的$r和$m是什么作用了。 现在我们来看 $r == $m ? false : $db_master ,如果数据库读写不分离的情况下,读写是一台服务器的话 传给connect函数的值为false。或者是如果是主从分离的写的情况下传给connect的值也为false。通过上面代码我们看到,如果$r和$m不相等的情况下,会设置$db_master。其实也就是相当于一台备用的,如果选择的$r服务器出现故障不能连接,将会去连接$db_master。 connect()函数的第三个参数其实是表示当$db_config这台服务器连接故障时是否选择备用的连接。false表示不重连,其它值即表示重新连接。 其核心代码如下 - try{
W6 l: c4 o0 f# W7 [( e - if(empty($config['dsn'])) {
, b5 y1 m1 H2 l3 X8 w - $config['dsn'] = $this->parseDsn($config);
: T- }% k7 _$ Q3 m7 f - } i' t6 G+ d! |7 e# E- ~$ `5 ?
- if(version_compare(PHP_VERSION,'5.3.6','<=')){
+ e Y+ h: w1 z/ _2 f8 R - // 禁用模拟预处理语句
; _+ d' B0 a y$ Y; ?. [5 F - $this->options[PDO::ATTR_EMULATE_PREPARES] = false;
+ c5 W7 W, m3 ` ~6 q: ? - }
( a, K8 D8 z( a5 z - $this->linkID[$linkNum] = new PDO( $config['dsn'], $config['username'], $config['password'],$this->options); 6 x3 i% k0 L# c, a& K
- }catch (\PDOException $e) {
& O' P/ q* c9 a/ R( D5 d6 w5 B7 i - if($autoConnection){ //$autoConnection不为false,而是默认的主服务器
' p- v- x9 m N( Q6 S/ i" D - trace($e->getMessage(),'','ERR'); 5 G0 V) ^0 z A! j8 ]8 S
- return $this->connect($autoConnection,$linkNum); //出现异常,使用递归函数重新连接 % C2 k* }+ }. P/ B% U1 K
- }elseif($config['debug']){
$ i' K* B% [$ {/ u3 r O - E($e->getMessage());
[3 I1 S& v. d F - } . T' |% g( P+ P8 T- s
- }
复制代码这种方式,对于主从式来说,$r和$m肯定不会相同。因此如果说在读取数据的时候,选择的那台从服务器出现故障的话,那主服务器即是备用的,最后会去主服务器读取。能保证数据读取的时效性。 + L" X. D7 e$ J7 ^( f
$ b4 P- L$ b, `
- {# I( Q( |8 m6 H. k) ~
|