MySQL主從讀寫分離

今天我們來說一說主從庫的讀寫分離的問題

主從結(jié)構(gòu)

一般情況下主從的結(jié)構(gòu)是由一個Master和多個Slave來組成的, Slave的個數(shù)和數(shù)據(jù)庫的業(yè)務(wù)訪問量有密切的關(guān)系

MySQL讀寫分離配置的主要流程

  1. 在進(jìn)行數(shù)據(jù)的更改之前Master會通知存儲引擎開啟事務(wù),Master會把數(shù)據(jù)庫的操作記錄在一個Binary Log中,在寫入完成之后雕沉,Master通知存儲引擎提交事務(wù)菱魔,這樣的一次操作稱為一次二進(jìn)制日志事件;
  2. Slave開啟一個IO線程梳玫,把Binary Log中的日志拷貝到自己的Relay log中,如果讀取完成之后,Slave的這個線程就會睡眠候生,等待Master的Binary產(chǎn)生新的數(shù)據(jù);
  3. Slave會把Delay Log中的數(shù)據(jù)重新執(zhí)行绽昼,使得日志中的數(shù)據(jù)重現(xiàn)在Slave的數(shù)據(jù)庫中唯鸭;

一、主從讀寫分離的配置

  1. 準(zhǔn)備兩臺服務(wù)器并分別安裝MySQL軟件
  2. 配置主服務(wù)器硅确,編輯主服務(wù)器的配置文件
    • 在配置文件的mysqld節(jié)點下面添加mysql-id和log-bin以及l(fā)og-bin-index目溉,如下
      server-id=1
      log-bin=master-bin
      log-bin-index=master-bin.index
      
    • 配置完成后重啟:service mysqld restart
    • 查看Master的狀態(tài):show master status
    • 創(chuàng)建用戶并賦予從服務(wù)器的訪問權(quán)限:
      create user '<user-name>';
      grant replication slave on *.* to '<user-name>'@'<host>' identified by '<access-pwd>';
      flush privileges;
      
  3. 配置從服務(wù)器,編輯配置文件
    • 在配置文件的mysqld節(jié)點下面添加如下的內(nèi)容,需要注意的是干掉其中server-id=1菱农,在mysqld中重新添加如下內(nèi)容:
      server-id=2
      relay-log=slave-relay-bin
      relay-log-index=slave-relay-bin.index
      
    • 配置完成后重啟:service mysqld restart
    • 把從服務(wù)器掛到主服務(wù)器之下缭付,連接到從服務(wù)器上,執(zhí)行如下指令
      change master to master_host='<master-ip>',master_port=<master-ip>,master_user='<user-name>',master_password='<access-pwd>',master_log_file='<master_status-file-name>',master-log-pos=0;
      
    • 開始監(jiān)聽主服務(wù)器:start slave
    • 查看從庫的狀態(tài):show slave status \G
  4. 測試主從:在主庫上進(jìn)行操作循未,后查看從庫的數(shù)據(jù)變化

二陷猫、MySQL讀寫分離代碼編寫

  1. 編寫一個讀寫分離的類DynamicDataSource,這個類繼承自AbstractRoutingDataSource,實現(xiàn)其中的方法绣檬,如:

    import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource;
    
    public class DynamicDataSource extends AbstractRoutingDataSource {
        @Override
        protected Object determineCurrentLookupKey() {
            return DynamicDataSourceHolder.getDataSourceType();
        }
    }
    
  2. 編寫一個用來維護(hù)連接類型的類DynamicDataSourceHolder舅巷,為了線程安全可以使用ThreadLocal來存放兩個類型:MasterSlave

    import org.springframework.util.Assert;
    
    public class DynamicDataSourceHolder {
        
        public static final String DATASOURCE_TYPE_MASTER = "master";
        public static final String DATASOURCE_TYPE_SLAVE = "slave";
        
        private static ThreadLocal<String> typeHolder = new ThreadLocal<>();
        
        public static String getDataSourceType() {
            String type = typeHolder.get();
            if (type == null) {
                type = DATASOURCE_TYPE_MASTER;
            }
            return type;
        }
        
        public static void setDataSourceType(String type) {
            Assert.notNull(type, "type not allowed to be null");
            typeHolder.set(type);
        }
        
        public static void clearDataSourceType() {
            typeHolder.remove();
        }
    
    }
    
  3. 編寫一個用來根據(jù)請求自動返回數(shù)據(jù)庫連接類型的攔截器的類DynamicDataSourceInteceptor,該類實現(xiàn)MyBatis的攔截器接口:org.apache.ibatis.plugin.Interceptor

    import java.util.Locale;
    import java.util.Properties;
    import org.apache.ibatis.executor.Executor;
    import org.apache.ibatis.executor.keygen.SelectKeyGenerator;
    import org.apache.ibatis.mapping.BoundSql;
    import org.apache.ibatis.mapping.MappedStatement;
    import org.apache.ibatis.mapping.SqlCommandType;
    import org.apache.ibatis.plugin.Interceptor;
    import org.apache.ibatis.plugin.Intercepts;
    import org.apache.ibatis.plugin.Invocation;
    import org.apache.ibatis.plugin.Plugin;
    import org.apache.ibatis.plugin.Signature;
    import org.apache.ibatis.session.ResultHandler;
    import org.apache.ibatis.session.RowBounds;
    import org.springframework.transaction.support.TransactionSynchronizationManager;
    
    @Intercepts({
        @Signature(type=Executor.class, method="update", args={MappedStatement.class, Object.class}),
        @Signature(type=Executor.class, method="query", args={MappedStatement.class, RowBounds.class, ResultHandler.class, Object.class})
    })
    public class DynamicDataSourceInteceptor implements Interceptor {
        @Override
        public Object intercept(Invocation invocation) throws Throwable {
            boolean txActive = TransactionSynchronizationManager.isActualTransactionActive();
            String type = DynamicDataSourceHolder.DATASOURCE_TYPE_MASTER;
            if (txActive == false) {
                Object[] args = invocation.getArgs();
                MappedStatement statement = (MappedStatement) args[0];
                if (statement.getSqlCommandType().equals(SqlCommandType.SELECT)) {
                    if (statement.getId().contains(SelectKeyGenerator.SELECT_KEY_SUFFIX)) {
                        type = DynamicDataSourceHolder.DATASOURCE_TYPE_MASTER;
                    } else {
                        BoundSql boundSql = statement.getSqlSource().getBoundSql(args[1]);
                        String sql = boundSql.getSql().toLowerCase(Locale.CHINA).replaceAll("[\\n\\r\\t]", " ");
                        if (sql.matches(".*insert\\u0020.*|.*update\\u0020.*|.*delete\\u0020.*")) {
                            type = DynamicDataSourceHolder.DATASOURCE_TYPE_MASTER;
                        } else {
                            type = DynamicDataSourceHolder.DATASOURCE_TYPE_SLAVE;
                        }
                    }
                }
            }
            DynamicDataSourceHolder.setDataSourceType(type);
            return invocation.proceed();
        }
        @Override
        public Object plugin(Object target) {
            if (target instanceof Executor) {
                return Plugin.wrap(target, this);
            }
            return target;
        }
        @Override
        public void setProperties(Properties properties) {
        }
    }
    
  4. 在Mybatis配置中配置攔截器

    <plugins>
        <plugin interceptor="org.sherekr.dfo.core.dao.datasource.DynamicDataSourceInteceptor" />
    </plugins>
    
  5. Spring配置文件中配置兩個數(shù)據(jù)源河咽,一個用來執(zhí)行DML的數(shù)據(jù)源钠右,一個用來執(zhí)行DQL的數(shù)據(jù)源,同時配置動態(tài)數(shù)據(jù)源和懶連接數(shù)據(jù)源代理

    <bean id="abstractDataSource" class="com.mchange.v2.c3p0.ComboPooledDataSource" abstract="true" destroy-method="close">
        <property name="driverClass" value="${jdbc.driver}" />
        <property name="user" value="${jdbc.username}" />
        <property name="password" value="${jdbc.password}" />
        
        <property name="maxPoolSize" value="30" />
        <property name="minPoolSize" value="10" />
        <property name="autoCommitOnClose" value="false" />
        <property name="checkoutTimeout" value="10000" />
        <property name="acquireRetryAttempts" value="2" />
    </bean>
    <bean id="masterDataSource" parent="abstractDataSource">
        <property name="jdbcUrl" value="${jdbc.master.url}" />
    </bean>
    <bean id="slaveDataSource" parent="abstractDataSource">
        <property name="jdbcUrl" value="${jdbc.slave.url}" />
    </bean>
    
    <bean id="dynamicDataSource" class="org.sherekr.dfo.core.dao.datasource.DynamicDataSource">
        <property name="targetDataSources">
            <map>
                <entry key="master" value-ref="masterDataSource" />
                <entry key="slave" value-ref="slaveDataSource" />
            </map>
        </property>
    </bean>
    <bean id="dataSource" class="org.springframework.jdbc.datasource.LazyConnectionDataSourceProxy">
        <property name="targetDataSource" ref="dynamicDataSource" />
    </bean>
    

這個代碼已經(jīng)是幾年前寫的代碼了忘蟹,運(yùn)行時可能會遇到一些問題飒房,大家就見招拆招吧,如果遇到問題歡迎吐我

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末媚值,一起剝皮案震驚了整個濱河市狠毯,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌褥芒,老刑警劉巖嚼松,帶你破解...
    沈念sama閱讀 206,968評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異锰扶,居然都是意外死亡献酗,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評論 2 382
  • 文/潘曉璐 我一進(jìn)店門坷牛,熙熙樓的掌柜王于貴愁眉苦臉地迎上來罕偎,“玉大人,你說我怎么就攤上這事京闰⊙占埃” “怎么了?”我有些...
    開封第一講書人閱讀 153,220評論 0 344
  • 文/不壞的土叔 我叫張陵蹂楣,是天一觀的道長俏站。 經(jīng)常有香客問我,道長痊土,這世上最難降的妖魔是什么肄扎? 我笑而不...
    開封第一講書人閱讀 55,416評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮施戴,結(jié)果婚禮上反浓,老公的妹妹穿的比我還像新娘。我一直安慰自己赞哗,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 64,425評論 5 374
  • 文/花漫 我一把揭開白布辆雾。 她就那樣靜靜地躺著肪笋,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上藤乙,一...
    開封第一講書人閱讀 49,144評論 1 285
  • 那天猜揪,我揣著相機(jī)與錄音,去河邊找鬼坛梁。 笑死而姐,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的划咐。 我是一名探鬼主播拴念,決...
    沈念sama閱讀 38,432評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼褐缠!你這毒婦竟也來了政鼠?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,088評論 0 261
  • 序言:老撾萬榮一對情侶失蹤队魏,失蹤者是張志新(化名)和其女友劉穎公般,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體胡桨,經(jīng)...
    沈念sama閱讀 43,586評論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡官帘,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,028評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了昧谊。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片遏佣。...
    茶點故事閱讀 38,137評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖揽浙,靈堂內(nèi)的尸體忽然破棺而出状婶,到底是詐尸還是另有隱情,我是刑警寧澤馅巷,帶...
    沈念sama閱讀 33,783評論 4 324
  • 正文 年R本政府宣布膛虫,位于F島的核電站,受9級特大地震影響钓猬,放射性物質(zhì)發(fā)生泄漏稍刀。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,343評論 3 307
  • 文/蒙蒙 一敞曹、第九天 我趴在偏房一處隱蔽的房頂上張望账月。 院中可真熱鬧,春花似錦澳迫、人聲如沸局齿。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽抓歼。三九已至讥此,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間谣妻,已是汗流浹背萄喳。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留蹋半,地道東北人他巨。 一個月前我還...
    沈念sama閱讀 45,595評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像减江,于是被迫代替她去往敵國和親染突。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,901評論 2 345

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理您市,服務(wù)發(fā)現(xiàn)觉痛,斷路器,智...
    卡卡羅2017閱讀 134,601評論 18 139
  • 1. Java基礎(chǔ)部分 基礎(chǔ)部分的順序:基本語法茵休,類相關(guān)的語法薪棒,內(nèi)部類的語法,繼承相關(guān)的語法榕莺,異常的語法俐芯,線程的語...
    子非魚_t_閱讀 31,587評論 18 399
  • Spring Boot 參考指南 介紹 轉(zhuǎn)載自:https://www.gitbook.com/book/qbgb...
    毛宇鵬閱讀 46,748評論 6 342
  • 一. Java基礎(chǔ)部分.................................................
    wy_sure閱讀 3,793評論 0 11
  • 我到了最近才讀三毛和張愛玲的作品,想來為這樣的遲到覺得慚愧钉鸯。 三毛和張愛玲都是忽然流行起來的吧史,真的跟雨后春筍一樣,...
    舟和1995閱讀 547評論 1 3