SQL實現(xiàn)讀寫分離的分配的幾種方式
讀寫分離的分配,即如何在應用程序中將讀操作和寫操作路由到不同的數據庫實例,可以通過幾種不同的方法來實現(xiàn)。這些方法可以在應用程序層、數據庫層或使用中間件來完成。以下是幾種常見的實現(xiàn)方法:
應用程序層實現(xiàn)
在應用程序層實現(xiàn)讀寫分離,通常通過配置多個數據源并在代碼中顯式地選擇適當的數據源。使用 AOP(面向切面編程)來自動選擇數據源是一種常見的方法。
具體實現(xiàn)步驟
- 配置多數據源:配置一個主數據源(用于寫操作)和多個從數據源(用于讀操作)。
- 實現(xiàn)路由邏輯:通過 AOP 或其他方式在代碼中選擇適當的數據源。
- 使用自定義注解:標記需要路由到不同數據源的方法。
以下是詳細的實現(xiàn)示例:
配置文件
在 application.yml
中配置主庫和從庫的信息。
# application.yml spring: datasource: master: url: jdbc:mysql://master-db:3306/mydb username: root password: root slaves: - url: jdbc:mysql://slave-db1:3306/mydb username: root password: root - url: jdbc:mysql://slave-db2:3306/mydb username: root password: root
數據源配置
import com.zaxxer.hikari.HikariDataSource; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.beans.factory.annotation.Value; import org.springframework.boot.context.properties.ConfigurationProperties; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import org.springframework.context.annotation.Primary; import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource; import javax.sql.DataSource; import java.util.HashMap; import java.util.Map; @Configuration public class DataSourceConfig { @Autowired private MasterDataSourceProperties masterProperties; @Autowired private SlaveDataSourceProperties slaveProperties; @Bean @Primary public DataSource dataSource() { AbstractRoutingDataSource routingDataSource = new ReplicationRoutingDataSource(); HikariDataSource masterDataSource = new HikariDataSource(); masterDataSource.setJdbcUrl(masterProperties.getUrl()); masterDataSource.setUsername(masterProperties.getUsername()); masterDataSource.setPassword(masterProperties.getPassword()); Map<Object, Object> targetDataSources = new HashMap<>(); targetDataSources.put("master", masterDataSource); for (int i = 0; i < slaveProperties.getSlaves().size(); i++) { SlaveProperties slave = slaveProperties.getSlaves().get(i); HikariDataSource slaveDataSource = new HikariDataSource(); slaveDataSource.setJdbcUrl(slave.getUrl()); slaveDataSource.setUsername(slave.getUsername()); slaveDataSource.setPassword(slave.getPassword()); targetDataSources.put("slave" + i, slaveDataSource); } routingDataSource.setTargetDataSources(targetDataSources); routingDataSource.setDefaultTargetDataSource(masterDataSource); return routingDataSource; } }
路由數據源
import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource; public class ReplicationRoutingDataSource extends AbstractRoutingDataSource { private static final ThreadLocal<String> contextHolder = new ThreadLocal<>(); public static void setDataSourceType(String dataSourceType) { contextHolder.set(dataSourceType); } public static void clearDataSourceType() { contextHolder.remove(); } @Override protected Object determineCurrentLookupKey() { return contextHolder.get(); } }
數據源選擇器
import org.aspectj.lang.annotation.Aspect; import org.aspectj.lang.annotation.Before; import org.springframework.stereotype.Component; @Aspect @Component public class DataSourceAspect { @Before("@annotation(com.example.annotation.Master)") public void setWriteDataSourceType() { ReplicationRoutingDataSource.setDataSourceType("master"); } @Before("@annotation(com.example.annotation.Slave) || execution(* com.example.service..*.find*(..))") public void setReadDataSourceType() { ReplicationRoutingDataSource.setDataSourceType("slave0"); // 可實現(xiàn)負載均衡策略 } }
自定義注解
import java.lang.annotation.ElementType; import java.lang.annotation.Retention; import java.lang.annotation.RetentionPolicy; import java.lang.annotation.Target; @Retention(RetentionPolicy.RUNTIME) @Target(ElementType.METHOD) public @interface Master { } @Retention(RetentionPolicy.RUNTIME) @Target(ElementType.METHOD) public @interface Slave { }
示例服務
import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Service; import org.springframework.transaction.annotation.Transactional; @Service public class UserService { @Autowired private UserRepository userRepository; @Master @Transactional public void saveUser(User user) { userRepository.save(user); } @Slave public User findUserById(Long id) { return userRepository.findById(id).orElse(null); } }
使用中間件
使用中間件來實現(xiàn)讀寫分離也是一種常見的方法。中間件通常位于應用程序和數據庫之間,負責根據操作類型將請求路由到適當的數據庫實例。常見的中間件包括 MySQL 的 ProxySQL 和 MariaDB 的 MaxScale。
ProxySQL 示例配置
- 安裝 ProxySQL:可以通過包管理器安裝 ProxySQL。
- 配置 ProxySQL:在
proxysql.cnf
文件中配置主從數據庫。
datadir="/var/lib/proxysql" admin_variables= { admin_credentials="admin:admin" mysql_ifaces="0.0.0.0:6032" } mysql_variables= { threads=4 max_connections=1024 } mysql_servers = ( { address="master-db", port=3306, hostgroup=0, max_connections=1000, weight=1 }, { address="slave-db1", port=3306, hostgroup=1, max_connections=1000, weight=1 }, { address="slave-db2", port=3306, hostgroup=1, max_connections=1000, weight=1 } ) mysql_users = ( { username="proxyuser", password="proxypassword", default_hostgroup=0, transaction_persistent=1 } ) mysql_query_rules = ( { rule_id=1, match_pattern="^SELECT", destination_hostgroup=1, apply=1 } )
- 啟動 ProxySQL:使用
systemctl
或其他方式啟動 ProxySQL。
systemctl start proxysql
數據庫層實現(xiàn)
有些數據庫本身提供了讀寫分離的功能。例如,MySQL 的復制機制允許配置一個主數據庫和多個從數據庫,然后通過連接池或驅動程序實現(xiàn)讀寫分離。
總結
讀寫分離的實現(xiàn)方法有多種,可以根據具體需求和技術棧選擇適合的方法。在應用程序層實現(xiàn)讀寫分離較為靈活,可以精細控制讀寫操作的路由邏輯;使用中間件實現(xiàn)讀寫分離則可以簡化應用程序的邏輯,但需要額外維護中間件的配置和管理;在數據庫層實現(xiàn)讀寫分離可以利用數據庫本身的功能,減少對應用程序的改動。
到此這篇關于SQL實現(xiàn)讀寫分離的分配的幾種方式的文章就介紹到這了,更多相關SQL 讀寫分離分配內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!
相關文章
分享一下SQL Server執(zhí)行動態(tài)SQL的正確方式
這篇文章主要介紹了SQL Server執(zhí)行動態(tài)SQL正確方式,需要的朋友可以參考下2017-06-06sqlserver 存儲過程動態(tài)參數調用實現(xiàn)代碼
sqlserver 存儲過程動態(tài)參數調用實現(xiàn)代碼,需要的朋友可以參考下。2011-10-10