欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Springboot2.x+ShardingSphere實(shí)現(xiàn)分庫(kù)分表的示例代碼

 更新時(shí)間:2019年10月18日 09:21:52   作者:張堅(jiān)  
這篇文章主要介紹了Springboot2.x+ShardingSphere實(shí)現(xiàn)分庫(kù)分表的示例代碼,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧

之前一篇文章中我們講了基于Mysql8的讀寫(xiě)分離(文末有鏈接),這次來(lái)說(shuō)說(shuō)分庫(kù)分表的實(shí)現(xiàn)過(guò)程。

概念解析

垂直分片

按照業(yè)務(wù)拆分的方式稱(chēng)為垂直分片,又稱(chēng)為縱向拆分,它的核心理念是專(zhuān)庫(kù)專(zhuān)用。 在拆分之前,一個(gè)數(shù)據(jù)庫(kù)由多個(gè)數(shù)據(jù)表構(gòu)成,每個(gè)表對(duì)應(yīng)著不同的業(yè)務(wù)。而拆分之后,則是按照業(yè)務(wù)將表進(jìn)行歸類(lèi),分布到不同的數(shù)據(jù)庫(kù)中,從而將壓力分散至不同的數(shù)據(jù)庫(kù)。 下圖展示了根據(jù)業(yè)務(wù)需要,將用戶(hù)表和訂單表垂直分片到不同的數(shù)據(jù)庫(kù)的方案。

垂直分片往往需要對(duì)架構(gòu)和設(shè)計(jì)進(jìn)行調(diào)整。通常來(lái)講,是來(lái)不及應(yīng)對(duì)互聯(lián)網(wǎng)業(yè)務(wù)需求快速變化的;而且,它也并無(wú)法真正的解決單點(diǎn)瓶頸。 垂直拆分可以緩解數(shù)據(jù)量和訪問(wèn)量帶來(lái)的問(wèn)題,但無(wú)法根治。如果垂直拆分之后,表中的數(shù)據(jù)量依然超過(guò)單節(jié)點(diǎn)所能承載的閾值,則需要水平分片來(lái)進(jìn)一步處理。

水平分片

水平分片又稱(chēng)為橫向拆分。 相對(duì)于垂直分片,它不再將數(shù)據(jù)根據(jù)業(yè)務(wù)邏輯分類(lèi),而是通過(guò)某個(gè)字段(或某幾個(gè)字段),根據(jù)某種規(guī)則將數(shù)據(jù)分散至多個(gè)庫(kù)或表中,每個(gè)分片僅包含數(shù)據(jù)的一部分。 例如:根據(jù)主鍵分片,偶數(shù)主鍵的記錄放入0庫(kù)(或表),奇數(shù)主鍵的記錄放入1庫(kù)(或表),如下圖所示。

水平分片從理論上突破了單機(jī)數(shù)據(jù)量處理的瓶頸,并且擴(kuò)展相對(duì)自由,是分庫(kù)分表的標(biāo)準(zhǔn)解決方案。

開(kāi)發(fā)準(zhǔn)備

分庫(kù)分表常用的組件就是shardingsphere,目前已經(jīng)是apache頂級(jí)項(xiàng)目,這次我們使用springboot2.1.9 + shardingsphere4.0.0-RC2(均為最新版本)來(lái)完成分庫(kù)分表的操作。

假設(shè)有一張訂單表,我們需要將它分成2個(gè)庫(kù),每個(gè)庫(kù)三張表,根據(jù)id字段取模確定最終數(shù)據(jù)的位置,數(shù)據(jù)庫(kù)環(huán)境配置如下:

172.31.0.129

  • blog
    • t_order_0
    • t_order_1
    • t_order_2

172.31.0.131

  • blog
    • t_order_0
    • t_order_1
    • t_order_2

三張表的邏輯表為t_order,大家可以根據(jù)建表語(yǔ)句準(zhǔn)備好其他所有數(shù)據(jù)表。

DROP TABLE IF EXISTS `t_order_0;
CREATE TABLE `t_order_0` (
 `id` bigint(20) NOT NULL,
 `name` varchar(255) DEFAULT NULL COMMENT '名稱(chēng)',
 `type` varchar(255) DEFAULT NULL COMMENT '類(lèi)型',
 `gmt_create` timestamp NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '創(chuàng)建時(shí)間',
 PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;

注意,千萬(wàn)不能將主鍵的生成規(guī)則設(shè)置成自增長(zhǎng),需要按照一定規(guī)則來(lái)生成主鍵,這里使用shardingsphere中的SNOWFLAKE俗稱(chēng)雪花算法來(lái)生成主鍵

代碼實(shí)現(xiàn)

修改pom.xml,引入相關(guān)組件

<properties>
    <java.version>1.8</java.version>
    <mybatis-plus.version>3.1.1</mybatis-plus.version>
    <sharding-sphere.version>4.0.0-RC2</sharding-sphere.version>
  </properties>

  <dependencies>
    <dependency>
      <groupId>org.springframework.boot</groupId>
      <artifactId>spring-boot-starter-web</artifactId>
    </dependency>

    <dependency>
      <groupId>org.mybatis.spring.boot</groupId>
      <artifactId>mybatis-spring-boot-starter</artifactId>
      <version>2.0.1</version>
    </dependency>

    <dependency>
      <groupId>mysql</groupId>
      <artifactId>mysql-connector-java</artifactId>
      <version>8.0.15</version>
    </dependency>

    <dependency>
      <groupId>com.baomidou</groupId>
      <artifactId>mybatis-plus-boot-starter</artifactId>
      <version>${mybatis-plus.version}</version>
    </dependency>

    <dependency>
      <groupId>org.apache.shardingsphere</groupId>
      <artifactId>sharding-jdbc-spring-boot-starter</artifactId>
      <version>${sharding-sphere.version}</version>
    </dependency>

    <dependency>
      <groupId>org.apache.shardingsphere</groupId>
      <artifactId>sharding-jdbc-spring-namespace</artifactId>
      <version>${sharding-sphere.version}</version>
    </dependency>

    <dependency>
      <groupId>org.projectlombok</groupId>
      <artifactId>lombok</artifactId>
      <optional>true</optional>
    </dependency>
    <dependency>
      <groupId>org.springframework.boot</groupId>
      <artifactId>spring-boot-starter-test</artifactId>
      <scope>test</scope>
    </dependency>
  </dependencies>

  <build>
    <plugins>
      <plugin>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-maven-plugin</artifactId>
      </plugin>
    </plugins>
  </build>

配置mysql-plus

 @Configuration
  @MapperScan("com.github.jianzh5.blog.mapper")
  public class MybatisPlusConfig {

      /**
       * 攻擊 SQL 阻斷解析器
       */
      @Bean
      public PaginationInterceptor paginationInterceptor(){
          PaginationInterceptor paginationInterceptor = new PaginationInterceptor();
          List<ISqlParser> sqlParserList = new ArrayList<>();
          sqlParserList.add(new BlockAttackSqlParser());

          paginationInterceptor.setSqlParserList(sqlParserList);
          return new PaginationInterceptor();
      }


      /**
       * SQL執(zhí)行效率插件
       */
      @Bean
      // @Profile({"dev","test"})
      public PerformanceInterceptor performanceInterceptor() {
          return new PerformanceInterceptor();
      }
  }

編寫(xiě)實(shí)體類(lèi)Order

 @Data
  @TableName("t_order")
  public class Order {
      private Long id;

      private String name;

      private String type;

      private Date gmtCreate;

  }

編寫(xiě)DAO層,OrderMapper

 /**
   * 訂單Dao層
   */
  public interface OrderMapper extends BaseMapper<Order> {

  }

編寫(xiě)接口及接口實(shí)現(xiàn)

 public interface OrderService extends IService<Order> {

  }

  /**
   * 訂單實(shí)現(xiàn)層
   * @author jianzh5
   * @date 2019/10/15 17:05
   */
  @Service
  public class OrderServiceImpl extends ServiceImpl<OrderMapper, Order> implements OrderService {

  }

配置文件(配置說(shuō)明見(jiàn)備注)

 server.port=8080

  # 配置ds0 和ds1兩個(gè)數(shù)據(jù)源
  spring.shardingsphere.datasource.names = ds0,ds1

  #ds0 配置
  spring.shardingsphere.datasource.ds0.type = com.zaxxer.hikari.HikariDataSource
  spring.shardingsphere.datasource.ds0.driver-class-name = com.mysql.cj.jdbc.Driver
  spring.shardingsphere.datasource.ds0.jdbc-url = jdbc:mysql://192.168.249.129:3306/blog?characterEncoding=utf8&zeroDateTimeBehavior=convertToNull&useSSL=false
  spring.shardingsphere.datasource.ds0.username = root
  spring.shardingsphere.datasource.ds0.password = 000000

  #ds1 配置
  spring.shardingsphere.datasource.ds1.type = com.zaxxer.hikari.HikariDataSource
  spring.shardingsphere.datasource.ds1.driver-class-name = com.mysql.cj.jdbc.Driver
  spring.shardingsphere.datasource.ds1.jdbc-url = jdbc:mysql://192.168.249.131:3306/blog?characterEncoding=utf8&zeroDateTimeBehavior=convertToNull&useSSL=false
  spring.shardingsphere.datasource.ds1.username = root
  spring.shardingsphere.datasource.ds1.password = 000000

  # 分庫(kù)策略 根據(jù)id取模確定數(shù)據(jù)進(jìn)哪個(gè)數(shù)據(jù)庫(kù)
  spring.shardingsphere.sharding.default-database-strategy.inline.sharding-column = id
  spring.shardingsphere.sharding.default-database-strategy.inline.algorithm-expression = ds$->{id % 2}

  # 具體分表策略
  # 節(jié)點(diǎn) ds0.t_order_0,ds0.t_order_1,ds1.t_order_0,ds1.t_order_1
  spring.shardingsphere.sharding.tables.t_order.actual-data-nodes = ds$->{0..1}.t_order_$->{0..2}
  # 分表字段id
  spring.shardingsphere.sharding.tables.t_order.table-strategy.inline.sharding-column = id
  # 分表策略 根據(jù)id取模,確定數(shù)據(jù)最終落在那個(gè)表中
  spring.shardingsphere.sharding.tables.t_order.table-strategy.inline.algorithm-expression = t_order_$->{id % 3}


  # 使用SNOWFLAKE算法生成主鍵
  spring.shardingsphere.sharding.tables.t_order.key-generator.column = id
  spring.shardingsphere.sharding.tables.t_order.key-generator.type = SNOWFLAKE

  #spring.shardingsphere.sharding.binding-tables=t_order

  spring.shardingsphere.props.sql.show = true

編寫(xiě)單元測(cè)試,查看結(jié)果是否正確

  public class OrderServiceImplTest extends BlogApplicationTests {
    @Autowired
    private OrderService orderService;


    @Test
    public void testSave(){
      for (int i = 0 ; i< 100 ; i++){
        Order order = new Order();
        order.setName("電腦"+i);
        order.setType("辦公");
        orderService.save(order);
      }
    }

    @Test
    public void testGetById(){
      long id = 1184489163202789377L;
      Order order = orderService.getById(id);
      System.out.println(order.toString());
    }
  }

在數(shù)據(jù)表中查看數(shù)據(jù),確認(rèn)數(shù)據(jù)正常插入

至此分庫(kù)分表開(kāi)發(fā)完成

以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。

相關(guān)文章

  • idea中springboot項(xiàng)目連接數(shù)據(jù)庫(kù)報(bào)錯(cuò)的原因解析

    idea中springboot項(xiàng)目連接數(shù)據(jù)庫(kù)報(bào)錯(cuò)的原因解析

    這篇文章主要介紹了idea中springboot項(xiàng)目連接數(shù)據(jù)庫(kù)報(bào)錯(cuò)的原因解析,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2020-12-12
  • JAVA中的FileWriter流解析

    JAVA中的FileWriter流解析

    這篇文章主要介紹了JAVA中的FileWriter流解析,FileWriter類(lèi)提供了多種寫(xiě)入字符的方法,包括寫(xiě)入單個(gè)字符、寫(xiě)入字符數(shù)組和寫(xiě)入字符串等,它還提供了一些其他的方法,如刷新緩沖區(qū)、關(guān)閉文件等,需要的朋友可以參考下
    2023-10-10
  • 實(shí)例詳解Java實(shí)現(xiàn)圖片與base64字符串之間的轉(zhuǎn)換

    實(shí)例詳解Java實(shí)現(xiàn)圖片與base64字符串之間的轉(zhuǎn)換

    這篇文章主要介紹了Java實(shí)現(xiàn)圖片與base64字符串之間的轉(zhuǎn)換實(shí)例代碼,非常不錯(cuò),具有參考借鑒價(jià)值,需要的朋友參考下
    2016-12-12
  • rocketmq消費(fèi)負(fù)載均衡--push消費(fèi)詳解

    rocketmq消費(fèi)負(fù)載均衡--push消費(fèi)詳解

    這篇文章主要介紹了rocketmq消費(fèi)負(fù)載均衡--push消費(fèi)詳解,本文介紹了DefaultMQPushConsumerImpl消費(fèi)者,客戶(hù)端負(fù)載均衡相關(guān)知識(shí)點(diǎn)。,需要的朋友可以參考下
    2019-06-06
  • Java中的zookeeper常用命令詳解

    Java中的zookeeper常用命令詳解

    這篇文章主要介紹了Java中的zookeeper常用命令,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2022-06-06
  • win7 64位系統(tǒng)JDK安裝配置環(huán)境變量教程

    win7 64位系統(tǒng)JDK安裝配置環(huán)境變量教程

    這篇文章主要為大家詳細(xì)介紹了win7 64位系統(tǒng)JDK安裝配置環(huán)境變量教程,感興趣的小伙伴們可以參考一下
    2016-06-06
  • Hystrix?Turbine聚合監(jiān)控的實(shí)現(xiàn)詳解

    Hystrix?Turbine聚合監(jiān)控的實(shí)現(xiàn)詳解

    微服務(wù)架構(gòu)下,?個(gè)微服務(wù)往往部署多個(gè)實(shí)例,如果每次只能查看單個(gè)實(shí)例的監(jiān)控,就需要經(jīng)常切換很不?便,在這樣的場(chǎng)景下,我們可以使??Hystrix?Turbine?進(jìn)?聚合監(jiān)控,它可以把相關(guān)微服務(wù)的監(jiān)控?cái)?shù)據(jù)聚合在?起,便于查看
    2022-09-09
  • 關(guān)于ArrayList初始化容量的問(wèn)題

    關(guān)于ArrayList初始化容量的問(wèn)題

    這篇文章主要介紹了關(guān)于ArrayList初始化容量的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2023-03-03
  • Mybatis動(dòng)態(tài)SQL的實(shí)現(xiàn)示例

    Mybatis動(dòng)態(tài)SQL的實(shí)現(xiàn)示例

    這篇文章主要介紹了Mybatis動(dòng)態(tài)SQL的實(shí)現(xiàn)示例,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2020-10-10
  • Java Convert Kotlin空指針異常的解決方法

    Java Convert Kotlin空指針異常的解決方法

    本文主要介紹了Java?Convert?Kotlin空指針異常的解決方法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2023-05-05

最新評(píng)論