分库分表中表不存在的问题

Question

我想请教一个问题，数据库a有stu1，数据库有stu1、stu2，使用shardingjdbc和java、mybatisplus技术，实现分库分表，在算法类会出现这样的问题：如果分表算法类直接返回stu1、stu2，分库算法类也直接返回a、b,最终是不是会去查询a.stu1，a.stu2，b.stu1，b.stu2？我的疑惑在于数据库a是没有stu2的，这样会报错嘛，如果会该怎么解决这个问题？

Answer 1

引自免费微信小程序：皆我百晓生

在分库分表场景下，使用ShardingJDBC结合MyBatisPlus时，确实需要考虑逻辑与物理表名不完全匹配的情况。对于你提出的问题，当分表算法可能指向一个数据库中并不存在的表时，这确实会导致运行时错误。

为了解决这一问题，有几种策略可以采取：

1. 动态SQL

在查询语句中动态构建表名，确保只查询存在的表。这可以通过MyBatisPlus的@TableField注解配合动态SQL插件实现。然而，这种方法增加了代码的复杂性，并且需要对每个可能的表进行手动处理。

2. 分布式事务

如果业务允许，可以将数据写入操作设计为跨库事务的一部分。但是，这通常会增加系统的复杂性和性能开销。

3. 配置Sharding规则

更推荐的做法是在ShardingJDBC的配置中明确指定分库分表规则，确保逻辑表和实际数据库中的物理表对应关系正确无误。例如，如果数据库A中只有stu1表，而数据库B中有stu1和stu2表，那么你应该在Sharding规则中配置相应的逻辑表到物理表的映射。

示例配置：

ShardingRuleConfiguration shardingRuleConfig = new ShardingRuleConfiguration();
// 定义数据源
DataSourceRuleConfiguration dataSourceRuleConfig = new DataSourceRuleConfiguration();
dataSourceRuleConfig.put("ds0", "jdbc:mysql://localhost:3306/db_a");
dataSourceRuleConfig.put("ds1", "jdbc:mysql://localhost:3306/db_b");

// 定义表规则
TableRuleConfiguration stu1RuleConfig = new TableRuleConfiguration("t_stu", "ds0.t_stu1");
TableRuleConfiguration stu2RuleConfig = new TableRuleConfiguration("t_stu", "ds1.t_stu2");

// 添加规则
shardingRuleConfig.getTableRuleConfigs().add(stu1RuleConfig);
shardingRuleConfig.getTableRuleConfigs().add(stu2RuleConfig);

// 设置默认的数据源
shardingRuleConfig.setDefaultDataSourceName("ds0");

// 创建ShardingSphereDataSource
ShardingSphereDataSource dataSource = ShardingSphereDataSourceFactory.createDataSource(dataSourceRuleConfig, shardingRuleConfig, new Properties());

4. 算法优化

调整分表算法，使其在生成逻辑表名时考虑数据库中实际存在的物理表。例如，可以引入一个预定义的映射关系，或者在算法中加入逻辑判断，检查特定数据库中是否存在目标表。

5. 数据迁移/同步

如果可能，将所有必要的表复制到每个数据库中，或者设置数据同步机制，保证数据的一致性。虽然这增加了存储成本，但可以简化分库分表的逻辑。

结论

最有效的解决方案通常是结合使用上述方法中的几种，特别是通过配置Sharding规则和优化分表算法。这样可以确保查询只针对存在且正确的表执行，同时保持系统的健壮性和可维护性。