前言

这里列出来的只是我这个系统环境下遇到的问题，以及解决办法，不一定适用于所有人的情况。
选择4.1.1，是因为B站上的教程全都是这个版本。选择5.0+可能会找不到方向。

系统环境

CentOS Linux release 7.9.2009 (Core)
mysql-connector-java-5.1.49.jar
Sharding-Proxy使用docker来部署

问题列举

问题1

启动proxy时候报错

Type org.apache.shardingsphere.orchestration.center.yaml.config.YamlCenterRepositoryConfiguration not present

这里参考Sharding-Proxy分库分表。按这位大佬的说法，我的tar包是在Windows下解压的，会有文件名长度的问题=。=
问题是360解压也没报错，无语了。
总之，我在Linux下解压后，问题消失。

问题2

我在插入数据的时候，有如下报错

org.apache.shardingsphere.sql.parser.sql.segment.dml.expr.simple.ParameterMarkerExpressionSegment cannot be cast to org.apache.shardingsphere.sql.parser.sql.segment.dml.column.ColumnSegment

这里是我以为自己的4.1.1有BUG的时候，选择了4.1.0版本，遇到的问题。解决方法就是放弃了4.1.0=。=
参考某大佬链接

问题3

2Unknown exception: [no table route info]

目前测试发现，就是配置里有两处没对上。

shardingRule:tables:ods_exp_pre_in:actualDataNodes: sharding_db.ods_exp_pre_in_s$->{0..2}tableStrategy: inline:shardingColumn: idalgorithmExpression: ods_exp_pre_in_s$->{id % 3}

actualDataNodes和algorithmExpression所写的表达上必须要能对上号，错一点就会报这个错误。

问题4

我在插入数据的时候，发现proxy没有分片操作。我设置的是一个逻辑表分成三个实体表存。
结果在插入一行测试数据后发现，三个实体表里全都有这条数据。
而在查逻辑表的时候会返回三条一样的数据。
我没写过Java，没法从源码里找答案，网上也没有查到类似情况。
给我感觉是，程序将我的这张逻辑表视为广播表了。

# 原来的config-sharding.yaml配置
shardingRule:tables:ods_exp_pre_in:actualDataNodes: sharding_db.ods_exp_pre_in_s$->{0..2}tableStrategy: inline:shardingColumn: hs_codealgorithmExpression: ods_exp_pre_in_s$->{hs_code % 3}keyGenerator:type: SNOWFLAKEcolumn: hs_code

我之后去B站看了有关教程，排除这个是官方BUG的可能性。
最后想起来hs_code是字符串，可能在algorithmExpression运算时候出错了。
我把hs_code替换为int类型的id字段后，问题解决。

# 修改后的配置
shardingRule:tables:ods_exp_pre_in:actualDataNodes: sharding_db.ods_exp_pre_in_s$->{0..2}tableStrategy: inline:shardingColumn: idalgorithmExpression: ods_exp_pre_in_s$->{id % 3}keyGenerator:type: SNOWFLAKEcolumn: hs_code

额外问题1

若有如上的配置问题，目前还发现了三种情况会报如下错误

2Unknown exception: [No signature of method: java.lang.String.mod() is applicable for argument types: (java.lang.Integer) values: [3]
Possible solutions: drop(int), any(), find(), use([Ljava.lang.Object;), is(java.lang.Object), take(int)]

1.Kettle的“表输出”插件。
2.Python的pymysql库使用executemany
进一步的，我发现了一个奇怪的地方：

INSERT INTO logic_db.ods_imp_pre_in
VALUES(1, NULL, NULL, "3780017", NULL, "2016-01-01", "394068602", "BG EXPLORATION AND PRODUCTION INDIA LTD", "BG HOUSE,LAKE BOULEVARD,HIRANANDANI BUSINESS PARK,POWAI", "400076", "MUMBAI,MAHARASHTRA", NULL, NULL, NULL, NULL, NULL, "SCHLUMBERGER RESERVOIR PRODUCTS FZE", "P.O.BOX. 18070, JEBEL ALI FREE ZONE, DUBAIUnited Arab Emirates", NULL, "73079990", "CLAMPS FOR SECURING CONTROL LINES OVER 3-1/2 TUBING COUPLING (QTY 200 NOS UNIT PRICE 54 USD) (OILFIELD SUPPLIES)", 1010.000000, "KGS", NULL, 10.800000, NULL, 10908.000000, "USD", 725.760000, 733017.580000, "INR", NULL, 0.000000, 2, 10867.569755, 67.199998, 67.450000, "4A", NULL, "ARYA OFFSHORE SERVICES PVT LTD", NULL, "CN", "China", NULL, "IN", "India", "INNSA1", "Nhava Sheva Sea", NULL, "IN_2016_IMP")
;

INSERT语句中，若使用的双引号标记字符串，就会重复插入数据。
若用单引号，则会发生上述报错。
目前暂时不知道原因是啥。

额外问题2

若想用hs_code（字符串）来分片，可以用将hs_code转化为数字，再去mod。

shardingRule:tables:ods_exp_pre_in:actualDataNodes: sharding_db.ods_exp_pre_in_s$->{0..2}tableStrategy: inline:shardingColumn: hs_codealgorithmExpression: ods_exp_pre_in_s$->{hs_code.toInteger() % 3}keyGenerator:type: SNOWFLAKEcolumn: hs_code

额外问题3

若想用日期来做分片，则可以依照如下方法进行。

shardingRule:tables:ods_exp_pre_in:actualDataNodes: sharding_db.ods_exp_pre_in_s20190${1..9}, sharding_db.ods_exp_pre_in_s20191${0..2} tableStrategy: inline:shardingColumn: registration_datealgorithmExpression: ods_exp_pre_in_s${Date.parse('yyyy-MM-dd 00:00:00', registration_date).format('yyyyMM')}

我这边的样例数据都是2019年的，所以actualDataNodes里直接写死了2019,。
另外，这里有个我没想到的点。registration_date在数据库里是date类型，而读取出来后成了字符串类型，所以我本来的行表达式是registration_date.format(‘yyyyMM’)，饶了很久才发现可能是数据类型问题。
若有知道怎么查详细日志的朋友，还请给我留言告知一下。我只设置了sql.show: true，光这么配置没法知道algorithmExpression具体被解析成什么样了。找不到表就只有一个报错：no table route info

未完待续

笔记：部署Sharding-Proxy4.1.1时遇到的坑（持续更新中。。。）相关推荐

【计算机网络】从零开始的个人网站1 从部署轻量应用服务器到搭建简易网站（持续更新中！）
文章目录 1. 部署服务器 (1) 为什么要使用云服务器 (2) 购买云服务器 (3) 服务器基本配置 (4) 远程连接服务器 (5) 安装宝塔面板 2. 搭建简易个人网站 (1) 通过宝塔面板建站 ...
Go语言开发学习笔记（持续更新中）
Go语言开发学习笔记(持续更新中) 仅供自我学习更好的文档请选择下方 https://studygolang.com/pkgdoc https://www.topgoer.com/go%E5%9F% ...
C语言学习笔记Day3——持续更新中... ...
上一篇文章C语言学习笔记Day2--持续更新中- - 八. 容器 1. 一维数组 1.1 什么是一维数组当数组中每个元素都只带有一个下标(第一个元素的下标为0, 第二个元素的下标为1, 以此类推)时 ...
C语言笔记系列文章索引目录表（持续更新中......）
前言: 都快大三了,想起大一的时候学C语言,什么都不懂.由于对语言不是很了解,也就没有认真学习.其实C语言在计算机行业中还是比较重要的一门基础课程.虽然现在的开发基本不会用C,但它是母语这是毋庸置疑的 ...
C++学习笔记目录链接（持续更新中）
学习目标: C++学习笔记目录链接(持续更新中,未完待续) 学习内容: 序号链接 0 C++ 常见bug记录(持续记录中) 1 C++学习笔记1[数据类型] 2 C++学习笔记2[表达式与语句] 3 ...
【第十三届蓝桥杯备战】C/C++解题时的一些个人小技巧和注意事项(持续更新中)
[第十三届蓝桥杯备战]C/C++解题时的一些个人小技巧和注意事项(持续更新中) 输入输出数组数据结构 1. 线段树调试 References 先说一些废话:我最近觉得写算法题就像是打格斗游戏一样 ...
【前端基础知识笔记】【项目导向型】（持续更新中）
我在做项目的过程中,学习了一些前端基础知识.为了方便以后的查询,将这些知识集中在这篇博客中,方便以后的查询. 注意!这些知识是不成体系的,因为我只是按照遇到的先后顺序记载于此.这是为了方便结合项目开发 ...
SpringCloud学习笔记，课程源自黑马程序员，笔记持续更新中...
@SpringCloud+RabbitMQ+Docker+Redis+搜索+分布式: 学习内容 1.服务拆分-服务远程调用: 2.搭建eureka服务: 2.1.eureka服务注册-client 2 ...
python基础笔记，超详细，包含面向对象基础，爬虫实战【持续更新中...】
前言: 本笔记中的函数和方法同义,面向python3 本笔记部分概念及代码由newbing搜集整理得出本笔记适合有一定其他编程语言基础的同学,因为笔记中省略了部分基础概念(比如整型,浮点型等基本数据 ...
native react ssh_React Native踩坑笔记（持续更新中...）
最近发现市场上对React Native开发人员的需求挺多的,自己就想学习一下React Native,多一门技术,好将来买个好价位.嘿嘿! 在学习React Native中碰到了不少坑,再次记录下来 ...

笔记：部署Sharding-Proxy4.1.1时遇到的坑（持续更新中。。。）

前言