用于存放平常常用的一些工具:
- 1.一键式生成整个前后端工具
- 2.一致性哈希工具
- 3.zookeeper客户端使用工具
- 4.高性能单机幂等工具
- 5.对象尺寸计算工具
- 6.BitMap工具
- 7.时间差字符展示工具
- 8.JSON格式化展示工具
- 9.yaml读取和转换工具
- 10.文件读取工具
- 11.数据非可逆压缩
- 12.身份证解析工具
- 13.分布式全局id
- 14.jar包动态加载工具
模板引擎:Freemarker
后端:
Orm:Neo框架
框架:spring-boot 2.0.4
前端:ant-design-pro
该工具执行完成之后,可以直接生成一个具备这样功能的控制台,增删改查,分页查询,界面搜索字段可以配置(根据字段是普通的还是枚举还是时间,分别对应输入框、下拉框和时间范围选择框),此外,如果字段是图片,还可以配置成图片展示,如果是时间则按照时间展示。
该工具分为两个类,前端一个后端一个,生成时候分别配置响应的参数,启动即可生成响应的配置,前端尽量使用simba-web这个作为基础模块,后端只需要创建好完全的空项目即可生成可执行的,但是maven的pom中需要引入如下几个。前后端执行完之后,运行,即可具备增删改查分页等各种常见的功能
注意: 该工具由于功能太多,因此独立出来为 Simba:脚手架工具 Simba-base-front:脚手架工具中的前端模板
类:ConsistentHashUtil
算法:一致性哈希算法
该工具提供了这么些方法供外部调用
// 服务的注册
public void registerServer(String serverName) {}
// 服务的删除
public void deleteServer(String serverName){}
// 判断id是否是位于对应的服务名字下的
public boolean judgeBelongTo(String targetServerName, Long id) {}
// 判断当前节点是否是最小的那个节点
public boolean isMinNode(String serverName){}
// 重新初始化数据
public void initServerRange(Map<String, ServerNode> serverRange){}
/**
* 注册拆分的回调
* @param splitHook pair:key为新增的服务名,value为被拆分的服务名
*/
public void registerSplitHook(BiConsumer<Pair<String, String>, ControlRange> splitHook){}
/**
* 注册合并的回调
* @param mergeHook pair:key为合并后的服务名,value为被删除的服务名
*/
public void registerMergeHook(BiConsumer<Pair<String, String>, ControlRange> mergeHook){}
类:zookeeperClient
<dependency>
<groupId>org.apache.zookeeper</groupId>
<artifactId>zookeeper</artifactId>
</dependency>
提供链接和创建节点(永久节点,临时节点,有序节点)
提供对指定路径的监听回调
// 单例模式
public static ZookeeperClient getInstance(){}
// 链接
public ZookeeperClient connect(String connectString) {}
// 添加根节点
public ZookeeperClient addRoot(String rootPath) {}
// 添加永久节点
public String addPersistentNode(String nodePath, String data){}
// 添加永久有序节点
public String addPersistentSeqNode(String nodePath, String data){}
// 添加临时节点
public String addEphemeralNode(String nodePath, String data){}
// 添加临时有序节点
public String addEphemeralSeqNode(String nodePath, String data){}
// 对指定路径添加监控
public void addWatch(String path){}
// 添加对应路径对应的子路径监控
public void addWatchChildren(String path) {}
// 添加监控路径,以及包括其子节点和子节点的子节点等等里面的所有节点都监控
public void addWatchPath(String... watchPath) {}
// 还有更多,不过还有些功能不完整,后面还要继续补充
该工具提供的是单机的幂等性,可以用于在一定时间(自定义的过期时间)内的存储量到100万条数据,占用内存(222.2M),此外如果还有更多数据,还可以提供外部系统存储和判断。
// 单例
public static Idempotency getInstance() {}
// 判断当前是否含有对应的数据,不包含则将对应的数据插入到缓存中
public boolean contain(Object... object) {}
// 设置数据的实效性,超过这个时间就会失效,失效之后,如果还有这样的消息过来,则认为新的消息是OK的
// 默认设置为20秒,向后延长20的mills
public Idempotency setExpire(Integer num, TimeUnit timeUnit) {}
// 提供可修改的最大值,默认100万
public Idempotency setMaxDataSize(Integer size){}
// 注册第三方存储的数据插入回调
public Idempotency registerInsertHook(BiConsumer<String, Long> insertHook){}
// 注册第三方存储的数据删除回调,
public Idempotency registerClearExpireHook(Runnable clearExpireHook){}
// 注册第三方存储的数据选择回调
public Idempotency registerSelectHook(Function<String, Long> selectHook){}
// 注册第三方存储的数据是否为空的回调
public Idempotency registerIsEmptyHook(Supplier<Boolean> isEmptyHook){}
该工具类算是布隆过滤器在数据为int时候的简化和优化版,内存可以更小,存储int,则可以通过128 * 2^20 个int即可存储所有的int数据,即2^32条数据,即大概40亿数据用512MB存储即可。
功能:
1.添加数据
2.清理数据
3.判断是否存在
4.插入数据的个数
// 单例模式
public static BitMap getInstance(){}
// 设置最大值,不设置,则用默认为128*2^20个int存储
public void setMaxValue(int size){}
// 数据插入
public void insert(int data) {}
// 数据判断
public boolean contain(int data){}
// 数据删除
public void delete(int data) {}
// 个数统计
public int count() {}
主要用于计算两个时间之间的差值,毫秒,秒,分钟,小时,天,周之间的转换,主要是字符的展示,在一些展示型的界面用
// 举例:4天 1分钟 12秒 132毫秒
public String parseDuration(Date date1, Date date2) {}
public String parseDurationWeek(Date date1, Date date2) {}
public String parseTime(long time) {}
// 举例:1周 1分钟 12秒 132毫秒
public String parseWeeks(long time) {}
主要是将json格式化的那个压缩的进行有格式化的展示
public String parseJson(String str) {}
提供yaml从配置路径,绝对路径读取文件为Map或者Property格式,也可以将yaml格式的内容转换为Map和Property格式
提供对SHA-256、SHA-512和MD5三种非可逆的压缩方式
提供身份证号码,可以通过身份证解析各种信息
1.解析地址:比如:安徽省合肥市庐阳区
2.解析生日:比如:19890312
3.解析男女:比如:男
4.解析星座(默认上面生日是阳历,如果是阴历则不准确):比如:双鱼座
5.解析年龄:比如:23
6.检验身份证号有效性:
/**
* 对象方法的所有用法
*/
@Test
@SneakyThrows
public void testParser(){
// 随便写的一个身份证号
String idCard = "150125199002027411";
// 获取单例对象
IdCardParser helper = IdCardParser.getInstance();
// 获取全国数据省市对应图
IdCardParser.initFromContent(FileUtil.readFromResource(this.getClass(), "/data/idAddress.json"));
helper.setIdCard(idCard);
// 身份证号的可用性:true
show(helper.valid());
// 解析地址,前提是函数initFromContent 调用,并将省市数据注入进去;返回:内蒙古自治区呼和浩特市武川县
show(helper.parseAddress());
SimpleDateFormat format = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
// 解析生日信息:返回:1990-02-02 00:00:00
show(format.format(helper.parseBirthday()));
// 解析性别:男,女,未知;返回:男
show(helper.parseGender());
// 解析星座:返回:水瓶座
show(helper.parseConstellation());
// 解析年龄:29
show(helper.parseAge());
}
该分布式id生成器,彻底解决了雪花算法存在的三个问题: 1.时间回拨问题 2.workerId的分配和回收问题 3.workerId的上限问题
其中业内对于前两个问题的解决方式都不是很完美,或者说是没有完全解决,而第三个问题,则就完全没有考虑。在这里Butterfly对上面三个问题进行了彻底的解决。算是完美解决了雪花算法存在的所有问题,而且性能比雪花算法还要高。
注意: 由于该功能方案比较复杂,已经独立出去,重新命名为Butterfly Butterfly
用于动态的将jar包加载到系统中,然后就可以使用Class.forname进行对类进行加载操作
// 单例化
public static TeaCup getInstance() {}
// 载入类
public Class<?> loadClass(String clsName){}
// 通过不同的方式将jar包读入进来
public void read(String jarRootPath) {}
public void read(URL url) {}
public void read(File file) {}
public void read(String... jarPath) {}
public void read(URL... urls) {}
public void read(File... jarPath) {}
该工具类主要用于计算布隆过滤器的数组大小和函数的个数
// 获取位数组的大小, n:实际数据大小, p:误判率
public long getBitsSize(long n, double p) {}
// long 获取哈希函数的最优个数, m:bitSize 位数组的bit个数, n:实际数据大小
public long getHashNum(long m, long n) {}