Git Product home page Git Product logo

doramon's Introduction

Doraemon

用于存放平常常用的一些工具:

1.一键式生成整个前后端工具

模块:

simba和simba-web

技术:

模板引擎:Freemarker
后端:
Orm:Neo框架
框架:spring-boot 2.0.4
前端:ant-design-pro

说明:

该工具执行完成之后,可以直接生成一个具备这样功能的控制台,增删改查,分页查询,界面搜索字段可以配置(根据字段是普通的还是枚举还是时间,分别对应输入框、下拉框和时间范围选择框),此外,如果字段是图片,还可以配置成图片展示,如果是时间则按照时间展示。
该工具分为两个类,前端一个后端一个,生成时候分别配置响应的参数,启动即可生成响应的配置,前端尽量使用simba-web这个作为基础模块,后端只需要创建好完全的空项目即可生成可执行的,但是maven的pom中需要引入如下几个。前后端执行完之后,运行,即可具备增删改查分页等各种常见的功能

注意: 该工具由于功能太多,因此独立出来为 Simba:脚手架工具 Simba-base-front:脚手架工具中的前端模板

2.一致性哈希工具

模块:

Ocean

技术:

类:ConsistentHashUtil
算法:一致性哈希算法

说明:

该工具提供了这么些方法供外部调用

// 服务的注册
public void registerServer(String serverName) {}
// 服务的删除
public void deleteServer(String serverName){}
// 判断id是否是位于对应的服务名字下的
public boolean judgeBelongTo(String targetServerName, Long id) {}
// 判断当前节点是否是最小的那个节点
public boolean isMinNode(String serverName){}
// 重新初始化数据
public void initServerRange(Map<String, ServerNode> serverRange){}

/**
* 注册拆分的回调
* @param splitHook pair:key为新增的服务名,value为被拆分的服务名
*/
public void registerSplitHook(BiConsumer<Pair<String, String>, ControlRange> splitHook){}
/**
* 注册合并的回调
* @param mergeHook pair:key为合并后的服务名,value为被删除的服务名
*/
public void registerMergeHook(BiConsumer<Pair<String, String>, ControlRange> mergeHook){}

3.zookeeper客户端使用工具

模块:

Ocean

技术:

类:zookeeperClient

<dependency>
    <groupId>org.apache.zookeeper</groupId>
    <artifactId>zookeeper</artifactId>
</dependency>

说明:

提供链接和创建节点(永久节点,临时节点,有序节点)
提供对指定路径的监听回调

// 单例模式
public static ZookeeperClient getInstance(){}
// 链接
public ZookeeperClient connect(String connectString) {}

// 添加根节点
public ZookeeperClient addRoot(String rootPath) {}
// 添加永久节点
public String addPersistentNode(String nodePath, String data){}
// 添加永久有序节点
public String addPersistentSeqNode(String nodePath, String data){}
// 添加临时节点
public String addEphemeralNode(String nodePath, String data){}
// 添加临时有序节点
public String addEphemeralSeqNode(String nodePath, String data){}

// 对指定路径添加监控
public void addWatch(String path){}
// 添加对应路径对应的子路径监控
public void addWatchChildren(String path) {}
// 添加监控路径,以及包括其子节点和子节点的子节点等等里面的所有节点都监控
public void addWatchPath(String... watchPath) {}

// 还有更多,不过还有些功能不完整,后面还要继续补充

4.高性能单机幂等工具

模块:

Ocean

技术:

类:Idempotency

说明:

该工具提供的是单机的幂等性,可以用于在一定时间(自定义的过期时间)内的存储量到100万条数据,占用内存(222.2M),此外如果还有更多数据,还可以提供外部系统存储和判断。

// 单例
public static Idempotency getInstance() {}

// 判断当前是否含有对应的数据,不包含则将对应的数据插入到缓存中
public boolean contain(Object... object) {}

// 设置数据的实效性,超过这个时间就会失效,失效之后,如果还有这样的消息过来,则认为新的消息是OK的
// 默认设置为20秒,向后延长20的mills
public Idempotency setExpire(Integer num, TimeUnit timeUnit) {}

// 提供可修改的最大值,默认100万
public Idempotency setMaxDataSize(Integer size){}

// 注册第三方存储的数据插入回调
public Idempotency registerInsertHook(BiConsumer<String, Long> insertHook){}
// 注册第三方存储的数据删除回调,
public Idempotency registerClearExpireHook(Runnable clearExpireHook){}
// 注册第三方存储的数据选择回调
public Idempotency registerSelectHook(Function<String, Long> selectHook){}
// 注册第三方存储的数据是否为空的回调
public Idempotency registerIsEmptyHook(Supplier<Boolean> isEmptyHook){}

5.对象尺寸计算工具

模块:

Ocean

技术:

类:SizeUtil

说明:

只是利用lucence的工具包,简单封装了下

6.BitMap工具

模块:

Ocean

技术:

类:BitMap

说明:

该工具类算是布隆过滤器在数据为int时候的简化和优化版,内存可以更小,存储int,则可以通过128 * 2^20 个int即可存储所有的int数据,即2^32条数据,即大概40亿数据用512MB存储即可。
功能:
1.添加数据
2.清理数据
3.判断是否存在
4.插入数据的个数

// 单例模式
public static BitMap getInstance(){}

// 设置最大值,不设置,则用默认为128*2^20个int存储
public void setMaxValue(int size){}
// 数据插入
public void insert(int data) {}
// 数据判断
public boolean contain(int data){}
// 数据删除
public void delete(int data) {}
// 个数统计
public int count() {}

7.时间差字符展示工具

模块:

Ocean

技术:

类:TimeStrUtil

说明:

主要用于计算两个时间之间的差值,毫秒,秒,分钟,小时,天,周之间的转换,主要是字符的展示,在一些展示型的界面用

// 举例:4天 1分钟 12秒 132毫秒
public String parseDuration(Date date1, Date date2) {}
public String parseDurationWeek(Date date1, Date date2) {}
public String parseTime(long time) {}
// 举例:1周 1分钟 12秒 132毫秒
public String parseWeeks(long time) {}

8.JSON格式化展示工具

模块:

Ocean

技术:

类:StringTypeUtil

说明:

主要是将json格式化的那个压缩的进行有格式化的展示

public String parseJson(String str) {}

9.yaml读取和转换工具

模块:

Ocean

技术:

类:YmlUtil

说明:

提供yaml从配置路径,绝对路径读取文件为Map或者Property格式,也可以将yaml格式的内容转换为Map和Property格式

10.文件读取工具

模块:

Ocean

技术:

类:FileUtil

说明:

对常见文件的各种读写

11.数据非可逆压缩

模块:

Ocean

技术:

类:EncryUtil

说明:

提供对SHA-256、SHA-512和MD5三种非可逆的压缩方式

12.身份证解析工具

模块:

Ocean

技术:

类:IdCardParser

说明:

提供身份证号码,可以通过身份证解析各种信息
1.解析地址:比如:安徽省合肥市庐阳区
2.解析生日:比如:19890312
3.解析男女:比如:男
4.解析星座(默认上面生日是阳历,如果是阴历则不准确):比如:双鱼座
5.解析年龄:比如:23
6.检验身份证号有效性:

    /**
     * 对象方法的所有用法
     */
    @Test
    @SneakyThrows
    public void testParser(){
        // 随便写的一个身份证号
        String idCard = "150125199002027411";
        // 获取单例对象
        IdCardParser helper = IdCardParser.getInstance();
        // 获取全国数据省市对应图
        IdCardParser.initFromContent(FileUtil.readFromResource(this.getClass(), "/data/idAddress.json"));
        helper.setIdCard(idCard);

        // 身份证号的可用性:true
        show(helper.valid());
        // 解析地址,前提是函数initFromContent 调用,并将省市数据注入进去;返回:内蒙古自治区呼和浩特市武川县
        show(helper.parseAddress());

        SimpleDateFormat format = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
        // 解析生日信息:返回:1990-02-02 00:00:00
        show(format.format(helper.parseBirthday()));

        // 解析性别:男,女,未知;返回:男
        show(helper.parseGender());
        // 解析星座:返回:水瓶座
        show(helper.parseConstellation());
        // 解析年龄:29
        show(helper.parseAge());
    }

13.分布式全局id

该分布式id生成器,彻底解决了雪花算法存在的三个问题: 1.时间回拨问题 2.workerId的分配和回收问题 3.workerId的上限问题

其中业内对于前两个问题的解决方式都不是很完美,或者说是没有完全解决,而第三个问题,则就完全没有考虑。在这里Butterfly对上面三个问题进行了彻底的解决。算是完美解决了雪花算法存在的所有问题,而且性能比雪花算法还要高。

注意: 由于该功能方案比较复杂,已经独立出去,重新命名为Butterfly Butterfly

14.jar包动态加载工具

模块:

Ocean

技术:

类:TeaCup

说明:

用于动态的将jar包加载到系统中,然后就可以使用Class.forname进行对类进行加载操作

// 单例化
public static TeaCup getInstance() {}

// 载入类
public Class<?> loadClass(String clsName){}

// 通过不同的方式将jar包读入进来
public void read(String jarRootPath) {}
public void read(URL url) {}
public void read(File file) {}
public void read(String... jarPath) {}
public void read(URL... urls) {}
public void read(File... jarPath) {}

15.布隆过滤器计算工具

模块:

Ocean

技术:

类:zookeeperClient

说明:

该工具类主要用于计算布隆过滤器的数组大小和函数的个数

// 获取位数组的大小, n:实际数据大小, p:误判率
public long getBitsSize(long n, double p) {}
// long 获取哈希函数的最优个数, m:bitSize 位数组的bit个数, n:实际数据大小
public long getHashNum(long m, long n) {}

doramon's People

Contributors

simonalong avatar

Watchers

 avatar

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.