binghe001 / mykit-db-sync Goto Github PK

🔥🔥🔥 mykit中分离出的强大的数据库同步工具——mykit-db-sync。基于java开发的功能强大、配置灵活的数据库同步工具，目前支持MySQL、SQL Server和Oracle数据库的同步，在实际应用场景中，我们经常需要定期将一个数据库的数据同步到另外一个数据库中，常见的一种做法是将源数据库的数据dump为sql文件，然后到目标数据库执行sql文件完成数据库的导入，但是这种方法至少存在以下问题： - 需要手工操作，效率低 - 当涉及数据表较多时，容易遗漏、出错 - 如果要定期同步，操作人容易忘记 - 难以应付频繁变更数据表或者字段针对以上存在的问题，将珍贵人力从这种重复、无意义的工作中解脱出来，特意开发这个小工具

License: Apache License 2.0

Java 100.00%

mykit-db-sync's Introduction

作者及联系方式

作者：冰河
微信：sun_shine_lyz
QQ：2711098650
微信公众号：冰河技术

mykit-db-sync

mykit中分离出的强大数据数据库同步工具——mykit-db-sync
基于java开发的功能强大、配置灵活的数据库之间同步工具，和数据产生器一样，均是前段时间因为项目需要编写的小工具，在实际应用场景中，我们经常需要定期将一个数据库的数据同步到另外一个数据库中，常见的一种做法是将源数据库的数据dump为sql文件，然后到目标数据库执行sql文件完成数据库的导入，但是这种方法至少存在以下问题：

需要手工操作，效率低
当涉及数据表较多时，容易遗漏、出错
如果要定期同步，操作人容易忘记
难以应付频繁变更数据表或者字段

针对以上存在的问题，将珍贵人力从这种重复、无意义的工作中解脱出来，特意开发这个小工具，目前源数据库为任何支持sql语法的数据库，目标数据库支持MySQL、SQL Server和Oracle数据库

主要模块

mykit-db-common

提供通用的工具类

mykit-db-transfer

MySQL、SQL Server和Oracle数据互传模块，使用此模块可以实现MySQL、SQL Server和Oracle数据库之间的数据互传功能

mykit-db-oracle

基于Logminer实现Oracle与Oracle数据库之间的数据传输，支持表结构变化的传输

主要功能

mykit-db-common

提供通用的工具类

mykit-db-transfer

详见：《mykit-db-transfer功能说明》

mykit-db-oracle

详见：《mykit-db-oracle功能说明》

扫一扫关注微信公众号

你在刷抖音，玩游戏的时候，别人都在这里学习，成长，提升，人与人最大的差距其实就是思维。你可能不信，优秀的人，总是在一起。

扫一扫关注冰河技术微信公众号

mykit-db-sync's People

Contributors

Stargazers

Watchers

Forkers

achilles78 keliveshd wuce7758 jerrywyj liyanyang0316 pologood iwordz bigrats tom2jack lim417dev firegladtang vipfzh jsyzjhj mrwhitesike ztz2018 paopaofish delbertwong bosoftware taot168 informationx tmluwei yizuoming hellin kenuoseclab tonyluo zouzoucn wangjinhai2015 xyxiaoyou shfzhangjian 1447387988 baiyunli1985 wilburli viyond xiejiajun ryanxu-jn talklessdomore555 zhoujia abnerwhite 552301 fucora kerving16 18159412089 fryghost llzgsh guopj2016 dystudio tsingfu wangscript007 jiyulongxu zhangrl guianchen langzime flylee85 j3com skyydq icegone dantefung zhuyee sangyuruo jurafish liangxiaozhe ranzj lydiagithub wuzedong mankaihuang oskampung jackleitao baiyufeng liudouding45 nianhongdong radtek outbrave loganmatrix tanghailan lsicbc lxw804 tsistelymo alibabap8developer yangmain missservice crankwang changhr2013 cnopens stevecris code-89757

mykit-db-sync's Issues

百万级别的表.这个直接是一次性吗？

时间类型的数据为null的话报错

Data truncation: Incorrect date value: 'null' for column 'symptoms_time' at row 3
SQL执行出错，请检查是否存在语法错误

从oracle同步数据到mysql中遇到问题

做了定时任务，时间到了，打印了开始执行任务，但是没有同步成功，什么反应也没有，日志如下
16:00:01.003 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.simpl.PropertySettingJobFactory - Producing instance of Job '4500000001.job-3', class=io.mykit.db.transfer.task.JobTask 16:00:01.008 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.core.QuartzSchedulerThread - batch acquisition of 1 triggers 16:00:01.008 [DefaultQuartzScheduler_Worker-1] DEBUG org.quartz.core.JobRunShell - Calling execute on job 4500000001.job-3 16:00:01.009 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.simpl.PropertySettingJobFactory - Producing instance of Job '4500000001.job-4', class=io.mykit.db.transfer.task.JobTask 16:00:01.009 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.core.QuartzSchedulerThread - batch acquisition of 1 triggers 16:00:01.009 [DefaultQuartzScheduler_Worker-2] DEBUG org.quartz.core.JobRunShell - Calling execute on job 4500000001.job-4 16:00:01.009 [DefaultQuartzScheduler_Worker-1] INFO io.mykit.db.transfer.task.JobTask - 开始任务调度: 2020-09-23 16:00:01 16:00:01.010 [DefaultQuartzScheduler_Worker-2] INFO io.mykit.db.transfer.task.JobTask - 开始任务调度: 2020-09-23 16:00:01 16:00:01.010 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.simpl.PropertySettingJobFactory - Producing instance of Job '4500000001.job-5', class=io.mykit.db.transfer.task.JobTask 16:00:01.010 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.core.QuartzSchedulerThread - batch acquisition of 0 triggers 16:00:01.011 [DefaultQuartzScheduler_Worker-3] DEBUG org.quartz.core.JobRunShell - Calling execute on job 4500000001.job-5 16:00:01.011 [DefaultQuartzScheduler_Worker-3] INFO io.mykit.db.transfer.task.JobTask - 开始任务调度: 2020-09-23 16:00:01 16:00:16.604 [DefaultQuartzScheduler_Worker-1] INFO com.alibaba.druid.pool.DruidDataSource - {dataSource-1} inited 16:00:18.050 [DefaultQuartzScheduler_Worker-2] INFO com.alibaba.druid.pool.DruidDataSource - {dataSource-2} inited 16:00:30.430 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.core.QuartzSchedulerThread - batch acquisition of 0 triggers 16:00:36.046 [DefaultQuartzScheduler_Worker-3] INFO com.alibaba.druid.pool.DruidDataSource - {dataSource-3} inited 16:00:57.393 [DefaultQuartzScheduler_QuartzSchedulerThread] DEBUG org.quartz.core.QuartzSchedulerThread - batch acquisition of 0 triggers

binghe001 / mykit-db-sync Goto Github PK

mykit-db-sync's Introduction

作者及联系方式

推荐使用mykit-data

mykit-db-sync

主要模块

mykit-db-common

mykit-db-transfer

mykit-db-oracle

主要功能

mykit-db-common

mykit-db-transfer

mykit-db-oracle

扫一扫关注微信公众号

mykit-db-sync's People

Contributors

Stargazers

Watchers

Forkers

mykit-db-sync's Issues

Recommend Projects

Recommend Topics

Recommend Org