设计
应用场景
使用教程
预览
dbsyncer是一款开源的数据同步中间件,提供mysql、oracle、sqlserver、postgresql、elasticsearch(es)、kafka、file、sql等同步场景。
支持上传插件自定义同步转换业务,提供监控全量和增量数据统计图、应用性能预警等。
特点
组合驱动 ,自定义库同步到库组合,关系型数据库与非关系型之间组合,任意搭配表同步映射关系
实时监控 ,驱动全量或增量实时同步运行状态、结果、同步日志和系统日志
开发插件 ,自定义转化同步逻辑
设计
架构图
基于 spring boot + mybatis plus + vue & element 实现的后台管理系统 + 用户小程序,支持 rbac 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能
项目地址:https://github.com/yunaiv/ruoyi-vue-pro
视频教程:https://doc.iocoder.cn/video/
应用场景
连接器 数据源 目标源 支持版本(包含以下)
mysql 5.7.19以上
oracle 10gr2 -11g
sqlserver 2008以上
postgresql 9.5.25以上
es 6.0以上
kafka 开发中 2.10-0.9.0.0以上
file *.txt, *.unl
sql 支持以上关系型数据库
后期计划 redis
基于 spring cloud alibaba + gateway + nacos + rocketmq + vue & element 实现的后台管理系统 + 用户小程序,支持 rbac 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能
项目地址:https://github.com/yunaiv/yudao-cloud
视频教程:https://doc.iocoder.cn/video/
使用教程
1.启动 代理 和 数据库 服务
2.准备测试账号,test
3.分配sysadmin角色
4.分配指定数据库权限
postgresql
通过复制流技术监听增量事件,基于内置插件pgoutput、test_decoding实现解析wal日志
1、修改postgresql.conf文件,重启服务
wal_level=logical
2、授予账号权限login和replication
file
监听文件修改时间得到变化文件,通过文件偏移量读取最新数据
https://gitee.com/ghi/dbsyncer/issues/i55ep5
es
定时获取增量数据。
账号具有访问权限。
日志
建议mysql、sqlserver、postgresql都使用日志
定时
假设源表数据格式
预览
驱动管理
驱动详情
驱动表字段关系配置
监控
上传插件
开源地址
iQOO新旗舰机曝光将搭载骁龙865平台并配备了LPDDR5内存
将 GaN 技术推向新的阶段
光电池用途及应用
你所不知道的linux匿名管道知识详解
浅谈螺杆式压缩机的工作过程及工作原理
DBSyncer支持多种数据源和预警功能
腾讯医疗人工智能与医疗科技发展论坛在深圳举行
英特尔推出AI平台Articul8,提供全栈GenAI软件平台
Huami在印度重新推出了Amazfit Verge Lite
三相异步电动机的机械特性
SAMP流程生成准确的跟踪掩膜的技术解析
日本半导体公司旭化成就遭遇大火
三相异步电动机正反转电气控制线路
电位器质量判断
图解华为昇腾310的用途以及设计细节
普通键盘接口转PS 2键盘转接器
LG将重组手机部门,将研发重心集中在高端智能手机上
高通发布了新型处理器Snapdragon 678
MEMS压力传感器在智能家电中的应用
如何以较少电容达到更快速的瞬时响应