绑定完请刷新页面
取消
刷新

分享好友

×
取消 复制
开源大数据比对平台(dataCompare)的建设和实践
2023-03-24 14:47:09

直播简介


内容简介:

dataCompare主要是大数据比对平台,主要作用如下

(1)采用界面交互、勾选的方式或者低代码的方式即可实现自动化数据校验对比,避免复杂SQL调试

(2)建立一套统一的数据校验标准,避免不同开发同学选取的标准不一致,比如:量级对比、一致性对比

(3)提升数据团队的验数比对效率,至少提升50%左右

目前已经支持如下功能:

(1)界面级交互数据对比任务配置,低代码少量配置快速生成对比任务

(2)量级对比、一致性对比、自动化差异case发现

(3)目前已经支持MySQL、Hive、Doris 等JDBC 数据库

(4)设置定时任务自动进行数据校验并发送校验报告


讲师介绍:

段小秋, 前京东、BAT 程序员,在大数据领域有多年实践经验,喜欢以网名(诸葛子房)在工作之余写一些文章总结,博客地址:http://blog.itpub.net/70026737/


分享好友

分享这个小栈给你的朋友们,一起进步吧。

开源秀
创建时间:2022-09-19 17:04:45
“开源秀”是IT168旗下ITPUB技术社区面向国内外开源技术提供的展示平台。本栏目将邀请国内外已经成功落地的开源项目和技术专家进行相关的主题分享和讨论,欢迎更多开源爱好者、开源贡献者和开源创作者来我们舞台展示自己。
展开
订阅须知

• 所有用户可根据关注领域订阅专区或所有专区

• 付费订阅:虚拟交易,一经交易不退款;若特殊情况,可3日内客服咨询

• 专区发布评论属默认订阅所评论专区(除付费小栈外)

栈主、嘉宾

查看更多
  • 安全频道
    栈主

小栈成员

查看更多
  • Gibson314
  • miemieMIA
  • 老鱼笔记
  • 韩楠
戳我,来吐槽~