大数据平台数据服务框架。实现了Kafka实时数据过滤、清洗、转换、消费,实现了Spark SQL对Redis、MongoDB等非关系型数据库的数据的读写;集成了规则引擎,可基于规则引擎实现客户标签、画像等相关功能。
mysql、oracle、sqlServer 数据库之间 表数据同步服务
支持低版本sqlserver的flinkCDC项目
使用paddle来做NER任务
PrestoDB for ClickHouse Connector
presto的oracle驱动插件,支持与oracle跨库查询
对比数据库表结构差异,并生成补齐差异的sql
根据数据质量报告Excel文件,批量处理,批量生成数据质量问题详情报告(txt格式)
RxJob结合ruoyi和xxlJob,重构一套支持多用户、多项目组管理企业化任务调度平台,权限更细粒度,任务权限更明确的。
Vue+Springboot+MongoDB+HDFS搭建网盘系统