saprkStreaming实时处理项目, 实现了5s以内的实时处理,适合简单的业务处理。 主要使用的技术栈为kafka、SparkStreaming、redis、ES、Kibana、springboot; 使用scala进行编程
该项目分为四层 ODS层:分别将log服务器数据和业务服务器数据直发到kafka; DWD: 1) 日志数据:分流; 2) 业务数据:按表进行分层 DWS
空文件
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。