重磅来袭 | 尚硅谷在线教育大数据项目发布

经过长期的精心打磨，仔细推演，隆重推出在线教育大数据项目！本套教程堪称在线教育行业大数据处理领域的重磅之作，项目借助真实在线教育行业的海量业务数据和用户日志数据，构建了完整的数据采集、分析、处理、展示通道，严格遵循主流数据仓库建模理论，搭建了高效率、高组织性、高可实施性的数仓架构体系。

教程共分三大部分：采集系统、离线数仓、实时数仓。项目拥有完善的离线指标体系和实时指标体系，各指标体系均进行了完整的指标拆解与分析，形成了庞大的指标网络。涵盖40多个Shell脚本，5大类用户行为日志数据，30多张业务数据原始表格，100多张数仓分层表，分析展示了上百个离线指标、几十个实时指标。

项目采用MaxWell和DataX作为数据采集工具，灵活设计数据采集策略，将采集来的数据同时服务于离线数仓和实时数仓。结合阿里巴巴成熟的数仓构建实践，总结出一套数仓建模理论体系，并梳理出通用的数仓建模步骤。分别使用Hive和Flink构建离线数仓和实时数仓，采用了流行的任务流调度系统DolphinScheduler。