首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    知行教育大数据分析数仓项目_面试题精华版

    1.简介一下当前这个项目 能够介绍一下你写的项目: 我们这个大数据项目主要是解决了教育行业的一些痛点。 首先,受互联网+概念,疫情影响,在线教育,K12教育等发展火热,越来越多的平台机构涌现。但是由于信息的共享利用不充分,导致企业多年积累了大量数据,而因为信息孤岛的问题,一直没有对这些数据进一步挖掘分析,因此也不能给企业的管理决策层提供有效的数据支撑。 有鉴于此,我们做的这个教育大数据分析平台项目,将大数据技术应用于教育行业,用擅长分析的OLAP系统为企业经营提供数据支撑。具体的实现思路是,先建立企业的数据仓库,把分散的业务数据预处理,其次根据业务需求从海量的用户行为数据挖掘分析,定制出多维的数据集合,形成数据集市,供各个场景主题使用,最后用BI工具,进行前端展示。 用到的技术架构包括:mysql,sqoop,基于CM的Hive,Oozie和FineBi。由于OLTP系统中数据大多存储在mysql,所以我们最终选择Sqoop作为导入导出工具,抽取数据到数仓,并使用基于CM管理的Hive进行数据清洗+分析,然后sqoop导出到mysql,最后用FineBI展示OLAP的数据分析结果。 所以,我们的技术解决了企业的三大痛点。一是数据量太大问题,传统数据库无法满足;二是系统多,数据分散问题,无法解决数据孤岛问题;三是,统计工作量太大,分析难度高问题,无法及时为企业提供数据参考。

    02

    有效线索主题看板

    有效线索主题看板: 报名用户主题看板,该看板有三个需求。 我们先来进行维度和指标的分析,维度包括年月日时,线上线下和新老客户,指标只有有效线索量。第一个需求是有效线索转化率。公式:有效线索量/咨询量。分母咨询量已经统计过,在这里可以直接使用。分子数据颗粒需要具体到天,所以统计维度也要增加天。有效线索转化率时间段趋势,则需要统计到小时。有效线索量需要增加一个新老客户维度。 接下来是建模分析:首先在ODS层原始数据包括有有效线索表和意向客户表。 其次是DWD层由于有效线索数据中的同样的数据只能录入一次,不存在去重问题,因此可以直接到。 再次是DWM层,在DWD层基础上,关联校区,学科和咨询中心表,来获取想要的字段。 最后DWS层按产品的属性维度进行统计,得到统计宽表,产品属性维度包括:校区,学科组合分组,来源渠道,咨询中心。 以上就是我的有效线索看板的看板分析,谢谢大家。

    02
    领券