2023年云南省职业院校技能大赛
高职组“大数据应用开发”赛项规程
一、赛项名称
赛项名称:大数据应用开发
赛项组别:高职组
赛项归属产业:电子与信息大类
二、竞赛目的
为适应大数据产业对高素质技术技能型人才的职业需求,赛项以大数据应用开发为核心内容和工作基础,重点考查参赛选手基于Hadoop、Spark、Flink平台环境下,充分利用Spark Core、Spark SQL、Flume、Kafka、Flink、Hive、HBase、Redis、Maxwell、ClickHouse、MySQL等相关技术的特点,基于Scala、Java、JavaScript等开发语言,综合软件开发相关技术,解决实际问题的能力,激发学生对大数据相关知识和技术的学习兴趣,提升学生职业素养和职业技能,努力为中国大数据产业的发展储备及输送新鲜血液,提升大数据专业及其他相关专业毕业生能力素质,满足企业用人需求,促进校企合作协同育人,对接
产业发展,实现行业资源、企业资源与教学资源的有机融合,使高职院校在专业建设、课程建设、人才培养方案和人才培养模式等方面,跟踪社会发展的最新需要,缩小人才培养与行业需求差距,引领职业院校专业建设与课程改革。
三、竞赛内容
赛项以大数据应用开发为核心内容和工作基础,重点考查参赛选手基于Hadoop、Spark、Flink平台环境下,充分利用Spark Core、Spark SQL、Flume、Kafka、Flink、Hive、HBase、Redis、Maxwell、ClickHouse、MySQL等技术的特点,综合软件开发相关技术,解决实际问题的能力,具体包括:
1.掌握Hadoop平台、基于Spark的离线分析平台、基于Flink的实时分析平台,
在容器环境下,按照项目需求安装相关技术组件并按照需求进行合理配置;
2.掌握基于Spark的离线数据采集方式方法,完成指定数据的抽取并写入Hive分区表中。掌握基于Flume、Maxwell的实时数据采集,将数据写入Kafka中;
3.综合利用Flink、Kafka、Hive、Redis、HBase、ClickHouse等技术,使用Java 开发语言,完成某电商系统的实时数据处理,包括使用Flink处理Kafka中的数据、实时数据仓库、将数据备份至HBase中、建立Hive外表、将数据处理结果存入Redis、ClickHouse中等操作;
4.综合利用Spark、Hive、MySQL、HBase、ClickHouse等相关技术,使用Scala 开发语言,完成某电商系统的离线数据处理,包括Hive数据仓库、使用Spark处理离线数据、数据合并、去重、排序、数据类型转换、将数据处理结果存入MySQL、HBase、ClickHouse中等操作;
hbase官方文档
5.综合运用HTML、CSS、JavaScript等开发语言,Vue.js前端技术,结合ECharts数据可视化组件,利用后端数据接口完成数据可视化;
6.根据竞赛过程,完成综合分析报告的编写;
7.竞赛时间6小时,竞赛连续进行。
竞赛内容构成如下:
四、竞赛方式
1、比赛以师生联赛方式进行,不得跨校组队,同一学校的报名参赛队伍不超过2支。
2、每个参赛队由1名领队(可由参赛教师兼任)、4名选手(1名教师、3名学生)组成,教师参赛选手须为职业院校教龄两年以上(含)的在职教师,学生参赛选手须为高等职业学校全日制在籍学生、五年一贯制四、五年级在籍学生、技工院校在籍学生,资格以报名时所具有的学生在校学籍及教师在职状态为准。参赛选手和指导教师报名获得确认后不得更换。
3、竞赛时间为2023年9月26日(报到),9月27日(竞赛日)。竞赛时间6小时(09:00-15:00)。
五、竞赛流程
根据竞赛任务要求,参赛队伍在6小时竞赛时间内须完成竞赛任务,每项任务用时可自行掌握。
(一)竞赛时间安排
(二)竞赛流程
六、竞赛命题
本赛项制定样题一套,并与本规程同步发布。具体详见附件1。
七、竞赛规则
1.凡在往届省级职业院校技能大赛中获一等奖的学生,不能再参加同一项目同一组别的比赛。
2. 竞赛前1日安排各参赛队领队、参赛选手熟悉赛场。
3. 严禁参赛选手、赛项裁判、工作人员私自携带通讯、摄录设备进入比赛场地。
4. 参赛选手所需的硬件、软件和辅助工具统一提供,参赛队不得使用自带的任何有存储功能的设备,如硬盘、光盘、U盘、手机、平板电脑等。
5. 所有参赛选手都必须携带身份证、学生证、参赛证(报名后由承办校统一发放)进行检录。

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。