2023年陕西省高等职业院校技能大赛
“大数据应用开发”赛项竞赛规程
hbase官方文档
一、赛项名称
赛项名称：大数据应用开发
赛项组别：高职组
赛项专业大类：电子与信息
二、竞赛目的
“十四五”时期，大数据产业对经济社会高质量发展的赋能作用更加突显，大数据已成为催生新业态、激发新模式、促进新发展的技术引擎。习近平总书记指出“大数据是信息化发展的新阶段”，“加快数字化发展，建设数字中国”成为《中华人民共和国国民经济和社会发展第十四个五年规划和2035年远景目标纲要》的重要篇章。
本赛项旨在落实国家“建设数字中国”战略，协同推动大数据相关产业的创新与发展，大力推进大数据技术
及相关专业的技术技能型人才培养，全面提升相关专业毕业生的综合能力，展现选手团队合作、工匠精神等职业素养，赋能经济社会高质量发展。竞赛内容结合当前大数据相关产业中的新技术、新要求，如数据湖、OLAP数据库应用等，全面检验参赛选手的工程实践能力和创新能力，推进教学过程与生产过程对接、课程内容与职业标准对接、专业设置与产业需求对接，促进职普融通、产教融合、科教融汇，引领专业建设和教学改革。竞赛内容围绕大数据相关产业岗位的实际技能要求进行设计，通过竞赛搭建校企合作的平台，强化竞赛成果转化，促进相关教材、资源、师资、认证、实习就业等方面的全方位建设，满足产教协同育人目标，为国家战略规划提供大数据领域高素质技能型人才。
三、竞赛内容
赛项以大数据应用开发为核心内容和工作基础，重点考查参赛选手基于Hadoop、Spark、Flink平台环境下，充分利用Spark Core、Spark SQL、Flume、Kafka、Flink、Hive、HBase、Redis、Maxwell、ClickHouse、MySQL等技术的特点，综合软件开发相关技术，解决实际问题的能力，具体包括：
（一）掌握Hadoop平台、基于Spark的离线分析平台、基于Flink 的实时分析平台，在容器环境下，按照项目需求安装相关技术组件并按照需求进行合理配置。
（二）掌握基于Spark的离线数据采集方式方法，完成指定数据的抽取并写入Hive分区表中。掌握基于Flume、Maxwell的实时数据采集，将数据写入Kafka中。
（三）综合利用Flink、Kafka、Hive、Redis、HBase、ClickHouse 等技术，使用Scala开发语言，完成某电商系统的实时数据处理，包括使用Flink处理Kafka中的数据、实时数据仓库、将数据备份至HBase中、建立Hive外表、将数据处理结果存入Redis、ClickHouse 中等操作。
（四）综合利用Spark、Hive、MySQL、HBase、ClickHouse等相关技术，使用Scala开发语言，完成某电商系统的离线数据处理，包括Hive数据仓库、使用Spark处理离线数据、数据合并、去重、排序、数据类型转换、将数据处理结果存入MySQL、HBase、ClickHouse 中等操作。
（五）综合运用HTML、CSS、JavaScript等开发语言，Vue.js 前端技术，结合ECharts数据可视化组件，利用后端数据接口完成数
据可视化。
（六）根据竞赛过程，完成综合分析报告的编写。
（七）竞赛时间8小时，竞赛连续进行。
竞赛内容构成如下：
竞赛各阶段分值权重和时间分布如下：
阶段竞赛时间分值权重
大数据平台环境搭建
8小时权重10%
离线数据抽取权重15%
离线数据统计权重20%
数据采集与实时计算权重20%
数据可视化权重20%
综合分析报告权重10%
团队分工明确合理、操作规范、文明竞赛权重5%
四、竞赛方式
本次竞赛为线下比赛，组队方式为师生同赛，具体要求如下：
（一）参赛学生须为高等职业学校专科、高等职业学校本科全日制在籍学生，五年制高职四、五年级学生也可报名参赛。参赛教师须为校内专任教师，并提供在职证明，需加盖学校公章。凡在往届全国职业院校技能大赛中获一等奖的选手，不能再参加同一项目同一组别的比赛。
（二）每支参赛队由4名选手组成，其中1名教师，3名学生。
本赛项为师生同赛不设指导教师，报名获得确认后不得随意更换人员或调换顺序，各学校可另设领队1名。
（三）本赛项为单一场次，所有参赛队在现场根据给定的任务说明，在8小时内相互配合，采用小组合作的形式完成任务，最后以提交的结果文档作为最终评分依据。
五、竞赛时间和地点
时间：2023年5月9日-10日
地点：陕西交通职业技术学院（陕西省西安市文景路19号）
六、竞赛流程
根据竞赛任务要求，参赛队伍在8小时竞赛时间内须完成竞赛任务，每项任务用时可自行掌握。
（一）竞赛时间安排
日期时间内容地点
5月9日14:00-16:30
各参赛队报到、领取服装及资
料
明远楼1层
15:00-16:00领队会、抽取加密号明远楼18层1812室16:00-16:30选手熟悉赛场明远楼11层
5月10日
8:00-9:00
赛场检录，竞赛选手二次加密
后进入工位
明远楼12层（封闭待考区）9:00-17:00竞赛选手完成竞赛任务明远楼11层
18:00-21:00
对选手提交的结果文件进行
评分
明远楼12层

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。