全国职业院校技能大赛.docx

1、全国职业院校技能大赛2019年全国职业院校技能大赛赛项规程一、赛项名称赛项编号：GZ-2019032赛项名称：大数据技术与应用英文名称：Big Data Technology And Application赛项组别：高职组赛项归属：电子信息大类二、竞赛目的为贯彻落实国务院发布的促进大数据发展行动纲要和工业和信息化部发布的大数据产业发展规划（2016-2020年）。加快实施国家大数据战略，推动大数据产业健康快速发展，针对高职“大数据技术与应用”专业建设和发展的需求，通过引入大数据各个环节的实际应用场景，全面考察高职学生大数据技术基础、软件开发相关技术、Hadoop及其生态组件部署与管理、数据采集

2、、数据清洗、数据分析和数据可视化等前沿的知识、技术技能以及职业素养和团队协作能力。赛项围绕大数据产业各个岗位的实际需求和要求进行设计，通过大赛搭建校企合作的平台，深化产教融合，推进产教融合人才培养模式，提升大数据技术与应用专业及其他相关专业毕业生能力，同时大赛促进相关教材、资源、师资、认证、实习就业等全面建设，推动院校和企业联合培养大数据人才，加强学校教育与产业发展的有效衔接，促进职业院校信息类相关专业共同发展，为国家战略规划提供大数据领域的高素质技能型人才。三、竞赛内容赛项以大数据技术与应用为核心内容，重点考查参赛选手基于Hadoop平台环境下，利用Hadoop技术生态组件，综合软件开发相关

3、技术，解决实际问题的能力，具体包括：1.掌握按照项目需求配置管理Hadoop大数据平台及相关生态组件；2.掌握企业常用采集工具和网络爬虫的相关技术，完成指定数据的采集及处理能力；3.综合利用MapReduce、Spark、Storm等技术、分布式存储系统、数据仓库Hive等工具，使用Java、Python等开发语言，完成数据清洗、存储、转化、分析及数据推送等一系列大数据操作；4.综合运用HTML、CSS、JavaScript、Python等开发语言，对数据进行可视化呈现；5.根据数据可视化结果，完成数据分析报告的编写；6.竞赛时长4小时，竞赛连续进行。竞赛内容构成如下：考核环节考核知识点和技能

4、点描述Hadoop平台及组件的部署管理Hadoop平台安装部署和基本配置考察Hadoop平台及组件的部署能力，掌握常用的基本配置和命令，能够部署和管理Hadoop高可用集群。Hadoop集群节点的动态增加与删除Hadoop平台相关组件部署与管理Hadoop平台的高可用数据采集使用开发者工具查看网页源码，分析网页结构，明确数据采集对象考察学生多维度数据采集能力，包括对关系型数据库、非关系型数据库和网络爬虫技术的应用。构建数据采集请求，抓取网络数据利用网络爬虫相关组件实现网络数据爬取规则文件数据和关系型数据库数据抓取以及数据同步非关系型数据库数据抓取以及数据同步数据采集结果导出及数据库推送数据清洗

5、与分析基于Hadoop平台架构组件和多维度的数据采集，实现数据一致性检查、无效值和缺省值的处理考察对分布式计算、分布式存储系统、数据仓库等综合应用能力，使用Java、Python等开发语言，完成数据清洗、数据存储、数据转化、数据分析、数据预测及数据推送等一系列数据操作多表数据合并和离群值处理通过常见的数据分析算法，对数据进行标准化、离散化和二元化分析掌握数据仓库导入、导出，利用数据仓库相关命令或代码实现数据多维度、多层次的分析对数据的查询、整理和计算。进行编译、打包、发布，执行程序，完成数据处理、清洗。实现不同数据库间的文件传输及转换数据预测分析数据可视化编写后台代码实现数据库访问和数据整理通

6、过常见的数据可视化方法，将数据分析结果以图表的形式进行呈现，使用Python及Web前端等编程语言，实现数据源分析结果展现编写Web前端代码，对数据分析结果进行呈现综合分析通过知识技能，根据数据分析、预测及可视化结果进行分析，做出分析报告。考察学生对大数据技术与分析的综合操作能力和业务分析能力竞赛各阶段分值权重分布如下：主要涉及的知识和技能点分值权重Hadoop平台及组件的部署管理15%数据采集20%数据清洗与分析25%数据可视化20%综合分析15%团队分工明确合理、操作规范、文明竞赛5%四、竞赛方式1.本赛项为团体赛，以院校为单位组队参赛，不得跨校组队。每支参赛队由3名选手（设队长1名）和不

7、超过2名指导教师组成（指导教师为本校专兼职教师）；2.本赛项设单一场次，所有参赛队在现场根据给定的项目任务，在4小时内相互配合，采用小组合作的形式完成赛项任务，最后以提交的截图和文档作为最终评分依据；3.不计参赛选手的个人成绩，统计竞赛队的总成绩进行排序；4.本赛项拟邀请国际及港澳台的院校代表队参赛。五、竞赛流程根据竞赛任务要求，参赛队伍在4小时竞赛时间内须完成竞赛任务，参赛队伍须按顺序完成各项任务，但每项任务用时可自行掌握。1.竞赛流程2.竞赛时间安排日期时间内容比赛前2日18:00之前裁判报到19:0020:00裁判工作会议比赛前1日12:00之前各参赛队报到10:0011:00工作人员（

8、含监考）培训会15:3016:00赛前领队会16:0016:30参赛队熟悉比赛场地17:0018:00现场裁判赛前检查，封闭赛场比赛当日7:007:30参赛队集合前往比赛现场7:308:00开赛式8:008:10赛场检录8:108:20一次加密：参赛队抽取参赛编号8:208:30二次加密：参赛队抽取赛位号8:308:40参赛队进入比赛赛位，进行赛前软、硬件检查、题目发放8:40-12:40比赛12:4013:00收取各参赛队赛题及比赛结果文档12:4014:40申诉受理13:0013:30三次加密：竞赛结果等文件加密13:3021:00成绩评定与复核21:0022:00加密信息解密22:002

9、3:00成绩汇总，报送及公布比赛后1日9:0010:00闭赛式六、竞赛赛卷本赛项赛题全部公开，公开方式为赛题库公开。赛项命题方向和命题难度按照2019年全国职业院校技能大赛制度汇编要求，结合大数据技能人才培养要求和职业岗位需要，参照行业规范，设计技能操作赛题。本赛项建立赛题库，于开赛1个月前通过全国职业院校技能大赛指定的网络信息发布平台公开赛题库。根据赛题库，按样卷的规定，编制10套正式赛题组建赛卷库，且各赛卷内容重复率不高于 50%。赛卷库严格保密，不能公开。正式赛卷于比赛前三天内，把赛卷随机排序后，在监督组的监督下，由裁判长指定相关人员抽取正式赛卷与备用赛卷，并存放在承办院校保密室中。保密

10、室全程监控，并安排专人把守。比赛前1小时由两名裁判及比赛监督员将赛题从保密室运往赛场。比赛完成后，参赛队不得将赛题带离赛场，由现场裁判对试题进行回收。比赛样卷与竞赛规程同步发布。竞赛样卷详见附件1：2019年全国职业院校技能大赛“大数据技术与应用”竞赛样卷七、竞赛规则1.参赛队及参赛选手资格：参赛选手须为高职全日制在籍学生、本科院校中高职类全日制在籍学生；五年制高职四、五年级学生。参赛选手年龄须不超过25周岁(年龄计算的截止时间以2019年5月1日为准)。凡在往届全国职业院校技能大赛中获本赛项高职组一等奖的选手，不能再参赛；2.比赛场地通过抽签决定，比赛期间参赛选手原则上不得离开比赛场地；3.

11、竞赛所需的硬件、软件和辅助工具统一提供，参赛队不得使用自带的任何有存储功能的设备，如硬盘、光盘、U盘、手机、随身听等；4.参赛队在赛前10分钟领取比赛任务并进入比赛赛位，比赛正式开始后方可进行相关操作。参赛队自行决定选手分工、工作程序；5.在比赛过程中，参赛选手如有疑问，应举手示意，现场裁判应按要求及时予以答疑。如遇设备或软件等故障，参赛选手应举手示意，现场裁判、技术人员等应及时予以解决。确因计算机软件或硬件故障，致使操作无法继续的，经赛场裁判长确认，予以启用备用设备；6.比赛时间终了，选手应全体起立，结束操作。经工作人员查收清点所有文档后方可离开赛场，离开赛场时不得带走任何资料；7.赛项裁判

12、应严格遵守赛项各项规章制度，确保比赛公平、公正、公开。比赛当天8:00起，赛项裁判应上交所有通信设备，由赛项执委会统一保管并安排赛项裁判在指定区域休息或工作，直至赛项成绩评定结束；8.比赛结束，经加密裁判对各参赛队提交的竞赛成果进行三次加密后，评分裁判方可入场进行成绩评判。竞赛成绩经复核无误后，由记分员将解密后的各参赛队伍成绩汇总成比赛成绩，经裁判长、监督组签字后，在指定地点，以纸质形式向全体参赛队进行公布。公布2小时无异议后，将赛项总成绩的最终结果录入赛务管理系统，经裁判长、监督组长和仲裁长在系统导出成绩单上审核签字后，在闭赛式上宣布并颁发证书；9.本赛项各参赛队最终成绩由承办单位信息员录入

13、赛务管理系统。承办单位信息员对成绩数据审核后，将赛务系统中录入的成绩导出打印，经赛项裁判长审核无误后签字。承办单位信息员将裁判长确认的电子版赛项成绩信息上传赛务管理系统，同时将裁判长签字的纸质打印成绩单报送大赛执委会；10.赛项结束后专家工作组根据裁判判分情况，分析参赛选手在比赛过程中对各个知识点、技术的掌握程度，并将分析报告报备大赛执委会办公室，执委会办公室根据实际情况适时公布；11.赛项每个比赛环节裁判判分的原始材料和最终成绩等结果性材料经监督组人员和裁判长签字后装袋密封留档，并由赛项承办院校封存，委派专人妥善保管；12.其它未尽事宜，将在赛前向各领队做详细说明。八、竞赛环境竞赛现场设置场

14、内竞赛区、现场裁判工作区、技术支持区等。监考人员协助裁判长和现场裁判做好负责赛位范围内的秩序维持，监考人员不得在考场内随意走动。技术支持保障人员在技术支持服务区候场，有需要时在现场裁判的带领下到相关的赛位进行赛场技术支持保障，在条件具备时，技术支持区可不设置在考场内。场内竞赛区为参赛队提供统一的竞赛设备；无需选手自带任何工具及附件。竞赛现场符合消防安全规定，现场消防器材和消防栓合格有效，应急照明设施状态合格，赛场明显位置张贴紧急疏散图，赛场地面张贴荧光疏散指示箭头，赛场出入口专人负责，随时保证安全通道的畅通无阻。各赛位分区供电，强电弱电分开布线，现场临时用电满足施工现场临时用电安全技术规范JG

15、J46-2005的要求。竞赛现场通风良好、照明需符合教室采光规范。每间竞赛赛位面积910，以确保参赛队之间互不干扰。竞赛赛位标明赛位号，并配备竞赛平台和技术工作要求的软、硬件。环境标准要求保证赛场采光(大于500lux)、照明和通风良好，每支参赛队提供笔、纸张等工具，提供饮用水。九、技术规范本赛项的技术规范将包括：相关专业的教育教学要求、行业、职业技术标准，以及根据高职目录修订后的大数据技术与应用相关专业人才培养标准和规范，适时地修订本赛项遵循的技术规范。1.基础标准标准号/规范简称名称GB/T 11457-2006信息技术、软件工程术语 GB8566-88计算机软件开发规范GB/T 1299

16、1-2008信息技术数据库语言SQL第1部分：框架GB/T 21025-2007XML使用指南GB/T 28821-1012关系数据管理系统技术要求LD/T81.1-2006职业技能实训和鉴定设备技术规范2.软件开发标准标准号/规范简称名称GB/T 8566 -2001信息技术软件生存周期过程 GB/T 15853 -1995软件支持环境 GB/T 14079 -1993软件维护指南GB/T 17544-1998信息技术软件包质量要求和测试十、技术平台1.竞赛设备比赛器材、技术平台：新华三大数据竞赛管理系统（合作企业：新华三技术有限公司；品牌：H3C），技术平台软硬件设备组成如下：序号设备名称

17、数量备注1服务器1支撑大数据竞赛管理系统运行使用。内嵌虚拟化资源管理控制端，作为虚拟化资源管理系统的计算资源、网络资源和存储资源的源节点。1、CPU模块：2*2.3GHz2、内存模块：8*32GB 3、硬盘模块：6*600GB SAS 10K 4、网口：4端口千兆电接口网卡-360T-B25、1+1冗余电源2大数据竞赛平台（H3C-ADEkvm-DT）1系统基于kvm构建，可模拟大数据环境搭建、大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用等贯穿大数据技术的相关知识点，提供大数据竞赛管理系统所需的虚拟服务器，结构化、半结构化及非结构化数据的数据库等基础支撑环境；

18、涵盖分布式虚拟存储技术，大数据获取、存储、组织、分析和决策操作的可视化技术。具体包括：Hadoop、HDFS、Hbase、Hive、MapReduce、Kafka、Spark、Storm、Mahout、MySQL、Echarts等，所涉及开发语言包括Java、Python、HTML、Javascript、R等。3PC机3竞赛选手比赛使用。性能相当于i5处理器，8G以上内存，1TB以上硬盘，显示器要求1024*768以上。4交换机11.机架式交换机2.端口：24个10/100/1000Base-TX以太网端口；3.速度：10/100/1000Base；4.全千兆三层交换机，支持访问控制。备注：实

19、际赛场需要的服务器、PC机和交换机数量取决于参赛队伍数量。2.通用软件和工具清单设备类型软件类别软件名称、版本号服务器集群大数据集群操作系统CentOS 7.4大数据分析平台组件Hadoop 2.6.0Yarn 2.6.0Zookeeper 3.4.5Hive 1.1.0Flume 1.6.0Hbase 1.2Sqoop 1.4kafka 1.0Spark 2.0数据库MySQL 5.7开发客户端PC操作系统Windows 10 64位浏览器Chrome开发语言Python 3.6.4 64bitJava 8开发工具Pycharm 2019（Community Edition）IEAD 201

20、9（Community Edition）eclipse-jee-oxygenAnaconda 3数据采集组件Requests 2.21.0数据可视化组件ECharts 4.0.4Xshell 6免费版Xftp 6免费版文档编辑器Office 2007以上输入法拼音输入法备注：根据实际业务环境配置版本间的兼容性十一、成绩评定（一）评分标准制定原则1.客观性结果评分，采用优先判断功能实现评分原则，依据功能实现的状态信息截图，判断功能项是否实现，如果未实现功能，再按照配置步骤命令进行给分；2.三层加密原则。比赛过程采取三层加密，通过抽取参赛编号、赛位号和竞赛成果号，屏蔽参赛队信息，每个环节设置一名独

21、立裁判，每个环节结束后，数据立即封存于裁判长，加密裁判直接隔离，确保成绩评定公平、公正；3.独立评分原则。根据裁判分工，负责相同模块评分工作的不同裁判采取随机抽签独立评分，确保成绩评定严谨、客观、准确。裁判进行随机抽签分组，杜绝主观意愿组队，各自完全独立评分，裁判员间互不干涉，比赛监督人员可随机监督；4.错误不传递原则。各环节分别计算得分，错误不传递，按规定比例计入团队总分；5.抽查复核原则；（1）为保障成绩评判的准确性，监督组对赛项总成绩排名前30%的所有参赛队伍（选手）的成绩进行复核；对其余成绩进行抽检复核，抽检覆盖率不得低于15%；（2）监督组需将复检中发现的错误以书面方式及时告知裁判长

22、，由裁判长更正成绩并签字确认；（3）复核、抽检错误率超过5%的，则认定为非小概率事件，裁判组需对所有成绩进行复核；6.竞赛评分制定严格遵守公平、公正和公开的原则。赛项合作企业不得直接或者间接地参与赛项评分；7.在竞赛过程中，选手如有不服从裁判判决、扰乱赛场秩序、舞弊等不文明行为，由裁判按照规定扣减相应分数并且给予警告，情节严重的取消竞赛资格，竞赛成绩记0分，队员退出比赛现场。（二）评分细则任务考查点描述评分标准分值（分）Hadoop平台及组件的部署管理（15分）组件、配置、管理按照Hadoop大数据平台部署要求完成平台安装部署和基本配置，按要求完成平台相关组件的部署与管理，以及集群节点的动态增

23、删和高可用部署。检查平台进程运行状态，确定配置正确。主要评分点包括Linux系统基本操作、Hadoop平台安装、相关配置文件修改、平台相关组件部署、集群节点的动态增删、平台高可用部署。15数据采集（20分）数据采集代码编写按照要求完成数据采集代码的编写，使得数据采集程序能够正常运行，将采集到的数据保存在指定格式的路径下。主要评分点包括数据采集请求构建、数据解析、数据存储、数据文件操作。20数据清洗与分析（25分）数据清洗与分析代码编写完成对数据的查询、整理和计算。进行编译、打包、发布，并在服务器上执行程序完成数据清洗工作，将清洗后的数据放置在指定路径下。将清洗后的数据加载到数据仓库后，根据项目

24、需求使用命令或代码，完成数据分析查询，并将查询结果导出为数据文件。主要评分点包括数据处理代码编写、数据文件解析、构建数据输出格式、打包发布、数据清洗执行。数据仓库建库、建表、查询等处理。25数据可视化（20分）数据可视化代码编写通过编写后台数据访问代码完成数据可视化后台开发，编写前端Web界面实现数据分析结果可视化呈现。主要评分点包括可视化后台代码开发、可视化前端代码开发、前端展示。20综合分析（15分）文档编写根据项目要求，以数据可视化结果为依据，得出数据分析结论，生成分析报告并提交。主要评分点包括能够按照赛项要求编写结论，能够按照要求提出正确的建议。15职业素养（5分）职业素养团队分工明确

25、合理、操作规范、文明竞赛主要评分点包括：竞赛团队分工明确合理、操作规范、文明竞赛。5（三）评分方法1.竞赛设置裁判28人，包括裁判长1名，裁判27名。其中加密裁判3人，现场裁判4人，评分裁判20人；2.竞赛采取三次加密。第一次加密裁判组织参赛队选手第一次抽签，抽取参赛编号，替代选手参赛证等个人信息；第二次加密裁判组织参赛选手进行第二次抽签，确定赛位号，替换选手参赛编号；第三次加密裁判对各参赛队竞赛结果进行加密，替换赛位号。三次加密信息由不同加密裁判密封后保管，在评分结束后进行解密并统计成绩；3.裁判长正式提交评分结果并复核无误后，加密裁判在监督人员监督下进行三层解密：竞赛结果编号到赛位号解密；

26、赛位号到参赛编号解密；参赛编号到参赛队名称解密；4.在竞赛过程中，参赛选手如有不服从裁判裁决、扰乱赛场秩序、舞弊等行为的，由裁判长按照规定扣减相应分数，情节严重的将取消比赛资格，比赛成绩计0分；5.赛项成绩解密后汇总比赛成绩，经裁判长、监督组签字后，在指定地点以纸质形式向全体参赛队公布。成绩无异议后，在闭赛式上予以宣布。6.严格按照2019年全国职业院校技能大赛制度汇编的要求，本赛项各参赛队最终成绩由承办单位信息员录入赛务管理系统。承办单位信息员对成绩数据审核后，将赛务系统中录入的成绩导出打印，经赛项裁判长审核无误后签字。承办单位信息员将裁判长确认的电子版赛项成绩信息上传赛务管理系统，同时将裁

27、判长签字的纸质打印成绩单报送大赛执委会。十二、奖项设定本赛项奖项设团体奖。设奖比例为：以赛项实际参赛队总数为基数，一、二、三等奖获奖比例分别为10%、20%、30%（小数点后四舍五入）。获得一等奖的参赛队的指导教师获“优秀指导教师奖”。十三、赛场预案（一）应急安全预案比赛期间发生意外事故，发现者应第一时间报告赛项执委会，同时采取措施避免事态扩大。赛项执委会应立即启动预案予以解决并报告赛区执委会。赛项出现重大安全问题可以停赛，是否停赛由赛区执委会决定。事后，赛区执委会应向大赛执委会报告详细情况。相关应急预案如下表所示：突发事件预防措施事件发生后应对措施参赛选手发病或受伤在各赛位张贴安全操作说明。

28、医务人员应采取紧急救护措施，及时进行救治，如病情或伤势严重，应及时送往最近医院进行救治。人员发生食物中毒比赛期间指定的住宿/餐饮场地符合国家相关资质要求。并协调地方卫生部门做好检查工作。立即组织对中毒人员进行救治，必要时送往最近医院进行检查治疗。同时对可疑的食品、饮水及其有关原料、工具设备和场所以及可能受污染的区域采取保留、控制措施，组织开展现场调查，迅速查明原因，并及时向大赛执委会报告。设备损坏提前一天服务器全部运行；现场划分备份组。参赛选手举手示意后，监考人员计时，裁判确认后更换备份组，并由主裁判确定应计入延时时间。现场网络线缆故障现场走线要规范，尽量走暗槽或现场人员接触不到的地方；对主要

29、线路要在走线槽内留有备线。启用备线。临时停电赛场需要双路供电和备用发电机，确保单电源故障不会影响比赛供电线路互为备份，如出现故障，切换线路，经裁判长与赛项执委会商议统一延长比赛时间；若双路电源均出现故障，快速启用备用发电机发电，保证比赛正常运行，经裁判长与赛项执委会商议统一延长比赛相应时间。（二）处罚措施1.因参赛队伍原因造成重大安全事故的，取消其获奖资格；2.参赛队伍有发生重大安全事故隐患，经赛场工作人员提示、警告无效的，可取消其继续比赛的资格；3.赛事工作人员违规的，按照相应的制度追究责任。情节恶劣并造成重大安全事故的，由司法机关追究相应法律责任。十四、赛项安全赛事安全是技能竞赛一切工作顺

30、利开展的先决条件，是赛事筹备和运行工作必须考虑的核心问题。赛项执委会采取切实有效措施保证大赛期间参赛选手、指导教师、裁判员、工作人员及观众的人身安全。（一）组织机构1.成立由赛项执委会主任为组长的赛项安全保障小组，成员包括承办院校主抓安全的校领导、学生工作处、后勤处、保卫处、合作企业技术工程师等相关人员；2.与地方行政、交通、司法、安全、消防、卫生、食品、质检等相关部门建立协调机制，制定应急预案，及时处置突发事件，保证比赛安全进行。（二）比赛环境1.执委会须在赛前组织专人对比赛现场、住宿场所和交通保障进行考察，并对安全工作提出明确要求。赛场的布置，赛场内的器材、设备，应符合国家有关安全规定。如有必要，也可进行赛场仿真模拟测试，以发现可能出现的问题。承办单位赛前须按照执委会要求排除安全隐患；2.严格控制与参赛无关的易燃易爆以及各类危险品进入比赛场地，不许随便携带书包进入赛场；3.配备先进的仪器，防止有人利用电磁波干扰比赛秩序。大赛现场需对赛场进行网络安全控制，以免场内外信息交互，充分体现大赛的严肃、公平和公正性；4.大赛期间，承办单位须在赛场