大数据工程技术人员
- 职业概况
- 基本要求
- 职业功能
- 权重表
- 关联政策
职业名称
大数据工程技术人员
职业编码
2-02-10-11
职业技能等级
五个等级
受教育程度
高中(或同等学历)
职业概况
职业定义
从事大数据采集、清洗、分析、治理、挖掘等技术研究，并加以利用、管理、维护和服务的工程技术人员。
职业环境条件
室内，常温。
职业能力特征
具有较强的学习能力、计算能力、表达能力及分析、推理和判断能力。
职业技能鉴定要求
鉴定方式
分为理论知识考试以及专业能力考核。理论知识考试、专业能力考核均实行百分制，成绩皆达 60 分（含）以上者为合格，考核合格者获得相应专业技术等级证书。理论知识考试以闭卷笔试、机考等方式为主，主要考核从业人员从事本职业应掌握的基本要求和相关知识要求；专业能力考核以开卷实操考试、上机实践等方式为主，主要考核从业人员从事本职业应具备的技术水平。
监考人员、考评人员和考生
理论知识考试中的监考人员与考生配比不低于 1:15，且每个考场不少于 2名监考人员；专业能力考核中的考评人员与考生配比不低于 1:5，且考评人员为3 人（含）以上单数。
鉴定时间
鉴定场所设备
理论知识考试在标准教室进行；专业能力考核在具有相应软、硬件条件的考核场所进行。
推荐课程
换一批
数字人应用与未来——行业专家主题演讲
讲师：鲍虎军、吕欣、武亚强、李星冶、吴娜
免费
计算、人工智能与科学范式变革
讲师：王坚
免费
颁奖环节《2024年度存储风云榜》
讲师：参会嘉宾
免费
创业指导师考情全解析
讲师：张老师
免费
2024产业区块链大会——主持人介绍参会嘉宾
讲师：钱倩文
免费
推荐招生计划
换一批
消防设施操作员实战培训班
讲师：
¥3,200.00
眼镜验光师考培无忧班
讲师：
¥800.00
电子商务师中级（四级）考证无忧班
讲师：
¥1,099.00
心理健康指导精品无忧班
讲师：
¥1,250.00
咖啡师「初级」招生计划
讲师：
¥1,000.00
职业道德
基础知识
推荐课程
换一批
数字人应用与未来——行业专家主题演讲
讲师：鲍虎军、吕欣、武亚强、李星冶、吴娜
免费
计算、人工智能与科学范式变革
讲师：王坚
免费
颁奖环节《2024年度存储风云榜》
讲师：参会嘉宾
免费
创业指导师考情全解析
讲师：张老师
免费
2024产业区块链大会——主持人介绍参会嘉宾
讲师：钱倩文
免费
推荐招生计划
换一批
消防设施操作员实战培训班
讲师：
¥3,200.00
眼镜验光师考培无忧班
讲师：
¥800.00
电子商务师中级（四级）考证无忧班
讲师：
¥1,099.00
心理健康指导精品无忧班
讲师：
¥1,250.00
咖啡师「初级」招生计划
讲师：
¥1,000.00
申报条件
取得初级培训学时证明，并具备以下条件之一者，可申报初级专业技术等级：
（1）取得技术员职称。
（2）具备相关专业大学本科及以上学历（含在读的应届毕业生）。
（3）具备相关专业大学专科学历，从事本职业技术工作满 1 年。
（4）技工院校毕业生按国家有关规定申报。
职业功能
- 大数据处理方向
- 大数据分析方向
- 大数据管理方向
| 职业功能 | 工作内容 | 技能要求 | 相关知识要求 |
|---|---|---|---|
| 大数据系统搭建 | 1.1硬件系统搭建 |
1.1.1 能根据施工方案，进行需求
沟通并确认设备参数
1.1.2 能参照施工方案，对大数据
机架及大型设备进行机房空间规划并
部署服务器
1.1.3 能根据组网规划方案，对各
服务器或需联通网络设备进行组网布
置
1.1.4 能根据现场 设施及 电力 系
统，对设备进行上电测试及点亮测试 |
1.1.1 硬件设备功能知
识
1.1.2 服务器组网知识
1.1.3 服务器配置知识 |
1.2软件系统部署 |
1.2.1 能根据系统部署方案，安装
集群环境、硬件环境、虚拟化环境所
需的各类系统
1.2.2 能根据软件部署方案使用脚
本部署产品或用原生方法安装各类大
数据功能组件
1.2.3 能根据节点连接信息配置大
数据集群
1.2.4 能根据集群功能对组件进行
启动调试 |
1.2.1 操作系统安装及
操作知识
1.2.2 云计算及虚拟化
部署知识
1.2.3 大数据组件安装
知识
1.2.4 大数据集群配置
知识
1.2.5 大数据组件基础
操作知识 | |
| 大数据平台管理与运维 | 2.1平台管理 |
2.1.1 能对现有大数据集群的各类
组件进行应用变更或版本更迭
2.1.2 能根据上线计划，按时完成
功能上线
2.1.3 能对提交代码的版本进行管
理 |
2.1.1 应用变更管理知
识
2.1.2 代码仓库托管知
识
2.1.3 功能持续集成知
识
2.1.4 代码版本控制知
识 |
2.2系统运维 |
2.2.1 能使用工具对集群的软硬件
运行状态进行监控管理
2.2.2 能使用工具对大数据集群的
各类组件、服务的运行状态进行监控
管理
2.2.3 能使用工具对作业运行情况
和资源占用情况进行监控管理
2.2.4 能根据故障报告，参与故障
排查，处理故障问题
2.2.5 能根据容灾计划，定期备份
和迁移关键数据 |
2.2.1 管理平台操作知
识
2.2.2 系统环境监控知
识
2.2.3 常见故障排查知
识
2.2.4 容灾备份知识 | |
2.3安全维护 |
2.3.1 能根据权限规范，使用工具
配置和管理用户权限
2.3.2 能针对各类突发的外部攻击
或异常事件进行应急处理
2.3.3 能对安全系统进行升级和维
护 |
2.3.1 权限管理知识
2.3.2 常见异常处理知
识
2.3.3 网络攻防知识 | |
| 大数据技术服务 | 3.1技术咨询 |
3.1.1 能根据团队既定计划， 收集
市场目标信息
3.1.2 能配合销售团队制作宣讲材
料及解决方案展示材料
3.1.3 能配合工程师解决客户技术
咨询问题并提供参考信息 |
3.1.1 大数据行业应用
知识
3.1.2 大数据技术体系
知识 |
3.2解决方案设计 |
3.2.1 能根据已有的产品解决方案
调整输出具体的项目解决方案
3.2.2 能进行产品演示和讲解产品
特性
3.2.3 能根据客户沟通反馈整理需
求文档
3.2.4 能根据客户需求提供产品咨
询及软件架构 |
3.2.1 大数据基础理论
知识
3.2.2 大数据行业发展
知识
3.2.3 大数据软件架构
知识 | |
| 大数据处理与应用 | 4.1数据采集 |
4.1.1 能根据业务需求进行在线、
离线数据采集
4.1.2 能根据调度策略使用框架设
置调度作业
4.1.3 能根据存储策略进行数据存
储 |
4.1.1 网络爬虫知识
4.1.2 离线数据采集知
识
4.1.3 实时数据采集知
识
4.1.4 作业调度知识
4.1.5 文件系统数据存
储知识
4.1.6 关系型数据库知
识
4.1.7 非关系型数据库
知识 |
4.2数据预处理 |
4.2.1 能根据业务 需求对遗漏数
据、噪音数据、不一致数据等进行清
洗
4.2.2 能根据业务需求对多源数据
进行整合
4.2.3 能根据业务规则对数据格式
进行转换
4.2.4 能根据数据归一性原则对数
据进行单位、数值规约 |
4.2.1 数据清洗知识
4.2.2 数据 ETL 知识
4.2.3 数据库基础操作
知识
4.2.4 SQL 函数知识
4.2.5 结构化、半结构
化与非结构化知识 | |
4.3数据计算 |
4.3.1 能根据业务需求编写批量、
实时数据计算作业
4.3.2 能根据数据特征计算数据标
签并进行汇总
4.3.3 能根据数据指标规则计算关
键业务指标 |
4.3.1 分布式计算知识
4.3.2 内存计算知识
4.3.3 数据结构封装知
识
4.3.4 关键业务指标知
识 | |
4.4数据查询 |
4.4.1 能根据数据平台构建联机事
务分析系统并进行即席查询
4.4.2 能根据检索引擎创建索引库
并进行数据检索
4.4.3 能使用交互式查询工具创建
数据接口并提供对外服务接口
4.4.4 能使用交互式查询平台制作
报表及展示图表 |
4.4.1 OLAP 系统应用知
识
4.4.2 数据检索知识
4.4.3 交互式计算知识
4.4.4 报表制作知识 | |
| 大数据应用开发 | -- | -- | -- |
| 大数据分析与挖掘 | -- | -- | -- |
| 大数据管理 | -- | -- | -- |
推荐课程
换一批
数字人应用与未来——行业专家主题演讲
讲师：鲍虎军、吕欣、武亚强、李星冶、吴娜
免费
计算、人工智能与科学范式变革
讲师：王坚
免费
颁奖环节《2024年度存储风云榜》
讲师：参会嘉宾
免费
创业指导师考情全解析
讲师：张老师
免费
2024产业区块链大会——主持人介绍参会嘉宾
讲师：钱倩文
免费
推荐招生计划
换一批
消防设施操作员实战培训班
讲师：
¥3,200.00
眼镜验光师考培无忧班
讲师：
¥800.00
电子商务师中级（四级）考证无忧班
讲师：
¥1,099.00
心理健康指导精品无忧班
讲师：
¥1,250.00
咖啡师「初级」招生计划
讲师：
¥1,000.00
- 大数据处理方向
- 大数据分析方向
- 大数据管理方向
理论知识权重表
| 项目技能等级 | 五级/低级工（%） | 四级/中级工（%） | 三级/高级工（%） | 二级/技师（%） | 一级/高级技师（%） | |
|---|---|---|---|---|---|---|
| 基本要求 | 职业道德 | 5 | 5 | 5 | - | - |
| 基础知识 | 20 | 15 | 10 | - | - | |
| 相关知识要求 | 大数据系统搭建 | 20 | 15 | 10 | - | - |
| 大数据平台管理与运维 | 20 | 20 | 10 | - | - | |
| 大数据技术服务 | 10 | 10 | 15 | - | - | |
| 大数据处理与应用 | 25 | 20 | 10 | - | - | |
| 大数据应用开发 | 0 | 15 | 15 | - | - | |
| 大数据分析与挖掘 | 0 | 0 | 15 | - | - | |
| 大数据管理 | 0 | 0 | 10 | - | - | |
技能要求权重表
| 项目技能等级 | 五级/低级工（%） | 四级/中级工（%） | 三级/高级工（%） | 二级/技师（%） | 一级/高级技师（%） | |
|---|---|---|---|---|---|---|
| 基本要求 | 职业道德 | 0 | 0 | 0 | - | - |
| 基础知识 | 0 | 0 | 0 | - | - | |
| 相关知识要求 | 大数据系统搭建 | 30 | 15 | 10 | - | - |
| 大数据平台管理与运维 | 20 | 25 | 20 | - | - | |
| 大数据技术服务 | 10 | 15 | 20 | - | - | |
| 大数据处理与应用 | 40 | 30 | 10 | - | - | |
| 大数据应用开发 | 0 | 15 | 15 | - | - | |
| 大数据分析与挖掘 | 0 | 0 | 15 | - | - | |
| 大数据管理 | 0 | 0 | 10 | - | - | |
推荐课程
换一批
数字人应用与未来——行业专家主题演讲
讲师：鲍虎军、吕欣、武亚强、李星冶、吴娜
免费
计算、人工智能与科学范式变革
讲师：王坚
免费
颁奖环节《2024年度存储风云榜》
讲师：参会嘉宾
免费
创业指导师考情全解析
讲师：张老师
免费
2024产业区块链大会——主持人介绍参会嘉宾
讲师：钱倩文
免费
推荐招生计划
换一批
消防设施操作员实战培训班
讲师：
¥3,200.00
眼镜验光师考培无忧班
讲师：
¥800.00
电子商务师中级（四级）考证无忧班
讲师：
¥1,099.00
心理健康指导精品无忧班
讲师：
¥1,250.00
咖啡师「初级」招生计划
讲师：
¥1,000.00
0
1
0
0
0
0
0
1
1
0
推荐课程
换一批
数字人应用与未来——行业专家主题演讲
讲师：鲍虎军、吕欣、武亚强、李星冶、吴娜
免费
计算、人工智能与科学范式变革
讲师：王坚
免费
颁奖环节《2024年度存储风云榜》
讲师：参会嘉宾
免费
创业指导师考情全解析
讲师：张老师
免费
2024产业区块链大会——主持人介绍参会嘉宾
讲师：钱倩文
免费
推荐招生计划
换一批
消防设施操作员实战培训班
讲师：
¥3,200.00
眼镜验光师考培无忧班
讲师：
¥800.00
电子商务师中级（四级）考证无忧班
讲师：
¥1,099.00
心理健康指导精品无忧班
讲师：
¥1,250.00
咖啡师「初级」招生计划
讲师：
¥1,000.00