华为大数据 HCIE-Big Data课程介绍
HCIE-Big Data认证定位于大数据分析领域中大型分布式并行处理数据仓库平台的架构原理、优化设计、应用开发和大数据挖掘领域的基础理论、常用挖掘算法、应用设计以及开发,旨在推动业界大数据行业的专家型人才培养。
HCIE-Big Data认证包括但不仅限于:(1)华为企业级的大型并行处理分布式数据仓库平台FusionInsight LibrA的架构、功能特性、数据库设计、数据库数据导入导出、数据库调优及数据库开发等;(2)数据挖掘的理论(包括数据预处理、数据仓库、分类、聚类、关联规则等)以及使用华为企业级大数据挖掘平台FusionInsight Miner和基于华为云的企业智能平台EI (Enterprise Intelligence)的基础服务 - MLS (Machine Learning Service,机器学习服务)进行数据深度分析和挖掘。
通过HCIE-Big Data认证,将证明您系统理解并掌握大型并行处理数据仓库平台的架构原理、分布式关系型数据库的设计和优化及应用开发;掌握大数据挖掘的基本原理,常用算法、常用挖掘方法、对华为大数据挖掘解决方案FusionInsight Miner和华为云机器学习服务MLS的熟练使用,胜任数据仓库开发、大数据分析、大数据数据挖掘和人工智能的相关岗位。
企业拥有HCIE-Big Data 认证的工程师,意味着企业掌握了运用大数据技术进行大数据分析应用、大数据挖掘应用的能力。
大数据知识点:
一章 数据仓库平台FusionInsight LibrA(理论)
第 一节 分布式数据库架构
体系架构基本知识
熟悉MPP架构及优势
业界产品说明
第二节 FusionInsight LibrA 基本组件简介
LibrA逻辑架构
LibrA物理架构
LibrA数据库对象
第三节 FusionInsight LibrA 产品特性和关键技术
架构和支持的操作系统
面向应用开发的基本功能
数据库安全
图形化工具
高级特性
第四节 FusionInsight LibrA 配套工具集
Database Manager概念与架构
Database Manager的安装
Database Manager的使用
Data Studio概念与架构
Data Studio的安装与FusionInsight LibrA服务器的配置
Data Studio工具支持的特性
Data Studio的使用
第五节 FusionInsight LibrA 安全管理
访问控制
用户管理
权限管理模型
对象权限
安全审计
第六节 FusionInsight LibrA 数据库管理系统并发控制
配置负载均衡
事务与隔离
LibrA锁机制介绍
第七节 FusionInsight LibrA 数据库性能监控
系统资源监控方式
性能相关视图
使用命令行监控集群性能
使用DM工具监控集群性能
第八节 FusionInsight LibrA 数据迁移
数据迁移场景划分
GDS工具适用场景和使用方法
Copy from/to适用场景和使用方法
开源ELT工具适用场景和使用方法
gs_dump/gs_restore适用场景和使用方法
gsql工具适用场景和使用方法
Roach工具适用场景和使用方法
从其他数据库中迁移数据
第九节 FusionInsight LibrA SQL介绍
SQL相关机制和原理
利用EXPLAIN进行SQL调优
第十节 FusionInsight LibrA 数据库设计
数据库逻辑设计
存储模式
数据分布
表分区
索引
第十一节 FusionInsight LibrA 应用程序开发指导
FusionInsight LibrA驱动介绍
ODBC应用程序开发
JDBC应用程序开发
基础开发规范
第二章 FusionInsight LibrA(实验)
FusionInsight LibrA基本操作、语法
FusionInsight LibrA性能优化
网络KPI数据栅格化处理
重点区域数据分析
流动人口常驻地分析
第三章 大数据挖掘理论
第一节 预备知识和数据介绍
数据挖掘的定义
数据挖掘的流程
数据挖掘的应用
数据和属性类型
数据的统计描述
数据的邻近性度量
第二节 数据预处理
为什么要预处理数据
数据清理
数据集成
数据归约
数据变换
第三节 数据仓库介绍
数据仓库的概念
数据仓库的体系结构与模型
多维数据模型
概念分层
OLAP与OLTP
方体物化
第四节 分类
分类和回归的概念
决策树分类
朴素贝叶斯分类
组合分类
后向传播分类
支持向量机分类
模型评估与选择
第五节 聚类
聚类的定义
K-均值算法
k-中心点算法
第六节 离群点检测
离群点的概念
离群点检测的方法
第七节 关联规则(Association Rule)
关联规则的定义
关联规则挖掘步骤及相关概念
关联规则挖掘方法分类
Apriori算法
第八节 FusionInsight Miner 和华为云机器学习服务MLS
FusionInsight Miner整体介绍
关系分析
标签管理
华为云机器学习服务
第四章 大数据挖掘实战
银行定期存款业务预测
客户分群
鲍鱼生长年龄预测
认证考试
HCIE-Big Data 证书有效期与重认证方式
有效期:二年
重认证项目:在认证过期之前,通过目前提供的任意一门HCIE 笔试或实验或面试。华为重认证项目详情请参考手册中对“华为重认证策略”的说明
上海交大教育(集团)有限公司于1999年8月4日设立,以独立法人经济实体的形式对外发展终身教育事业。为打造社会化教育平台,充分发挥自身在教育、人才、技术及信息方面的资源和优势并服务于社会。
上海交大教育集团,注册资本1.5亿元人民币,股东为上海交大产业投资管理(集团)有限公司和上海新南洋昂立教育科技股份有限公司。目前管理多所院校和十家控、参股公司。集团聚焦职业教育、基础教育与国际教育等领域,致力于发展终身教育事业。
上海交大教育集团传承 “起点高、基础厚、要求严、重实践、求创新”的醇厚传统,秉持“严谨、务实、创新”的质量方针,聚焦国际教育和职业教育,不断探索人才的培养模式,满足社会教育需求,承担社会教育责任。