扫描二维码,下载手机APP
下载安卓APP箭头
客服QQ
箭头给我发消息

客服QQ:3315713922
论坛 >大数据 >【上海站】大数据运维工程师——Hadoop管理员 认证培训

【上海站】大数据运维工程师——Hadoop管理员 认证培训

LEE发布于 2018-09-12 17:45查看:28

2018年10月27日-10月30日
一、培训特色
1.标准的课程体系及原厂商认证的授课讲师
与美国同步的原厂课程、经过层层考核的授课讲师,保证了我们的课程的规范化与标准化。大数据技术不同于其他学科技术,非常的新,发展也非常迅速,技术的迭代也使得我们的课程在不断更新。就目前来看,我们的课程涵盖的大数据运维、开发、分析方面,已处于市场领先地位。
2.课程设计合理
知识体系层层递进,从基础开始逐渐深入,深入浅出授课,使学员更易于学习掌握。理论加实验的授课方式使课程更丰满。
3.重底层、讲原理
为学员提供虚拟环境实战的同时,不放弃理论深度,以理论带动实际操作,使学员不仅仅只是一个纸上谈兵的理论者,更有动手的实力。

二、培训目标
为期4 天的Hadoop 管理员培训将帮助学员综合理解并全面掌握对Hadoop机群的运维管理,包括:安装,配置、负载平衡及性能调优等。通过该培训,Hadoop系统管理员将能准备好应对实际运维中遇到的挑战。
通过讲师在课堂上的讲解,以及实操练习,学员将学习以下内容:管理机群的特性,譬如日志汇总、配置管理、报告、报警及服务管理。YARN、MapReduce、Spark及 HDFS的工作原理。如何为你的机群选取合适的硬件和架构。如何将 Hadoop 机群和企业已有的系统进行无缝集成。如何使用Flume 进行实时数据采集以及如何使用Sqoop在RDBMS和Hadoop机群之间进行数据导入导出。如何配置公平调度器为 Hadoop 上的多用户提供服务级别保障。产品环境中 Hadoop 机群的最佳运维实践。Hadoop 机群排错、诊断问题和性能调优。

三、培训对象
面向系统管理员和IT经理,需具备Linux 经验,无需Apache Hadoop 基础。

四、培训证书
培训结束并顺利通过考试后,颁发Cloudera全球认证证书,证书全球通用。
证书可作为专业技术人员职业能力考核的证明,以及专业技术人员岗位聘用、任职、定级和晋升职务的重要依据。


1536745428843143.png

五、培训大纲

课程介绍

名称

Cloudera   Administrator Training for Apache Hadoop

第一天上午

Apache Hadoop 介绍    

 Hadoop 动机    

 基本概念    

 Hadoop 核心部件 

Hadoop 机群安装    

 机群管理方案     

 Hadoop (CDH) 安装 

Hadoop 分布式文件系统 (HDFS)    

 HDFS 特性    

 读写文件    

 NameNode 内存考虑    

 HDFS 安全简介   

 HDFS Web UI    

 使用 HDFS Shell 

第一天下午

Hadoop 分布式文件系统 (HDFS)    

 HDFS 特性    

 读写文件    

 NameNode 内存考虑    

 HDFS 安全简介   

 HDFS Web UI    

 使用 HDFS Shell 

YARN 上的 MapReduce  Spark      

 计算平台在 Hadoop 里扮演的角色      

 YARN机群资源管理器    

 MapReduce 概念    

 Apache Spark 概念    

 Yarn 上的计算平台    

 YARN Web UI  Shell    

 YARN 应用运行日志

第二天上午

Hadoop 配置及服务运行日志    

 定位配置参数及进行配置变更    

 管理角色实例及添加服务    

 配置 HDFS 服务      

 配置 Hadoop 服务运行日志      

 配置 YARN 服务 

 HDFS 导入数据      

 使用 Flume 从外部数据源实时导入数据      

 使用 Sqoop 从关系数据库导入数据      

 REST 接口    

 导入数据的最佳实践 

第二天下午

Hadoop 机群规划    

 规划考虑因素    

 硬件选择    

 虚拟化选项    

 网络因素    

 节点配置 

HiveImpala  Pig 的安装及配置    

 Hive    

 Impala    

 Pig Hadoop 

第三天上午

客户端及 Hue    

 什么是 Hadoop 客户端      

 安装及配置 Hadoop 客户端      

 安装及配置 Hue    

 使用 Hue 进行身份验证及授权

机群高级配置    

 高级配置参数    

 Hadoop 端口配置    

 HDFS 机柜感知配置    

 HDFS 高可靠性配置 

第三天下午

Hadoop 安全    

 Hadoop 安全的重要性    

 Hadoop 安全性概念    

 Kerberos 简介    

 使用 Kerberos 保护 Hadoop 机群    

 其他安全特性 

资源管理    

 使用静态服务池配置 Linux cgroup      

 公平调度器    

 配置动态资源池    

 YARN 内存及 CPU 设置      

 Impala 查询调度 

第四天上午

机群维护    

 检查 HDFS 状态      

 机群间复制数据    

 添加/移除机群节点    

 机群数据负载平衡    

 目录快照    

 机群升级 

第四天下午

机群监控及排错      

 监控 Hadoop 机群      

 Hadoop 机群排错    

 常见配置不当问题

报名请联系2790264852(Cloudera认证)


收藏(0)0
查看评分情况

全部评分

此主贴暂时没有点赞评分

总计:0

回复分享

共有0条评论

    • Real Madrid
    • 药师
    • 慧星的那一夜
    • Mr ken
    • YUI
    • cappuccino
    • mr jack
    • Mright
    • 课课家软考1
    • 选择版块:

    • 标题:

    • 内容

    • 验证码:

    • 标题:

    • 内容

    • 选择版块:

    移动帖子x

    移动到: