课程培训
Hadoop原理与高级实践培训与咨询

 

培训目标:

 

本次课程以实际的演练(环境部署,程序开发)为主,分享大规模Hadoop应用的一线最有效实用经验,实践与理论相结合,让学员能够对Hadoop生态系统有一个清晰明了的认识,理解Hadoop系统适用的场景,掌握MapReduce与Hive的中高级应用开发技能,快速高效搭建稳定可靠的Hadoop集群,满足生产环境的标准。
课程内容的分为4个部分:

  1. 进入Hadoop的精彩世界,介绍Hadoop生态系统的各个组成模块与适用场景。
  2. Hadoop部署,编程与管理,讲解演示在生产环境中选用和配置服务器需要注意的事项,介绍HDFS编程的Java API使用。
  3. MapReduce编程:讲解演示MapReduce的中高级应用开发技能。
  4. Hive与HBase编程:根据实际例子讲解Hive的使用与UDF的开发,以及如何通过JAVA编写HBase应用。
    进入Hadoop的精彩世界
    • 文件存储-HDFS
    • HDFS-工作原理
    • 数据计算MapReduce
    • MapReduce工作原理
    • SQL分析-Hive
    • 海量实时读写-HBase
    • 工作流调度-Ooize
    • 分布式协调系统--Zookeeper
    Hadoop部署与编程
    • Hadoop版本介绍与选择
    • Hadoop部署实践
      • Hadoop安装文件构成与配置体系
      • 机器硬件建议配置
      • 系统环境配置
      • 基本参数配置与说明
      • 进程分布规划与启动
    • Hadoop基本使用操作
      • HDFS
      • 权限
      • MapReduce
    • HDFS编程
      • 开发环境准备
      • 读文件
      • 写文件
    • Hadoop系统容灾策略
    • Hadoop资源调度策略
    • Hadoop安全
    • Hadoop系统监控与报警策略
    MapReduce编程
    • MapReduce的定义与工作机制
    • MapReduce与分布式计算
    • 编程实战
      • MapReduce程序编写
      • 基于MapReduce的Sort操作
      • 基于MapReduce的Join操作
      • Hadoop多语言编程框架Streaming
    • 代码调试
      • 运行日志
    Hive与HBase编程
    • Hive环境部署与搭建
    • Hive工作机制
    • Hive语法与实践
    • 数据压缩选择
      • gzip
      • bz2
      • lzo
      • rcfile
    • HBase编程示例
    • HBase系统架构
    • HBase性能测试
    Hadoop系统管理
    • Hadoop系统容灾策略
    • Hadoop资源调度策略
    • Hadoop高级配置参数
    • Hadoop安全
    • Hadoop系统监控与报警策略
     



如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表下载请点击

服务优势:
丰富专家资源,精准匹配相关行业,相关项目技术精英,面向用户实际需求,针对性培训或咨询,互动式交流,案例教学,精品小班,实际工程项目经验分享,快捷高效,节省时间与金钱,少走弯路与错路。

专家力量:
中国科学院相关研究所高级研究人员
西门子,TI,vmware,MSC,Ansys,MDI,Mentor, candence,Altium,Atmel 、Freescale,达索,华为等
大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关学历背景专业,理论素养高
多年实际项目实践,大型复杂项目实战案例分享,热情,乐于技术分享
针对客户实际需要,真实案例演示,互动式沟通,学有所值
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>