课程培训
大数据分析培训与咨询

 培训对象:需要使用Hadoop来进行数据分析的数据分析员,商业分析

教学大纲:

Hadoop基础

Pig基础

使用Pig进行简单数据分析

使用Pig处理复杂数据

使用Pig分析处理多数据集

Pig排错和优化

Hive与Impala基础

使用Hive与Impala进行数据分析

数据管理

数据存储与性能

使用Hive与Impala进行数据分析

Impala如何执行查询/扩展及改善性能

使用Hive分析处理文本数据

Hive优化

扩展Hive

如何选取数据分析工具

 

课程大纲:

Hadoop Fundamentals 

 The Motivation for Hadoop 

 

      Hadoop Overview 

 

      Data Storage: HDFS 

 

      Distributed Data Processing: YARN, MapReduce, and Spark 

 

      Data Processing and Analysis: Pig, Hive, and Impala 

 

      Data Integration: Sqoop 

 

      Other Hadoop Data Tools 

 

      Exercise Scenarios Explanation 

 

 

 

Introduction to Pig 

 

      What Is Pig? 

 

      Pig’s Features 

 

      Pig Use Cases 

 

      Interacting with Pig 

 

Basic Data Analysis with Pig 

 

      Pig Latin Syntax 

 

      Loading Data 

 

      Simple Data Types 

 

      Field Definitions 

 

      Data Output 

 

      Viewing the Schema 

 

      Filtering and Sorting Data 

 

      Commonly-Used Functions 

 

Processing Complex Data with Pig 

 

      S torage Formats 

 

      Complex/Nested Data Types 

 

      G rouping 

 

      Built-In Functions for Complex Data 

 

      Iterating Grouped Data 

 

Multi-Dataset Operations with Pig 

 

      Techniques for Combining Data Sets 

 

      Joining Data Sets in Pig 

 

      Set Operations 

 

      Splitting Data Sets 

 

Pig Troubleshooting and Optimization 

 

      Troubleshooting Pig 

 

      Logging 

 

      Using Hadoop’s Web UI 

 

      Data Sampling and Debugging 

 

      Performance Overview 




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表下载请点击

服务优势:
丰富专家资源,精准匹配相关行业,相关项目技术精英,面向用户实际需求,针对性培训或咨询,互动式交流,案例教学,精品小班,实际工程项目经验分享,快捷高效,节省时间与金钱,少走弯路与错路。

专家力量:
中国科学院相关研究所高级研究人员
西门子,TI,vmware,MSC,Ansys,MDI,Mentor, candence,Altium,Atmel 、Freescale,达索,华为等
大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关学历背景专业,理论素养高
多年实际项目实践,大型复杂项目实战案例分享,热情,乐于技术分享
针对客户实际需要,真实案例演示,互动式沟通,学有所值
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>