云计算分布式大数据Hive数据仓库培训-艾威培训

Welcome飞速飞艇为梦而年轻!

云计算分布式大数据Hive数据仓库培训 · 课程介绍

课程介绍:

作为企业Hadoop应用的核心产品,Hive承载着FaceBook、淘宝等大佬 95%以上的离线统计,很多企业里的离线统计甚至全由Hive完成.

Hive可以让你轻松的在Hadoop中存储、查询和分析海量数据。

 

课程特点:

1,深入浅出中动手实作;

2,对Hive深入浅出的剖析;

3,掌握Hive的优化技术;

4,Hive和亚马逊云计算;

 

课程时长:

2天

 

 

课程对象:

软件工程师;

数据库开发人员;

网络后台开发人员;

运维人员;

 

学员基础:

了解Linux系统;

了解网络;

了解Java;

 

课程大纲:

第1个主题:云计算的四大核心技术

1.HDFS

2.MapReduce

3.HBase

4.Hive

 

第2个主题:Hive集群与管理

1、Hadoop集群的搭建

2、Hadoop集群的监控

3、Hadoop集群的管理

4、集群下运行MapReduce程序

5、安装并启动Hive

6、测试Hive

 

第3个主题:Hive的命令、数据类型和文件格式

1.Hive的CLI

2.Hive的集合数据类型

3.编码和模式

 

第4个主题:开发Hive

1.连接Java调试器到Hive

2.通过Eclipse来开发Hive代码

3.Hive的单元测试

 

第5个主题:HQL

1.HQL的数据定义

2.使用HQL操作数据

3.深入HQL查询

 

第6个主题:HQL的视图和索引

1.HQL的视图:降低查询的复杂度和限定特定的条件

2.HQL的索引:索引的创建和管理、定制索引

 

第7个主题:Hive中的函数

1.使用Hive中已有的函数

2.自定义聚合函数

3.自定义表生成函数

4.在自定义函数中访问缓存

 

第8个主题:Hive的存储过程

1、为何需要Hive中的存储过程

2、在后台中运行的存储过程

3、HiveStorageHandler

4、存储过程的具体编写和使用

 

第9个主题:Hive架构优化

1、降低IO负载

2、表的分区、动态分区

3、压缩

4、分布式缓存

 

第10个主题:彻底优化HQL

1、HQL优化的具体策略和方式

2、Map和Reduce

3、数据倾斜

4,执行计划

 

第11个主题:在AWS上使用Hive

1.使用并管理EMRHive集群

2.EMR集群的详细配置

3.持久层、元数据

4.集群中的HDFS和S3(配置、日志等)

 

第12个主题:Hive的Thrift

1.配置、启动、使用Thrift

2.Thrift的管理

3.管理HiveServer

4.ThriftMetaStore

关于艾威

源于美国 始于1998 艾威(AVTECH)是北美著名的培训机构,总部位于美国新泽西州,2000 年进入中国,以培养国际化的中高端信息人才为己任,专注于国际前沿的新技术研发与教育,艾威主要的业务为培训与咨询两大类,目前培训的主要产品有:项目管理培训、IT 管理培训、IT 技术培训、云计算大数据培训、需求管理培训、产品管理培训,信息安全类,AI 人工智能等....近十类上几百门的课程的培训与咨询服务。
艾威(中国)秉承总部“诚信为本、品质为先”的理念,凭借美国艾威科学的课程体系和多年积累的丰富教学经验,结合中国本土企业文化、实际需求,为企业、个人提供定制化的培训解决方案。艾威进入中国这十八年来已经服务了超过 10000 多家客户,获得了良好的口碑!已被众多 500强企业纳入培训供应商,如 HP,NOKIA,CISCO,INTEL,GE,华为,宝马,德电,通用,大陆汽车,中国银行,交行,工行,罗氏,赛诺菲,埃森哲……等。
  • 艾威是 Prometric,VUE,PSI……等众多国际认证中心授权的考点
  • 艾威是国际项目管理协会 PMI 授权的全球(PMP,PGMP,ACP,PBA)教育机构
  • 艾威是国际需求管理协会 IIBA 授权的全球(CCBA,CBAP)教育机构
  • 艾威是 IT 服务管理官方 EXIN 授权的 ITIL,ITIL EXPERT,Prince2,EXIN Agile Scrum Master 教育机构,同时也是此系列课程的认证考试中心。
  • 艾威是国际信息审计协会 ISACA 授权的 CISA,CISM,CRISC,CGEIT,COBIT 教育机构,同时也是此系列课程的认证考试中心。
  • 艾威是The Open Group 授权的 TOGAF 企业架构的官方培训机构。
  • 艾威是 EPI 授权的数据中心 CDCP 培训机构,华东地区唯一 CDCP 授权培训机构,同时也是 CDCP 认证考试考场。
  • 艾威是国际外包专业协会(IAOP)独家授权外包治理国际认证 SGF(Sourcing Governance Foundation)
艾威面授班开班计划 2019年度艾威(中国)面授班公开课开班计划
2019年度艾威(中国)面授班公开课开班计划
招生范围:北京、上海、深圳、广州、杭州、苏州、成都、南京、武汉、西安、无锡、天津…

This site is protected by