|
北京博思创嘉教育科技有限公司
联系人:顾春田 先生 (总经理) |
![](http://www.qy6.com.cn/subimg/line.gif) |
电 话:010-62971920 |
![](http://www.qy6.com.cn/subimg/line.gif) |
手 机:13910819455 |
![](http://www.qy6.com.cn/subimg/line.gif) |
![](http://img.qy6.com.cn/images/subimg/shouchang.gif) |
|
![](http://img.qy6.com.cn/images/subimg/mod_03.gif) |
|
供应:“大数据分析高级工程师”培训 |
一、培训时间及地点
2013年5月24日至5月26日(5月24日报到) 北京
二、培训师资
肖建清 王宝会 曹凡
三、培训对象
高级开发工程师、设计师、架构师、系统管理员、开发经理、测试经理、产品经理、项目经理等。
四、培训证书
工业和信息化部人才交流中心颁发的《工业和信息化领域急需紧缺人才》大数据分析高级工程师证书。证书可作为专业技术人员职业能力考核的证明,以及专业技术人员岗位聘用、任职、定级和晋升职务的重要依据。
证书查询:www.ncie.gov.cn
五、培训费用
培训费:5000 元/人(含教材、培训费、以及学习用具等费用) 食宿统一安排,费用自理。
六、培训内容:
时间 课程名称
*一天上午 大数据分析导入
大数据发展历程
大数据对社会影响
大数据治理
大数据分析价值
大数据分析的生态系统环境及产业链(金融、大型企业、政府公共服务行业、零售、制造业等中小企业)
*一天下午 大数据与Hadoop
大数据分析技术分类
常用大数据分析技术比较
大数据(Big Data)和非结构化数据(NoSQL)
Hadoop的来源和动机
Hadoop概述
Hadoop分布式文件系统
上机实验
MapReduce工作原理
上机实验
Hadoop机群剖析
Hadoop生态系统
第二天 大数据分析的核心和灵魂-Hadoop
集成Hadoop到现有工作流
 关系数据库管理系统
 存储系统
 利用Sqoop从关系型数据库系统中导入数据到Hadoop
 上机实验
 利用Flume导入实时数据到Hadoop
 使用FuseDFS和Hoop访问HDFS
• Hadoop API深入探讨
 ToolRunner介绍
 使用MRUnit进行测试
 利用Combiners来减少中间数据
 使用Configure和Close方法来进行Map/Reduce设置和关闭
 编写Partitioner来优化负载平衡
 上机实验
 直接访问Hadoop分布式文件系统(HDFS)
 使用分布式缓存(Distributed Cache)
 上机实验
• 图的操作
 图论简介
 用Hadoop表示图
 一个图算法的实现:单源*短路径
• 使用Oozie创建工作流
 使用Oozie的动机
 Oozie工作流定义格式
 上机实验
第三天上午 大数据分析架构核心技术之MapReduce • MapReduce编程与讨论
 MapReduce流程
 MapReduce工作原理
 剖析一个MapReduce程序
 基本MapReduceAPI 概念
 驱动代码
 常见MapReduce算法
 API 使用Eclipse进行快速开发
 上机实验
• 高级MapReduce编程
 定制Writables和WritableComparables
 使用SequenceFiles和Avro文件保存二进制数据
 创建InputFormats和OutputFormats
 如何利用其他Hadoop相关技术,包括Apache Hive, Apache Pig,Sqoop和Oozie等
 满足解决实际数据分析问题的高级Hadoop API
 上机实验
第三天下午 大数据分析架构核心技术之Hive和Pig • Hive基础
• Pig基础
• 实用开发技巧
 排序和搜索
 索引
 用Mahout进行机器学习
 Term Frequency – Inverse Document Frequency
 Word Co-Occurrence
 上机实验
大数据分析案例
中国气象局大数据分析案例
中国海关大数据分析案例
贵州移动大数据分析案例
法国国家电力公司大数据分析案例
中芯国际大数据分析案例
安利中国大数据分析案例 |
![](http://img.qy6.com.cn/images/usercrad/card_1.gif) |
|
|
|
![](http://img.qy6.com.cn/images/usercrad/card_4.gif) |
|
|