一、培训时间及地点
2013年5月24日至5月26日（5月24日报到） 北京
二、培训师资
肖建清 王宝会 曹凡
三、培训对象
高级开发工程师、设计师、架构师、系统管理员、开发经理、测试经理、产品经理、项目经理等。
四、培训证书
工业和信息化部人才交流中心颁发的《工业和信息化领域急需紧缺人才》大数据分析高级工程师证书。证书可作为专业技术人员职业能力考核的证明，以及专业技术人员岗位聘用、任职、定级和晋升职务的重要依据。
证书查询：www.ncie.gov.cn
五、培训费用
培训费：5000 元/人（含教材、培训费、以及学习用具等费用） 食宿统一安排，费用自理。
六、培训内容：
时间 课程名称
*一天上午 大数据分析导入
大数据发展历程
大数据对社会影响
大数据治理
大数据分析价值
大数据分析的生态系统环境及产业链（金融、大型企业、政府公共服务行业、零售、制造业等中小企业）
*一天下午 大数据与Hadoop
大数据分析技术分类
常用大数据分析技术比较
大数据（Big Data）和非结构化数据（NoSQL）
Hadoop的来源和动机
Hadoop概述
Hadoop分布式文件系统
上机实验
MapReduce工作原理
上机实验
Hadoop机群剖析
Hadoop生态系统
第二天 大数据分析的核心和灵魂-Hadoop
集成Hadoop到现有工作流
 关系数据库管理系统
 存储系统
 利用Sqoop从关系型数据库系统中导入数据到Hadoop
 上机实验
 利用Flume导入实时数据到Hadoop
 使用FuseDFS和Hoop访问HDFS
• Hadoop API深入探讨
 ToolRunner介绍
 使用MRUnit进行测试
 利用Combiners来减少中间数据
 使用Configure和Close方法来进行Map/Reduce设置和关闭
 编写Partitioner来优化负载平衡
 上机实验
 直接访问Hadoop分布式文件系统（HDFS）
 使用分布式缓存（Distributed Cache）
 上机实验
• 图的操作
 图论简介
 用Hadoop表示图
 一个图算法的实现：单源*短路径
• 使用Oozie创建工作流
 使用Oozie的动机
 Oozie工作流定义格式
 上机实验
第三天上午 大数据分析架构核心技术之MapReduce • MapReduce编程与讨论
 MapReduce流程
 MapReduce工作原理
 剖析一个MapReduce程序
 基本MapReduceAPI 概念
 驱动代码
 常见MapReduce算法
 API 使用Eclipse进行快速开发
 上机实验
• 高级MapReduce编程
 定制Writables和WritableComparables
 使用SequenceFiles和Avro文件保存二进制数据
 创建InputFormats和OutputFormats
 如何利用其他Hadoop相关技术，包括Apache Hive， Apache Pig，Sqoop和Oozie等
 满足解决实际数据分析问题的高级Hadoop API
 上机实验
第三天下午 大数据分析架构核心技术之Hive和Pig • Hive基础
• Pig基础
• 实用开发技巧
 排序和搜索
 索引
 用Mahout进行机器学习
 Term Frequency – Inverse Document Frequency
 Word Co-Occurrence
 上机实验
大数据分析案例
中国气象局大数据分析案例
中国海关大数据分析案例
贵州移动大数据分析案例
法国国家电力公司大数据分析案例
中芯国际大数据分析案例
安利中国大数据分析案例 |
 |
|
|
手机站
您当前位置是：商业机会 >> 电脑、数码 >> 软件开发 >> 供应：“大数据分析高级工程师”培训
联系信息