2019大数据系统运维培训(9月北京班)
时间:2019-09-19 08:00 至 2019-09-20 18:00
地点:北京
- 参会报名
- 课程介绍
- 课程安排
- 课程讲师
- 课程指南
-
手机下单
2019大数据系统运维培训(9月北京班) 已截止报名会议时间: 2019-09-19 08:00至 2019-09-20 18:00结束 主办单位: 火龙果咨询
|
课程介绍
课程内容 主办方介绍
2019大数据系统运维培训(9月北京班)宣传图
本课程关注大数据架构下如何进行系统监控、业务监控,涉及到:海量日志的保存、收集、分析和监控。课程讲解如何搭建部署大数据系统,如何构建监控平台,如何基于平台进行大数据业务和系统的监控。
培训目标:
.了解大数据运维都有什么内容
·大数据系统核心组件介绍
·性能调优策略实战
·离线服务平台介绍
·业务实时监控介绍
·Hadoop集群硬件监控
.通过应用案例了解工作方法与流程
培训对象:大数据运维工程师,架构师
学员基础:了解大数据系统的构成,对运维工作有一定了解
授课方式:定制课程+案例讲解+小组讨论,60%案例讲解,40%实践演练
培训内容:2天
查看更多
课程安排
大数据运维概览 | 大数据的运维案例回顾: 大数据运维涉及哪些内容 |
大数据系统核心组件介绍 | 1、集群管理工具一anbari 2、数据仓库一hive 3、分布式计算一MapReduce 4、nosQL数据库一Hbase 5、工作流工具一0ozie 6、数据的并行采集一Flume 7、MapReduce却本工具一Pig 8、与关系型数据库之间的数据迁移-Sqop 9、资源管理平台一Yarn 10、数据挖掘算法一Mahout 11、分布式统一服务-Zookeeper 12、流式计算一Stron 13、内存计算一Spark |
性能调优策略实战 | 1、Linu版本选择 2、安装DFS系统调优 3、网络优化策略 4、Hdfs优化策略 5、安装HDFS服务 6、HDFS配置参数介绍 7、HDFS运维工具介绍 8、Hbase服务优化 9、H地ase表设计 10、spark服务介绍 |
离线服务平台介绍 | 1、大数据平台架构设计 2、底层存储服务平台架构设计与应用场景 3、离线计算框架实现对比 4、元数据服务治理与数据生命周期管理 5、统一调度平台设计 6、海量日志处理架构介绍 |
业务实对监控介绍 | 1、流计算框架服务介绍 2、Storm流计算服务介绍与应用场景 3、Spark Streaning服务框架介绍与应用场景 4、Flink服务框架介绍与应用场景 5、流计算案例分享(天猫双十服务) 6、58业务数据监控方案设计 |
Hacdoop 集群硬件监控 | 1、查看集群状态 .HDS数据管理 ·Mapreduce任务管理 ·HDFS安全模式 ·添加删除节点 ·数据平衡 ·文件数据跨集群拷贝 2、使用6anglia 监控Hadoop集群 3、使用Cacti监控操作系统 4、使用Zabbix监控 5、ganglia nagios联合使用分析 6、集群监控 7、服务监控运行的进程监控 8、主机状态监控 9、主机磁盘存储情况监控 10、网络状况监控 11、ganglia监控 12、zabbix监控 13、提供的服务监控监控 14、堡垒机监控 15、任务监控 16、任务运行时常、资源数、读取数里、shuffle数里等 17、按人任务按部门的任务汇总 18、队列监控 19、队列下的任务运行历史监控 20、总里超过一个小时的任务列表监控报表 21、数据里监控 22、各个一级部门目录的数据增长量监控 |
应用案例 | 1、互联网行业大数据平台的搭建 2、移动手机上网日志分析系统 3、电信业使用hadoop场景分析 4、电商个性化推荐系统 |
查看更多
课程讲师
Kent老师
大数据架构师,具有丰富的大数据实践项目经验
查看更多
课程指南
课程费用
课程费用:5000元/月
查看更多
温馨提示
酒店与住宿:
为防止极端情况下活动延期或取消,建议“异地客户”与活动家客服确认参会信息后,再安排出行与住宿。
退款规则:
活动各项资源需提前采购,购票后不支持退款,可以换人参加。
您可能还会关注
-
DAMS2024中国数据智能管理峰会(上海)
2024-11-29 上海
-
2024中国医药医疗CIO年会
2024-12-27 上海
-
2024PM产品力领航者大会
2025-05-16 上海
-
AiCon深圳2025|全球人工智能与大模型应用峰会
2025-08-22 深圳