做企业培训,当然要找对好讲师!合作联系

刘晖:数据分析培训班(6门课程,共18天)

刘晖老师刘晖 注册讲师 112查看

课程概要

培训时长 : 18天

课程价格 : 扫码添加微信咨询

课程分类 : 培训开发

课程编号 : 16905

面议联系老师

适用对象

数据分析师、技术经理、产品经理、产品助理 将承担数据分析师职责的业务人员或信息化人员

课程介绍

(1)培训背景

随着互联网、云计算、大数据、物联网、人工智能等科技的快速发展,经济发展已经进入全球化时代,企业的命运与国际经济环境紧密联系,如美国的经济危机会波及到全球各个国家与地区和企业,国家和企业已经不是孤立的存在。在经济全球化时代商业环境极其复杂,不仅要考虑国内、国外经济环境,同时还要考虑不同国家的国家政策,不同民族的民族文化,不同宗教的宗教信仰等,更加加深入了商业环境的复杂程度。在极其复杂的国际商业环境中,作为大型企业领导者仅凭经验与智慧无法全面了解与掌控企业、了解国际化的商业环境,因此很难做出正确的企业战略决策,甚至更无法做到企业精细化管理,更不可能做到高效运营,那么,如何突破因商业环境复杂度而导致的企业失控呢?并在复杂的商业竞争环境中脱颖而出并获得最大利润呢?答案是掌握企业数据和掌握国际化数据,并建立高效的数据分析体系,探索数据、挖掘数据高效准确的获取国际化的经济环境状况,洞察市场趋势提前做出有利于企业的战略决策,提高企业竞争力,规避市场风险,数据分析则是提升企业管理水平,实现上述目标的一种行之有效的方法。国际化的竞争就是信息的国际化竞争。

随着大数据、人工智能的快速发展,数据的价值越发突显,并为海量的高并发的数据分析提供了新的工具与可行性,较以往的传统数据分析工具更为有效,甚至传统数据分析工具做不到的,大数据、人工智能都能做到。因此不仅仅企业,社会各个方面也因大数据的价值而提高了对数据的关注程度,也加大了数据分析的投入力度。无论是企业管理、战略决策、精准营销、精细化管理等都无处不体现着数据分析的重要性。

数据如此重要,如何建设一个高效的数据分析体系呢?至少要具备以下两个条件:一是在宏观层面上正确理解数据分析;二是丰富的IT系统建设经验、分布式技术和较强的数据技术能力。第一点尤为重要,因为一旦在思想和认识层面对数据分析体系理解有误,那么即使精通于各种技术方案,所建立起来的也只是一堆技术架构的粗糙堆砌,虽然也能达到部分数据分析的效果,但必定会事倍功半。

(2)培训目标

本次数据分析技术培训课程,整个课程体系设计完备,思路清晰,学员通过本次课程的系统性学习可以掌握如下技能:

  1. 了解数据分析的基础知识及基本理论;
  2. 结合Python语言学会数据的产生、导入与预处理。掌握大数据生成与导入,数据分析流程与建模思想,数据清洗与数据加工等内容;
  3. 结合Python语言掌握数据分析与挖掘基础。学习常见数据分析方法与数据挖掘概述,描述型数据分析。
  4. 学习数据分析工具Python语言的数据分析实战。
  5. 掌握结构化数据工具SQL的应用及相关知识。
  6. 学习大数据可视化技术。包括数据可视化技术概述及培训关键点概述,数据挖掘与可视化工具介绍(Excel、SPSS、Tableau等),可视化案例分享等内容。
  7. 学习Python与数据分析实战。包括Python语言入门,Python网络编程、爬虫与机器学习,Python数据分析案例分享等内容。

(3)教学计划

本系列课程总共由6门课程组成:

教学设计

NO.

课程名称

课程天数

基础理论

1

概率论与数理统计

1天

SQL语法基础及进阶

2

数据分析与挖掘基础

2天

Python入门

3

Python环境准备及相关数据分析库(pandas、numpy、matplotlib、scipy)的安装及应用

2天

4

Python语言基础知识

1天

5

正则表达式及Python编程

1天

Python与数据分析实战

6

数据采集

1天

7

数据分析

4天

8

爬虫技术与实践

4天

数据可视化

9

大数据可视化

2天

(4)具体课程方案(含课程大纲)

课程1:概率论与数理统计-1天

【匹配关键知识点】

课程目标1:建立必要的概率论与数理统计基本知识素养,掌握探索随机现象统计规律的一般方法。

课程目标2:掌握概率论与数理统计的基本概念、基本理论、基本方法和运算技能。包括概率论的基本概念、随机变量、多维随机变量、随机变量的数字特征、数理统计的基本概念、参数估计等相关知识。熟悉数据处理、数据分析、数据推断的各种基本方法。

课程目标3:掌握处理随机现象的基本思想和方法,培养抽象概括、推理论证、严密的逻辑思维能力,以及使用概率论与数理统计的方法去分析和解决有关实际问题的能力。

【课程时间】

1天(8小时/天)

【课程简介】

通过本课程的学习,应掌握概率论与数理统计的基本概念,了解它的基本理论和方法,从而使学生初步掌握处理随机现象的基本思想和方法,培养学生运用概率统计方法分析和解决实际问题的能力,并且在知识传授的同时起到价值引领的作用,积极培育和践行社会主义核心价值观,培养学生科学、严谨的思维能力。

【课程特点】

教学中以课堂讲授为主,以讨论为辅。采用启发式教学法,适当运用讨论式教学法。融入联系应用的案例式教学法,并倡导利用结合软件技术解决实际问题的实验式教学法。恰当使用多媒体教学与传统教学相结合的教学手段,充分运用教师对学生讲授与学生间自由讨论相结合、传统解题训练与开放型问题探索相结合、以及实体课堂面对面交流与虚拟课堂数字信息交流相结合的交互式教学手段,合理利用网络资源实施开放性教学手段,采用规范统考与多样化考查相结合的考核手段。

【课程大纲】(1天*8小时)

时间

内容

案例实践与练习

Day1

数据分析概述

1面向小白的统计学:描述性统计(均值,中位数,众数,方差,标准差,与常见的统计图表)

2概率的基本概念(方差、分位数、随机试验、样本空间、事件、频率、概率、排列组合),古典概型

3条件概率与贝叶斯公式,独立性

4微积分:随机变量及其分布(二项分布,均匀分布,正态分布)

5多维随机变量及其分布

6随机变量的期望,方差与协方差

7大数定律、中心极限定理与抽样分布

8从抽样推测规律之一:点估计与区间估计

9从抽样推测规律之二:参数估计

10基于正态总体的假设检验

11秩和检验

12预测未来的技术:回归分析

13时间序列分析

 

案例练习:

 

研讨:

课程3:数据分析与挖掘基础-6天

【匹配关键知识点】

常见数据分析方法与数据挖掘概述,描述型数据分析,常见数据分析与挖掘算法(Kmeans、购物篮、决策树、朴素贝叶斯等)等内容。

【课程时间】

6天(8小时/天)

【课程简介】

随着大数据时代的快速到来,以及大数据在生产生活中迅速应用,数据分析、数据建模、数据挖掘、机器学习、神经网络、深度学习、人工智能等重要性越发突出,本课程是针对大数据时代的特点,尹老师总结多年数据分析经验,而精心设计的课程,课程内容涵盖了数据领域的数据处理、统计分析、数据挖掘、机器学习、神经网络、深度学习、人工智能等内容,以及人工智能的应用范围、发展前景剖析。

【课程收益】

1、常见数据分析方法与数据挖掘概述;

2、描述型数据分析;

3、常见数据分析与挖掘算法(Kmeans、购物篮、决策树、朴素贝叶斯等)等。

【课程特点】

常见数据分析方法与数据挖掘概述,描述型数据分析,常见数据分析与挖掘算法(Kmeans、购物篮、决策树、朴素贝叶斯等)等内容。

【课程对象】

    数据分析师、技术经理、产品经理、产品助理等

    将承担数据分析师职责的业务人员或信息化人员

    希望加强数据分析能力的软件开发人员

    系统集成企业售前工程师、售前顾问及方案制作人员

【学员基础】

    具有2年以IT部门工作经验,将负责数据分析等相关任务的技术人员

【课程大纲】(6天*8小时)

时间

内容

案例实践与练习

Day1

常见数据分析方法与数据挖掘概述

  1. 数据分析与建模的概念
  2. 数据分析与建模过程
  3. 数据分析模型开发过程
  4. 数据建模概述
  5. 机器学习概念
  6. 机器学习算法剖析
  7. 算法库分类
  8. 算法库
  9. 深度学习
  10. 神经网络
  11. 人工智能
  12. 商业智能

 

案例练习:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:数据分析的过程

Day2

描述型数据分析

  1. 统计学基本概念
  2. 统计数据的计量尺度
  3. 常用基本统计量
  4. 集中趋势的描述指标
  5. 离散趋势的描述指标
  6. 中心极限定理
  7. 大数定律
  8. 数据的分布
  9. 正态分布的特征
  10. 偏度和峰度
  11. 检测数据集的分布
  12. 数据的分布拟合检验与正态性检验
  13. 抽样标准
  14. 假设检验
  15. T检验
  16. 置信区间

案例练习:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:描述性数据分析

Day3

常见数据分析与挖掘算法

  1. 数据挖掘的基本任务
  2. 数据挖掘建模过程
    1. 定义挖掘目标
    2. 数据取样
    3. 数据探索
    4. 数据预处理
    5. 挖掘建模
    6. 建立模型
    7. 业务理解
    8. 模型拟合
    9. 训练集
    10. 测试集
    11. 模型评价
  3. 常用的数学预测模型
    1. 线性回归
    2. 回归(预测)与分类
    3. 决策树与随机森林
    4. 聚类分析(kmeans)
    5. 关联规则
    6. 时序模式
    7. 离群点检测
    8. 深度学习
    9. 人工智能
    10. 神经网络
  4. 案例:如何从数据中挖掘出有价值的信息

案例研讨:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:常用数据分析方法与算法

Day4

朴素贝叶斯与回归分析

  1. 主成分分析和因子分析(深入剖析主成分分析及因子分析)
  2. 主成分分析
  3. 总体主成分
  4. 样本主成分
  5. 主成分分析模型
  6. 案例:主成分分析模型实现
  7. 课堂实操:主成分分析模型实现

 

  1. 方差分析(深入剖析方差分析方法及实现)
  2. 单因素方差分析
  3. 单因素方差分析模型
  4. 因素效应的显著性检验
  5. 因素各水平均值的估计与比较
  6. 两因素等重复试验下的方差分析
  7. 统计模型
  8. 交互效应及因素效应的显著性检验
  9. 无交互效应时各因素均值的估计与比较
  10. 有交互效应时因素各水平组合上的均值估计与比较
  11. 两因素非重复试验下的方差分析
  12. 金融案例:方差分析实现
  13. 课堂实操:方差分析实现
  14. Bayes统计分析(深入剖析Bayes统计分析)
  15. Baves统计模型
  16. Bayes统计分析的基本思想
  17. Bayes统计模型
  18. Bayes统计推断原则
  19. 先验分布的Bayes假设与不变先验分布
  20. 共轭先验分布
  21. 先验分布中超参数的确定
  22. Baves统计推断
  23. 参数的Bayes点估计
  24. Bayes区间估计
  25. Bayes假设检验
  26. 案例:实现Bayes统计分析建模
  27. 课堂实操:实现Bayes统计分析建模

 

  1. 数学建模(深入剖析数学建模)
  2. 数学建模
  3. 数学预测模型
  4. 模型评估
  5. 模型参数优化

 

  1. 回归分析与分类分析原理与应用(深入剖析数据的回归分析与分类分析的原理以及应用)
  2. 回归与分类
  3. 回归分析概念
  4. 线性回归模型及其参数估计
  5. 一元线性回归
  6. 一元线性回归模型
  7. 一元线性回归模型求解参数
  8. 损失函数
  9. 求偏导
  10. 回归方程的显著性检验
  11. 残差分析
  12. 误差项的正态性检验
  13. 残差图分析
  14. 统计推断与预测
  15. 回归模型的选取
  16. 穷举法
  17. 逐步回归法
  18. 岭回归分析
  19. 一元线性回归
  20. 金融案例:一元线性回归模型检验
  21. 多元线性回归概述
  22. 多元线性回归模型
  23. 金融案例:多元线性回归实现航空业信用打分和评级模型

 

  1. Logistic回归分析(剖析Logistic回归与其它回归分析方法)
  2. Logistic回归介绍
  3. Logistic函数
  4. Logistic回归模型
  5. 案例:SPSS Logistic回归实现
  6. 课堂实操: Logistic回归实现航空业欺诈预测模型
  7. 课堂实操: Logistic回归实现航空业风险分析模型

 

  1. 非线性回归原理及应用(剖析非线性回归原理及应用实践)
  2. 非线性回归
  3. 双曲线函数
  4. 幂函数
  5. 指数函数
  6. 对数函数
  7. S型曲线
  8. 案例:非线性回归实现
  9. 课堂实操:非线性回归实现航空业经营分析和绩效分析模型

案例练习:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:主成分分析模型实现

Day5

聚类分析与关联规则挖掘

 

  1. 数据建模常用距离(深入剖析数据建模过程中常用的距离模型)
  2. 数据挖掘常用距离
  3. 欧氏距离
  4. 曼哈顿距离
  5. 切比雪夫距离
  6. 闵可夫斯基距离
  7. 标准化欧氏距离
  8. 马氏距离
  9. 夹角余弦
  10. 汉明距离
  11. 杰卡德距离 & 杰卡德相似系数
  12. 相关系数 & 相关距离
  13. 信息熵

 

  1. 聚类分析与建模实现(深入剖析聚类分析以及通过SPSS聚类算法模型分析数据)
  2. 聚类分析
  3. 聚类算法
  4. 样品间相近性的度量
  5. 快速聚类法
  6. 快速聚类法的步骤
  7. 用Lm距离进行快速聚类
  8. 谱系聚类法
  9. 类间距离及其递推公式
  10. 谱系聚类法的步骤
  11. 变量聚类
  12. 案例:SPSS聚类实现及绘图
  13. 案例:Kmeans应用案例剖析
  14. 课堂实操:编写程序实现Kmeans应用案例剖析

 

  1. 关联规则分析与实现(深入剖析关联规则分析以及通过SPSS关联规则算法模型分析数据)
  2. 关联规则
  3. 支持度与置信度
  4. 关联规则挖掘的过程
  5. Apriori算法
  6. 关联规则案例
  7. 支持度与置信度计算
  8. 案例:SPSS实现关联规则
  9. 课堂实操:SPSS实现航空业数据关联规则分析

案例练习:通过编写程序实现Kmeans应用案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:编写程序实现Kmeans应用案例剖析

Day6

决策树与随机森林

 

  1. 决策树分析与实现(深入剖析决策树分析以及通过SPSS决策树模型分析数据)
  2. 决策树分析
  3. 决策树
  4. 决策树构成要素
  5. 决策树算法原理
  6. 决策树法的决策过程
  7. 决策树算法
  8. 案例:实现决策树分析
  9. 课堂实操:实现航空业客户细分模型
  10. 随机森林

 

 

  1. 数据建模时序模式分析与实现(深入剖析时序模式分析)
  2. 时序模式
  3. 时间序列分析
  4. 时间序列分析
  5. 时间序列
  6. 序列分析的三个阶段
  7. 课堂实操:实现航空业客户流失模型

案例练习:通过实现航空业客户细分模型案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:实现航空业客户细分模型

课程8:大数据可视化-2天

【匹配关键知识点】

数据可视化技术概述及培训关键点概述,数据挖掘与可视化工具介绍(SAS、Project、Excel、SPSS、Tableau等),可视化案例分享等内容。

【课程时间】

2天(8小时/天)

【课程简介】

随着互联网、移动智能设备、云计算技术、大数据技术的迅猛发展,使人类产生与获取数据的能力成数量级地增加,面对如此浩瀚的数据海洋,想通过人工分析大数据从而得到大数据中隐含的有价值的模式,几乎是不可能的。因此人们需要借助新的技术挖掘大数据中所蕴含的价值,采用数据可视化技术绝对是一个明智的选择。

随着科学技术的不断发展,大量的由计算机产生的中间数据都需要进行可视化处理,以求达到辅助分析、再现客观事实的目的。通过视觉化呈现数据,可揭示了令人惊奇的模式和观察结果,某些数据是不可能通过简单统计就能显而易见的看到的模式和结论。正如作家、记者和信息设计师 David McCandless 在 TED 上说道:“通过视觉化,我们把信息变成了一道可用眼睛来探索的风景线,一种信息地图。当你在迷失在信息中时,信息地图非常实用”。由此足见数据可视化的价值。

无论获得信息还是表达信息,最佳方式之一是通过视觉化方式,快速捕捉和展现信息要点与核心要义,这是数据可视化的价值点所在。

数据可视化技术有着广阔的发展和应用空间,越来越受到人们的关注。

【课程收益】

1、数据可视化技术概述及培训关键点概述;

2、数据挖掘与可视化工具介绍;

3、可视化案例分享

【课程特点】

数据可视化技术概述及培训关键点概述,数据挖掘与可视化工具介绍(SAS、Project、Excel、SPSS、Tableau等),可视化案例分享等内容。

【课程对象】

    数据分析师、技术经理、产品经理、产品助理等

    将承担数据分析师职责的业务人员或信息化人员

    希望加强数据分析能力的软件开发人员

    系统集成企业售前工程师、售前顾问及方案制作人员

【学员基础】

    具有2年以IT部门工作经验,将负责数据分析等相关任务的技术人员

【课程大纲】(2天*8小时)

时间

内容

案例实践与练习

Day1

数据可视化技术概述及培训关键点概述

 

  1. 数据可视化问题剖析(深入大数据时代数据可视化存在的问题)
  2. 大数据特征vs数据可视化
  3. 传统数据可视化问题剖析
  4. 传统数据可视化工具特点剖析

 

  1. 数据可视化概述(介绍数据可视化工具、特征及基础架构)
  2. 数据可视化概念
  3. 数据可视化作用
  4. 数据可视化目标
  5. 数据可视化应用
  6. 数据维度和指标
  7. 图表产生过程
  8. 可视化的表现形式
  9. 可视化的显示
  10. 可视化的色彩
  11. 可视化案例实战:仪表盘制作
  12. 标准图表的表现能力
  13. 标准图表的选择标准
  14. 图表制作原则
  15. 可视化案例实战:数据占比柏拉图绘制
  16. 可视化的决定性因素
  17. 数据可视化技巧
  18. 数据化可视化工具
  19. 创意性数据可视化
  20. 虚拟实现技术
  21. 防止过度可视化
  22. 一图胜千言
  23. 可视化的升华:声音

 

  1. 可视化的探索性分析和数据挖掘工具(学习可视化数据挖掘工具)
  2. Tableau
  3. Excel
  4. ECharts
  5. QlikView
  6. R语言
  7. Python
  8. SPSS
  9. SAS

 

  1. 数据可视化图表详解(通过实例讲述数据可视化方法、过程及含义)
  2. 散点图
  3. 雷达图
  4. 条形图
  5. 柱形图
  6. 饼图
  7. 直方图
  8. 箱线图
  9. QQ图
  10. 柏拉图制作
  11. 仪表盘制作
  12. 玫瑰图制作
  13. 热力图制作
  14. 地图制作
  15. 文字云制作
  16. 案例剖析

案例练习:通过仪表盘制作案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:仪表盘制作

Day2

数据挖掘与可视化工具介绍(SAS、Project、Excel、SPSS、Tableau等),可视化案例分享

 

  1. Tableau简介
  2. Tableau历史与趋势剖析
  3. Tableau使用
  4. Tableau的数据类型介绍
  5. Tableau的数据结构介绍
  6. Tableau数据的读入和输出
  7. Tableau数据库的读/写
  8. Tableau与Kylin集成
  9. 定性变量
  10. 离散变量
  11. 连续变量
  12. 多元变量
  13. 日期和时间数据的操作处理

 

  1. 数据可视化应用场景,具体案例分析
  2. 淘宝24小时生活数据可视化案例
  3. 无线淘宝数据可视化案例
  4. Google公司数据可视化案例
  5. Facebook用户画像可视化案例
  6. 个人用户画像案例

 

  1. 大数据可视化呈现ECharts实战(通过一个完整的实例讲述使用ECharts数据可视化的过程与方法)
  2. Echarts使用
  3. 项目案例
  4. Echarts概述
  5. ECharts特性
  6. ECharts架构图
  7. 整合
  8. How to use?
  9. Step1. 引入模块加载器
  10. Step2. 设置具备大小的Dom
  11. Step3. 配置echarts模块路径
  12. Step4.动态加载echarts
  13. option的使用
  14. Interface
  15. setOption
  16. Option全局属性
  17. title
  18. legend
  19. dataRange
  20. toolbox
  21. dataZoom
  22. grid
  23. xAxis/yAxis/axis
  24. color
  25. 数值型
  26. 类目型
  27. tooltip.formatter
  28. series
  29. 高度个性化
  30. 其它参考图形
  31. 热力图
  32. 社交网络

 

  1. 分析结果呈现和分析报告撰写
  2. 合理的数据呈现
  3. 报告分析模板
  4. 如何撰写一份优秀的数据分析报告

案例研讨:通过淘宝24小时生活数据可视化案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:淘宝24小时生活数据可视化案例

 

课程9:Python与数据分析实战-13天

【匹配关键知识点】

Python语言入门,Python网络编程、爬虫与机器学习,Python数据分析案例分享,基于spark集群的python数据分析实战等内容。

【课程时间】

13天(8小时/天)

【课程简介】

随着大数据时代的快速到来,以及大数据在生产生活中迅速应用,大数据领域如雨后春笋般的出现大量的新技术,如Hadoop、Spark等技术,其中Python语言已经成为大数据技术中最为重要的一部分,被越来越多的企业所使用。Python语言的功能涵盖了大数据领域的数据处理、统计分析、数据挖掘、机器学习、人工智能、大数据应用开发等各种不同类型的计算操作,应用范围广泛、前景非常广阔。本课程是尹老师多年工作经验的总结和归纳,从实际业务案例为入口,使学员从理论层到实操层面系统的学习数据处理技术,使学员深入理解Python语言等数据分析工具。通过本课程的学习,学员即可以正确的分析企业的数据,为管理者、决策层提供数据支撑。

【课程收益】

1、Python语言入门;

2、Python网络编程;

3、Python网络爬虫;

4、Python机器学习;

5、Python数据分析案例分享;

6、基于spark集群的python数据分析实战;

【课程特点】

Python语言入门,Python网络编程、爬虫与机器学习,Python数据分析案例分享,基于spark集群的python数据分析实战等内容。

【课程对象】

    数据分析师、技术经理、产品经理、产品助理等

    将承担数据分析师职责的业务人员或信息化人员

    希望加强数据分析能力的软件开发人员

    系统集成企业售前工程师、售前顾问及方案制作人员

【学员基础】

    具有2年以IT部门工作经验,将负责数据分析等相关任务的技术人员

【课程大纲】(13天*8小时)

时间

内容

案例实践与练习

Day1~Day3

Python语言入门

  1. Python语言基础知识(介绍Python语言基础知识,包括Python语言数据类型、基础概念等)
  2. Python语言历史与趋势剖析
  3. Python语言安装
  4. 如何运行Python程序
  5. PyCharm开发环境介绍
  6. Anaconda3开发环境介绍(以Anaconda3作为程序演示环境,Python3作为演示语言)
  7. Python语言help()命令
  8. Python基本命令
  9. 变量(Variables)
  10. 表达式(Expressions)
  11. 基本数据类型
  12. 字符串与正则表达式
  13. Python条件表达式
  14. 循环(loops)
  15. 案例实战:正则表达式在爬虫中应用实例
  16. Python数据结构
  17. Python创建数组
  18. Python矩阵运算
  19. Python语言语法结构
  20. 案例:Python语言实现运营商数据分析处理

 

  1. Python函数(深入Python函数的编写语言)
  2. Python函数介绍
  3. 数据分析与建模过程
  4. Python语言定义函数规则
  5. Python语言自定义函数
  6. Python匿名函数
  7. Python内置函数
  8. Python函数案例

 

  1. Python类(class)(深入剖析Python类的原理)
  2. 类(class)介绍
  3. Python多重继承
  4. Python不支持函数重载
  5. Class and Instance Variables
  6. Method Objects
  7. Python类编写案例实战

 

  1. Python异常处理(Exceptions)(深入剖析Python异常处理)
  2. 异常处理(Exceptions)简介
  3. Python标准异常类
  4. Python异常类编程案例实战(爬虫实例)

 

  1. Python模块 (Modules)(深入剖析模块 (Modules))
  2. Python模块 (Modules)介绍
  3. Python自定义模块
  4. Python模块的导入与添加
  5. Python标准函数库模块
  6. Python第三方模块

 

  1. Python文件读写(深入剖析Python文件读写)
  2. Python文件读写简介
  3. Python读写方法介绍
  4. Python读写文本文件
  5. Python读写二进制文件
  6. Python读写json文件
  7. Python读写xml文件

 

  1. Python操作关系型数据库(深入剖析Python操作关系型数据)
  2. Python2安装MySQL Connector 
  3. Python3安装MySQL Connector
  4. Python语言操作数据库
  5. Python语言数据库优化
  6. 案例:Python语言实现话务数据时间序列建模

案例练习:通过Python语言实现运营商数据分析处理案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:Python语言实现运营商数据分析处理

Day4~Day5

Python网络编程

 

  1. 多线程编程 (用实战实例介绍如何实现多线程) 
  2. Python开发多线程的原理
  3. 多线程创建
  4. 线程锁
  5. 网络应用程序编程
  6. 实例:比如生成发送电子邮件

 

  1. Python网络编程(介绍Python网络编程)
  2. TCP/IP网络介绍
  3. Socket基础知识
  4. Socket客户端服务器连接
  5. 案例:聊天功能实战

 

  1. Python Web开发实战(介绍Python Web实战)
  2. Python Web开发
  3. Django框架介绍
  4. 定义和使用模型
  5. Django MVC架构
  6. Django开发环境搭建
  7. Django Session应用
  8. Django框架应用
  9. Django高级应用
  10. 案例:客户通话历史记录查询

案例练习:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:网络编程

Day6~Day7

Python网络爬虫

 

  1. Python基础知识和网络程序基础知识(介绍Python基础知识和网络程序基础知识)
  2. Python语言简介
  3. Python开发环境搭建和选择
  4. IO编程
  5. 进程和多线程基础知识
  6. 网络编程和TCP协议

 

  1. Web前端基础知识(介绍Web前端基础知识)
  2. Web程序的结构
  3. Web前端的内容
  4. HTML
  5. CSS
  6. JavaScript
  7. XPath
  8. Json
  9. HTTP协议标准
  10. HTTP头和主体
  11. Cookie信息

 

  1. 网络爬虫基础知识(介绍网络爬虫基础知识)
  2. 网络爬虫概述
  3. 网络爬虫及其应用
  4. 网络爬虫结构
  5. HTTP请求的Python实现
  6. urllib2/urllib实现
  7. httplib/urllib实现
  8. 更人性化的Requests

 

  1. HTML解析(HTML解析原理介绍)
  2. 初识Firebug
  3. 安装和配置Firebug
  4. 正则表达式
  5. 基本语法与使用
  6. Python中使用正则表达式
  7. BeautifulSoup概述
  8. 安装和配置BeautifulSoup
  9. BeautifulSoup的使用
  10. lxml的XPath解析

 

  1. 基本的爬虫程序开发(介绍基本的爬虫程序开发)
  2. 基础爬虫架构及运行流程
  3. URL管理器
  4. HTML下载器
  5. HTML解析器
  6. 数据存储器
  7. 爬虫调度器

 

  1. 协议分析(协议分析)
  2. Web端协议分析
  3. 网页登录POST分析
  4. 隐藏表单分析
  5. 加密数据分析
  6. 验证码问题
  7. IP代理
  8. Cookie登录
  9. 传统验证码识别
  10. 人工打码
  11. 滑动验证码
  12. PC客户端抓包分析
  13. HTTPAnalyzer简介
  14. 虾米音乐PC端API实战分析
  15. App抓包分析
  16. Wireshark简介
  17. 酷我听书App端API实战分析
  18. API爬虫:爬取mp3资源信息

 

  1. Scrapy爬虫框架(介绍Scrapy爬虫框架)
  2. Scrapy爬虫架构
  3. 安装Scrapy
  4. 创建cnblogs项目
  5. 创建爬虫模块
  6. 定义Item
  7. 翻页功能
  8. 构建ItemPipeline
  9. 内置数据存储
  10. 启动爬虫
  11. 强化爬虫
  12. 调试方法
  13. 异常
  14. 控制运行状态
  15. ItemLoader
  16. Item与ItemLoader
  17. 输入与输出处理器
  18. ItemLoaderContext?
  19. 请求与响应
  20. 下载器中间件
  21. Spider中间件
  22. 扩展
  23. 突破反爬虫

案例研讨:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:网络爬虫的实现

Day8

Python的NumPy模块

  1. NumPy 安装
  2. NumPy Ndarray 对象
  3. NumPy 数据类型
  4. NumPy 数组属性
  5. NumPy 创建数组
  6. NumPy 从已有的数组创建数组
  7. NumPy 从数值范围创建数组
  8. NumPy 切片和索引
  9. NumPy 高级索引
  10. NumPy 广播(Broadcast)
  11. NumPy 迭代数组
  12. Numpy 数组操作
  13. NumPy 位运算
  14. NumPy 字符串函数
  15. NumPy 数学函数
  16. NumPy 算术函数
  17. NumPy 统计函数
  18. NumPy 排序、条件刷选函数
  19. NumPy 字节交换
  20. NumPy 副本和视图
  21. NumPy 矩阵库(Matrix)
  22. NumPy 线性代数
  23. NumPy IO
  24. NumPy Matplotlib

案例练习:通过NumPy的案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:NumPy的数据处理

Day9

Python的Pandas模块

  1. Pandas环境安装配置
  2. Pandas数据结构
  3. Pandas快速入门
  4. Pandas系列
  5. Pandas数据帧(DataFrame)
  6. Pandas面板(Panel)
  7. Pandas基本功能
  8. Pandas描述性统计
  9. Pandas函数应用
  10. Pandas重建索引
  11. Pandas迭代
  12. Pandas排序
  13. Pandas字符串和文本数据
  14. Pandas选项和自定义
  15. Pandas索引和选择数据
  16. Pandas统计函数
  17. Pandas窗口函数
  18. Pandas聚合
  19. Pandas缺失数据
  20. Pandas分组(GroupBy)
  21. Pandas合并/连接
  22. Pandas级联
  23. Pandas日期功能
  24. Pandas时间差(Timedelta)
  25. Pandas分类数据
  26. Pandas可视化
  27. Pandas IO工具
  28. Pandas稀疏数据
  29. Pandas注意事项&窍门
  30. Pandas与SQL比较

案例练习:通过Pandas使用案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:Pandas的使用方法

Day10

Python机器学习

  1. Python平台下的机器学习开发技术(介绍Python平台下的机器学习开发技术)
  2. Python平台下的数据分析工具
  3. Python平台下的数据分析工具概述
  4. NumPy数据处理
  5. NumPy案例
  6. Scipy数值计算
  7. SymPy符号处理
  8. Matplotlib绘制图表
  9. Pandas数据分析、探索工具
  10. Pandas的DataFrame
  11. DataFrame的构造
  12. StatsModels数据统计建模分析
  13. Scikit-Learn机器学习库
  14. Keras人工神经网络
  15. Keras的设计原则
  16. Gensim文本挖掘库
  17. OpenCV计算机视觉库
  18. 案例:Python语言实现基于聚类的图像分割方法

案例练习:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨:Python语言实现基于聚类的图像分割方法

Day11

Python机器学习

 

  1. 聚类模型原理与实现(深入剖析聚类原理以及通过Python语言实现聚类算法模型)
  2. 聚类介绍
  3. 聚类算法应用场景
  4. 聚类算法应用案例
  5. 样品间相近性的度量
  6. 快速聚类法
  7. 快速聚类法的步骤
  8. 用Lm距离进行快速聚类
  9. 谱系聚类法
  10. 类间距离及其递推公式
  11. 谱系聚类法的步骤
  12. 变量聚类
  13. K-Means(K均值)聚类
  14. 均值漂移聚类
  15. 基于密度的聚类方法(DBSCAN)
  16. 用高斯混合模型(GMM)的最大期望(EM)聚类
  17. 凝聚层次聚类
  18. 图团体检测(Graph Community Detection)
  19. 案例:Python语言聚类实现及绘图
  20. 案例:Kmeans应用案例剖析
  21. 课堂实操:Python语言实现基于聚类的图像分割方法

 

  1. 决策树模型原理与实现(深入剖析决策树原理以及通过Python语言实现决策树模型)
  2. 决策树介绍
  3. 决策树应用场景
  4. 决策树应用案例
  5. 信息熵
  6. ID3算法
  7. C4.5算法
  8. CART算法
  9. 决策树算法
  10. 剪枝
  11. 过拟合与调参
  12. 决策树算法原理
  13. 决策树法的决策过程
  14. 案例:Python语言实现决策树模型
  15. 课堂实操:Python语言实现决策树模型
  16. 随机森林

案例练习:通过案例的剖析数据分析过程,体会数据分析的难点和要点。

 

研讨: Python语言实现基于聚类的图像分割方法

Day12

Python数据分析案例分享

 

  1. 随机森林模型原理与实现(深入剖析随机森林原理以及通过Python语言实现随机森林模型)
  2. 随机森林介绍
  3. 随机森林的特点
  4. 随机森林的相关基础知识
  5. 信息、熵以及信息增益的概念
  6. 随机森林的生成
  7. 随机森林算法
  8. 随机森林算法原理
  9. 袋外错误率(oob error)
  10. 随机森林应用场景
  11. 随机森林应用案例
  12. 案例:Python语言实现随机森林模型
  13. 课堂实操:Python语言实现随机森林模型
  14. xgboost

 

  1. 支持向量机模型原理与实现(深入剖析支持向量机算法原理以及通过Python语言实现支持向量机模型)
  2. 支持向量机介绍
  3. 支持向量机应用场景
  4. 支持向量机应用案例
  5. 支持向量机算法
  6. 支持向量机算法原理
  7. 线性可分支持向量机
  8. 间隔最大化和支持向量
  9. 对偶问题求解
  10. 柆格朗日函数
  11. 非线性支持向量机和核函数
    1. 超平面
    2. 线性核
    3. 多项式核
    4. 高斯核
    5. 拉普拉斯核
    6. sigmiod核
  12. 线性支持向量机(软间隔支持向量机)与松弛变量
  13. 松驰因子
  14. 案例:Python语言实现支持向量机模型
  15. 课堂实操:Python语言实现基于SVM的字符识别方法

 

  1. 神经网络模型原理与实现(深入剖析神经网络算法原理以及通过Python语言实现神经网络模型)
  2. 神经网络介绍
  3. 神经网络概念
  4. 神经网络发展历史
  5. 神经网络的别名
  6. 神经网络研究的主要内容
  7. 神经网络基本构成
  8. 神经网络模拟人的智能行为的四个方面
  9. 神经网络的特点
  10. 学习能力
  11. 适应性问题
  12. 神经网络基本网络模型
  13. 单层网络
  14. 多层网络
  15. 循环网络
  16. 基本网络结构特点
  17. 典型训练算法
  18. 运行方式
  19. 典型问题解决方法
  20. 感知机
  21. 线性神经网络
  22. BP神经网络
  23. RBF网络
  24. 竞争网络
  25. 反馈神经网络
  26. 随机神经网络
  27. 遗传算法
  28. PSO与神经网络优化
  29. 自定义深度神经网络结构
  30. 深度神经网络的优化方法
  31. 深度框架的损失函数
  32. 课堂实操:Python语言实现基于神经网络的人脸识别方法

刘晖老师的其他课程

• 刘晖:运营维护-中间件方向培训班
(1)培训背景中间件作为基础软件的重要组成,已与操作系统、数据库齐头并进,在世界范围内呈现出迅猛发展的势头,已经形成一个巨大的产业。中间件在国内整个软件行业中应该是发展速度最快的市场之一。中国软件产业经过20年的发展,很多部门的信息化建设开始向企业级应用转变。企业级应用最为人们所重视的就是各类信息资源之间如何关联、整合、协同、互动和按需服务,这些都是中间件能够发挥巨大作用的空间所在。因此我国对中间件产品的巨大需求是不争的事实,中间件运营维护工程师存在巨大的发展机会和空间。中间件运营维护工程师主要的工作职责有以下几个方向。第一,负责研发,测试和生产环境的中间件安装、配置、调优,以及问题处理及相关日常工作。第二,完成中间件的新环境搭建(含集群),性能调优和性能监控。第三,在业务系统发生性能问题(非硬件原因)时,中间件运营维护工程师能够及时进行调优和改进。第四,完成对中间件的定期健康检查并给出汇总分析,制定异常情况的处理方案。第五,协助完成对中间件的故障处理,协助进行问题处理方案制定、进度控制、实施指导、总结报告等内容。中间件运维工程师以技术为基础,通过技术实现对分布于互联网之上的各种自治信息资源(计算资源、数据资源、服务资源、软件资源)的简单、标准、快速、灵活、可信、高效能及低成本的集成、协同和综合利用,提高组织的IT基础设施的业务敏捷性,降低总体运维成本,促进IT与业务之间的匹配。中间件运维工程师工作的职责及在业务中的位置决定了中间件运维工程师需要具备更加广博的知识和深入的技术能力。在中间件运维工程中,工程师需要理解和掌握Websphere, MQ, Apache, Nginx,kafka,rocketmq等中间件及应用服务器的运维和管理方法,具备性能调优及安全配置和优化的基本技能。同时,运维工程师需要熟悉高可用集群技术的基础概念与原理、shell/python脚本编写及熟悉J2EE架构。此外,就运维工程师个人而言,他们仍需了解市场上主流的中间件相关技术及产品,锻炼良好的沟通交流能力。(2)培训目标监控中间件运行状态监控中间件负载监控整个系统运行情况掌握中间件用户管理掌握系统优化掌握系统调试掌握系统升级掌握系统安全管理高可用架构设计掌握内存配置掌握连接池配置(3)教学计划本系列课程总共由3门课程组成:教学设计NO.课程名称课程天数运营维护-中间件1中间件基础运维10天2中间件优化12天3中间件高可用10天(4)具体课程方案(含课程大纲)课程1:中间件基础运维-10天【匹配关键知识点】中间件运行状态、负载、等情况检查;监控整个系统运行情况等内容。【课程时长】10天(6小时/天)【课程简介】运营维护(中间件方向)课程涵盖了中间件一线工程师日常运维工作所涵盖的所有项目,包括应用服务器tomcat、weblogic、websphere, 消息中间件kafka,交易中间件 tuxedo等的相关配置。 从安装到系统管理,系统监控,应用发布,高可用,集群配置,优化等方面的内容,以理论结合操作的形式,让学员真正掌握各类中间件的使用,并能灵活应用到实际工作中。【课程收益】监控中间件运行状态监控中间件负载监控整个系统运行情况【课程特点】该课程的课程互动充分,讲师会在知识点讲解完毕后,给出相应的实践项目,由学员在各自小组进行讨论,激发学员思维,落实实验内容,并给出实验结果,然后由老师进行总结补充,以此加深和拓展学员对原有知识的理解。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    软件开发人员    中间件系统工程师    中间件开发工程师【学员基础】学员学习本课程应具备下列基础知识:1.    操作系统基础知识2.    网络基础知识3.    web服务器基础知识【课程大纲】(10天*6小时)模块具体内容第一单元  Tomcat基础运维内容一:tomcat运维从哪些方面考虑应用服务器的运维。应用服务器是常维护中的常见问题应用服务器运维常用工具的使用jdk环境的安装、配置、检查及使用tomcat版本的选择及与jdk版本的对应tomcat的安装配置tomcat启动脚本的编写tomcat的体系结构用户管理如何发布web应用程序web应用程序的发布位置web应用程序发布的形式,目录、war包、jar包之间相互的区别及使用维护tomcat日志的级别tomcat日志文件的保存位置如何查看tomcat日志如何实时查看tomcat日志如何分析日志如何监控tomcat日常维护中的常见问题常见问题的解决方案案例演示:开发一个内存监控系统,发布到tomcat服务器,查看tomcat状态,进行压力测试、日志分析,保证应用程序良好运行。第二单元Weblogic基础运维内容一:weblogic运维weblogic体系结构。weblogic与其它应用服务器的区别weblogic特点分析weblogic日常维时的常见问题如何创建web应用程序如何发布web应用到weblogic安装weblogic用户管理weblogic常见配置如何正确地启动、关闭weblogicweblogic应用程序的发布方式监控weblogic的常用工具如何查看weblogic日是志如何分析weblogic日志综合案例:开发web应用程序,发布web应用到weblogic中,监控应用程序状态,监控weblogic状态。第三单元Websphere基础运维内容 一:websphere运维websphere体系结构。websphere与其它应用服务器的区别websphere特点分析websphere日常维时的常见问题如何创建web应用程序如何发布web应用到websphere安装websphere用户管理websphere常见配置如何正确地启动、关闭webspherewebsphere应用程序的发布方式监控websphere的常用工具如何查看websphere日是志如何分析日志综合案例:开发web应用程序,发布web应用到websphere中,监控应用程序状态,监控√状态。 第四单元Kafka基础运维内容 一:kafa运维常用的消息中间件消息中间件在项目中的作用如何高效地使用消息中间件消息中间件是常运维中的常见问题kafka体系结构。kafka特点分析kafka日常维时的常见问题安装kafka配置zookeeper使用kafka监控kafka查看kafka日志分析日志综合案例:通过大数据分析技术,抽取系统日志,分析及处理数据,入库,展示数据。第五单元Tuxedo基础运维内容 一:tuxedo运维常用的交易中间件交易中间件在项目中的作用如何高效地使用交易中间件交易中间件是常运维中的常见问题tuxedo体系结构tuxedo特点分析tuxedo日常维时的常见问题安装tuxedo使用tuxedo监控tuxedo查看tuxedo日志分析日志综合案例:开发业务系统,发布到tuxedo,监控及维护tuxedo课程2:中间件优化-12天【匹配关键知识点】中间件用户管理;系统优化和调试以及系统升级等内容。【课程时长】12天(6小时/天)【课程简介】运营维护(中间件方向)课程涵盖了中间件一线工程师日常运维工作所涵盖的所有项目,包括应用服务器tomcat、weblogic、websphere, 消息中间件kafka,交易中间件 tuxedo等的相关配置。 从安装到系统管理,系统监控,应用发布,高可用,集群配置,优化等方面的内容,以理论结合操作的形式,让学员真正掌握各类中间件的使用,并能灵活应用到实际工作中。【课程收益】掌握中间件用户管理掌握系统优化掌握系统调试掌握系统升级【课程特点】该课程的课程互动充分,讲师会在知识点讲解完毕后,给出相应的实践项目,由学员在各自小组进行讨论,激发学员思维,落实实验内容,并给出实验结果,然后由老师进行总结补充,以此加深和拓展学员对原有知识的理解。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    软件开发人员    中间件系统工程师    中间件开发工程师【学员基础】学员学习本课程应具备下列基础知识:1.    操作系统基础知识2.    网络基础知识3.    web服务器基础知识【课程大纲】(12天*6小时)模块具体内容第一单元  Tomcat优化内容一:Tomcat优化从哪些方面考虑tomcat优化一般存在哪些tomcat性能问题造成tomcat系统运行慢的主要因素有哪些常见的tomcat的优化工具tomcat内存体系如何调整tomcat内存如何测试内存对tomcat的性能影响如何优化tomcat的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置综合案例: 开发应用程序,优化应用程序, 调用内存分配,配置连接池,测试连接池的使用,优化tomcat配置  第二单元  weblogic优化内容一:weblogic优化从哪些方面考虑weblogic优化一般存在哪些weblogic性能问题造成weblogic系统运行慢的主要因素有哪些常见的weblogic的优化工具weblogic内存体系如何调整weblogic内存如何测试内存对weblogic的性能影响如何优化weblogic的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置综合案例: 开发应用程序,优化应用程序, 调用内存分配,配置连接池,测试连接池的使用,优化weblogic配置 第三单元  websphere优化内容一:websphere优化从哪些方面考虑websphere优化一般存在哪些websphere性能问题造成websphere系统运行慢的主要因素有哪些常见的websphere的优化工具websphere内存体系如何调整websphere内存如何测试内存对websphere的性能影响如何优化websphere的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置综合案例: 开发应用程序,优化应用程序, 调用内存分配,配置连接池,测试连接池的使用,优化websphere配置  第四单元  kafka优化内容一:kafka优化从哪些方面考虑kafka优化kafka一般存在哪些性能问题kafka性能优化工具的使用消息优化存储优化综合案例: 开发消息系统,采集消息,处理消息,优化消息。第五单元tuxedo优化内容一:tuxedo优化从哪些方面考虑tuxedo优化tuxedo一般存在哪些性能问题tuxedo性能优化工具的使用综合案例: 交易系统优化调整课程3:中间件高可用-10天【匹配关键知识点】系统安全管理;高可用架构设计;内存及连接池配置等内容。【课程时长】10天(6小时/天)【课程简介】运营维护(中间件方向)课程涵盖了中间件一线工程师日常运维工作所涵盖的所有项目,包括应用服务器tomcat、weblogic、websphere, 消息中间件kafka,交易中间件 tuxedo等的相关配置。 从安装到系统管理,系统监控,应用发布,高可用,集群配置,优化等方面的内容,以理论结合操作的形式,让学员真正掌握各类中间件的使用,并能灵活应用到实际工作中。【课程收益】高可用架构设计掌握内存配置掌握连接池配置【课程特点】该课程的课程互动充分,讲师会在知识点讲解完毕后,给出相应的实践项目,由学员在各自小组进行讨论,激发学员思维,落实实验内容,并给出实验结果,然后由老师进行总结补充,以此加深和拓展学员对原有知识的理解。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    软件开发人员   中间件系统工程师    中间件开发工程师【学员基础】学员学习本课程应具备下列基础知识:1.    操作系统基础知识2.    网络基础知识3.    web服务器基础知识【课程大纲】(10天*6小时)模块具体内容第一单元  tomcat高可用配置 内容一:tomcat高可用什么是tomcat高可用tomcat高可用的意义tomcat常见的高可用实施方案实现tomcat高可用的工具有哪些如何配置tomcat高可用tomcat高可用环境下应用开发有什么影响tomcat高可用环境下会话的管理如何测试tomcat高可用环境如何评估tomcat高可用tomcat高可用环境下数据源的配置及对数据库的影响如何通过分析tomcat日志获得tomcat的高可用状态如何优化tomcat高可用如何优化tomcat高可用环境下应用程序安全管理综合案例:配置tomcat高可用环境,发布web应用到tomcat,使用及测试tomcat高可用环境。 第二单元  weblogic高可用配置 内容一:weblogic高可用1.什么是weblogic高可用2. weblogic高可用的意义3. weblogic常见的高可用实施方案4.实现weblogic高可用的工具有哪些5.如何配置weblogic高可用6. weblogic高可用环境下应用开发有什么影响7. weblogic高可用环境下会话的管理8.如何测试weblogic高可用环境9.如何评估weblogic高可用10. weblogic高可用环境下数据源的配置及对数据库的影响11.如何通过分析weblogic日志获得weblogic的高可用状态12.如何优化weblogic高可用13.如何优化weblogic高可用环境下应用程序14.安全管理15.综合案例:配置weblogic高可用环境,发布web应用到weblogic,使用及测试weblogic高可用环境。 第三单元  websphere高可用配置   内容一:websphere高可用1.什么是websphere高可用2. websphere高可用的意义3. websphere常见的高可用实施方案4.实现websphere高可用的工具有哪些5.如何配置websphere高可用6. websphere高可用环境下应用开发有什么影响7. websphere高可用环境下会话的管理8.如何测试websphere高可用环境9.如何评估websphere高可用10. websphere高可用环境下数据源的配置及对数据库的影响11.如何通过分析websphere日志获得websphere的高可用状态12.如何优化websphere高可用13.如何优化websphere高可用环境下应用程序14. 安全管理15.综合案例:配置websphere高可用环境,发布web应用到websphere,使用及测试websphere高可用环境。 第四单元kafka高可用  内容一:kafka高可用kafka高可用支持的方式kafka高可用需要的环境如何配置kafka高可用kafka高可用需要的工具高可用kafka的使用高可用的kafka环境的运维综合案例:配置kafka高可用环境,使用高可用的kafka环境进行消息的处理 第五单元tuxedo高可用内容一:tuxedo高可用1 .  tuxedo高可用支持的方式tuxedo高可用需要的环境如何配置tuxedo高可用tuxedo高可用需要的工高可用tuxedo的使用高可用的tuxedo环境的运维综合案例:配置kafka高可用环境,使用高可用的tuxedo环境进行交易的处理 (5)教学实验本方向教学实验设计如下:序号教学实验设计实验概述1中间件基础运维实验一:tomcat综合实验从哪些方面考虑应用服务器的运维。应用服务器是常维护中的常见问题应用服务器运维常用工具的使用jdk环境的安装、配置、检查及使用tomcat版本的选择及与jdk版本的对应tomcat的安装配置tomcat启动脚本的编写tomcat的体系结构用户管理如何发布web应用程序web应用程序的发布位置web应用程序发布的形式,目录、war包、jar包之间相互的区别及使用维护tomcat日志的级别tomcat日志文件的保存位置如何查看tomcat日志如何实时查看tomcat日志如何分析日志如何监控tomcat日常维护中的常见问题常见问题的解决方案 实验二:weblogic综合实验weblogic体系结构。weblogic与其它应用服务器的区别weblogic特点分析weblogic日常维时的常见问题如何创建web应用程序如何发布web应用到weblogic安装weblogic用户管理weblogic常见配置如何正确地启动、关闭weblogicweblogic应用程序的发布方式监控weblogic的常用工具如何查看weblogic日是志如何分析weblogic日志 实验三:websphere综合实验websphere体系结构。websphere与其它应用服务器的区别websphere特点分析websphere日常维时的常见问题如何创建web应用程序如何发布web应用到websphere安装websphere用户管理websphere常见配置如何正确地启动、关闭webspherewebsphere应用程序的发布方式监控websphere的常用工具如何查看websphere日是志如何分析日志 实验四:kafka综合实验常用的消息中间件消息中间件在项目中的作用如何高效地使用消息中间件消息中间件是常运维中的常见问题kafka体系结构。kafka特点分析kafka日常维时的常见问题安装kafka配置zookeeper使用kafka监控kafka查看kafka日志分析日志 实验五:tuxedo综合实验交易中间件在项目中的作用如何高效地使用交易中间件交易中间件是常运维中的常见问题tuxedo体系结构tuxedo特点分析tuxedo日常维时的常见问题安装tuxedo使用tuxedo监控tuxedo查看tuxedo日志分析日志2中间件优化实验一:Tomcat优化从哪些方面考虑tomcat优化一般存在哪些tomcat性能问题造成tomcat系统运行慢的主要因素有哪些常见的tomcat的优化工具tomcat内存体系如何调整tomcat内存如何测试内存对tomcat的性能影响如何优化tomcat的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置 实验二: weblogic优化从哪些方面考虑weblogic优化一般存在哪些weblogic性能问题造成weblogic系统运行慢的主要因素有哪些常见的weblogic的优化工具weblogic内存体系如何调整weblogic内存如何测试内存对weblogic的性能影响如何优化weblogic的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置 实验三:websphere优化从哪些方面考虑websphere优化一般存在哪些websphere性能问题造成websphere系统运行慢的主要因素有哪些常见的websphere的优化工具websphere内存体系如何调整websphere内存如何测试内存对websphere的性能影响如何优化websphere的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置 实验四:kafka优化从哪些方面考虑kafka优化kafka一般存在哪些性能问题kafka性能优化工具的使用消息优化存储优化 实验五:tuxedo优化从哪些方面考虑tuxedo优化tuxedo一般存在哪些性能问题tuxedo性能优化工具的使用 3中间件高可用实验一:tomcat高可用什么是tomcat高可用tomcat高可用的意义tomcat常见的高可用实施方案实现tomcat高可用的工具有哪些如何配置tomcat高可用tomcat高可用环境下应用开发有什么影响tomcat高可用环境下会话的管理如何测试tomcat高可用环境如何评估tomcat高可用tomcat高可用环境下数据源的配置及对数据库的影响如何通过分析tomcat日志获得tomcat的高可用状态如何优化tomcat高可用如何优化tomcat高可用环境下应用程序安全管理 实验二: weblogic高可用1.什么是weblogic高可用2. weblogic高可用的意义3. weblogic常见的高可用实施方案4.实现weblogic高可用的工具有哪些5.如何配置weblogic高可用6. weblogic高可用环境下应用开发有什么影响7. weblogic高可用环境下会话的管理8.如何测试weblogic高可用环境9.如何评估weblogic高可用10. weblogic高可用环境下数据源的配置及对数据库的影响11.如何通过分析weblogic日志获得weblogic的高可用状态12.如何优化weblogic高可用13.如何优化weblogic高可用环境下应用程序14.安全管理实验三:websphere高可用1.什么是websphere高可用2. websphere高可用的意义3. websphere常见的高可用实施方案4.实现websphere高可用的工具有哪些5.如何配置websphere高可用6. websphere高可用环境下应用开发有什么影响7. websphere高可用环境下会话的管理8.如何测试websphere高可用环境9.如何评估websphere高可用10. websphere高可用环境下数据源的配置及对数据库的影响11.如何通过分析websphere日志获得websphere的高可用状态12.如何优化websphere高可用13.如何优化websphere高可用环境下应用程序14. 安全管理 实验四:kafka高可用kafka高可用支持的方式kafka高可用需要的环境如何配置kafka高可用kafka高可用需要的工具高可用kafka的使用高可用的kafka环境的运维 实验五:tuxedo高可用1.tuxedo高可用支持的方式tuxedo高可用需要的环境如何配置tuxedo高可用tuxedo高可用需要的环境高可用tuxedo的使用高可用的tuxedo环境的运维      
• 刘晖:运营维护-中间件
1.1培训背景中间件作为基础软件的重要组成,已与操作系统、数据库齐头并进,在世界范围内呈现出迅猛发展的势头,已经形成一个巨大的产业。中间件在国内整个软件行业中应该是发展速度最快的市场之一。中国软件产业经过20年的发展,很多部门的信息化建设开始向企业级应用转变。企业级应用最为人们所重视的就是各类信息资源之间如何关联、整合、协同、互动和按需服务,这些都是中间件能够发挥巨大作用的空间所在。因此我国对中间件产品的巨大需求是不争的事实,中间件运营维护工程师存在巨大的发展机会和空间。中间件运营维护工程师主要的工作职责有以下几个方向。第一,负责研发,测试和生产环境的中间件安装、配置、调优,以及问题处理及相关日常工作。第二,完成中间件的新环境搭建(含集群),性能调优和性能监控。第三,在业务系统发生性能问题(非硬件原因)时,中间件运营维护工程师能够及时进行调优和改进。第四,完成对中间件的定期健康检查并给出汇总分析,制定异常情况的处理方案。第五,协助完成对中间件的故障处理,协助进行问题处理方案制定、进度控制、实施指导、总结报告等内容。中间件运维工程师以技术为基础,通过技术实现对分布于互联网之上的各种自治信息资源(计算资源、数据资源、服务资源、软件资源)的简单、标准、快速、灵活、可信、高效能及低成本的集成、协同和综合利用,提高组织的IT基础设施的业务敏捷性,降低总体运维成本,促进IT与业务之间的匹配。中间件运维工程师工作的职责及在业务中的位置决定了中间件运维工程师需要具备更加广博的知识和深入的技术能力。在中间件运维工程中,工程师需要理解和掌握Websphere, MQ, Apache, Nginx,kafka,rocketmq等中间件及应用服务器的运维和管理方法,具备性能调优及安全配置和优化的基本技能。同时,运维工程师需要熟悉高可用集群技术的基础概念与原理、shell/python脚本编写及熟悉J2EE架构。此外,就运维工程师个人而言,他们仍需了解市场上主流的中间件相关技术及产品,锻炼良好的沟通交流能力。1.3方案设计思路         本系列课程总共由3门课程组成:教学设计NO.课程名称授课讲师课程天数实施期次运营维护-中间件1中间件基础运维 10天 2中间件优化 12天 3中间件高可用 10天 1.4教学实验设计 关于运营维护-中间件部分序号教学实验设计实验概述1中间件基础运维实验一:tomcat综合实验从哪些方面考虑应用服务器的运维。应用服务器是常维护中的常见问题应用服务器运维常用工具的使用jdk环境的安装、配置、检查及使用tomcat版本的选择及与jdk版本的对应tomcat的安装配置tomcat启动脚本的编写tomcat的体系结构用户管理如何发布web应用程序web应用程序的发布位置web应用程序发布的形式,目录、war包、jar包之间相互的区别及使用维护tomcat日志的级别tomcat日志文件的保存位置如何查看tomcat日志如何实时查看tomcat日志如何分析日志如何监控tomcat日常维护中的常见问题常见问题的解决方案 实验二:weblogic综合实验weblogic体系结构。weblogic与其它应用服务器的区别weblogic特点分析weblogic日常维时的常见问题如何创建web应用程序如何发布web应用到weblogic安装weblogic用户管理weblogic常见配置如何正确地启动、关闭weblogicweblogic应用程序的发布方式监控weblogic的常用工具如何查看weblogic日是志如何分析weblogic日志 实验三:websphere综合实验websphere体系结构。websphere与其它应用服务器的区别websphere特点分析websphere日常维时的常见问题如何创建web应用程序如何发布web应用到websphere安装websphere用户管理websphere常见配置如何正确地启动、关闭webspherewebsphere应用程序的发布方式监控websphere的常用工具如何查看websphere日是志如何分析日志 实验四:kafka综合实验常用的消息中间件消息中间件在项目中的作用如何高效地使用消息中间件消息中间件是常运维中的常见问题kafka体系结构。kafka特点分析kafka日常维时的常见问题安装kafka配置zookeeper使用kafka监控kafka查看kafka日志分析日志 实验五:tuxedo综合实验交易中间件在项目中的作用如何高效地使用交易中间件交易中间件是常运维中的常见问题tuxedo体系结构tuxedo特点分析tuxedo日常维时的常见问题安装tuxedo使用tuxedo监控tuxedo查看tuxedo日志分析日志2中间件优化实验一:Tomcat优化从哪些方面考虑tomcat优化一般存在哪些tomcat性能问题造成tomcat系统运行慢的主要因素有哪些常见的tomcat的优化工具tomcat内存体系如何调整tomcat内存如何测试内存对tomcat的性能影响如何优化tomcat的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置 实验二: weblogic优化从哪些方面考虑weblogic优化一般存在哪些weblogic性能问题造成weblogic系统运行慢的主要因素有哪些常见的weblogic的优化工具weblogic内存体系如何调整weblogic内存如何测试内存对weblogic的性能影响如何优化weblogic的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置 实验三:websphere优化从哪些方面考虑websphere优化一般存在哪些websphere性能问题造成websphere系统运行慢的主要因素有哪些常见的websphere的优化工具websphere内存体系如何调整websphere内存如何测试内存对websphere的性能影响如何优化websphere的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置 实验四:kafka优化从哪些方面考虑kafka优化kafka一般存在哪些性能问题kafka性能优化工具的使用消息优化存储优化 实验五:tuxedo优化从哪些方面考虑tuxedo优化tuxedo一般存在哪些性能问题tuxedo性能优化工具的使用 3中间件高可用实验一:tomcat高可用什么是tomcat高可用tomcat高可用的意义tomcat常见的高可用实施方案实现tomcat高可用的工具有哪些如何配置tomcat高可用tomcat高可用环境下应用开发有什么影响tomcat高可用环境下会话的管理如何测试tomcat高可用环境如何评估tomcat高可用tomcat高可用环境下数据源的配置及对数据库的影响如何通过分析tomcat日志获得tomcat的高可用状态如何优化tomcat高可用如何优化tomcat高可用环境下应用程序安全管理 实验二: weblogic高可用1.什么是weblogic高可用2. weblogic高可用的意义3. weblogic常见的高可用实施方案4.实现weblogic高可用的工具有哪些5.如何配置weblogic高可用6. weblogic高可用环境下应用开发有什么影响7. weblogic高可用环境下会话的管理8.如何测试weblogic高可用环境9.如何评估weblogic高可用10. weblogic高可用环境下数据源的配置及对数据库的影响11.如何通过分析weblogic日志获得weblogic的高可用状态12.如何优化weblogic高可用13.如何优化weblogic高可用环境下应用程序14.安全管理实验三:websphere高可用1.什么是websphere高可用2. websphere高可用的意义3. websphere常见的高可用实施方案4.实现websphere高可用的工具有哪些5.如何配置websphere高可用6. websphere高可用环境下应用开发有什么影响7. websphere高可用环境下会话的管理8.如何测试websphere高可用环境9.如何评估websphere高可用10. websphere高可用环境下数据源的配置及对数据库的影响11.如何通过分析websphere日志获得websphere的高可用状态12.如何优化websphere高可用13.如何优化websphere高可用环境下应用程序14. 安全管理 实验四:kafka高可用 kafka高可用支持的方式kafka高可用需要的环境如何配置kafka高可用kafka高可用需要的工具高可用kafka的使用高可用的kafka环境的运维 实验五:tuxedo高可用 1.tuxedo高可用支持的方式tuxedo高可用需要的环境如何配置tuxedo高可用tuxedo高可用需要的环境高可用tuxedo的使用高可用的tuxedo环境的运维 1.2具体课程方案课程:运营维护-中间件---32天【课程时长】32天(8小时/天)【讲师简介】讲师个人简历:刘晖,软件开发工程师,云计算架构师,数据挖掘、数据分析工程师,资深软件架构师,移动云计算架构师,中间件工程师,曾作为多家大型知名企业首席架构,负责PaaS平台研发;主要研究方向包括大数据、云计算、移动开发、互联网营销、电子商务、项目管理等。IT从业近二十年,秉承理论与实践相结合,在学习中实践,在实践中学习,积累了丰富的理论与实践经验,并且乐于将自己的经验分享。发现并集成整合社会资源,为企业节省资源并创造价值,达到为合作伙伴创收的目的。曾为多家国内知名企业提供培训与咨询,拥有大数据、大流量、高并发、分布式的大型网站架构和设计经验。曾主导过多个私有云建设项目,早些年也主导过ERP、CMS等软件项目。在工作中研究新技术、新框架、及时更新知识体系,并长期坚持编写架构核心代码。在技术平台方面,善于Hadoop、Spark、Storm、OpenStack等技术平台的应用与运维。深入理解Hadoop、HDFS、HBase、MapReduce、Zookeeper、Hive、Sqoop、BigTable 等大数据技术和开源框架理论。对于云计算体系有深刻认识,及独到的见解,如OpenStack的技术架构、安装部署、运维等。在移动云计算方面,善于设计与建设云计算体系;也善于移动云计算相关的咨询与培训。在项目管理方面,善于使用敏捷项目管理方法,把客户的需求变更作为常态,作为软件架构设计的一部分,减少需求变更带来的返工;善于捕捉、挖掘、分析客户需求,为用户提供满意的产品,项目经历:国家电网数据平台同步项目、广东发展银行电营、运维大数据分析项目、中石油工程设计西北分公司云计算项目评审委员、中石油大数据挖掘项目,电商库存预测大数据分析项目、大型ERP、电子商务、CRM、电子政务等多个项目。实施过的授课清单:实施过的课程名称服务客户Tomcat中间件中石油Weblogic中间件国家电网Tuxedo中间件北京建行Kafka中间件广东移动Jboss 中间件北京农行【课程简介】运营维护(中间件方向)课程涵盖了中间件一线工程师日常运维工作所涵盖的所有项目,包括应用服务器tomcat、weblogic、websphere, 消息中间件kafka,交易中间件 tuxedo等的相关配置。 从安装到系统管理,系统监控,应用发布,高可用,集群配置,优化等方面的内容,以理论结合操作的形式,让学员真正掌握各类中间件的使用,并能灵活应用到实际工作中。【课程收益】监控中间件运行状态监控中间件负载监控整个系统运行情况掌握中间件用户管理掌握系统优化掌握系统调试掌握系统升级掌握系统安全管理高可用架构设计掌握内存配置掌握连接池配置【课程特点】该课程的课程互动充分,讲师会在知识点讲解完毕后,给出相应的实践项目,由学员在各自小组进行讨论,激发学员思维,落实实验内容,并给出实验结果,然后由老师进行总结补充,以此加深和拓展学员对原有知识的理解。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    软件开发人员    中间件系统工程师    中间件开发工程师【学员基础】学员学习本课程应具备下列基础知识:1.    操作系统基础知识2.    网络基础知识3.    web服务器基础知识【课程大纲】(32天*8小时)以下大纲内容较多,实际授课时根据当堂学员情况进行调整,并且实际授课不一定按此顺序。 授课内容第一部分  中间件基础运维第一单元  Tomcat基础运维内容一:tomcat运维从哪些方面考虑应用服务器的运维。应用服务器是常维护中的常见问题应用服务器运维常用工具的使用jdk环境的安装、配置、检查及使用tomcat版本的选择及与jdk版本的对应tomcat的安装配置tomcat启动脚本的编写tomcat的体系结构用户管理如何发布web应用程序web应用程序的发布位置web应用程序发布的形式,目录、war包、jar包之间相互的区别及使用维护tomcat日志的级别tomcat日志文件的保存位置如何查看tomcat日志如何实时查看tomcat日志如何分析日志如何监控tomcat日常维护中的常见问题常见问题的解决方案案例演示:开发一个内存监控系统,发布到tomcat服务器,查看tomcat状态,进行压力测试、日志分析,保证应用程序良好运行。 第二单元Weblogic基础运维内容一:weblogic运维weblogic体系结构。weblogic与其它应用服务器的区别weblogic特点分析weblogic日常维时的常见问题如何创建web应用程序如何发布web应用到weblogic安装weblogic用户管理weblogic常见配置如何正确地启动、关闭weblogicweblogic应用程序的发布方式监控weblogic的常用工具如何查看weblogic日是志如何分析weblogic日志综合案例:开发web应用程序,发布web应用到weblogic中,监控应用程序状态,监控weblogic状态。第三单元Websphere基础运维内容 一:websphere运维websphere体系结构。websphere与其它应用服务器的区别websphere特点分析websphere日常维时的常见问题如何创建web应用程序如何发布web应用到websphere安装websphere用户管理websphere常见配置如何正确地启动、关闭webspherewebsphere应用程序的发布方式监控websphere的常用工具如何查看websphere日是志如何分析日志综合案例:开发web应用程序,发布web应用到websphere中,监控应用程序状态,监控√状态。 第四单元Kafka基础运维内容 一:kafa运维常用的消息中间件消息中间件在项目中的作用如何高效地使用消息中间件消息中间件是常运维中的常见问题kafka体系结构。kafka特点分析kafka日常维时的常见问题安装kafka配置zookeeper使用kafka监控kafka查看kafka日志分析日志综合案例:通过大数据分析技术,抽取系统日志,分析及处理数据,入库,展示数据。第五单元Tuxedo基础运维内容 一:tuxedo运维常用的交易中间件交易中间件在项目中的作用如何高效地使用交易中间件交易中间件是常运维中的常见问题tuxedo体系结构tuxedo特点分析tuxedo日常维时的常见问题安装tuxedo使用tuxedo监控tuxedo查看tuxedo日志分析日志综合案例:开发业务系统,发布到tuxedo,监控及维护tuxedo第二部分  中间件优化第一单元  Tomcat优化内容一:Tomcat优化从哪些方面考虑tomcat优化一般存在哪些tomcat性能问题造成tomcat系统运行慢的主要因素有哪些常见的tomcat的优化工具tomcat内存体系如何调整tomcat内存如何测试内存对tomcat的性能影响如何优化tomcat的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置综合案例: 开发应用程序,优化应用程序,调用内存分配,配置连接池,测试连接池的使用, 优化tomcat配置第二单元  weblogic优化内容一:weblogic优化从哪些方面考虑weblogic优化一般存在哪些weblogic性能问题造成weblogic系统运行慢的主要因素有哪些常见的weblogic的优化工具weblogic内存体系如何调整weblogic内存如何测试内存对weblogic的性能影响如何优化weblogic的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置综合案例: 开发应用程序,优化应用程序, 调用内存分配,配置连接池,测试连接池的使用, 优化weblogic配置第三单元  websphere优化内容一:websphere优化从哪些方面考虑websphere优化一般存在哪些websphere性能问题造成websphere系统运行慢的主要因素有哪些常见的websphere的优化工具websphere内存体系如何调整websphere内存如何测试内存对websphere的性能影响如何优化websphere的体系结构如何进行应用程序的优化代码优化SQL语句优化数据源配置如何通过连接池优化应用程序优化应用程序的设计系统安全配置综合案例: 开发应用程序,优化应用程序, 调用内存分配,配置连接池,测试连接池的使用, 优化websphere配置第四单元  kafka优化内容一:kafka优化从哪些方面考虑kafka优化kafka一般存在哪些性能问题kafka性能优化工具的使用消息优化存储优化综合案例: 开发消息系统,采集消息,处理消息,优化消息。第五单元tuxedo优化内容一:tuxedo优化从哪些方面考虑tuxedo优化tuxedo一般存在哪些性能问题tuxedo性能优化工具的使用综合案例: 交易系统优化调整第三部分  中间件高可用第一单元  tomcat高可用配置 内容一:tomcat高可用什么是tomcat高可用tomcat高可用的意义tomcat常见的高可用实施方案实现tomcat高可用的工具有哪些如何配置tomcat高可用tomcat高可用环境下应用开发有什么影响tomcat高可用环境下会话的管理如何测试tomcat高可用环境如何评估tomcat高可用tomcat高可用环境下数据源的配置及对数据库的影响如何通过分析tomcat日志获得tomcat的高可用状态如何优化tomcat高可用如何优化tomcat高可用环境下应用程序安全管理综合案例:配置tomcat高可用环境,发布web应用到tomcat,使用及测试tomcat高可用环境。 第二单元  weblogic高可用配置 内容一:weblogic高可用1.什么是weblogic高可用2. weblogic高可用的意义3. weblogic常见的高可用实施方案4.实现weblogic高可用的工具有哪些5.如何配置weblogic高可用6. weblogic高可用环境下应用开发有什么影响7. weblogic高可用环境下会话的管理8.如何测试weblogic高可用环境9.如何评估weblogic高可用10. weblogic高可用环境下数据源的配置及对数据库的影响11.如何通过分析weblogic日志获得weblogic的高可用状态12.如何优化weblogic高可用13.如何优化weblogic高可用环境下应用程序14.安全管理15.综合案例:配置weblogic高可用环境,发布web应用到weblogic,使用及测试weblogic高可用环境。 第三单元  websphere高可用配置   内容一:websphere高可用1.什么是websphere高可用2. websphere高可用的意义3. websphere常见的高可用实施方案4.实现websphere高可用的工具有哪些5.如何配置websphere高可用6. websphere高可用环境下应用开发有什么影响7. websphere高可用环境下会话的管理8.如何测试websphere高可用环境9.如何评估websphere高可用10. websphere高可用环境下数据源的配置及对数据库的影响11.如何通过分析websphere日志获得websphere的高可用状态12.如何优化websphere高可用13.如何优化websphere高可用环境下应用程序14. 安全管理15.综合案例:配置websphere高可用环境,发布web应用到websphere,使用及测试websphere高可用环境。 第四单元kafka高可用  内容一:kafka高可用 kafka高可用支持的方式kafka高可用需要的环境如何配置kafka高可用kafka高可用需要的工具高可用kafka的使用高可用的kafka环境的运维综合案例:配置kafka高可用环境,使用高可用的kafka环境进行消息的处理第五单元tuxedo高可用内容一:tuxedo高可用 1 .  tuxedo高可用支持的方式tuxedo高可用需要的环境如何配置tuxedo高可用tuxedo高可用需要的工高可用tuxedo的使用高可用的tuxedo环境的运维综合案例:配置kafka高可用环境,使用高可用的tuxedo环境进行交易的处理       
• 刘晖:运营维护-私有云方向培训班
(1)培训背景伴随着云计算技术与市场的快速迭代,如何有效且安全地利用云计算的多种优势,支撑业务发展成为众多企业的首要关注。私有云运维的目标即通过架构设计、系统搭建、安全运维、实时监控等全方位的服务,为企业云计算的成功之旅保驾护航。私有云运维工程师在保证企业云计算的发展上具有重要作用,它主要有以下职能。首先,私有云运维工程师负责云平台系统的部署、管理、运维保障工作,以确保服务稳定、可靠。其次,负责云平台系统的业务监控,对各类故障和事务的应急响应,配合开发排查问题。第三,私有云运维工程师协助开发搭建测试平台,协助进行设计、验证测试等工作。最后,开发并维护运维自动化脚本,简化日常工作。私有云运维工程师以技术为基础,通过技术保证企业云计算的顺利进行。私有云运维工程师工作的职责及在业务中的位置决定了私有云运维工程师需要具备更加广博的知识和深入的技术能力。私有云运维工程师需要熟悉 Linux 系统管理,掌握常用服务的配置管理和故障排除方法。同时熟练使用 Python,Bash 等脚本语言,熟悉网络知识,TCP/IP 协议。更重要的是,私有云方向的运维工程师需要了解各类云平台和云计算相关概念,例如VMware vSphere、OpenStack、VMware vCloud Director、Azure Stack等,熟悉云计算相关技术栈,KVM,Docker,MySQL,微服务等内容。私有云运维工程师除了需要具备以上技能,还需要培养认真和细心的职业素养,增强责任心,持续改进,追求完美。在运维过程中,不能容忍任何披露和偏差,要对问题零容忍。要不断修正和积累,完善平台、流程、checklist和检查核对机制,力求更好的完成私有云的运营和维护工作。(2)培训目标掌握私有云平台调试以及系统升级掌握云池故障排除掌握私有云平台隐患排查、隐患上报及隐患处理掌握定期对云平台进行优化掌握利用脚本或工具降低一线员工工作强度掌握重保或重大活动中应急响应(3)教学计划本系列课程总共由3门课程组成:教学设计NO.课程名称课程天数运营维护-私有云1私有云基础10天2虚拟化及云平台20天3私有云优化与排错5天(4)具体课程方案(含课程大纲)课程1:私有云基础-10天【匹配关键知识点】私有云平台隐患排查、隐患上报及隐患处理;定期对云平台进行优化;利用脚本或工具降低一线员工工作强度;重保或重大活动中应急响应等内容。【课程时长】10天(6小时/天)【课程简介】本课程从理论到实际操作,让学员掌握私有云的配置方法,监控私有云状态,掌握私有云常用的组件及如何进行故障定位,解决问题,能够对私有云进行优化设置, 给日常工作提供中遇到的问题提供相应的解决方案。【课程收益】掌握私有云平台调试以及系统升级掌握私有云平台隐患排查、隐患上报及隐患处理掌握定期对云平台进行优化掌握利用脚本或工具降低一线员工工作强度掌握重保或重大活动中应急响应【课程特点】就课程内容而言,运营与维护(私有云方向)与当下流行技术紧密结合。运维人员可提供集中控制,工具和最佳实践,以帮助加速使用云,同时降低成本和风险,最终实现从用云到用云的过程中持续优化成本,再到持续追求云原生的升级和转化。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    私有云管理工程师【学员基础】学员学习本课程应具备下列基础知识:1.    网络基础知识2.    云计算基础知识【课程大纲】(10天*6小时)模块具体内容第一单元私有云基础内容一:私有云基础私有云特点。私有云与公有云的一些本质区别常见的私有云平台私有云需要的环境私有云常见问题如何监控私有云平台如何高效管理私有云平台虚拟化技术分析常见的虚拟化平台kvm使用vmware workstation的使用vxbox的使用vsphere的使用如何在kvm创建虚拟机如何在vmware workstation中创建虚拟机如何在vxbox中创建虚拟机如何在esxi中创建虚拟机虚拟机的网络管理仅主机模式nat模式桥接模式案例演示:不同虚拟化软件的应用。 第二单元esxi虚拟化技术内容一:esxi的使用如何在已有系统中安装esxi如何在裸机中安装exsivsphere client的安装、配置及使用vcenter的安装、配置及使用网络管理vsphere中的常见端口创建虚拟机vswitch管理及创建端口组管理配置dhcp为虚拟机使用配置nat为虚拟机使用集群管理案例演示:esxi的综合应用。 第三单元消息中间件的使用内容一:消息中间件在私有云平台中常用的消息中间件安装配置rabbitmq安装配置kafka消息处理流程消息处理分析应用中如何使用消息中间件 第四单元私有云平台下操作系统的主要操作内容一:操作系统私有云平台支持的操作系统有哪些centos系统的综合应用ubuntu系统的综合应用sesu系统的综合应用yum国内源配置apt国内源配置与私有云相关的linux常用命令ntp配置IP网关DNS课程2:虚拟化及云平台-20天【匹配关键知识点】私有云平台调试以及系统升级;云池故障排除等内容。【课程时长】20天(6小时/天)【课程简介】本课程从理论到实际操作,让学员掌握私有云的配置方法,监控私有云状态,掌握私有云常用的组件及如何进行故障定位,解决问题,能够对私有云进行优化设置, 给日常工作提供中遇到的问题提供相应的解决方案。【课程收益】掌握私有云平台调试以及系统升级掌握云池故障排除【课程特点】就课程内容而言,运营与维护(私有云方向)与当下流行技术紧密结合。运维人员可提供集中控制,工具和最佳实践,以帮助加速使用云,同时降低成本和风险,最终实现从用云到用云的过程中持续优化成本,再到持续追求云原生的升级和转化。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    私有云管理工程师【学员基础】学员学习本课程应具备下列基础知识:1.    网络基础知识2.    云计算基础知识【课程大纲】(20天*6小时)模块具体内容第一单元 虚拟化及云平台内容一:虚拟化及云平台云平台常见问题分析系统升级私有云故障调试云池故障排队 第二单元 openstack云平台配置及使用内容一:openstack云平台配置openstack体系结构分析openstack主要的组件不同openstack组件的作用配置openstack需要哪些核心组件确定需要配置的openstack结构及组件虚拟机规划从esxi虚拟化平台中创建虚拟机配置控制节点添加双网卡确定网络结构配置IP配置网关配置DNS配置主机名配置有效的yum源操作系统升级配置ntp安装、配置消息服务安装、配置数据库安装openstack相关软件安装控制节点服务  配置验证服务 安装keystone相关软件配置keystone配置 web服务器安装web服务器相关插件启动keystone服务实现身份验证 配置计算节点确定计算节点数量配置双网卡配置计算节点的需要的网络环境安装计算节点需要的软件启动控制节点服务配置块存储服务确定块存储节点的 数量添加存储节点需要存储lvm管理安装存储节点需要的软件配置网络环境启动存储节点 相关服务 配置网络节点确定网络节点的类型确定网络规划安装网络节点相关软件启动网络节点相关服务 配置仪表盘确定仪表盘安装的主机安装仪表盘需要的软件配置web插件启动仪表盘相关服务登录测试从仪表盘中查看其它服它服务信息 配置对象存储 确定对象存储需要的主机安装对象存储需要的软件启动对象存储相关服务 对象存储的使用、测试对象存储服务综合应用镜像服务配置确定镜像服务的主机安装镜像服务相关软件启动镜像服务配置镜像服务与对象存储整合 配置其它服务根据需要确定需要使用哪些其它的服务安装及配置相应的服务综合测试 不同组件的故障处理云池故障处理升级添加不同的服务某个服务添加主机课程3:私有云优化与排错-5天【匹配关键知识点】私有云平台隐患排查、隐患上报及隐患处理;定期对云平台进行优化;利用脚本或工具降低一线员工工作强度;重保或重大活动中应急响应等内容。【课程时长】5天(6小时/天)【课程简介】本课程从理论到实际操作,让学员掌握私有云的配置方法,监控私有云状态,掌握私有云常用的组件及如何进行故障定位,解决问题,能够对私有云进行优化设置, 给日常工作提供中遇到的问题提供相应的解决方案。【课程收益】掌握私有云平台隐患排查、隐患上报及隐患处理掌握定期对云平台进行优化掌握利用脚本或工具降低一线员工工作强度掌握重保或重大活动中应急响应【课程特点】就课程内容而言,运营与维护(私有云方向)与当下流行技术紧密结合。运维人员可提供集中控制,工具和最佳实践,以帮助加速使用云,同时降低成本和风险,最终实现从用云到用云的过程中持续优化成本,再到持续追求云原生的升级和转化。此外,在整个教学中,会有五分之四的时间由老师带领学员一起做实验,提高学员的实操能力。对于机器出现的问题或学员不清楚的地方,讲师也会耐心的讲解,力求每一位学员理解授课内容,并将所学知识真正运用到实践中。【课程对象】    运维人员    系统工程师    系统架构师    私有云管理工程师【学员基础】学员学习本课程应具备下列基础知识:1.    网络基础知识2.    云计算基础知识【课程大纲】(5天*6小时)模块具体内容第一单元私有云优化内容一: 数据库优化调整mysql数据库参数优化数据库IO优化数据库查询优化数据库连接优化缓存数据库  内容二: 优化中间件 调整中间件参数优化消息中间件  内容三: 控制节点优化优化体系结构分离相关组件确定数据库的安装位置确定缓存服务器的安装位置确定 webserver的安装位置 内容四: nova节点优化优化体系结构IO优化内存优化CPU优化限额选择适当的虚拟化软件大页面文件的处理内核优化  内容五: kyestone节点优化缓存的使用优化令牌缓存时间  内容六: 仪表盘节点优化关闭debug优化web server缓存优化  内容七: cinder节点优化硬盘类型的选择优化硬盘访问 第二单元私有云平台故障处理及高可用架构设计内容一: 高可用及故障处理有状态服务无状态服务active/passive active/active用户应用的 HA虚拟机的HA基础设施层的HA网络设备HA服务器设置HA存储 设备HArabbitmq HAmariadb HAkeystone HAnova-api HAneutron HAnova-compute HAcinder-volume HAswift HA监控故障处理私有云平台隐患排查隐患上报及隐患处理定期对云平台进行优化利用脚本或工具降低一线员工工作强度重保或重大活动中应急响应(5)教学实验本方向教学实验设计如下:序号教学实验设计实验概述1私有云基础实验一:私有云基础私有云特点。私有云与公有云的一些本质区别常见的私有云平台私有云需要的环境私有云常见问题如何监控私有云平台如何高效管理私有云平台虚拟化技术分析常见的虚拟化平台kvm使用vmware workstation的使用vxbox的使用vsphere的使用如何在kvm创建虚拟机如何在vmware workstation中创建虚拟机如何在vxbox中创建虚拟机如何在esxi中创建虚拟机虚拟机的网络管理仅主机模式nat模式桥接模式 实验二:在已有系统中安装esxi如何在裸机中安装exsivsphere client的安装、配置及使用vcenter的安装、配置及使用网络管理vsphere中的常见端口创建虚拟机vswitch管理及创建端口组管理配置dhcp为虚拟机使用配置nat为虚拟机使用集群管理 实验三:消息中间件在私有云平台中常用的消息中间件安装配置rabbitmq安装配置kafka消息处理流程消息处理分析应用中如何使用消息中间件 实验四:操作系统私有云平台支持的操作系统有哪些centos系统的综合应用ubuntu系统的综合应用sesu系统的综合应用yum国内源配置apt国内源配置与私有云相关的linux常用命令ntp配置IP网关DNS2虚拟化及云平台实验一:虚拟化及云平台云平台常见问题分析系统升级私有云故障调试云池故障排队 实验二:openstack云平台配置openstack体系结构分析openstack主要的组件不同openstack组件的作用配置openstack需要哪些核心组件确定需要配置的openstack结构及组件虚拟机规划从esxi虚拟化平台中创建虚拟机配置控制节点添加双网卡确定网络结构配置IP配置网关配置DNS配置主机名配置有效的yum源操作系统升级配置ntp安装、配置消息服务安装、配置数据库安装openstack相关软件安装控制节点服务配置验证服务 安装keystone相关软件配置keystone配置 web服务器安装web服务器相关插件启动keystone服务实现身份验证配置计算节点确定计算节点数量配置双网卡配置计算节点的需要的网络环境安装计算节点需要的软件启动控制节点服务配置块存储服务确定块存储节点的 数量添加存储节点需要存储lvm管理安装存储节点需要的软件配置网络环境启动存储节点 相关服务 配置网络节点确定网络节点的类型确定网络规划安装网络节点相关软件启动网络节点相关服务 配置仪表盘确定仪表盘安装的主机安装仪表盘需要的软件配置web插件启动仪表盘相关服务登录测试从仪表盘中查看其它服它服务信息 配置对象存储 确定对象存储需要的主机安装对象存储需要的软件启动对象存储相关服务 对象存储的使用、测试对象存储服务综合应用镜像服务配置确定镜像服务的主机安装镜像服务相关软件启动镜像服务配置镜像服务与对象存储整合 配置其它服务根据需要确定需要使用哪些其它的服务安装及配置相应的服务综合测试 不同组件的故障处理云池故障处理升级添加不同的服务某个服务添加主机 3私有云优化与排错实验一:数据库优化调整mysql数据库参数优化数据库IO优化数据库查询优化数据库连接优化缓存数据库 实验二:优化中间件 调整中间件参数优化消息中间件 实验三:控制节点优化优化体系结构分离相关组件确定数据库的安装位置确定缓存服务器的安装位置确定 webserver的安装位置 实验四:nova节点优化优化体系结构IO优化内存优化CPU优化限额选择适当的虚拟化软件大页面文件的处理内核优化实验五:kyestone节点优化缓存的使用优化令牌缓存时间 实验六:仪表盘节点优化关闭debug优化web server缓存优化 实验七:cinder节点优化硬盘类型的选择优化硬盘访问 实验八:高可用及故障处理有状态服务无状态服务active/passive active/active用户应用的 HA虚拟机的HA基础设施层的HA网络设备HA服务器设置HA存储 设备HArabbitmq HAmariadb HAkeystone HAnova-api HAneutron HAnova-compute HAcinder-volume HAswift HA监控故障处理私有云平台隐患排查隐患上报及隐患处理定期对云平台进行优化利用脚本或工具降低一线员工工作强度重保或重大活动中应急响应       

添加企业微信

1V1服务,高效匹配老师
欢迎各种培训合作扫码联系,我们将竭诚为您服务

Copyright © 2019-2024 . All Rights Reserved. 深圳鲸塔网络科技有限公司 版权所有

琼ICP备2024027448号