Linux 就业和架构版#马哥Linux 2019就业和架构版#【马哥2019全新】架构师班课程

第二十五天：
1、自动化运维技术框架系统安装、程序发布、应用布局宏观介绍
2、ansibles工具特性及工作机制详解
3、Ansible多方式安装及简单应用
4、ansible常用模块command、shell、copy、cron、fetch、file、service、user、setup等模块详解
5、YAML语言介绍与语法
6、anshible playbook（剧本）核心元素Hosts、Tasks、Variables、Templaters、Handlers、Roles详解
7、ansible playbooks基础组件实际应用实例讲解
8、ansible 创建角色roles实现代码重用详解
9、role内各目录中可用的文件定义及角色调用实现
10、ansible实现主/备模式高可用主/备模式高可用nginx实践

第二十六天：

1、DHCP协议基础讲解
2、DHCP服务搭建原理及实现
3、pxe应用入门与进阶
4、cobbler应用入门和进阶

第二十七天：
1、虚拟化技术的历史介绍
2、虚拟化技术分三类：模拟、半虚拟、完全虚拟化
3、cpu、memory、I/o虚拟化及网络虚拟化技术详解
4、KVM虚拟化基础；KVM虚拟化技术实现原理
5、kvm模块载入后的模式：内核模式、用户模式、来宾模式、及kvm hypervisor详解
6、kvm的特性与局限性详解
7、kM的工具栈：qemu、libvirt的使用
8、构建KVM环境：KVM的安装、配置及应用
9、使用qemu-kvm管理KVM虚拟机、安装guest实例演示
10、使用qemu-img管理磁盘映像
11、kvm常用的虚拟网络模型详解：桥接模型、NAT模型、路由模型、隔离模型
12、virtio半虚拟化技术介绍
13、libvirt工具及术语介绍
14、virt-install创建虚拟机并安装guestOS

第二十八天、第二十九天：
一、Linux容器技术基础
1、容器技术发展史
2、Namespace和CGroups
3、LXC和容器技术
二、Docker容器技术基础
1、Docker技术构架
2、安装部署Docker
3、Docker的镜像及容器的基础应用
三、Docker镜像
1、Docker镜像工作原理
2、基于容器制作Docker镜像
3、推送Docker镜像至Registry
4、镜像的本地分发
四、Docker网络
1、Docker网络模型及工作原理
2、Docker网络模型验正
3、暴露容器应用至节点外部
4、桥接式网络管理
5、配置Docker进程的网络属性
五、存储卷
1、存储卷类型及功能
2、存储卷应用
3、存储卷共享
六、Dockerfile
1、Dockerfile文件格式
2、各指令详解
3、案例：自定义entrypoint脚本，接收变量进行容器化应用配置
七、私有Registry
1、Registry的组织格式
2、利用docker-registry构建简单的私有Registry
3、docker-compose简介
4、使用VMWare Harbor构建企业级私有Registry
八、容器资源限制
1、资源限制模型
2、CPU资源限制及三种形式及其应用
3、内存及Swap资源限制及其应用
4、案例：使用stress-ng镜像验正资源限制效果

第三十天：
1、Linux集群及系统扩展的方式概述
2、Linux集群类型及调度方法详解
3、lvs工作原理及专用术语介绍
4、lvs常见的四种集群lvs-nat、lvs-dr、lvs-tun、lvs-fullnat优点及使用场景
5、负载均衡集群中会话保持方式：源地址hash、会话集群、会话服务器
6、Layer-4交换机（ipvs）工作原理
7、ipvsadm集群服务管理工具使用
8、LVS-NAT、LVS-DR的配置以及负载应用
9、LVS-FW方式实现LVS的affinity应用
10、LVS FWM 持久性连接应用环境理论及实现
11、LVS 调度方案RR、WRR、SH、DH、LC、WLC、SED、NQ、LBLC、LBLCR详解及应用场景

第三十一天、第三十二天：
1、常见的网络I/O模型及同步/异步消息通知机制讲解
2、常见的多路I/O复用select/poll/epoll比较
3、高性能nginx特性详解及LNMP架构介绍
4、nginx编译安装与应用
5、nginx性能优化、定位调试、定义客户端请求与限制、文件操作优化等实际应用详解
6、nginx模块应用之ngx_http_access_module模块进行基于basic机制的用户认证
7、nginx模块应用之ngx_http_auth_basic_module进行基于账号密码文件的认证
8、nginx模块应用之ngx_http_stub_status_module模块：模块输出nginx基本状态信息详解
9、ngx_http_referer_module模块：定义合法的referer数据来防止盗链
10、nginx模块应用之ngx_http_ssl_module启用ssl功能
11、nginx模块应用之ngx_http_log_module定义日志的最大缓存条目、及活动时长等日志相关配置
12、nginx模块应用之ngx_http_rewrite_module及常见的flag：break、last、permanent重写规则的定义方式
13、nginx模块应用之ngx_http_gzip_module实现对指定类型的资源压缩传输以节约带宽；
4、nginx模块应用之ngx_http_proxy_module
5、nginx模块应用之ngx_http_headers_module
6、nginx模块应用之ngx_http_fastcgi_module实现动静分离响应客户端
1、nginx模块应用之ngx_http_upstream_module及调度算法
2、nginx扩展功能

第三十三天：
1、高性能负载均衡软件HAproxy介绍
2、四层负载均衡与七层负载均衡的特点及HAproxy与LVS之间的对比说明
3、HAproxy快速安装及配置文件global、proxies详解
4、HAproxy的进程管理、性能调整、及调试参数详解
5、HAproxy常见的负载均衡调度算法及应用场景详解
6、HAproxy的日志配置策略及status页面授权配置
7、HAproxy工作模式tcp、http、health配置实例
8、HAproxy基于cookie的会话粘性配置实例
9、通过HAproxy基于url实现动静分离调度及后端服务器健康检测
10、通过HAproxy的ACL规则实现智能负载均衡

第三十四天

1、http协议缓存原理及常用首部讲解
2、缓存的命中率计算及再验证机制
3、百万并发的大型互联网架构缓存的拓扑结构私有缓存和公有代理缓存
4、回源原理和CDN常见多级缓存
5、缓存处理机制的详细步骤
6、缓存控制机制与新鲜度检测机制详解
7、反向代理解决方案varnish介绍
8、varnish状态引擎及VCL编程详解
9、数据报文在varnish状态引擎的处理流向
10、varnish基于变量实现缓存策略的个性化定制
11、varnish实现缓存对象修简及反代后端主机
12、varnish实现multi backends, directors, health_check
13、varnish实战应用
第三十五天
1、HA Cluster 高可用相关原理介绍
2、vrrp协议与专业术语介绍
3、keepalived相关工作原理介绍
4、keepalived配置文件详解
5、keepalived软件安装与配置
6、keepalived 自定义监控脚本
7、keepalived高可用主从、主主架构讲解

第三十六天、第三十七天

1、编程语言的分类及JAVA的历史
2、Java的体系结构规范及核心组件介绍
3、JDK及企业级类库jsp、servlet详解
4、Web Container的开源实现Tomcat历史介绍
5、Tomcat的顶级组件、服务组件、连接器组件、容器类、被嵌套类组件、集群类组件等核心组件详解
6、Tomcat的JDK环境安装及tomcat的安装部署：openjdk+tomcat、Oracle jdk+tomcat
7、Tomcat的配置文件详解
8、JSP WebAPP组织结构及webapp归档
9、Tomcat应用程序的部署示例及部署webapp的相关操作
10、基于JAVA技术SHOP++网店管理软件类电子商务软件的部署实例演示
11、LNMT实现动静分离实战演示
12、LAMT基于http协议和ajp协议实现应用部署
13、Tomcat集群中会话保持的三种方式session sticky、session cluster、session server详解
14、nginx基于模块负载均衡至后端tomcat集群并实现会话保持示例讲解
15、apache使用http协议负载均衡至后端tomcat并实现会话保持示例讲解
16、apache使用ajp协议负载均衡至后端tomcat并实现会话保持示例讲解
17、apache使用mod_jk模块负载均衡至后端tomcat并实现会话保持示例讲解
1、Tomcat 会话复制集群的实现
2、Tomcat会话保持与会话服务器memcache（msm）配置示例详解
3、Tomcat使用进阶

第三十八天

1、关系型数据库管理系统介绍
2、关系型数据库的关系运算和设计范式
3、关系型数据库表、索引、视图及三层模型讲解
4、MariaDB安装与安全配置
5、mysql的客户端程序mysql、mysqldump、mysqladmin、mysqlimport工具介绍
6、mysql服务器全局变量、会话变量、及状态变量详解
7、SQL语句之DDL、DML语句用法详解
8、表的创建、修改、删除及表的状态信息查看
9、常见的索引：聚集索引、主键索引、稀疏索引、B树索引的介绍
10、索引的管理：查看、创建、及删除
11、查询语句SELECT之多表查询、联合查询及子查询；
12、MySQL逻辑架构及查询的执行流程详解
13、MySQL存储引擎之InnoDB、MyISAM引擎详解
14、MySQL基于读/写锁实现并发访问控制
15、MySQL事务之ACID测试、及事务的隔离级别READ UNCOMMITTED 、READ COMMITTED 、REPEATABLE READ 、SERIALIZABLE 详解

第三十九天

1、MySQL用户授权GRANT及权限管理类
2、查询缓存相关的服务器变量及状态变量
3、MySQL索引的分类及优化查询
4、CentOS 7编译安装MariaDB
5、mariadb日志之查询日志相关命令及变量详解
6、mariadb日志之慢查询日志相关变量及优化查询
7、mariadb日志之错误日志分析
8、mariadb日志之二进制日志相关的变量设定及查看
9、mysqlbinlog命令的用法
10、二进制日志、中继日志及事务日志详解
11、常见的数据库备份类型：完全备份、增量备份、差异备份；热备份、温备份、冷备份；物理备份、逻辑备份：
12、常用的备份策略及方案设计：完全+增量
13、常用的备份工具mysqldump、cp, tar等复制归档工具、lvm2的快照、mysqlhotcopy应用场景分析
14、结合备份方案，选择合适的备份工具
15、备份的数据快速恢复及注意事项
16、逻辑备份工具：mysqldump使用实例讲解
17、基于lvm2的备份过程详解

1、xtrabackup实现完全备份、增量备份、部分备份实例讲解
2、MySQL常见的扩展方式Scale Up、Scale Out
3、MySQL复制特点及复制架构详解
4、MySQL主从复制中主节点、从节点配置实例详解
5、MySQL复制架构中的数据一致性及事务安全性保持
6、MySQL主主复制配置原理及案例演示
7、MySQL半同步复制原理及案例演示
8、MySQL复制过滤器配置原理及实现指定数据库（表）的快速备份案例演示
9、复制过程中的日志清理与监控命令详解
10、主从复制中数据不一致的解决方案
11、MySQL数据库的切分：垂直切分：分库、水平切分：分表
12、MySQL读写分离组件：Atlas、Amoeba介绍
13、MySQL复制中数据损坏或丢失、混合使用存储引擎、server id的不唯一、及复制延迟中出现的问题及解决方案
14、MHA及基于wresp协议实现多主模型Galera Cluster的配置实例讲解
第四十天
1、Key-Value模型与存储体系介绍
2、存储系统的三种分类RDBMS、NoSQL、NewSQL详细讲解
3、redis组件及其守护进程讲解
4、redis的两种认证实现方法
5、redis数据库管理、事务操作
6、redis的发布与订阅功能、持久化存储、复制详解
7、redis的分布式管理
第四十一天：

1、 CAP理论模型介绍
2、常见的数据类型：结构化数据、半结构化数据、非结构化数据介绍
3、通用的分布式存储及专用的分布式存储
4、MogileFS原理及角色Tracker、MogStored、DB精讲
5、MogileFS安装之DB配置示例讲解
6、MogileFS安装之Tracker配置示例讲解
7、MogileFS安装之MogStored配置示例讲解
8、使用MogileFS-Utils自带的工具实现存储节点、设备、域的添加及实现文件的上传下载
9、前端nginx反代后端mogilefs存储实战示例详解
10、将多个tracker节点定义成一个upstream，实现分布式
11、Src格式的RPM包制作演示
12、FastDFS原理及三个角色tracker、storage server、client介绍
13、FastDFS src格式的rpm包制作过程详解
14、FastDFS的安装配置

第四十二天、第四十三天
1、监控系统概述及zabbix介绍
2、监控系统及SNMP协议
3、zabbix特性及功能详解
4、zabbix架构体系介绍
5、Zabbix工作原理全面介绍
6、zabbix常用术语介绍
7、zabbix安装方式详解及演示
8、使用key实现自定义监控项
9、自定义监控nginx服务的数据
10、zabbix监控之主动检测和snmp简介
11、zabbix监控之自定义宏和自定义key
12、zabbix监控之主机发现及自动注册
13、zabbix监控之图像、幻灯片、模版自定义监控
14、zabbix proxy分布式特性、性能优化及部署

第四十四天
1、搜索引擎及部分文本分析引擎Lucene组件介绍
2、Lucene的多样化查询：域、范围、字符串、模糊查询等
3、elasticsearch基础原理与工作原理讲解
4、elasticsearch基础组件及集群组件讲解
5、elasticsearch index、type和documentation的获取更新
6、Logstash基础原理深入讲解
7、Logstash的插件input插件、redis插件、grok插件、output插件详解
8、logstash agent/server应用

第四十五天
1、Devops概念简介、CI(持续集成)/CD(持续部署)介绍。
2、CI工具之Gitlab介绍、安装及配置、项目创建与权限设置、常用功能及常用命令介绍。
3、CD工具之Jenkins介绍、安装及配置、插件管理、基于RBAC实现的多账户及权限管理、构建邮件通知设置、基于shell命令的Job实现。
4、分布式Jenkins、pipline介绍、pipline基础语法、pipline案例实现。
5、代码质量扫描介绍、sonarqube介绍及安装配置、集合jenkins实现代码扫描及代码部署。
6、代码自动化部署流程介绍及规划、编写shell脚本实现代码自动化部署及回滚。

第四十六天（知识点和第45天相同）
第四十七天
1、分布式文件系统介绍
2、zookeeper基础理论
3、zookeeper安装部署、配置、监控
4、zookeeper集群配置
5、zookeeper应用

第四十八天-第五十四天：kubernetes

一、Kubernetes集群架构
1、Kubernetes集群架构概述
2、Master及各组件
3、Node及相关组件
4、核心附件CoreDNS、HeapSter（Prometheus）、Dashboard及Ingress Controller概述
5、核心资源类型：Pod、Deployment、Service
二、Kubernetes快速入门
1、Kubernetes集群的部署方法及部署要点
2、部署Kubernetes分布式集群
3、kubectl使用基础
4、命令式应用部署、扩缩容、服务暴露
三、资源配置清单及Pod资源
1、Kubernetes API中的资源配置格式
2、资源类型、API群组及其版本介绍
3、Pod资源及其配置格式
4、使用配置清单创建自主式Pod资源
5、标签及标签选择器
6、Pod的节点选择器
7、容器存活状态探测及就绪状态探测
四、Pod控制器
1、Pod控制器及其功用
2、通过配置清单管理ReplicaSet控制器，包括扩缩容及更新机制
3、Deployment控制器基础应用及滚动更新：灰度部署、金丝雀部署、蓝绿部署的实现；
4、DaemonSet控制器基础应用及使用案例
五、Service资源对象
1、Service及其实现模型
2、Service的类型及其功用
3、各Service类型的创建及应用方式
4、Headless Service
5、基于DNS的服务发现简介
6、Ingress类型及实现方式
7、Ingress Controller及部署
8、Ingress使用案例：发布http及https的tomcat服务
六、K8S-存储卷
1、存储卷及其功用
2、常见的存储卷类型及应用：emptyDir、hostPath、nfs、glusterfs等
3、PV及PVC
4、StorageClass及PV的动态供给
5、ConfigMap
6、Secret
七、StatefulSet
1、有状态及无状态应用对比
2、有状态应用的容器难题
3、StatefulSet及其应用
4、案例
八、网络模型及网络策略
1、flannel工作原理及host-gw等实现方式
2、calico及其应用
3、网络策略及其工作机制
4、基于calico的网络策略的实现
九、认证、授权及准入控制
1、Kubernetes的认证、授权及准入控制机制
2、ServiceAccount
3、令牌认证及证书认证
4、RBAC及其实现机制
5、Role和RoleBinding
6、ClusterRole和ClusterRoleBinding
十、调度器
1、资源需求、资源限额及其应用
2、Pod优选级类别
3、Pod调度器工作原理
4、预选及预选策略
5、优选及优选算法
6、高级调度方法
十一、资源监控及HPA
1、HeapSter、InfluxDB及Grafana实现资源监控
2、HPA v1
3、Prometheus及Grafana实现资源监控
4、Metrics-Server
5、HPA v2
十二、helm及日志收集系统
1、helm工作原理
2、helm部署及其应用
3、部署efk日志收集系统
十三、基于Kubernetes的DevOps介绍

第五十五天-第五十七天：Ceph

1、系统组件及存储工作机制
2、ceph系统部署
3、存储池（pool）与归置组（PG）
4、块存储（rdb）
5、文件系统（cephfs）
6、对象存储（radosgw）
7、自定义CRUSHMAP
【选修课程】
Linux操作系统原理、虚拟化基础：

1、详细讲解linux操作系统的工作原理
2、不同硬件所能完成哪些功能，硬件之间如何协调工作
3、系统与硬件之间的关系，系统如何控制硬件的工作
4、虚拟化技术基础原理之CPU虚拟化、memory虚拟化、IO虚拟化精讲
5、Intel硬件辅助的虚拟化及分类
6、虚拟化技术的分类，半虚拟化和完全虚拟化的区别
7、虚拟化网络的实现
Xen虚拟化：
1、Xen虚拟化技术精讲
2、Xen虚拟化技术中调度、中断、内存、IO、网络
3、Xen在RHEL6或CentOS6上的安装、配置及简单应用
4、Xen环境中虚拟存储和虚拟网络设备的配置及管理详解
5、Xen管理工具栈xm及xl从入门到精通

Hadoop：
1、存储和处理平台hadoop介绍
2、Mapreduce工作原理及应用开发简介
3、MapReduce类型及格式及特性详解
4、集群资源管理YARN：RM、NM、AM详解
5、HDFS基础概念、命令行接口、据序列化、数据流详解
6、Hadoop单机模型伪分布式模型、及完全分布式详解
7、hadoop基础组件HDFS、NN、SNN、DN详解
8、生产环境中Hadoop硬件选型要点
9、Hadoop调度算法及其选用

Puppet：
1、Ruby语言介绍
2、puppet基本原理和入门学习
3、puppet资源抽象及资源解构详解
4、puppet资源的定义、浏览及查找
5、C/S架构中，manifest的应用
6、manifest文件实现资源申报、定义类、声明类等功能
7、puppet语言支持的数据类型详解
8、puppet中模块目录的结构及模块安装详解
9、puppet中类的声明定义及继承
10、puppet高级用法和企业级案：haproxy.pp、keepalived.pp详解
11、puppet分段配置nginx反向代理实例演示
12、安装部署puppet服务器端和客户端
13、puppet kick 功能实现

MongoDB：
1、NoSQL及MongoDB简介
2、MongoDB常见术语及概念解析
3、MongoDB数据库的创建、删除
4、MongDB的文档插入、更新查询及删除
5、MongoDB条件操作符及$type操作符详解
6、MongoDBLimit与skip方法介绍
7、MongonDB的排序、索引、聚合、复制、分片详解
8、MongoDB的备份mongodump与恢复 mongorerstore
9、mongostat 和 mongotop 两个命令实现监控MongoDB
10、MongoDB多文档之间的逻辑关系详解
11、MongoDBjava环境的配置与php扩展的安装
12、MongoDB数据库引用、查询分析、及正则表达式的使用
13、MongoDB集合及自动增长

网络虚拟化：
1、常见的虚拟化技术详解
2、计算机操作系统内核虚拟网络设备TUN与TAP介绍
3、网络虚拟化之桥接模型详解
4、网络虚拟化之隔离模型详解
5、网络虚拟化之路由模型详解
6、网络虚拟化之地址转换nat模型详解

rabbitmq、OpenStack

1、rabbitmq基础讲解
2、rabbitmq集群模式分类
3、rabbitmq的安装部署
4、IaaS、PaaS、SaaS云技术介绍
5、Openstack组件及逻辑结构介绍
6、Openstack 核心组件Keystone、Glance、Nova讲解
7、Openstack OpenStack的网络模型及Neutron服务
8、OpenStack中物理网络连接架构：管理网络(management network)：数据网络(data network):外部网络(external network):API网络
9、Openstack的图形界面DashBoard配置
10、全功能OpenStack环境部署案例详解
11、openstack文件共享服务之Manila云节点的安装与配置过程详解
12、openstack之orachestration安装配置，实现基与heat的应用启动、创建虚拟机并自动处理流程
13、openstack之telemetry安装配置实现监控和计量功能，提供OpenStack云计算的账单，性能指标，扩展性和满意度的调查表。

Linux系统调优：
1、Linux操作系统原理知识详解
2、进程调度、进程优先级、内存分页、页面调度、中断、I/o驱动、DMA等相关概念详解
3、cpu的任务调度器Big O（1）标准
4、Linux系统性能调优之性能分析工具详解
5、Linux系统参数调优之TCP/IP参数调优
6、Linux系统调优之磁盘调优及使用elvtune调谐磁盘I/O

Git：

1、常见的版本控制系统
2、git的工作原理及优点详解
3、git的对象类型：block、tree、commit、tag详解
4、git的安装于配置详解
5、git的初始化、及git的add/rm/mv/command等基本操作
6、git分支的命名、创建、删除、合并及变基操作
7、git服务器的安装和配置
8、远程版本库的引用
Python 3.0基础
1、python语言及基础介绍
2、python程序的执行流程概况
3、python性能优化工具PyPY、Shed Skin、Psyco详解
4、python程序文件格式：模块、语句、表达式和对象等基础概念介绍介绍
5、python基本数据结构序列介绍
6、python关键要素之基本数据类型：Integral、浮点型、字符串型数据类型详解
7、python关键要素之变量命名及引用
8、python关键要素之组合类型：序列类型、集合类型、映射类型详解
9、python关键要素逻辑操作符：身份操作符is、比较操作符、成员操作符in/not in、逻辑运算符and、or、not详解
10、pyton常见的控制流语句、if、while、for … in 、try详解
11、python函数的输入输出及创建、调用详解
12、python文件处理及数据持久化的解决方案
13、python生成器的构建及python异常处理机制
14、python执行环境构建及代码测试示例
15、python程序基于ssh实现文件的上传下载及异地容灾备份方案示例讲解