第七周作业-N67044-张铭扬

1. 说明自动化运维的路径，原理，实践方法.

所谓自动化运维是指通过将日常IT运维中大量的重复性工作（小到简单的日常检查、配置变更和软件安装，大到整个变更流程的组织调度）由过去的手工执行转为标准化、流程化和自动化操作。

企业实际应用场景分析

　　Dev开发环境

　　　　使用者：程序员

　　　　功能：程序员个人的办公电脑或项目的开发测试环境，部署开发软件，测试个人或项目整体的BUG的环 境

　　　　管理者：程序员

　　测试环境

　　　　使用者：QA测试工程师

　　　　功能：测试经过Dev环境测试通过的软件的功能和性能，判断是否达到项目的预期目标，生成测试报告

　　　　管理者：运维

　　　　说明：测试环境往往有多套,测试环境满足测试功能即可，不宜过多;测试人员希望测试环境有多套,公司的产品多产品线并发，即多个版本，意味着多个版本同步测试;通常测试环境有多少套和产品线数量保持一样

　　预发布环境

　　　　使用者：运维

　　　　功能：使用和生产环境一样的数据库，缓存服务等配置，测试是否正常

　　发布环境

　　　　包括代码发布机，有些公司为堡垒机（安全屏障）

　　　　使用者：运维

　　　　功能：发布代码至生产环境

　　　　管理者：运维（有经验）

　　　　发布机：往往需要有2台（主备）

　　生产环境

　　　　使用者：运维，少数情况开放权限给核心开发人员，极少数公司将权限完全开放给开发人员并其维护

　　　　功能：对用户提供公司产品的服务

　　　　管理者：只能是运维

　　　　生产环境服务器数量：一般比较多，且应用非常重要。往往需要自动工具协助部署配置应用

　　灰度环境

　　　　属于生产环境的一部分

　　　　使用者：运维

　　　　功能：在全量发布代码前将代码的功能面向少量精准用户发布的环境,可基于主机或用户执行灰度发布

　　　　案例：共100台生产服务器，先发布其中的10台服务器，这10台服务器就是灰度服务器

　　　　管理者：运维

　　　　灰度环境：往往该版本功能变更较大，为保险起见特意先让一部分用户优化体验该功能，待这部分用户 使用没有重大问题的时候，再全量发布至所有服务器

2. 搭建pxe集群

节点1：10.0.0.156；节点2：10.0.0.157；节点3：10.0.0.158

#节点1
[root@centos7 ~]# vim /etc/yum.repos.d/pxc.repo
[percona]
name=percona_repo
baseurl = https://mirrors.tuna.tsinghua.edu.cn/percona/release/$releasever/RPMS/$basearch
enabled = 1
gpgcheck = 0
[root@centos7 ~]#scp /etc/yum.repos.d/pxc.repo 10.0.0.157:/etc/yum.repos.d
[root@centos7 ~]#scp /etc/yum.repos.d/pxc.repo 10.0.0.158:/etc/yum.repos.d
#在三个节点安装PXC
[root@centos7 ~]# yum install Percona-XtraDB-Cluster-57 -y
[root@centos7 ~]# yum install Percona-XtraDB-Cluster-57 -y
[root@centos7 ~]# yum install Percona-XtraDB-Cluster-57 -y
#修改配置
[root@centos7 ~]# vim /etc/percona-xtradb-cluster.conf.d/wsrep.cnf

[mysqld]
# Path to Galera library
wsrep_provider=/usr/lib64/galera3/libgalera_smm.so

# Cluster connection URL contains IPs of nodes
#If no IP is found, this implies that a new cluster needs to be created,
#in order to do that you need to bootstrap this node
wsrep_cluster_address=gcomm://10.0.0.156,10.0.0.157,10.0.0.158

# In order for Galera to work correctly binlog format should be ROW
binlog_format=ROW

# MyISAM storage engine has only experimental support
default_storage_engine=InnoDB

# Slave thread to use
wsrep_slave_threads= 8

wsrep_log_conflicts

# This changes how InnoDB autoincrement locks are managed and is a requirement for Galera
innodb_autoinc_lock_mode=2

# Node IP address
wsrep_node_address=10.0.0.156
# Cluster name
wsrep_cluster_name=pxc-cluster-zmy

#If wsrep_node_name is not specified, then system hostname will be used
wsrep_node_name=pxc-cluster-node-1

#pxc_strict_mode allowed values: DISABLED,PERMISSIVE,ENFORCING,MASTER
pxc_strict_mode=ENFORCING

# SST method
wsrep_sst_method=xtrabackup-v2

#Authentication for SST method
wsrep_sst_auth="sstuser:s3cretPass"

#标黄需要修改

#其余两个节点相同操作

启动第一个节点

[root@centos7 ~]# systemctl start mysql@bootstrap.service
[root@centos7 ~]# grep "temporary password" /var/log/mysqld.log
2022-08-20T08:52:35.405492Z 1 [Note] A temporary password is generated for root@localhost: njQVMfRt;4wB
[root@centos7 ~]# mysql -uroot -p'njQVMfRt;4wB'
ysql> alter user 'root'@'localhost' identified by '123456';
Query OK, 0 rows affected (0.00 sec)
mysql> create user 'sstuser'@'localhost' identified by 's3cretPass';
Query OK, 0 rows affected (0.00 sec)
mysql> grant reload,lock tables,process,replication client on *.* to 'sstuser'@'localhost';
Query OK, 0 rows affected (0.01 sec)

启动其余两个节点

[root@centos7 ~]# systemctl start mysql

[root@centos7 ~]# systemctl start mysql

节点一
mysql> show status like 'wsrep%'\G;
*************************** 66. row ***************************
Variable_name: wsrep_cluster_size
        Value: 3
已连接

测试

#节点三
mysql> create database db158;
Query OK, 1 row affected (0.00 sec)

#其余节点查看是否成功
mysql> show databases;#节点一
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| db158              |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
6 rows in set (0.00 sec)

#节点二
mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| db158              |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
6 rows in set (0.00 sec)

冲突测试

#节点二
mysql> use db158;
Database changed
mysql> create table t1(id int);
Query OK, 0 rows affected (0.01 sec)

#节点一
mysql> create table t1(id int);
ERROR 1046 (3D000): No database selected

#节点三
mysql> create table t1(id int);
ERROR 1046 (3D000): No database selected

3. playbook常用模块总结；一个简单的playbook完成安装httpd服务。

主机清单

[root@centos7 ~]# grep -v '^#' /etc/ansible/hosts
[local]
10.0.0.156  ansible_connection=local

[websrvs]
10.0.0.157
10.0.0.159

[dbsrvs]
10.0.0.159
10.0.0.158

[appsrvs]
10.0.0.156
10.0.0.157
10.0.0.158

Ansible模块：

shell模块：在远程主机执行命令，用shell执行命令,支持各种符号,比如:*,$, >

[root@centos7 ~]# ansible websrvs -m shell -a "echo $HOSTNAME"
10.0.0.157 | CHANGED | rc=0 >>
centos7.linux.org
10.0.0.159 | CHANGED | rc=0 >>
centos7.linux.org

Copy 模块：从ansible服务器主控端复制文件到远程主机。src=file 如果是没指明路径,则为当前目录或当前目录下的files目录下的file文件

ansible websrvs -m copy -a "src=/etc dest=/backup"

File 模块：设置文件属性,创建软链接等

ansible all -m file  -a 'path=/data/test.txt state=touch'
ansible all -m file  -a 'path=/data/test.txt state=absent'

Yum 和 Apt 模块：yum 管理软件包，只支持RHEL，CentOS，fedora，不支持Ubuntu其它版本；apt 模块管理 Debian 相关版本的软件包

ansible websrvs -m yum -a 'name=httpd state=present'  #安装
ansible websrvs -m yum -a 'name=nginx state=present enablerepo=epel'  #启用epel源
进行安装
ansible websrvs -m yum -a 'name=* state=lastest exclude=kernel*,foo*' #升级除
kernel和foo开头以外的所有包

playbook完成安装httpd

[root@centos7 ~]# cat httpd.yml
---
- hosts: websrvs
  remote_user: root
  gather_facts: no

  tasks:
    - name: install httpd
      yum: name=httpd state=present
    - name: copy html
      copy: src=/data/index.html /var/www/html/index.html
    - name: start httpd
      service: name=httpd state=started enabled=yes

4. httpd协议的工作过程。

1、建立连接：接收或拒绝连接请求

2、接收请求：接收客户端请求报文中对某资源的一次请求的过程

3、处理请求：服务器对请求报文进行解析，并获取请求的资源及请求方法等相关信息，根据方法，资 源，首部和可选的主体部分对请求进行处理 常用请求Method: GET、POST、HEAD、PUT、DELETE、TRACE、OPTIONS

4、访问资源： 服务器获取请求报文中请求的资源web服务器，即存放了web资源的服务器，负责向请求者提供对方 请求的静态资源，或动态运行后生成的资源

5、构建响应报文： 一旦Web服务器识别除了资源，就执行请求方法中描述的动作，并返回响应报文。响应报文中 包含 有响应状态码、响应首部，如果生成了响应主体的话，还包括响应主体

1）响应实体：如果事务处理产生了响应主体，就将内容放在响应报文中回送过去。响应报文中通常包括：

　　描述了响应主体MIME类型的Content-Type首部

　　描述了响应主体长度的Content-Length

　　实际报文的主体内容

2）URL重定向：web服务构建的响应并非客户端请求的资源，而是资源另外一个访问路径

3）MIME类型： Web服务器要负责确定响应主体的MIME类型。多种配置服务器的方法可将MIME类型 与资源管理起来

　　魔法分类：Apache web服务器可以扫描每个资源的内容，并将其与一个已知模式表(被称为魔法文 件)进行匹配，以决定每个文件的MIME类型。这样做可能比较慢，但很方便，尤其是文件没有标准 扩展名时

　　显式分类：可以对Web服务器进行配置，使其不考虑文件的扩展名或内容，强制特定文件或目录内 容拥有某个MIME类型

　　类型协商： 有些Web服务器经过配置，可以以多种文档格式来存储资源。在这种情况下，可以配 置Web服务器，使其可以通过与用户的协商来决定使用哪种格式(及相关的MIME类型)"最好"

6、发送响应报文

Web服务器通过连接发送数据时也会面临与接收数据一样的问题。服务器可能有很多条到各个客户 端的连接，有些是空闲的，有些在向服务器发送数据，还有一些在向客户端回送响应数据。服务器要记 录连接的状态，还要特别注意对持久连接的处理。对非持久连接而言，服务器应该在发送了整条报文之 后，关闭自己这一端的连接。对持久连接来说，连接可能仍保持打开状态，在这种情况下，服务器要正 确地计算Content-Length首部，不然客户端就无法知道响应什么时候结束

7、记录日志 最后，当事务结束时，Web服务器会在日志文件中添加一个条目，来描述已执行的事务

5. 以apache/lamp架构，借助ansible实现自动化运维小案例。

ansible：10.0.0.156 ；

mysql：10.0.0.152；

apache、php：10.0.0.153

[root@ansible ~]# mkdir /data/ansible
[root@ansible ~]# cd  /data/ansible
[root@ansible ansible]# vim hosts
[root@ansible ansible]# cat /data/ansible/hosts
[mysql]
10.0.0.152

[AP]
10.0.0.153
root@ansible ansible]# mkdir roles
root@ansible ansible]# cp /etc/ansible/ansible.cfg ./

[root@ansible ansible]# vim ansible.cfg
[root@ansible ansible]# grep -v '^#' ansible.cfg
inventory      = /data/ansible/hosts
roles_path    = /data/ansible/roles
remote_user = root

[root@ansible ansible]# ansible all -m ping -k
SSH password:
10.0.0.152 | SUCCESS => {
    "ansible_facts": {
        "discovered_interpreter_python": "/usr/libexec/platform-python"
    },
    "changed": false,
    "ping": "pong"
}
10.0.0.153 | SUCCESS => {
    "ansible_facts": {
        "discovered_interpreter_python": "/usr/libexec/platform-python"
    },
    "changed": false,
    "ping": "pong"
}

[root@ansible ansible]# cd roles
[root@ansible roles]# ansible-galaxy init apache
- Role apache was created successfully
[root@ansible roles]# ansible-galaxy init php
- Role php was created successfully
[root@ansible roles]# ansible-galaxy init mysql
- Role mysql was created successfully
#httpd
[root@ansible roles]# cd apache
[root@ansible apache]# vim files/httpd.conf
[root@ansible apache]# cat files/httpd.conf
DirectoryIndex index.php
ProxyRequests Off
ProxyPassMatch ^/(.*\.php)$ fcgi://10.0.0.153/data/html/$1
ProxyPassMatch ^/(fpm_status|ping) fcgi://10.0.0.153
[root@ansible apache]# cat tasks/main.yml
---
# tasks file for apache
- name: install
  yum: name=httpd state=present
- name: copy config
  copy: src=httpd.conf dest=/etc/httpd/conf.d/
- name: start service
  service: name=httpd state=started enabled=yes

#php-fpm
[root@ansible php]# cat files/www.conf
user apache
group apache
pm.status_path = /fpm_status
ping.path = /ping
[root@ansible php]# vim tasks/main.yml
[root@ansible php]# cat tasks/main.yml
---
# tasks file for php

- name: install php
  yum: name=php-fpm state=present
- name: install php2
  yum: name=php-json state=present
- name: copy config
  copy: src=www.conf dest=/etc/php-fpm.d/www.conf
- name: mkdir
  file: path=/var/www/html state=directory  owner=apache group=apache
- name: copy phpinfo
  copy: src=info.php dest=/data/html/info.php owner=apache group=apache
- name: start service
  service: name=php-fpm state=started enabled=yes

#mysql
[root@ansible mysql]# vim tasks/main.yml
[root@ansible mysql]# cat tasks/main.yml
---
# tasks file for mysql
- name: install mariadb
  yum: name=mariadb-server state=present
- name: start mariadb
  service: name=mariadb state=started enabled=yes
- name: change password
  shell: mysql -uroot  -e " alter user root@'localhost' identified by '123456';"

[root@ansible ansible]# vim lamp.yml
[root@ansible ansible]# cat lamp.yml
- name: apache
  hosts: AP
  roles:
        - apache

- name: php
  hosts: AP
  roles:
        - php

- name: mysql
  hosts: mysql
  roles:
        - mysql