本篇文章开始给大家介绍Kubernetes的内容，听我朋友说现在10个人的团队都在研究项目上K8s了，可见其趋势和重要性，招聘岗位一搜，Linux云计算运维，百分之八九十都要求会K8s的，所以学好它至关重要，里面内容之多，逻辑之复杂，也不是别的工具能相比的，不多说了，开始今天的内容。
目录
K8s和Docker爱恨情仇
K8s的组件架构概述（手撕架构图）
K8s生产环境中部署的方式
一、Docker及系统环境部署
二、harbor部署
三、所有节点安装kubeadm，kubelet，kubectl
四、初始化master节点
五、配置所有worker节点加入镜像
六、配置自动补全功能
七、安装CNI插件并测试集群
资源管理
实战练习
一、推送游戏镜像至k8s集群
二、推送wordpress至k8s集群
K8s和Docker爱恨情仇
官网链接：https://kubernetes.io/zh-cn/
这个内容大家百度一搜都能搜到，我讲讲我知道的吧。
13年docker开源，国外好多大厂都在使用；
14年谷歌推出k8s，底层是对docker进行编排。同年docker推出了docker swarm、docker compose、dockr machine打算与k8s进行竞争，同年coreOS做了个类似docker的rkt，然后站队k8s，k8s不仅支持docker还支持rkt了，但是rkt用的人不多，可能是因为docker先入为主吧。所以说容器之间的争斗，docker是胜利的；
15年，各种厂商都开始开发容器，docker、rkt、pouch、lxc等等，docker inc公司带头开源容器提议，将镜像与运行时进行规范，让其他产品的镜像docker能用，docker的镜像其他产品也能使用；
16年，k8s提倡了CRI提议（Container Runtime Interface），只要满足CRI开发规范结构的容器管理工具，就可以在k8s集群上运行；
17年，docker-swarm市场占有率极低，被k8s打败！Containerd 最初是 Docker 引擎的低层运行管理器。在2017年3月被 CNCF （云原生计算基金会）接受，现如今 Containerd 已经成为行业标准的容器运行引擎；
18年，coreOS被RedHat收购；
19年，docker inc被Mirantis收购，Mirantis之前搞openstack的，现在搞云计算，说对docker-swarm维护2年，后期重心放在k8s，但是现在docker-swarm也能用，只是用的人很了，当时k8s在国内的也逐渐火起来了，k8s称为了云原生的实施标准，基本上能够称为云原生的代名词，就好像hadoop能够成为大数据的代名词。但是并不代表云原生就是k8s哈，云原生是在云计算环境中构建、部署和管理现代应用程序的软件方法，是一套技术体系和方法论，里面包含几百上千的软件，根本学不完，只能是用到啥学啥；
20年，k8s在1.21版本弃用docker-shim；
22年，k8s1.24版本诞生，docker不再是默认的运行时，而是使用containerd作为默认运行时；
23年，到今天，k8s已经更新到1.27版本了。
补充，rancher开发了轻量级的k8s，叫k3s；CNI是Container Netwrok Interface，类似CRI，只要是符合CNI开发规范接口的网络插件，均能在K8S运行，Flannel是开源的CNI插件，擅长网络通信，还有Calico，擅长网络策略与网络通信，两个相比，Flannel的通用性要更强一些。
K8s的组件架构概述（手撕架构图）
K8s有很多组件，这些组件一起构成K8s集群，了解组件前先了解两个身份，在之前控制面板和工作节点分别叫master和slave，后来因为某些原因，更名为controller plane和worker node。
在控制面板上有etcd负责存储（单独的组件，k8s拿来用的，也是golang开发的），api-server是集群访问入门，scheduler负责pod调度，有很多种调度算法，controller manager是控制器，监控集群状态并对其调整维护；
在工作节点上有kubelet负责pod的生命周期管理，pod在kubelet中负责存放容器，并监控当前节点的状态上报给api-server，还有kube-proxy负责pod的访问路由。
K8s中一切皆资源，就好比Linux中一切皆文件一样，按照上面组件概述，我们来画出架构图。
K8s生产环境中部署的方式
我计划准备四台Centos7，一台作为Master，两台作为worker，一台作为harbor，harbor单点即可，做https，之前文章写过，比较简单，不再赘述。
注意的是，K8s的集群部署前后需要做好快照，因为这个部署比其他软件要复杂的多，稍有不慎集群就起不来。
10.0.0.231 master23110.0.0.232 worker23210.0.0.233 worker23310.0.0.250 harbor.oldboyedu.com
根据上面的图部署组件，可以使用kubeadm部署方式我们去进行K8s的集群部署，先部署出docker等环境。
一、Docker及系统环境部署
docker节点和harbor都需要操作
1、准备系统环境
参考链接：https://kubernetes.io/zh/docs/setup/production-environment/tools/kubeadm/install-kubeadm/
2、关闭swap分区，也可以做系统的时候不去分配
# 临时关闭swapoff -a && sysctl -w vm.swappiness=0# 基于配置文件关闭sed -ri '/^[^#]*swap/s@^@#@' /etc/fstab3、确保各个节点的MAC地址product_uuid唯一
一般来讲，硬件设备会拥有唯一的地址，但是有些虚拟机的地址可能会重复。Kubernetes使用这些值来唯一确定集群中的节点。 如果这些值在每个节点上不唯一，可能会导致安装失败。
ifconfigeth0| grep ether | awk '{print $2}'cat /sys/class/dmi/id/product_uuid 4、检查网络节点是否互通
就是判断k8s集群的各个节点是否互通，可以使用ping测试
5、允许iptable检查桥接流量
cat <<EOF | tee /etc/modules-load.d/k8s.confbr_netfilterEOFcat <<EOF | tee /etc/sysctl.d/k8s.confnet.bridge.bridge-nf-call-ip6tables = 1net.bridge.bridge-nf-call-iptables = 1EOFsysctl --system6、检查端口是否被占用
ss -ntl查看即可
参考链接：端口和协议 | Kubernetes
7、检查docker环境
之前文章写过用脚本快速部署，可见【运维知识大神篇】运维人必学的Docker教程5（Namespace+Cgroup+OverlayFS原理详解+自定义镜像日志输出+Docker优劣势+Docker-compose安装+脚本自动部署）_我是koten的博客-CSDN博客
下面用到的压缩包我也提供下载链接了，放在文末。
yum -y install wgetunzip koten-docker-install.zipsh deploy_docker.sh installsource /usr/share/bash-completion/completions/docker# 注意docker配置文件，需要让docker的cgroup驱动与kubelet的cgroup驱动保持一致# 看下docker配置文件有没有指定为systemd，没有的话执行下下面操作> /etc/docker/daemon.jsoncat >> /etc/docker/daemon.json <<'EOF'{"exec-opts": ["native.cgroupdriver=systemd"],"registry-mirrors": ["https://tuv7rqqq.mirror.aliyuncs.com"]}EOFsystemctl restart docker8、禁用防火墙
systemctl disable --now firewalld9、禁用selinux
sed -i 's/^SELINUX=enforcing$/SELINUX=disabled/' /etc/selinux/config grep ^SELINUX= /etc/selinux/config10、配置hosts解析
cat >> /etc/hosts <<'EOF'10.0.0.231 master23110.0.0.232 worker23210.0.0.233 worker23310.0.0.250 harbor.koten.comEOFcat /etc/hosts11、所有节点创建自定义证书目录
mkdir -pv /etc/docker/certs.d/harbor.koten.com12、所有节点开启IP转发
#临时生效sysctl -w net.ipv4.ip_forward=1#永久生效echo net.ipv4.ip_forward=1 >> /etc/sysctl.confsysctl -p二、harbor部署
只需要harbor主机部署，之前也写过文章，可见【运维知识大神篇】运维人必学的Docker教程6（Docker-Compose使用详解+Linux特性管理+macvlan技术+大规模跨主机通信overlay+私有仓库harbor部署使用）_我是koten的博客-CSDN博客
1、解压harbor软件包
[root@Harbor250 ~]# tar xf koten-harbor.tar.gz -C /koten/softwares/2、安装harbor
[root@Harbor250 ~]# cd /koten/softwares/harbor/[root@Harbor250 harbor]# [root@Harbor250 harbor]# ./install.sh 3、将客户端证书推送至所有的k8s集群
[root@Harbor250 harbor]# scp certs/custom/client/* master231:/etc/docker/certs.d/harbor.koten.com/[root@Harbor250 harbor]# [root@Harbor250 harbor]# scp certs/custom/client/* worker232:/etc/docker/certs.d/harbor.koten.com/[root@Harbor250 harbor]# [root@Harbor250 harbor]# scp certs/custom/client/* worker233:/etc/docker/certs.d/harbor.koten.com/5、挑选任意k8s节点，测试harbor能否正常访问
[root@Master231 ~]# docker login -u admin -p 1 harbor.koten.com.....Login Succeeded[root@Master231 ~]# 三、所有节点安装kubeadm，kubelet，kubectl
参考链接：在 Linux 系统中安装并设置 kubectl | Kubernetes
需要在每台机器上安装以下的软件包：
kubeadm：用来初始化集群的指令。
kubelet：在集群中的每个节点上用来启动Pod和容器等。
kubectl：用来与集群通信的命令行工具。
kubeadm不能帮你安装或者管理kubelet或kubectl，所以你需要确保它们与通过kubeadm安装的控制面板(master)的版本相匹配。 如果不这样做，则存在发生版本偏差的风险，可能会导致一些预料之外的错误和问题。
然而，控制面板与kubelet间的相差一个次要版本不一致是支持的，但kubelet的版本不可以超过”API SERVER”的版本。 例如，1.7.0版本的kubelet可以完全兼容1.8.0版本的”API SERVER”，反之则不可以。
1、所有节点安装kubeadm，kubelet，kubectl，配置软件源
cat> /etc/yum.repos.d/kubernetes.repo <<EOF[kubernetes]name=Kubernetesbaseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/enabled=1gpgcheck=0repo_gpgcheck=0EOF2、查看kubeadm的版本，将来你要安装的k8s时请所有组件版本保持一致
yum -y list kubeadm --showduplicates | sort -r3、安装kubeadm，kubelet，kubectl软件包
yum -y install kubeadm-1.23.17-0 kubelet-1.23.17-0 kubectl-1.23.17-04、启动kubelet服务，若服务启动失败是正常现象，会自动重启，因为缺失配置文件，初始化集群后就恢复正常了，推荐设置开机自启动
systemctl enable --now kubeletsystemctl status kubelet四、初始化master节点
1、使用kubeadm初始化master节点
初始化后会自动下载镜像，记得记录初始化完毕的内容，信息里会显示在worker节点加入主节点的命令，就是带token和sha256的一行
注意，该命令只在一个节点执行，如果你想做多个master的话需要在一个节点执行后，其他节点加入进此集群。
kubeadm init --kubernetes-version=v1.23.17 --image-repository registry.aliyuncs.com/google_containers--pod-network-cidr=10.100.0.0/16 --service-cidr=10.200.0.0/16--service-dns-domain=koten.com相关参数说明
--kubernetes-version:指定K8S master组件的版本号。--image-repository:指定下载k8s master组件的镜像仓库地址。--pod-network-cidr:指定Pod的网段地址。--service-cidr:指定SVC的网段--service-dns-domain:指定service的域名。若不指定，默认为"cluster.local"。使用kubeadm初始化集群时，可能会出现如下的输出信息:[init] 使用初始化的K8S版本。[preflight] 主要是做安装K8S集群的前置工作，比如下载镜像，这个时间取决于你的网速。[certs] 生成证书文件，默认存储在"/etc/kubernetes/pki"目录哟。[kubeconfig]生成K8S集群的默认配置文件，默认存储在"/etc/kubernetes"目录哟。[kubelet-start] 启动kubelet，环境变量默认写入:"/var/lib/kubelet/kubeadm-flags.env"配置文件默认写入:"/var/lib/kubelet/config.yaml"[control-plane]使用静态的目录，默认的资源清单存放在:"/etc/kubernetes/manifests"。此过程会创建静态Pod，包括"kube-apiserver"，"kube-controller-manager"和"kube-scheduler"[etcd] 创建etcd的静态Pod，默认的资源清单存放在:""/etc/kubernetes/manifests"[wait-control-plane] 等待kubelet从资源清单目录"/etc/kubernetes/manifests"启动静态Pod。[apiclient]等待所有的master组件正常运行。[upload-config] 创建名为"kubeadm-config"的ConfigMap在"kube-system"名称空间中。[kubelet] 创建名为"kubelet-config-1.22"的ConfigMap在"kube-system"名称空间中，其中包含集群中kubelet的配置[upload-certs] 跳过此节点，详情请参考”--upload-certs"[mark-control-plane]标记控制面板，包括打标签和污点，目的是为了标记master节点。[bootstrap-token] 创建token口令，例如:"kbkgsa.fc97518diw8bdqid"。如下图所示，这个口令将来在加入集群节点时很有用，而且对于RBAC控制也很有用处哟。[kubelet-finalize] 更新kubelet的证书文件信息[addons] 添加附加组件，例如:"CoreDNS"和"kube-proxy”2、拷贝授权文件，用于管理k8s集群
[root@Master231 ~]# mkdir -p $HOME/.kube[root@Master231 ~]# sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config[root@Master231 ~]# sudo chown $(id -u):$(id -g) $HOME/.kube/config3、查看master组件信息
[root@Master231 ~]# kubectl get componentstatusesWarning: v1 ComponentStatus is deprecated in v1.19+NAME STATUSMESSAGE ERRORschedulerHealthy okcontroller-manager Healthy oketcd-0 Healthy {"health":"true","reason":""} [root@Master231 ~]# [root@Master231 ~]# kubectl get csWarning: v1 ComponentStatus is deprecated in v1.19+NAME STATUSMESSAGE ERRORcontroller-manager Healthy oketcd-0 Healthy {"health":"true","reason":""} schedulerHealthy ok[root@Master231 ~]# 五、配置所有worker节点加入镜像
1、加入集群
直接复制master初始化时给的提示信息那条命令即可，加入集群同样会下载镜像
[root@worker232 ~]# kubeadm join 10.0.0.231:6443 --token pljeu9.oynjqw13j1m7xyvb \--discovery-token-ca-cert-hash sha256:3e6dbfe55cbda949a1861fc223babf746c2742cf9069703bc163032e91d375ac[root@worker233 ~]# kubeadm join 10.0.0.231:6443 --token pljeu9.oynjqw13j1m7xyvb \--discovery-token-ca-cert-hash sha256:3e6dbfe55cbda949a1861fc223babf746c2742cf9069703bc163032e91d375ac# 如果是master节点加入集群 需执行以下操作# 在初始化的master节点执行下面命令获取keykubeadm init phase upload-certs--upload-certs# 在想加入的master节点执行下面命令kubeadm join 10.0.0.231:6443 --token pljeu9.oynjqw13j1m7xyvb \--discovery-token-ca-cert-hash sha256:3e6dbfe55cbda949a1861fc223babf746c2742cf9069703bc163032e91d375ac \--control-plane --certificate-key # 如果执行加入集群命令提示下面报错信息One or more conditions for hosting a new control plane instance is not satisfied# 需要在初始化节点操作kubectl -n kube-system edit cm kubeadm-config# 在线编辑进去后，添加下面信息，添加到kubernetesVersion的同级字段即可controlPlaneEndpoint: "10.0.0.231:6443" 2、master查看集群节点数量
[root@Master231 ~]# kubectl get no#kubectl get nodes也可以，是全称NAMESTATUS ROLESAGE VERSIONMaster231 NotReady control-plane,master 22m v1.23.17worker232 NotReady 6m15s v1.23.17worker233 NotReady 6m11s v1.23.17[root@Master231 ~]# 六、配置自动补全功能
[root@Master231 ~]# echo "source > ~/.bashrc && source ~/.bashrc [root@Master231 ~]# [root@Master231 ~]# kubectl alphaauth cordon diff getpatchrunversionannotate autoscalecp drainhelp plugin scalewaitapi-resourcescertificatecreate edit kustomizeport-forward setapi-versions cluster-info debugexec labelproxytaintapplycompletion delete explainlogs replacetopattach config describe expose optionsrolloutuncordon [root@Master231 ~]# 七、安装CNI插件并测试集群
每个节点都需要部署CNI插件，并不是只有Master需要有
1、下载插件的配置文件
[root@Master231 ~]# mkdir /manifests/cni -p[root@Master231 ~]# [root@Master231 ~]# wget https://github.com/flannel-io/flannel/releases/latest/download/kube-flannel.yml -O /manifests/cni/kube-flannel.yml2、修改配置文件
[root@Master231 ~]# vim /manifests/cni/kube-flannel.yml...将"Network": "10.244.0.0/16",修改为:"Network": "10.100.0.0/16",3、安装flannel插件
此命令会自动下载镜像
[root@Master231 ~]# kubectl apply -f /manifests/cni/kube-flannel.yml 4、验证网络插件是否部署成功
[root@Master231 ~]# kubectl -n kube-flannel get podsNAMEREADY STATUSRESTARTS AGEkube-flannel-ds-btrqw 1/1 Running 05m14skube-flannel-ds-krq6g 1/1 Running 05m14skube-flannel-ds-mh2q7 1/1 Running 05m14s[root@Master231 ~]# [root@Master231 ~]# kubectl get nodesNAMESTATUS ROLESAGE VERSIONMaster231 Readycontrol-plane,master 91m v1.23.17worker232 Ready 75m v1.23.17worker233 Ready 74m v1.23.17[root@Master231 ~]# [root@Master231 ~]# kubectl -n kube-flannel get pods -o wideNAMEREADY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESkube-flannel-ds-btrqw 1/1 Running 018m 10.0.0.231 Master231 kube-flannel-ds-krq6g 1/1 Running 018m 10.0.0.232 worker232 kube-flannel-ds-mh2q7 1/1 Running 018m 10.0.0.233 worker233 [root@Master231 ~]# 5、推送测试镜像到harbor
需要先在harbor上创建koten-linux的项目
[root@Master231 ~]# docker login -u admin -p 1 harbor.koten.com[root@Master231 ~]# [root@Master231 ~]# docker tag alpine harbor.koten.com/koten-linux/alpine[root@Master231 ~]# [root@Master231 ~]# docker push harbor.koten.com/koten-linux/alpineUsing default tag: latestThe push refers to repository [harbor.koten.com/koten-linux/alpine]8d3ac3489996: Pushed latest: digest: sha256:e7d88de73db3d3fd9b2d63aa7f447a10fd0220b7cbf39803c803f2af9ba256b3 size: 528[root@Master231 ~]# 6、启动Pod测试
编写资源清单，运行清单，会启动两台主机上的容器，通过pod名称可以在master节点上运行worker节点上容器里的命令，工作节点会在harbor拉取，不管本地有没有镜像，harbor拉取不下来就报错
[root@Master231 ~]# mkdir /manifests/pod -p[root@Master231 ~]# [root@Master231 ~]# cat /manifests/pod/01-flannel-test.yaml# 指定apiserver版本号apiVersion: v1# 指定资源的类型kind: Pod# 定义源数据信息metadata:# Pod的名称name: pod-c1# 用户定义资源期望运行的状态spec:# 指定在worker232的工作节点运行nodeName: worker232#注意此处不能填写IP，必须是在我们master上加入的工作节点才行# 在Pod内运行的容器定义containers:# 容器的名称- name: c1# 镜像名称image: harbor.koten.com/koten-linux/alpine:latest# 相当于Dockerfile的ENTRYPOINT指令，指定容器运行的命令command: ["tail","-f","/etc/hosts"]---apiVersion: v1kind: Podmetadata:name: pod-c2spec:nodeName: worker233containers:- name: c2image: harbor.koten.com/koten-linux/alpine:latestcommand: ["sleep","3600"][root@Master231 ~]# [root@Master231 ~]# kubectl apply -f /manifests/pod/01-flannel-test.yamlpod/pod-c1 createdpod/pod-c2 created[root@Master231 ~]# [root@Master231 ~]# kubectl get pods -o wideNAME READY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESpod-c1 1/1 Running 08s10.100.1.2 worker232 pod-c2 1/1 Running 08s10.100.2.2 worker233 [root@Master231 ~]# [root@Master231 ~]# kubectl exec pod-c1 -- ifconfigeth0Link encap:EthernetHWaddr 5A:A2:BF:B2:97:35inet addr:10.100.1.2Bcast:10.100.1.255Mask:255.255.255.0UP BROADCAST RUNNING MULTICASTMTU:1450Metric:1RX packets:15 errors:0 dropped:0 overruns:0 frame:0TX packets:6 errors:0 dropped:0 overruns:0 carrier:0collisions:0 txqueuelen:0 RX bytes:1222 (1.1 KiB)TX bytes:420 (420.0 B)loLink encap:Local Loopbackinet addr:127.0.0.1Mask:255.0.0.0UP LOOPBACK RUNNINGMTU:65536Metric:1RX packets:0 errors:0 dropped:0 overruns:0 frame:0TX packets:0 errors:0 dropped:0 overruns:0 carrier:0collisions:0 txqueuelen:1000 RX bytes:0 (0.0 B)TX bytes:0 (0.0 B)[root@Master231 ~]# [root@Master231 ~]# kubectl exec pod-c1 -- ping 10.100.2.2 -c 3PING 10.100.2.2 (10.100.2.2): 56 data bytes64 bytes from 10.100.2.2: seq=0 ttl=62 time=0.872 ms64 bytes from 10.100.2.2: seq=1 ttl=62 time=0.318 ms64 bytes from 10.100.2.2: seq=2 ttl=62 time=0.340 ms--- 10.100.2.2 ping statistics ---3 packets transmitted, 3 packets received, 0% packet lossround-trip min/avg/max = 0.318/0.510/0.872 ms[root@Master231 ~]# 资源管理
1、推送镜像到harbor仓库
先在harbor上创建koten-web的项目
[root@Master231 pod]# docker pull nginx:1.25.1-alpine[root@Master231 pod]# docker pull nginx:1.24.0-alpine[root@Master231 pod]# docker tag nginx:1.25.1-alpine harbor.koten.com/koten-web/nginx:1.25.1-alpine[root@Master231 pod]# docker push harbor.koten.com/koten-web/nginx:1.25.1-alpine[root@Master231 pod]# docker tag nginx:1.24.0-alpine harbor.koten.com/koten-web/nginx:1.24.0-alpine[root@Master231 pod]# docker push harbor.koten.com/koten-web/nginx:1.24.0-alpine2、查看所有的资源
[root@Master231 ~]# kubectl api-resources 3、编写资源清单
[root@Master231 pod]# cat 02-pods-nginx.yaml apiVersion: v1kind: Podmetadata:name: linux-webspec:containers:- name: webimage: harbor.koten.com/koten-web/nginx:1.24.0-alpine[root@Master231 pod]# 4、创建资源
create参数如果资源已经创建了会提示资源已存在
[root@Master231 pod]# kubectl create -f 02-pods-nginx.yaml pod/linux-web created[root@Master231 pod]# 5、查看IP地址并访问
通过curl -I可以查看返回协议头
[root@Master231 pod]# kubectl get pods -o wideNAMEREADY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESlinux-web 1/1 Running 082s 10.100.2.4 worker233 [root@Master231 pod]# [root@Master231 pod]# [root@Master231 pod]# curl -I10.100.2.4HTTP/1.1 200 OKServer: nginx/1.24.0Date: Wed, 14 Jun 2023 09:55:02 GMTContent-Type: text/htmlContent-Length: 615Last-Modified: Tue, 11 Apr 2023 17:21:57 GMTConnection: keep-aliveETag: "64359735-267"Accept-Ranges: bytes[root@Master231 pod]# 6、修改资源清单的配置文件
修改资源清单，通过apply参数提交，apply会修改配置文件内容，重新启动pod，再次访问可以看到镜像发生变化
[root@Master231 pod]# cat 02-pods-nginx.yaml apiVersion: v1kind: Podmetadata:name: linux-webspec:containers:- name: web# image: harbor.koten.com/koten-web/nginx:1.24.0-alpineimage: harbor.koten.com/koten-web/nginx:1.25.1-alpine[root@Master231 pod]# [root@Master231 pod]# kubectl apply -f 02-pods-nginx.yaml pod/linux-web configured[root@Master231 pod]# [root@Master231 pod]# kubectl get pods -o wideNAMEREADY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESlinux-web 1/1 Running 1 (4s ago) 4m46s 10.100.2.4 worker233 [root@Master231 pod]# [root@Master231 pod]# [root@Master231 pod]# curl -I10.100.2.4HTTP/1.1 200 OKServer: nginx/1.25.1Date: Wed, 14 Jun 2023 09:58:24 GMTContent-Type: text/htmlContent-Length: 615Last-Modified: Tue, 13 Jun 2023 17:34:28 GMTConnection: keep-aliveETag: "6488a8a4-267"Accept-Ranges: bytes[root@Master231 pod]# 7、删除pod资源
[root@Master231 pod]# kubectl get podsNAMEREADY STATUSRESTARTSAGElinux-web 1/1 Running 1 (2m39s ago) 7m21s[root@Master231 pod]# [root@Master231 pod]# [root@Master231 pod]# kubectl delete -f 02-pods-nginx.yaml pod "linux-web" deleted[root@Master231 pod]# [root@Master231 pod]# kubectl get podsNo resources found in default namespace.[root@Master231 pod]# [root@Master231 pod]# kubectl delete pods --all#慎用！离职小技巧！No resources found in default namespace.[root@Master231 pod]# 8、删除启动失败的pod
[root@Master231 pod]# kubectl get podsNAME READY STATUSRESTARTSAGEpod-c1 1/1 Running 0 6h18mpod-c2 1/1 Running 6 (11m ago) 6h18m[root@Master231 pod]# kubectl delete -f 01-flannel-test.yaml pod "pod-c1" deletedpod "pod-c2" deleted^C[root@Master231 pod]# kubectl get podsNAME READY STATUSRESTARTSAGEpod-c1 1/1 Terminating 0 6h18mpod-c2 1/1 Terminating 6 (11m ago) 6h18m[root@Master231 pod]# kubelet delete pods pod-c1[root@Master231 pod]# kubelet delete pods pod-c2[root@Master231 pod]# kubectl get podsNo resources found in default namespace.9、让windows访问pod
修改资源清单，加配置参数 hostNetwork：true 即可
注意，这种情况下，已经有了pod，再次apply资源清单会报错，所以需要先删除pod资源，再apply启动pod
[root@Master231 pod]# cat 02-pods-nginx.yamlapiVersion: v1kind: Podmetadata:name: linux86-webspec:hostNetwork: truecontainers:- name: webimage: harbor.koten.com/koten-web/nginx:1.25.1-alpine[root@Master231 pod]# [root@Master231 pod]# kubectl apply -f 02-pods-nginx.yaml pod/linux-web created[root@Master231 pod]# [root@Master231 pod]# kubectl get pods -o wideNAMEREADY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESlinux-web 1/1 Running 05s10.0.0.232 worker232 [root@Master231 pod]# [root@Master231 pod]# curl -I 10.0.0.232HTTP/1.1 200 OKServer: nginx/1.25.1Date: Wed, 14 Jun 2023 10:03:18 GMTContent-Type: text/htmlContent-Length: 615Last-Modified: Tue, 13 Jun 2023 17:34:28 GMTConnection: keep-aliveETag: "6488a8a4-267"Accept-Ranges: bytes[root@Master231 pod]# 
实战练习
一、推送游戏镜像至k8s集群
我之前在网上找的游戏镜像可以导入进去
1、导入镜像，打标签，上传镜像至私有harbor
[root@Master231 pod]# docker load -i games_v0.4.tar.gz[root@Master231 pod]# docker tag jasonyin2020/oldboyedu-games:v0.4 harbor.koten.com/koten-web/games:v1.0 [root@Master231 pod]# docker push harbor.koten.com/koten-web/games:v1.02、编写资源清单
使容器中的80端口映射到宿主机的8080上
[root@Master231 pod]# cat 03-pods-games.yaml apiVersion: v1kind: Podmetadata:name: gamesspec:containers:- name: gamesimage: harbor.koten.com/koten-web/games:v1.0ports:- protocol: TCPcontainerPort: 80name: httphostPort: 80803、运行资源清单，创建pod
master主节点可以通过curl通10.100.1.5，但是浏览器访问需要宿主机加端口
[root@Master231 pod]# kubectl apply -f 03-pods-games.yaml pod/games created[root@Master231 pod]# kubectl get pods -o wideNAMEREADY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESgames 1/1 Running 055s 10.100.1.5 worker232 4、浏览器通过10.0.0.232:8080访问
windows经过hosts解析后，还可以访问其他游戏，这个就看镜像里面nginx咋写的了
二、推送wordpress至k8s集群
也可以自己做镜像哈，我这边采取拉去官方镜像的办法
1、拉取官方镜像，打标签上传镜像至私有harbor
用koten-web项目即可，刚刚已经创建过了
[root@Master231 pod]# docker pull wordpress[root@Master231 pod]# docker tag wordpress:latest harbor.koten.com/koten-web/wordpress:v1.0[root@Master231 pod]# docker push harbor.koten.com/koten-web/wordpress:v1.02、编写资源清单
[root@Master231 pod]# cat 04-pods-wordpress.yamlapiVersion: v1kind: Podmetadata:name: wordpressspec:hostNetwork: truecontainers:- name: wordpressimage: harbor.koten.com/koten-web/wordpress:v1.03、运行资源清单，创建pod
[root@Master231 pod]# kubectl apply -f 04-pods-wordpress.yaml pod/wordpress created[root@Master231 pod]# kubectl get pods -o wideNAMEREADY STATUSRESTARTS AGE IP NODENOMINATED NODE READINESS GATESwordpress 1/1 Running 019s 10.0.0.232 worker232 4、通过10.0.0.232访问，但是部署发现，我们不知道mysql账号密码，进wordpress容器后发现mysql命令也执行不了，所以我们还需要部署下mysql
5、拉去mysql镜像，打标签，推送镜像到本地仓库
本地仓库先创建koten-db项目
[root@Master231 pod]# docker pull mysql:5.7[root@Master231 pod]# docker tag mysql:5.7 harbor.koten.com/koten-db/mysql:5.7[root@Master231 pod]# docker push harbor.koten.com/koten-db/mysql:5.76、编写资源清单
[root@Master231 pod]# cat 04-pods-mysql.yamlapiVersion: v1kind: Podmetadata:name: wordpress-dbspec:containers: - name: dbimage: harbor.koten.com/koten-db/mysql:5.7# 向容器传递环境变量env:# 变量的名称- name: MYSQL_ALLOW_EMPTY_PASSWORD# 指定变量的值value: "yes"- name: MYSQL_DATABASEvalue: "wordpress"- name: MYSQL_USERvalue: "admin"- name: MYSQL_PASSWORDvalue: "123"7、测试mysql创建资源
[root@Master231 pod]# kubectl apply -f 04-pods-mysql.yaml pod/wordpress-db created8、查看资源并验证Pod，发现里面确实创建了数据库与用户
[root@Master231 pod]# kubectl get podsNAME READY STATUSRESTARTS AGEwordpress-db 1/1 Running 038s[root@Master231 pod]# kubectl exec -it wordpress-db -- mysqlWelcome to the MySQL monitor.Commands end with ; or \g.Your MySQL connection id is 2Server version: 5.7.36 MySQL Community Server (GPL)Copyright (c) 2000, 2021, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or itsaffiliates. Other names may be trademarks of their respectiveowners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql> show databases;+--------------------+| Database |+--------------------+| information_schema || mysql|| performance_schema || sys|| wordpress|+--------------------+5 rows in set (0.00 sec)mysql> SELECT user,host FROM mysql.user;+---------------+-----------+| user| host|+---------------+-----------+| admin | % || root| % || mysql.session | localhost || mysql.sys | localhost || root| localhost |+---------------+-----------+5 rows in set (0.00 sec)mysql> exitBye[root@Master231 pod]# 9、将mysql资源清单合并进wordpress资源清单，并在wordpress资源清单调用参数
[root@Master231 pod]# cat 04-pods-wordpress.yamlapiVersion: v1kind: Podmetadata:name: wordpressspec:hostNetwork: truecontainers: - name: dbimage: harbor.koten.com/koten-db/mysql:5.7# 向容器传递环境变量env:# 变量的名称- name: MYSQL_ALLOW_EMPTY_PASSWORD# 指定变量的值value: "yes"- name: MYSQL_DATABASEvalue: "wordpress"- name: MYSQL_USERvalue: "admin"- name: MYSQL_PASSWORDvalue: "123"- name: wordpressimage: harbor.koten.com/koten-web/wordpress:v1.0env:- name: WORDPRESS_DB_HOST# 指定变量的值value: "127.0.0.1"- name: WORDPRESS_DB_NAMEvalue: "wordpress"- name: WORDPRESS_DB_USERvalue: "admin"- name: WORDPRESS_DB_PASSWORDvalue: "123"10、运行资源清单
之前READY是1，现在变成2了
[root@Master231 pod]# kubectl apply -f 04-pods-wordpress.yaml pod/wordpress created[root@Master231 pod]# kubectl get pods NAMEREADY STATUSRESTARTS AGEwordpress 2/2 Running 05s11、浏览器访问，部署wordpress业务
这篇文章真是太难了，都剩两个实战项目就写完了，我改了张图片，内容突然回滚到只剩下5000字了，我真是服了！！！
koten-docker-install.zip下载链接：链接：https://pan.baidu.com/s/11HEyYKI3KKcl4BA-w6VOMQ?pwd=ufmi
我是koten，10年运维经验，持续分享运维干货，感谢大家的阅读和关注！