k8s常用命令

2022-10-26

k8s 安装

安装k8s推荐使用kuboard的一键安装脚本：https://kuboard.cn/install/install-k8s.html 根据文档指导进行安装。

备注：如果使用了harbor私服，那么往集群中添加了新的机器后，记得配置新机器的ca证书

StatefulSet 可以使用 Headless Service 来控制其 Pod 所在的域。该域（domain）的格式为 $(service name).$(namespace).svc.cluster.local，其中 “cluster.local” 是集群的域。
StatefulSet 中 Pod 的 hostname 格式为 $(StatefulSet name)-$(Pod 序号)
StatefulSet 中每一个 Pod 将被分配一个 dnsName，格式为： $(podName).$(所在域名)。如：inner-nginx-0.inner-nginx.inner-server.svc.cluster.local

手动安装注意事项

如果想要手动安装k8s，可以参考kuboard的安装脚本，按顺序手动执行脚本中的命令即可。
如果安装时没有参考kuboard的安装脚本，记得安装之前一定要修改 /etc/sysctl.conf 否则无法正常的进行集群内通信，ingress也会不停的启动失败。修改方式如下（从kuboard的安装脚本中摘抄的）：

# 如果有配置，则修改
sed -i "s#^net.ipv4.ip_forward.*#net.ipv4.ip_forward=1#g"  /etc/sysctl.conf
sed -i "s#^net.bridge.bridge-nf-call-ip6tables.*#net.bridge.bridge-nf-call-ip6tables=1#g"  /etc/sysctl.conf
sed -i "s#^net.bridge.bridge-nf-call-iptables.*#net.bridge.bridge-nf-call-iptables=1#g"  /etc/sysctl.conf
sed -i "s#^net.ipv6.conf.all.disable_ipv6.*#net.ipv6.conf.all.disable_ipv6=1#g"  /etc/sysctl.conf
sed -i "s#^net.ipv6.conf.default.disable_ipv6.*#net.ipv6.conf.default.disable_ipv6=1#g"  /etc/sysctl.conf
sed -i "s#^net.ipv6.conf.lo.disable_ipv6.*#net.ipv6.conf.lo.disable_ipv6=1#g"  /etc/sysctl.conf
sed -i "s#^net.ipv6.conf.all.forwarding.*#net.ipv6.conf.all.forwarding=1#g"  /etc/sysctl.conf
# 可能没有，追加
echo "net.ipv4.ip_forward = 1" >> /etc/sysctl.conf
echo "net.bridge.bridge-nf-call-ip6tables = 1" >> /etc/sysctl.conf
echo "net.bridge.bridge-nf-call-iptables = 1" >> /etc/sysctl.conf
echo "net.ipv6.conf.all.disable_ipv6 = 1" >> /etc/sysctl.conf
echo "net.ipv6.conf.default.disable_ipv6 = 1" >> /etc/sysctl.conf
echo "net.ipv6.conf.lo.disable_ipv6 = 1" >> /etc/sysctl.conf
echo "net.ipv6.conf.all.forwarding = 1"  >> /etc/sysctl.conf

多网卡注意事项

如果机器有多张网卡，calico网络注册时有可能会注册到其它网卡。导致 calico-node 创建失败，此时可以用环境变量指定网卡。方式如下：
编辑calico-node 在工作容器calico-node中添加环境变量IP_AUTODETECTION_METHOD=interface=enp.*

centos 一键安装docker和K8S
访问 https://kuboard.cn/install/install-k8s.html#%E5%AE%89%E8%A3%85docker%E5%8F%8Akubelet 确认并勾选7个复选框后，会出现一键安装自动脚步。复制并执行即可。

centos 单独安装k8s
复制下面的命令，从阿里镜像源安装K8S

cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
setenforce 0
yum install -y kubelet kubeadm kubectl
systemctl enable kubelet && systemctl start kubelet

其它系统安装k8s可参考：https://developer.aliyun.com/mirror/kubernetes?spm=a2c6h.13651102.0.0.3e221b11yZ0SdT

k8s 常用命令

#设置节点为不可调度
kubectl cordon nodeName

#取消节点不可调度
kubectl uncordon nodeName

#驱逐节点的pod
kubectl drain --ignore-daemonsets --delete-local-data nodeName

#删除节点
kubectl delete node node07-ingress

#查看集群事件
kubectl get events

#查看node或pod的详情
kubectl describe  node node名
kubectl describe  pod pod名

#查看所有pod[单个pod]详细信息，也就是可以查看pod具体运行在哪个节点上
kubectl get pods [pod名] -o wide

#根据pod名查看容器的日志
kubectl logs -f --tail=50 pod名
#根据deploy名查看容器的日志
kubectl logs -f --tail=50 deploy/deploy名
#根据service名查看容器的日志
kubectl logs -f --tail=50 svc/serivce名

#根据pod名进入容器内部
kubectl exec -it pod名 /bin/bash
#根据deploy名进入该部署的首个容器内部
kubectl exec -it deploy/deploy名 /bin/bash
#根据service名进入该服务的首个容器内部
kubectl exec -it svc/serivce名 /bin/bash

# 查看所有的资源信息
kubectl get all
# 查看pod列表
kubectl get pod
# 显示pod节点的标签信息
kubectl get pod --show-labels
# 根据指定标签匹配到具体的pod
kubectl get pods -l app=example
# 查看node节点列表
kubectl get node 
# 显示node节点的标签信息
kubectl get node --show-labels
# 查看pod详细信息，也就是可以查看pod具体运行在哪个节点上
kubectl get pod -o wide
# 查看服务的详细信息，显示了服务名称，类型，集群ip，端口，时间等信息
kubectl get svc
[root@master ~]# kubectl get svc
NAME            TYPE        CLUSTER-IP     EXTERNAL-IP   PORT(S)          AGE
go-service      NodePort    10.10.10.247   &lt;none&gt;        8089:33702/TCP   29m
java-service    NodePort    10.10.10.248   &lt;none&gt;        8082:32823/TCP   5h17m
kubernetes      ClusterIP   10.10.10.1     &lt;none&gt;        443/TCP          5d16h
nginx-service   NodePort    10.10.10.146   &lt;none&gt;        88:34823/TCP     2d19h
# 查看命名空间
kubectl get ns
# 查看所有pod所属的命名空间
kubectl get pod --all-namespaces
# 查看所有pod所属的命名空间并且查看都在哪些节点上运行
kubectl get pod --all-namespaces  -o wide
# 查看目前所有的replica set，显示了所有的pod的副本数，以及他们的可用数量以及状态等信息
kubectl get rs
[root@master ~]# kubectl get rs
NAME                          DESIRED   CURRENT   READY   AGE
go-deployment-58c76f7d5c      1         1         1       32m
java-deployment-76889f56c5    1         1         1       5h21m
nginx-deployment-58d6d6ccb8   3         3         3       2d19h
# 查看目前所有的deployment
kubectl get deployment
[root@master ~]# kubectl get deployment
NAME               READY   UP-TO-DATE   AVAILABLE   AGE
go-deployment      1/1     1            1           34m
java-deployment    1/1     1            1           5h23m
nginx-deployment   3/3     3            3           2d19h
# 查看已经部署了的所有应用，可以看到容器，以及容器所用的镜像，标签等信息
 kubectl get deploy -o wide
[root@master bin]# kubectl get deploy -o wide     
NAME    READY   UP-TO-DATE   AVAILABLE   AGE   CONTAINERS   IMAGES       SELECTOR
nginx   3/3     3            3           16m   nginx        nginx:1.10   app=example

一些常用命令可通过help查看，如 kubectl cp --help 可查看cp命令的使用方法。另外还可参考该博客: https://www.jianshu.com/p/fa2d827ac725

k8s管理常用命令：https://kuboard.cn/learning/k8s-basics/explore.html#%E5%AE%9E%E6%88%98-%E6%95%85%E9%9A%9C%E6%8E%92%E9%99%A4

k8s对象管理常用命令：https://kuboard.cn/learning/k8s-intermediate/obj/manage.html#%E7%AE%A1%E7%90%86%E6%96%B9%E5%BC%8F

容器组_Debug初始化容器: https://kuboard.cn/learning/k8s-intermediate/workload/init-debug.html#%E6%A3%80%E6%9F%A5%E5%88%9D%E5%A7%8B%E5%8C%96%E5%AE%B9%E5%99%A8%E7%9A%84%E7%8A%B6%E6%80%81

service selector应与Pod的标签匹配
service的 targetPort 应与Pod中容器的 containerPort 匹配
service的端口可以是任何数字。多个服务可以使用同一端口，因为它们分配了不同的IP地址。
ingress的 servicePort 应该匹配 service 的 port
serivce的名称应与 ingress 中的 serviceName 字段匹配

获得节点join命令(添加新节点用)：

1 2	# 只在 master 节点执行 kubeadm token create --print-join-command

切换命名空间

# 查看所有命名空间
kubectl get namespaces
# 切换
kubectl config set-context --current --namespace=<您的名称空间>
# 验证结果
kubectl config view --minify | grep namespace:
```  

# 删除容器组（删除后会重新创建）

kubectl delete pod 容器组名称 -n 命名空间

1	# 强制删除特定pods

kubectl delete pods pod名称 -n 命名空间 –grace-period=0 –force

1	# 删除集群中失败的pods

kubectl get pods –field-selector=status.phase=Failed –all-namespaces |awk ‘{ system(“kubectl delete pod “$2” -n “$1) }’

1	# 强制删除Terminating状态的pods

kubectl get pods –all-namespaces |grep Terminating|awk ‘{ system(“kubectl delete pod “$2” -n “$1” –grace-period=0 –force”) }’

1 2	# 删除deployment

kubectl delete deployment deployment名称 -n 命名空间


# 更新应用程序

- 方法1：使用VI或其他编辑器，编辑已存在的yaml文件，使用apply命令更新

kubectl apply -f nginx-deployment.yaml

1	- 方法2：使用 edit 命令更新

更新 inner-harbor 命名空间的名称为 harbor-harbor-ingress 的 ingress（像使用vi命令一样编辑保存即可）

kubectl edit ingress harbor-harbor-ingress -n inner-harbor

- 其它： 使用 set 命令更新（没用过，挺麻烦想用的话百度吧）；或者使用图形管理界面。

# ingress配置websocket
为ingress添加注解`nginx.org/websocket-services`,并将该注解的值设置为当前部署的服务名（service name）。

# ingress配置上传文件大小限制
为ingress添加注解`nginx.org/client-max-body-size`,如`10m`限制为10M大小，若值设置为`0`则代表不限制大小。

  

kuboard调试：https://kuboard.cn/learning/k8s-advanced/ts/application.html#debugging-pods


# k8s 几种service的区别

## 不创建service
不会分配集群service IP，也不会解析集群域名。只能通过分配的pod IP地址访问。

## Headless
不会分配集群service IP，但是可以解析集群域名，域名会被解析到所有的pod ip。可以通过集群域名和pod ip进行访问。

## ClusterIP
会分配集群service IP，也可以解析集群域名，域名会解析到service ip，通过service ip 负载均衡到每一个pod。可以通过service ip、集群域名、pod ip 进行访问。

## NodePort
具备 ClusterIP 模式的所有特性，并且会将 service ip 的端口映射到节点宿主机。除了具备 ClusterIP 的所有访问方式，还可通过节点宿主机的端口访问。



# workDir
Dockerfile中的WORKDIR指令用于指定容器的一个目录， 容器启动时执行的命令会在该目录下执行，相当于设置容器的工作目录了。

# command和args注意事项
在kuboard中添加command自定义启动命令或args自定义参数时，如果命令很长有多个参数，不能直接把全部的整行命令复制粘贴过去，要每个参数都添加一项。如：`java -jar /app.jar` 要添加三项，分别为 `java` `-jar` `/app.jar`才可以。（或者直接编辑yaml配置文件）**命令在实际执行时，多个参数之间是用空格隔开的，用空格隔开就代表多个参数。每个参数都要点加号，添加一项。**

（完）