目录

方式一:nfs挂载到宿主机目录

方法二：在机器上搭建nfs，其余使用就可以手动静态创建所要的pv和pvc，或创建pvc动态创建pv

修改kube-apiserver.yaml ,增加 - --feature-gates=RemoveSelfLink=false

创建RBAC授权

两种方式：

方式一:nfs挂载到宿主机目录

优点: 简单易用，无需额外支持
缺点：依赖宿主机磁盘容量，pod与宿主机存在强耦合，不利于管理。需要指定标签,当pod部署多个副本并分配到不同host时，数据不共享；当要驱赶pod时，数据不同步；当node故障时，数据易丢失；

1.node打标签

kubectl label nodes master25 monitor=nfsserver

2.all.yaml

apiVersion: apps/v1
kind: Deployment
metadata:name: nfs-busybox
spec:replicas: 2template:metadata:labels:name: nfs-busyboxspec:containers:- name: busyboximage: busyboxcommand:- sh- -c- 'while true; do date > /mnt/index.html; hostname >> /mnt/index.html; sleep $(($RANDOM % 5 + 5)); done'imagePullPolicy: IfNotPresentvolumeMounts:# name must match the volume name below- name: nfsmountPath: "/mnt"volumes:- name: nfspersistentVolumeClaim:claimName: nfs

---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:name: nfs
spec:accessModes:- ReadWriteManystorageClassName: ""resources:requests:storage: 1Gi

---
apiVersion: v1
kind: PersistentVolume
metadata:name: nfs
spec:capacity:storage: 1GiaccessModes:- ReadWriteManynfs:# FIXME: use the right IP# get the server ip from the kube serviceserver: 10.107.89.35#server: nfs-server.default.svc.cluster.localpath: "/nfsdemo/"

---
apiVersion: v1
kind: Service
metadata:name: nfs-server
spec:ports:- name: nfsport: 2049targetPort: 2049protocol: TCP- name: mountdport: 20048- name: rpcbindport: 111selector:name: nfs-server

---
apiVersion: apps/v1
kind: Deployment
metadata:name: nfs-servernamespace: default
spec:replicas: 1template:metadata:labels:name: nfs-serverspec:nodeSelector: label: nfsservercontainers:- name: nfs-serverimage: googlecontainer/volume-nfs:0.8ports:- name: nfscontainerPort: 2049- name: mountdcontainerPort: 20048- name: rpcbindcontainerPort: 111securityContext:privileged: truevolumeMounts:- mountPath: /exportsname: nfs-foldervolumes:- name: nfs-folderhostPath:path: "/home/dkongjian/nfs-share"

方法二：在机器上搭建nfs，其余使用就可以手动静态创建所要的pv和pvc，或创建pvc动态创建pv

优点:可做高可用配置,预防单点故障

缺点:切记一定要配置成开机自启动,

架构是:搭建StorageClass+NFS

1.创建一个可用的NFS Serve

2.创建Service Account.这是用来管控NFS provisioner在k8s集群中运行的权限

3.创建StorageClass.负责建立PVC并调用NFS provisioner进行预定的工作,并让PV与PVC建立管理

4.创建NFS provisioner.有两个功能,一个是在NFS共享目录下创建挂载点(volume),另一个则是建了PV并将PV与NFS的挂载点建立关联

1.安装nfs-server

sudo apt install nfs-kernel-server

其余node安装

apt-get install nfs-common

2.创建文件系统

sudo mkdir -p /data/nfsboot/

sudo chmod 777 /data/nfsboot/

3.配置文件系统

vim /etc/exports

/data/nfsboot/ *(rw,sync,no_root_squash)

重启服务

sudo service nfs-kernel-server  restart

service nfs-kernel-server  enable

showmount测试

root@master24:/data/nfsboot# showmount -e 127.0.0.1

Export list for 127.0.0.1:

/data/nfsboot *

修改kube-apiserver.yaml ,增加 - --feature-gates=RemoveSelfLink=false

原因是:

创建pvc后状态一直是pending,因为原来是1.20版本（我的是1.22.4）默认禁止使用selfLink。

创建RBAC授权

rbac.yaml:      #唯一需要修改的地方只有namespace,根据实际情况定义

wget https://raw.githubusercontent.com/kubernetes-incubator/external-storage/master/nfs-client/deploy/rbac.yaml

# kubectl apply -f rbac.yaml

3.创建NFS资源的StorageClass

class.yaml

apiVersion: storage.k8s.io/v1

kind: StorageClass

metadata:

  name: managed-nfs-storage

provisioner: fuseim.pri/ifs # or choose another name, must match deployment's env PROVISIONER_NAME'

parameters:

  archiveOnDelete: "false"

4.创建nfs-client-provisioner自动配置程序，以便自动创建持久卷(PV)

  • 自动创建的 PV 以 ${namespace}-${pvcName}-${pvName} 的命名格式创建在 NFS 上
  • 当这个 PV 被回收后会以 archieved-${namespace}-${pvcName}-${pvName} 的命名格式存在 NFS 服务器上
deployment.yaml

apiVersion: apps/v1

kind: Deployment

metadata:

  name: nfs-client-provisioner

  labels:

    app: nfs-client-provisioner

  # replace with namespace where provisioner is deployed

  namespace: default

spec:

  replicas: 1

  strategy:

    type: Recreate

  selector:

    matchLabels:

      app: nfs-client-provisioner

  template:

    metadata:

      labels:

        app: nfs-client-provisioner

    spec:

      serviceAccountName: nfs-client-provisioner

      containers:

        - name: nfs-client-provisioner

          image: quay.io/external_storage/nfs-client-provisioner:latest

          volumeMounts:

            - name: nfs-client-root

              mountPath: /persistentvolumes

          env:

            - name: PROVISIONER_NAME

              value: fuseim.pri/ifs

            - name: NFS_SERVER

              value: 192.168.50.24

            - name: NFS_PATH

              value: /data/nfsboot

      volumes:

        - name: nfs-client-root

          nfs:

            server: 192.168.50.24

            path: /data/nfsboot

5.测试

# cat statefulset-nfs.yaml

apiVersion: v1

kind: Service

metadata:

  name: nginx

  labels:

    app: nginx

spec:

  ports:

  - port: 80

    name: web

  clusterIP: None

  selector:

    app: nginx

---

apiVersion: apps/v1

kind: StatefulSet

metadata:

  name: nfs-web

spec:

  serviceName: "nginx"

  replicas: 3

  selector:

    matchLabels:

      app: nfs-web # has to match .spec.template.metadata.labels

  template:

    metadata:

      labels:

        app: nfs-web

    spec:

      terminationGracePeriodSeconds: 10

      containers:

      - name: nginx

        image: nginx:1.7.9

        ports:

        - containerPort: 80

          name: web

        volumeMounts:

        - name: www

          mountPath: /usr/share/nginx/html

  volumeClaimTemplates:

  - metadata:

      name: www

      annotations:

        volume.beta.kubernetes.io/storage-class: managed-nfs-storage

    spec:

      accessModes: [ "ReadWriteOnce" ]

      resources:

        requests:

          storage: 1Gi

查看 Pod/PV/PVC

root@master24:/opt/yaml/nfs#  kubectl get pods

NAME                                      READY   STATUS    RESTARTS   AGE

nfs-client-provisioner-5cd65b7586-tbb7l   1/1     Running   0          24m

nfs-web-0                                 1/1     Running   0          10m

nfs-web-1                                 1/1     Running   0          9m41s

nfs-web-2                                 1/1     Running   0          8m49s

root@master24:/opt/yaml/nfs# kubectl get pv

NAME                                       CAPACITY   ACCESS MODES   RECLAIM POLICY   STATUS   CLAIM                   STORAGECLASS          REASON   AGE

pvc-c67257ab-3694-47b5-afe1-d1cf5ebe098d   1Gi        RWO            Delete           Bound    default/www-nfs-web-1   managed-nfs-storage            9m49s

pvc-e9ecc66a-f4db-4bfb-a66f-56a13a969e1a   1Gi        RWO            Delete           Bound    default/www-nfs-web-0   managed-nfs-storage            11m

pvc-ea6fb9d2-c621-4d03-97f7-d54c570a7e22   1Gi        RWO            Delete           Bound    default/www-nfs-web-2   managed-nfs-storage            8m56s

root@master24:/opt/yaml/nfs# kubectl get pvc

NAME            STATUS   VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS          AGE

www-nfs-web-0   Bound    pvc-e9ecc66a-f4db-4bfb-a66f-56a13a969e1a   1Gi        RWO            managed-nfs-storage   16m

www-nfs-web-1   Bound    pvc-c67257ab-3694-47b5-afe1-d1cf5ebe098d   1Gi        RWO            managed-nfs-storage   9m53s

www-nfs-web-2   Bound    pvc-ea6fb9d2-c621-4d03-97f7-d54c570a7e22   1Gi        RWO            managed-nfs-storage   9m1s

查看 nfs server 目录中信息，同时各子目录中内容为空

root@master24:/opt/yaml/nfs#  ls -l  /data/nfsboot/

total 20

drwxrwxrwx 2 root root 4096 Nov 29 13:59 default-www-nfs-web-0-pvc-e9ecc66a-f4db-4bfb-a66f-56a13a969e1a

drwxrwxrwx 2 root root 4096 Nov 29 14:01 default-www-nfs-web-1-pvc-c67257ab-3694-47b5-afe1-d1cf5ebe098d

drwxrwxrwx 2 root root 4096 Nov 29 14:02 default-www-nfs-web-2-pvc-ea6fb9d2-c621-4d03-97f7-d54c570a7e22

drwxr-xr-x 2 root root 4096 Nov 27 15:08 test

-rw-r--r-- 1 root root    6 Nov 26 17:47 test.txt

k8s-2:nfs搭建相关推荐

  1. Linux下的NFS搭建配置

    Linux下的NFS搭建配置 一.NFS介绍 1.NFS简介 2.NFS特点 二.环境介绍 三.服务端配置 1.创建共享目录 2.检查NFS包是否安装 3.安装nfs相关包 4.编辑配置文件 5.重启 ...

  2. K8S集群搭建：利用kubeadm构建K8S集群

    master主服务器配置 #--kubernetes-version=v1.14.1指定版本 #--pod-network-cidr=10.244.0.0/16 指定虚拟IP的范围(以10.244开头 ...

  3. 2019最新k8s集群搭建教程 (centos k8s 搭建)

    2019-k8s-centos 2019最新k8s集群搭建教程 (centos k8s 搭建) 网上全是要么过时的,要么残缺的,大多数都是2016年,2017年的文档,照着尝试了N次,各种卸了重装,最 ...

  4. 【云原生之k8s】kubeadm搭建k8s集群

    [云原生之k8s]kubeadm搭建k8s集群 前言 一.集群介绍 (1)集群搭建方法 (2)集群架构 二.集群部署 (1)环境部署 ①所有节点,关闭防火墙规则,关闭selinux,关闭swap交换 ...

  5. NFS搭建错误处理：exportfs:No options for /home/source/*(rw,sync,no_root_squash):suggest(sync) to avoid warn

    一,NFS搭建步骤: 1.安装Ubuntu NFS服务:            ---> apt-get install nfs-kernel-server                 • ...

  6. 【云原生-K8s】kubeadm搭建安装k8s集群v1.25版本完整教程【docker、网络插件calico、中间层cri-docker】

    前言 基础描述 从 k8s 1.24开始,dockershim已经从kubelet中移除,但因为历史问题docker却不支持kubernetes主推的CRI(容器运行时接口)标准,所以docker不能 ...

  7. 记一次在K8s集群搭建的MySQL主从无法正常启动之数据迁移恢复实践

    本章目录:记一次在K8s集群搭建的MySQL主从无法正常启动之数据迁移恢复实践 描述:在K8s集群中里利用bitnami提供的mysql:5.7.32-debian-10-r61镜像并利用helm进行 ...

  8. k8s集群搭建-1mater2node

    k8s安装以及安装过程中遇到的问题 背景:因为公司需要针对operator进行开发,Operator 是 Kubernetes API 的客户端,充当自定义资源的的控制器.自己之前没有搞过k8s,所以 ...

  9. 本地k8s集群搭建保姆级教程(4)-安装k8s集群Dashboard

    安装k8s集群管理UI 1 Dashboard安装 1.1 参考文档 Dashboard 是基于网页的 Kubernetes 用户界面. 你可以使用 Dashboard 将容器应用部署到 Kubern ...

  10. K8S创建NFS存储

    K8S创建NFS存储 环境: 两台服务器: node1:10.0.1.11 node2:10.0.1.12 在node1机器执行 一.安装NFS # yum -y install nfs-utils ...

最新文章

  1. Confluence 6 Home 和其他重要的目录
  2. NSWindow添加NSViewController
  3. 视频|结构光3D相机光机核心技术及3D成像性能分析
  4. 新生代Eden与两个Survivor区的解释
  5. 二次开发基于无线网卡的扫描
  6. PIL图像处理开发极简教程
  7. 纷享销客完成新一轮数亿元融资，持续领跑中国CRM产业发展
  8. 事务的隔离级别（Transaction isolation levels）5
  9. 基于JAVA+SpringMVC+MYSQL的勤工助学管理系统
  10. 机器学习必备的数学基础有哪些？
  11. 系统学习深度学习（四十二）--从AE到VAE
  12. 20191121每日一句
  13. android推箱子实验报告,android开发——推箱子小游戏（前序）
  14. 小数在内存中是如何存储的
  15. 关于搭建简易广域网私人通信程序（python）一步到位！
  16. 十个常见常用的麦克劳林公式
  17. java 下载文件的文件名乱码_JAVA 文件下载时的文件名乱码解决
  18. python数据分析算法调用_python数据分析算法（决策树2）CART算法
  19. (教程) 个人微信公众号做查券机器人怎么关联优惠券小程序？
  20. linux软raid mdadm命令详讲

热门文章

  1. 计算机主机通常包不包括硬盘,计算机主机通常包括
  2. 数据治理：企业数据治理蓝图
  3. 量化交易——传统技术分析相对强弱指数RSI的原理及实现
  4. 计算机考研考线代嘛,计算机考研大纲
  5. 2021.5.22 2022蓝桥杯练习赛3
  6. C++ 菱形字母金字塔
  7. 从典型软件来看 SaaS 的私有化部署方式
  8. 1.6 受控电源(非独立源)
  9. C++编程求三角形角平分线与对边的交点坐标
  10. 【网络自定向下学习】——TCP报文段的详细解析