NFS存儲服務
1、什么是NFS？
全稱 network file system 網絡文件系統
通過網絡存儲和組織文件的一種方法或機制。
什么是文件系統？
2、為什么要用共享存儲？
前端所有的應用服務器接收到用戶上傳的圖片、文件、視頻，都會統一
的放到后端的存儲上。
為什么要共享？所有節點服務器都需要將內容存到存儲上，取的統一來取。
3、共享存儲的種類
單點存儲系統就是NFS，中小型企業，阿里云服務的NAS服務，OSS對象存儲。
NFS性能不太高。
大型企業會用分布式存儲FastDFS、Ceph、GlsterFS、Mfs
大型存儲廠商：EMC、Netapp 幾十萬。
藝龍旅行網 存儲用的EMC 傳統企業。
硬件存儲：傳統企業：穩定、2臺 雙主機頭 幾十塊硬盤 RAID10。
BAT 曾經用硬件，超貴、
阿里云 去IOE Ibm Orace EMC
4、NFS工作原理
NFS網絡文件系統
啟動NFS服務，而且還有啟動很多端口。
NFS功能，需要很多服務。每個服務都有端口，而且經常變化。
如何讓客戶端找到這些端口呢？就需要一個經紀人（rpc服務）
NFS服務：
1、NFS服務（有很多進程和端口），把自己的端口告訴RPC。
2、RPC服務（對外固定端口111）
客戶端請求NFS服務，先找RPC 111，查到NFS的端口，發給客戶。
原理見圖：
5、安裝
服務器端和客戶端都要安裝：
yum install nfs-utils rpcbind -y
rpm -qa nfs-utils rpcbind
[root@nfs01 ~]# rpm -qa nfs-utils rpcbind
nfs-utils-1.3.0-0.61.el7.x86_64
rpcbind-0.2.0-47.el7.x86_64
啟動RPC
[root@nfs01 ~]# systemctl start rpcbind.service
[root@nfs01 ~]# systemctl enable rpcbind.service
看看有沒有注冊的端口
[root@nfs01 ~]# rpcinfo -p 127.0.0.1
? program vers proto? port? service
? ? 100000? ? 4? tcp? ? 111? portmapper
? ? 100000? ? 3? tcp? ? 111? portmapper
? ? 100000? ? 2? tcp? ? 111? portmapper
? ? 100000? ? 4? udp? ? 111? portmapper
? ? 100000? ? 3? udp? ? 111? portmapper
? ? 100000? ? 2? udp? ? 111? portmapper
啟動NFS
[root@nfs01 ~]# systemctl start nfs
[root@nfs01 ~]# systemctl enable nfs
[root@nfs01 ~]# rpcinfo -p 127.0.0.1
? program vers proto? port? service
? ? 100000? ? 4? tcp? ? 111? portmapper
? ? 100000? ? 3? tcp? ? 111? portmapper
? ? 100000? ? 2? tcp? ? 111? portmapper
? ? 100000? ? 4? udp? ? 111? portmapper
? ? 100000? ? 3? udp? ? 111? portmapper
? ? 100000? ? 2? udp? ? 111? portmapper
? ? 100024? ? 1? udp? 44521? status
? ? 100024? ? 1? tcp? 59204? status
? ? 100005? ? 1? udp? 20048? mountd
? ? 100005? ? 1? tcp? 20048? mountd
? ? 100005? ? 2? udp? 20048? mountd
? ? 100005? ? 2? tcp? 20048? mountd
? ? 100005? ? 3? udp? 20048? mountd
? ? 100005? ? 3? tcp? 20048? mountd
? ? 100003? ? 3? tcp? 2049? nfs
? ? 100003? ? 4? tcp? 2049? nfs
? ? 100227? ? 3? tcp? 2049? nfs_acl
? ? 100003? ? 3? udp? 2049? nfs
? ? 100003? ? 4? udp? 2049? nfs
? ? 100227? ? 3? udp? 2049? nfs_acl
? ? 100021? ? 1? udp? 55758? nlockmgr
? ? 100021? ? 3? udp? 55758? nlockmgr
? ? 100021? ? 4? udp? 55758? nlockmgr
? ? 100021? ? 1? tcp? 30472? nlockmgr
? ? 100021? ? 3? tcp? 30472? nlockmgr
? ? 100021? ? 4? tcp? 30472? nlockmgr
[root@nfs01 ~]# netstat -lntup|egrep "rpc|nfs"
tcp? ? ? ? 0? ? ? 0 0.0.0.0:20048? ? ? ? ? 0.0.0.0:*? ? ? LISTEN? ? ? 9516/rpc.mountd? ?
tcp? ? ? ? 0? ? ? 0 0.0.0.0:59204? ? ? ? ? 0.0.0.0:*? ? ? LISTEN? ? ? 9463/rpc.statd? ? ?
tcp6? ? ? 0? ? ? 0 :::20048? ? ? ? ? ? ? ? :::*? ? ? ? ? LISTEN? ? ? 9516/rpc.mountd? ?
tcp6? ? ? 0? ? ? 0 :::14450? ? ? ? ? ? ? ? :::*? ? ? ? ? LISTEN? ? ? 9463/rpc.statd? ? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:44521? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9463/rpc.statd? ? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:20048? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9516/rpc.mountd? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:695? ? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9424/rpcbind? ? ? ?
udp? ? ? ? 0? ? ? 0 127.0.0.1:735? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9463/rpc.statd? ? ?
udp6? ? ? 0? ? ? 0 :::20048? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? 9516/rpc.mountd? ?
udp6? ? ? 0? ? ? 0 :::695? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? 9424/rpcbind? ? ? ?
udp6? ? ? 0? ? ? 0 :::4835? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? 9463/rpc.statd
6、配置nfs
NFS配置文件 /etc/exports
[root@nfs01 ~]# man exports
EXAMPLE
? ? ? # sample /etc/exports file
? ? ? /? ? ? ? ? ? ? master(rw) trusty(rw,no_root_squash)
? ? ? /projects? ? ? proj*.local.domain(rw)
? ? ? /usr? ? ? ? ? ? *.local.domain(ro) @trusted(rw)
? ? ? /home/joe? ? ? pc001(rw,all_squash,anonuid=150,anongid=100)
? ? ? /pub? ? ? ? ? ? *(ro,insecure,all_squash)
? ? ? /srv/www? ? ? ? -sync,rw server @trusted @external(ro)
? ? ? /foo? ? ? ? ? ? 2001:db8:9:e54::/64(rw) 192.0.2.0/24(rw)
? ? ? /build? ? ? ? ? buildhost[0-9].local.domain(rw)
? ? ? 待共享的目錄? ? 訪問的主機(權限)
1）待共享的目錄 存東西的目錄 取東西的目錄例如：/data
2）訪問的主機，
? 172.16.1.7（web01）? ? 單個主機
? 172.16.1.0/24 網段
? 172.16.1.*? ? 網段
? master 主機名
3)()權限
? rw 可讀寫 read write
? ro 只讀 read only
? sync 寫到磁盤才算完成，安全 慢
? async 異步寫到遠程緩沖區，快 不安全
實踐：
[root@nfs01 ~]# tail -1 /etc/exports
/data 172.16.1.0/24(rw,sync)
[root@nfs01 ~]# mkdir -p /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 root root 51 4月? 16 10:24 /data
NFS默認用戶nfsnobody
[root@nfs01 ~]# grep nfsno /etc/passwd
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
[root@nfs01 ~]# chown -R nfsnobody.nfsnobody /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 nfsnobody nfsnobody 51 4月? 16 10:24 /data
重啟NFS
[root@nfs01 ~]# systemctl reload nfs #《==生產場景必須要實現平滑重啟。
[root@nfs01 ~]# exportfs -r
上述二者等價，選一個即可。
[root@nfs01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24? #《==看到共享的目錄了
服務單本地掛載：
[root@nfs01 ~]# mount -t nfs 172.16.1.31:/data /mnt
[root@nfs01 ~]# df -h
文件系統? ? ? ? ? 容量? 已用? 可用 已用% 掛載點
/dev/sda3? ? ? ? ? 19G? 1.8G? 18G? 10% /
devtmpfs? ? ? ? ? 476M? ? 0? 476M? ? 0% /dev
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /dev/shm
tmpfs? ? ? ? ? ? ? 487M? 7.6M? 479M? ? 2% /run
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /sys/fs/cgroup
/dev/sda1? ? ? ? ? 253M? 136M? 118M? 54% /boot
tmpfs? ? ? ? ? ? ? 98M? ? 0? 98M? ? 0% /run/user/0
172.16.1.31:/data? 19G? 1.8G? 18G? 10% /mnt
[root@nfs01 ~]# touch /mnt/oldboy.txt
[root@nfs01 ~]# ls /mnt/
oldboy.txt
換到web01掛載
1）安裝
yum install nfs-utils rpcbind -y
rpm -qa nfs-utils rpcbind
2)啟動
[root@web01 ~]# systemctl start rpcbind
[root@web01 ~]# systemctl enable rpcbind
[root@web01 ~]# netstat -lntup|grep rpc
udp? ? ? ? 0? ? ? 0 0.0.0.0:775? ? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? ? ? ? ? 11624/rpcbind? ? ?
udp6? ? ? 0? ? ? 0 :::775? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 11624/rpcbind? ? ?
[root@web01 ~]# netstat -lntup|grep rpcbind
udp? ? ? ? 0? ? ? 0 0.0.0.0:775? 0.0.0.0:*? ? 11624/rpcbind? ? ?
udp6? ? ? 0? ? ? 0 :::775? ? ? ? :::*? ? ? ? ? 11624/rpcbind? ? ?
[root@web01 ~]# ps -ef|grep rpcbind
rpc? ? ? 11624? ? ? 1? 0 12:17 ?? ? ? ? 00:00:00 /sbin/rpcbind -w
3）查看NFS服務器提供的共享目錄
[root@web01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24
nt_create: RPC: Program not registered
? ? ? ? ? ? ? ? ? 程序? 沒有? 注冊
RPC服務開啟了，但是NFS沒有告訴RPC服務端口。
4）掛載測試
[root@web01 ~]# mount -t nfs 172.16.1.31:/data /mnt
[root@web01 ~]# df -h
文件系統? ? ? ? ? 容量? 已用? 可用 已用% 掛載點
/dev/sda3? ? ? ? ? 19G? 1.8G? 18G? 10% /
devtmpfs? ? ? ? ? 476M? ? 0? 476M? ? 0% /dev
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /dev/shm
tmpfs? ? ? ? ? ? ? 487M? 7.6M? 479M? ? 2% /run
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /sys/fs/cgroup
/dev/sda1? ? ? ? ? 253M? 136M? 118M? 54% /boot
tmpfs? ? ? ? ? ? ? 98M? ? 0? 98M? ? 0% /run/user/0
172.16.1.31:/data? 19G? 1.8G? 18G? 10% /mnt
[root@web01 ~]# touch /mnt/oldgirl.txt
[root@web01 ~]# ls /mnt/
oldboy.txt? oldgirl.txt
