1、什么是NFS?
全稱 network file system 網絡文件系統
通過網絡存儲和組織文件的一種方法或機制。
什么是文件系統?
2、為什么要用共享存儲?
前端所有的應用服務器接收到用戶上傳的圖片、文件、視頻,都會統一
的放到后端的存儲上。
為什么要共享?所有節點服務器都需要將內容存到存儲上,取的統一來取。
3、共享存儲的種類
單點存儲系統就是NFS,中小型企業,阿里云服務的NAS服務,OSS對象存儲。
NFS性能不太高。
大型企業會用分布式存儲FastDFS、Ceph、GlsterFS、Mfs
大型存儲廠商:EMC、Netapp 幾十萬。
藝龍旅行網 存儲用的EMC 傳統企業。
硬件存儲:傳統企業:穩定、2臺 雙主機頭 幾十塊硬盤 RAID10。
BAT 曾經用硬件,超貴、
阿里云 去IOE Ibm Orace EMC
4、NFS工作原理
NFS網絡文件系統
啟動NFS服務,而且還有啟動很多端口。
NFS功能,需要很多服務。每個服務都有端口,而且經常變化。
如何讓客戶端找到這些端口呢?就需要一個經紀人(rpc服務)
NFS服務:
1、NFS服務(有很多進程和端口),把自己的端口告訴RPC。
2、RPC服務(對外固定端口111)
客戶端請求NFS服務,先找RPC 111,查到NFS的端口,發給客戶。
原理見圖:
5、安裝
服務器端和客戶端都要安裝:
yum install nfs-utils rpcbind -y
rpm -qa nfs-utils rpcbind
[root@nfs01 ~]# rpm -qa nfs-utils rpcbind
nfs-utils-1.3.0-0.61.el7.x86_64
rpcbind-0.2.0-47.el7.x86_64
啟動RPC
[root@nfs01 ~]# systemctl start rpcbind.service
[root@nfs01 ~]# systemctl enable rpcbind.service
看看有沒有注冊的端口
[root@nfs01 ~]# rpcinfo -p 127.0.0.1
?? program vers proto?? port? service
? ? 100000? ? 4?? tcp? ? 111? portmapper
? ? 100000? ? 3?? tcp? ? 111? portmapper
? ? 100000? ? 2?? tcp? ? 111? portmapper
? ? 100000? ? 4?? udp? ? 111? portmapper
? ? 100000? ? 3?? udp? ? 111? portmapper
? ? 100000? ? 2?? udp? ? 111? portmapper
啟動NFS
[root@nfs01 ~]# systemctl start nfs
[root@nfs01 ~]# systemctl enable nfs
[root@nfs01 ~]# rpcinfo -p 127.0.0.1
?? program vers proto?? port? service
? ? 100000? ? 4?? tcp? ? 111? portmapper
? ? 100000? ? 3?? tcp? ? 111? portmapper
? ? 100000? ? 2?? tcp? ? 111? portmapper
? ? 100000? ? 4?? udp? ? 111? portmapper
? ? 100000? ? 3?? udp? ? 111? portmapper
? ? 100000? ? 2?? udp? ? 111? portmapper
? ? 100024? ? 1?? udp? 44521? status
? ? 100024? ? 1?? tcp? 59204? status
? ? 100005? ? 1?? udp? 20048? mountd
? ? 100005? ? 1?? tcp? 20048? mountd
? ? 100005? ? 2?? udp? 20048? mountd
? ? 100005? ? 2?? tcp? 20048? mountd
? ? 100005? ? 3?? udp? 20048? mountd
? ? 100005? ? 3?? tcp? 20048? mountd
? ? 100003? ? 3?? tcp?? 2049? nfs
? ? 100003? ? 4?? tcp?? 2049? nfs
? ? 100227? ? 3?? tcp?? 2049? nfs_acl
? ? 100003? ? 3?? udp?? 2049? nfs
? ? 100003? ? 4?? udp?? 2049? nfs
? ? 100227? ? 3?? udp?? 2049? nfs_acl
? ? 100021? ? 1?? udp? 55758? nlockmgr
? ? 100021? ? 3?? udp? 55758? nlockmgr
? ? 100021? ? 4?? udp? 55758? nlockmgr
? ? 100021? ? 1?? tcp? 30472? nlockmgr
? ? 100021? ? 3?? tcp? 30472? nlockmgr
? ? 100021? ? 4?? tcp? 30472? nlockmgr
[root@nfs01 ~]# netstat -lntup|egrep "rpc|nfs"
tcp? ? ? ? 0? ? ? 0 0.0.0.0:20048? ? ? ? ?? 0.0.0.0:*? ? ? LISTEN? ? ? 9516/rpc.mountd? ?
tcp? ? ? ? 0? ? ? 0 0.0.0.0:59204? ? ? ? ?? 0.0.0.0:*? ? ? LISTEN? ? ? 9463/rpc.statd? ? ?
tcp6? ? ?? 0? ? ? 0 :::20048? ? ? ? ? ? ? ? :::*? ? ? ? ?? LISTEN? ? ? 9516/rpc.mountd? ?
tcp6? ? ?? 0? ? ? 0 :::14450? ? ? ? ? ? ? ? :::*? ? ? ? ?? LISTEN? ? ? 9463/rpc.statd? ? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:44521? ? ? ? ?? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9463/rpc.statd? ? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:20048? ? ? ? ?? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9516/rpc.mountd? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:695? ? ? ? ? ?? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9424/rpcbind? ? ? ?
udp? ? ? ? 0? ? ? 0 127.0.0.1:735? ? ? ? ?? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9463/rpc.statd? ? ?
udp6? ? ?? 0? ? ? 0 :::20048? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ?? 9516/rpc.mountd? ?
udp6? ? ?? 0? ? ? 0 :::695? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ?? 9424/rpcbind? ? ? ?
udp6? ? ?? 0? ? ? 0 :::4835? ? ? ? ? ? ? ?? :::*? ? ? ? ? ? ? ? ? ? ?? 9463/rpc.statd
6、配置nfs
NFS配置文件 /etc/exports
[root@nfs01 ~]# man exports
EXAMPLE
? ? ?? # sample /etc/exports file
? ? ?? /? ? ? ? ? ? ?? master(rw) trusty(rw,no_root_squash)
? ? ?? /projects? ? ?? proj*.local.domain(rw)
? ? ?? /usr? ? ? ? ? ? *.local.domain(ro) @trusted(rw)
? ? ?? /home/joe? ? ?? pc001(rw,all_squash,anonuid=150,anongid=100)
? ? ?? /pub? ? ? ? ? ? *(ro,insecure,all_squash)
? ? ?? /srv/www? ? ? ? -sync,rw server @trusted @external(ro)
? ? ?? /foo? ? ? ? ? ? 2001:db8:9:e54::/64(rw) 192.0.2.0/24(rw)
? ? ?? /build? ? ? ? ? buildhost[0-9].local.domain(rw)
? ? ?? 待共享的目錄? ? 訪問的主機(權限)
1)待共享的目錄 存東西的目錄 取東西的目錄例如:/data
2)訪問的主機,
?? 172.16.1.7(web01)? ? 單個主機
?? 172.16.1.0/24 網段
?? 172.16.1.*? ? 網段
?? master 主機名
3)()權限
?? rw 可讀寫 read write
?? ro 只讀 read only
?? sync 寫到磁盤才算完成,安全 慢
?? async 異步寫到遠程緩沖區,快 不安全
?? 一會再說。。。。
實踐:
[root@nfs01 ~]# tail -1 /etc/exports
/data 172.16.1.0/24(rw,sync)
[root@nfs01 ~]# mkdir -p /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 root root 51 4月? 16 10:24 /data
NFS默認用戶nfsnobody
[root@nfs01 ~]# grep nfsno /etc/passwd
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
[root@nfs01 ~]# chown -R nfsnobody.nfsnobody /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 nfsnobody nfsnobody 51 4月? 16 10:24 /data
重啟NFS
[root@nfs01 ~]# systemctl reload nfs #《==生產場景必須要實現平滑重啟。
[root@nfs01 ~]# exportfs -r
上述二者等價,選一個即可。
[root@nfs01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24?? #《==看到共享的目錄了
服務單本地掛載:
[root@nfs01 ~]# mount -t nfs 172.16.1.31:/data /mnt
[root@nfs01 ~]# df -h
文件系統? ? ? ? ?? 容量? 已用? 可用 已用% 掛載點
/dev/sda3? ? ? ? ?? 19G? 1.8G?? 18G?? 10% /
devtmpfs? ? ? ? ?? 476M? ?? 0? 476M? ? 0% /dev
tmpfs? ? ? ? ? ? ? 487M? ?? 0? 487M? ? 0% /dev/shm
tmpfs? ? ? ? ? ? ? 487M? 7.6M? 479M? ? 2% /run
tmpfs? ? ? ? ? ? ? 487M? ?? 0? 487M? ? 0% /sys/fs/cgroup
/dev/sda1? ? ? ? ? 253M? 136M? 118M?? 54% /boot
tmpfs? ? ? ? ? ? ?? 98M? ?? 0?? 98M? ? 0% /run/user/0
172.16.1.31:/data?? 19G? 1.8G?? 18G?? 10% /mnt
[root@nfs01 ~]# touch /mnt/oldboy.txt
[root@nfs01 ~]# ls /mnt/
oldboy.txt
換到web01掛載
1)安裝
yum install nfs-utils rpcbind -y
rpm -qa nfs-utils rpcbind
2)啟動
[root@web01 ~]# systemctl start rpcbind
[root@web01 ~]# systemctl enable rpcbind
[root@web01 ~]# netstat -lntup|grep rpc
udp? ? ? ? 0? ? ? 0 0.0.0.0:775? ? ? ? ? ?? 0.0.0.0:*? ? ? ? ? ? ? ? ? ? ? ? ?? 11624/rpcbind? ? ?
udp6? ? ?? 0? ? ? 0 :::775? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 11624/rpcbind? ? ?
[root@web01 ~]# netstat -lntup|grep rpcbind
udp? ? ? ? 0? ? ? 0 0.0.0.0:775?? 0.0.0.0:*? ?? 11624/rpcbind? ? ?
udp6? ? ?? 0? ? ? 0 :::775? ? ? ? :::*? ? ? ? ? 11624/rpcbind? ? ?
[root@web01 ~]# ps -ef|grep rpcbind
rpc? ? ?? 11624? ? ? 1? 0 12:17 ?? ? ? ? 00:00:00 /sbin/rpcbind -w
3)查看NFS服務器提供的共享目錄
[root@web01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24
nt_create: RPC: Program not registered
? ? ? ? ? ? ? ? ? 程序? 沒有? 注冊
RPC服務開啟了,但是NFS沒有告訴RPC服務端口。
4)掛載測試
[root@web01 ~]# mount -t nfs 172.16.1.31:/data /mnt
[root@web01 ~]# df -h
文件系統? ? ? ? ?? 容量? 已用? 可用 已用% 掛載點
/dev/sda3? ? ? ? ?? 19G? 1.8G?? 18G?? 10% /
devtmpfs? ? ? ? ?? 476M? ?? 0? 476M? ? 0% /dev
tmpfs? ? ? ? ? ? ? 487M? ?? 0? 487M? ? 0% /dev/shm
tmpfs? ? ? ? ? ? ? 487M? 7.6M? 479M? ? 2% /run
tmpfs? ? ? ? ? ? ? 487M? ?? 0? 487M? ? 0% /sys/fs/cgroup
/dev/sda1? ? ? ? ? 253M? 136M? 118M?? 54% /boot
tmpfs? ? ? ? ? ? ?? 98M? ?? 0?? 98M? ? 0% /run/user/0
172.16.1.31:/data?? 19G? 1.8G?? 18G?? 10% /mnt
[root@web01 ~]# touch /mnt/oldgirl.txt
[root@web01 ~]# ls /mnt/
oldboy.txt? oldgirl.txt