# NFS操作和部署 [TOC] ## 1 基礎知識 ### 1.1 簡述和應用場景 1) 簡述 NFS :網絡文件系統（network file system）,通過網絡讓不同的主機系統之間可以共享文件或目錄，客戶端通過掛載服務端目錄到本地的方式訪問服務端 2) 應用場景： 多臺web集群通過負載均衡器對外提供訪問時，將所有圖片、附件、視頻等存儲在一個特定服務器上，避免了分散存儲在web服務器上的數據同步問題 ### 1.2 好處和原理 1. 現共享存儲好處： * 實現數據統一一致 * 節省網站磁盤資源 * 節省網站訪問帶寬 2. 端口和RPC： NFS沒有固定的對外端口，每次啟動都會隨機選擇空閑端口，要讓客戶端能夠通過網絡訪問NFS共享，就要用到RPC服務，RPC服務相當于中介，NFS每次啟動都會向RPC通知端口信息，客戶訪問NFS共享也是先找RPC獲取NFS的端口再以該端口訪問NFS共享的資源 RPC服務要先于NFS服務啟動，NFS才能正常工作 3. NFS共享存儲服務的原理： nfs服務端創建共享存儲目錄 nfs客戶端創建遠程掛載點目錄 nfs客戶端進行遠程掛載 實現客戶端數據信息統一一致 ## 2 NFS服務部署 ### 2.1 環境信息 2.1.1 系統信息 ```sh [root@xxx ~]# cat /etc/redhat-release CentOS release 6.9 (Final) uname -r 2.6.32-696.el6.x86_64 ``` 2.1.2 服務器信息 | 服務器名 | IP地地址 | 服務器用途 | | -------- | ------------ | ------------- | | nfs01 | 192.168.1.41 | nfs備份服務器 | | web01 | 192.168.1.7 | web服務器 | | web02 | 192.168.1.8 | web服務器 | | web03 | 192.168.1.9 | web服務器 | ### 2.2 服務端部署 1) 檢查并安裝NFS服務 ```sh rpm -aq|egrep "nfs-utils|rpcbind" yum install nfs-utils rpcbind -y rpm -aq|egrep "nfs-utils|rpcbind" ``` #檢查這兩個軟件是否安裝，安裝完成后再次檢查 2) 編輯nfs配置文件 ```sh cat >>/etc/exports <<"EOF" /data 172.16.1.0/24(rw,sync) EOF ``` 該文件默認存在 3) 創建共享目錄并授權 ```sh mkdir /data chown -R nfsnobody.nfsnobody /data # nfsnobody用戶是安裝nfs程序時自動創建的 ``` 4) 啟動rpc和NFS服務 ```sh /etc/init.d/rpcbind start /etc/init.d/nfs start ``` 需先啟動rpc服務 5) 檢查服務狀況和共享目錄是否可用 ```sh [root@xxx ~]# rpcinfo -p 172.16.1.31 #有rpc服務的111端口,nfs服務的2049端口,和很多mount端口,表示正確 [root@xxx ~]# showmount -e 10.0.0.31 Export list for 172.16.1.31: /data 172.1.1.0/24 ``` 如果出現以上結果，表示服務端配置成功 最好在本地掛載一次，掛載成功在取消掛載，至少可以確認服務端配置正確，能夠掛載 6) 設置開機自啟動并檢查 ```sh chkconfig nfs on chkconfig rpcbind on chkconfig --list|egrep "nfs|rpcbind" ``` ### 2.3 客戶端部署[3臺一樣的操作] 1) 檢查并安裝NFS服務 ```sh rpm -aq|egrep "nfs-utils|rpcbind" yum install nfs-utils rpcbind -y ``` 2) 進行共享目錄掛載 ```sh [root@xxx ~]# showmount -e 172.16.1.31 [root@xxx ~]# mount -t nfs 172.16.1.31:/data /mnt [root@xxx ~]# df -h|tail -1 Filesystem Size Used Avail Use% Mounted on 172.16.1.31:/data 8.6G 1.9G 6.4G 23% /mnt ``` 3) 設置開機自啟動掛載 ```sh echo " mount -t nfs 172.16.1.31:/date /mnt " >>/etc/rc.local ``` 不要放入/etc/fatab做開機啟動,因為fstab啟動較早，那個時候網絡服務還未啟動，掛載會失敗 4) 進行共享存儲測試 說明： 在本機的mnt目錄中創建的數據，在nfs和其他掛載了此目錄的服務器上都可以看到，即已經實現數據共享存儲 # 3 配置和進程等說明 ### 3.1 NFS共享文件系統相關重要文件說明 ```sh /etc/exports nfs服務主配置文件 /usr/sbin/showmount 查看nfs服務共享目錄信息 /usr/sbin/rpcinfo 查看rpc服務中是否有房源注冊信息 /var/lib/nfs/etab 用于查看nfs服務默認配置信息 /proc/mounts nfs客戶端mount掛載參數（可以查看默認掛載參數信息） ``` ### 3.2 NFS服務啟動的進程說明  ### 3.3 NFS配置文件說明： 1) 常見配置和參數說明 ```sh [root@xxx ~]# cat /etc/exports /date 172.16.1.0/24(rw,sync) [目錄] [客戶端地址][權限] ``` * 目錄 要共享的目錄,使用絕對路徑,需要屬于nfsnobody用戶,且注意讀寫權限 * 客戶端地址 可以為單獨的IP地址,主機名,域名,網段地址,*[所有] * 權限[與地址之間無空格],推薦使用紅色權限 ```sh rw 讀寫； ro 只讀； sync [默認]直接寫入硬盤； async 異步寫入硬盤（先寫入內存緩沖區） all_squash 壓縮所有用戶的權限為壓縮為匿名用戶[nfsnobody] no_all_squash [默認]不進行用戶權限壓縮 root_squash [默認]壓縮root用戶的權限為匿名用戶[nfsnobody] no_root_squash 不壓縮root用戶權限(危險,少用) anonuid 匿名用戶uid,默認即可 anongid 匿名用戶gid,默認即可 注意：文章最后有詳細上述幾個參數關系圖解 ``` 2) 更多配置[一般不管] ```sh [root@xxx ~]# cat /var/lib/nfs/etab /data 172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,no_all_squash,no_subtree_check,secure_locks,acl,anonuid=65534,anongid=65534,sec=sys,rw,root_squash,no_all_squash) ``` 可以看到，除了我們配置在export文件中的參數，還有許多系統自己預定義的參數，如創建用戶 ### 3.4 NFS共享文件系統權限參數設置梳理 1. NFS服務器/etc/exports設置需要開放可寫入的權限，即服務器端的共享權限。 2. NFS服務器實際要共享的NFS目錄權限具有可寫入w的權限 3. 每臺機器對應存在和NFS默認配置UID的相同UID 65534的nfsnobody用戶 (確保所有客戶端的訪問權限統一，否則每個機器需要同時建立相同UID的用戶，并覆蓋NFS的默認用戶配置) 只有滿足上述三個條件，多個NFS客戶端才能具有查看、修改、刪除其他任意NFS客戶端上傳文件的權限，這在大規模的集群環境中作為集群共享存儲時尤為重要 ### 3.5 常見問題 ```sh [root@xxx ~]# showmount -e server_ip clnt_create: PRC: Program not registered #服務端服務啟動順序有問題 clnt_create: PRC: Port mapper failure - Unable to receive: errno 111(Connetcion refused) #防火墻問題或服務沒有啟動，或端口沒有開啟 ``` ### 3.6 各參數關系圖解