文件系統搭建

A. 在Windows上自建nfs，性能比較差，這個怎麼辦

本文描述了在應用環境為Windows系統下，需要使用文件存儲的場景。本文採用了私有化部署的方式向用戶提供了文件共享存儲服務。用NFS協議，搭建Windows環境NFS服務，為Windows系統下的雲主機提供共享訪問服務。
存儲格式都有哪些？
文件、塊和對象是三種以不同的方式來保存、整理和呈現數據的存儲格式。這些格式各有各的功能和限制。文件存儲會以文件和文件夾的層次結構來整理和呈現數據；塊存儲會將數據拆分到任意劃分且大小相同的卷中; 對象存儲會管理數據並將其鏈接至關聯的元數據
塊存儲
塊存儲主要是將裸磁碟空間整個映射給主機使用的，就是說例如磁碟陣列裡面有5塊硬碟（為方便說明，假設每個硬碟1G），然後可以通過劃邏輯盤、做Raid、或者LVM（邏輯卷）等種種方式邏輯劃分出N個邏輯的硬碟。（假設劃分完的邏輯盤也是5個，每個也是1G，但是這5個1G的邏輯盤已經於原來的5個物理硬碟意義完全不同了。例如第一個邏輯硬碟A裡面，可能第一個200M是來自物理硬碟1，第二個200M是來自物理硬碟2，所以邏輯硬碟A是由多個物理硬碟邏輯虛構出來的硬碟。）
典型設備：磁碟陣列，硬碟
文件存儲
為了克服塊存儲文件無法共享的問題，所以有了文件存儲。主要功能是通過網路（一般是區域網）讓不同的主機系統之間可以共享文件或目錄。本文文件存儲採用NFS協議，NFS客戶端（一般為應用伺服器，例如Web）可以通過掛載（mount）的方式將NFS伺服器端共享的數據目錄掛載帶NFS客戶端本地系統中（就是某一個掛載點下）。從客戶端本地看，NFS伺服器端共享的目錄就好像是客戶端自己的磁碟分區或目錄一樣，而實際上確實遠端的NFS伺服器的目錄。
典型設備：FTP、NAS
對象存儲
對象存儲系統（Object-Based Storage System）是綜合了NAS和SAN的優點，同時具有SAN的高速直接訪問和NAS的數據共享等優勢，提供了高可靠性、跨平台性以及安全的數據共享的存儲體系結構。對象存儲主要操作對象是對象（Object）。和文件和對象存儲相比，沒有隨機讀寫的介面。和文件存儲相比，沒有目錄樹的概念。協議更注重簡潔。
典型設備：內置大容量硬碟的分布式伺服器、京東雲OSS即對象存儲
文件存儲的適用場景
文件與較底層的塊存儲不同, 上升到了應用層, 一般指的就是NAS ,一套網路儲存設備, 通過TCP/IP進行訪問, 協議為NFSv3/v4由於通過網路。下面簡單介紹以下NFS存儲適用的兩個場景，當然，還有更多的場景適合使用文件存儲，本文不一一列出。
Web 服務
前端面向終端用戶的服務由多台web伺服器提供，多台伺服器需要共享文件存儲，文件系統、文件命名約定和許可權等符合應用系統需求。
媒資管理
媒體行業由於其工作流和媒資是一直變化的，很多用戶使用多雲或混合雲，媒體的剪輯、編輯在本地進行，存儲和分發在雲端，由於文件存儲可以和現有的系統輕松的集成，因此，很多用戶將文件存儲用於媒資管理。
Windows環境下的NFS文件服務的搭建

選擇Windows系統搭建NFS協議文件存儲系統的優勢如下：
系統交付後由用戶進行維護，用戶對Windows系統熟悉；
部分應用系統只能訪問文件存儲；
微軟的SMB協議是面向網路連接的共享協議，對網路傳輸的可靠性要求高，常使用TCP/IP；NFS是獨立於傳輸的，可使用TCP或UDP，同時考慮後期有linux系統擴容需求，故選擇NFS協議。
京東雲提供Linux環境的文件存儲服務，無需另行搭建。（詳見https://www.jdcloud.com/cn/procts/cloud-file-service）
本設計的優勢：
共享訪問-您在同一子網內的多台雲主機可以共享同一個雲文件服務中的文件存儲系統。對於多個應用實例需要共享通用數據源的場景，特別適合使用雲文件服務實現。
易於使用-支持標準的NFS協議，提供全託管的服務，無需修改應用，通過標準的文件系統掛載步驟即可實現無縫集成。極大降低遷移成本，簡化雲上項目開發。
穩定可靠-本系統存儲基於京東雲雲硬碟，採用3副本冗餘存儲，提供超強的穩定性和可靠性，滿足應用服務對文件系統的可用性和可靠性需求。
易於擴展-本系統存儲基於京東雲雲硬碟，可根據業務需求進行存儲空間的擴展。
一、創建NFS服務主機
1、創建實例
在京東雲上創建一台雲主機，作為NFS伺服器；NFS服務要和已有雲資源創建在同一區域，同一VPC中。
登錄京東雲控制台，選擇彈性計算-雲主機-實例，選擇創建實例所屬地域，點擊「創建」按鈕，進入雲主機購買頁面。

2、選擇計費模式
包年包月和按配置計費，包年包月按一個正月進行購買付費，按配置計費按照實際使用的時長（精確至秒）每小時進行扣費。

3、地域與可用區選擇
在此步驟仍可以選擇實例對應的地域（華北-北京、華南-廣州、華東-宿遷及華東-上海）及可用區，請注意「不同地域資源內網不互通，創建之後不可更改」，如果所選地域限額已滿，可以通過提交工單提升限額。

4、創建方式選擇
提供三種創建方式 自定義創建、使用實例模板創建、在高可用組內創建，後兩種需要您預先創建好實例模板和高可用組，我們使用保持默認選項「自定義創建」。

5、選擇windows系統鏡像
鏡像分為雲硬碟系統盤鏡像及本地盤系統盤鏡像，前者僅支持創建系統盤為雲硬碟的實例，後者僅支持創建系統盤為本地盤的實例。因為搭建windows系統環境的NFS存儲，故鏡像選擇官方-windows server-windows server 2012 R2標准版。

6、選擇實例規格
實例的規格支持用戶自定義選擇，從最小的1核1G（如g.s1.micro）到72C576GB（如m.n2.18xlarge），用戶可以根據不同業務場景選擇實例規格及相應配置。考慮到NFS對主機計算性能要求不高，選擇2核4G規格主機。

7、配置NFS存儲
雲主機數據盤：數據盤為NFS系統存儲盤，可以根據實際業務需要選擇容量。（此處選擇20G為例）

8、配置實例網路
選擇私有網路及子網：VPC子網選擇與需要訪問NFS存儲的雲主機所在的VPC。
選擇內網IP分配方式：如對內網IP地址沒有特殊要求，可以不指定由系統自動在子網可用網段內分配，如需指定請在提示範圍內輸入，系統會校驗IP是否可用。須注意的是，若選擇自定義內網IP地址，則無法批量創建實例。
9、選擇安全組
實例在創建時必須綁定一個安全組，若當前地域下未創建自定義安全組，可以在系統創建的三個默認安全組中選擇一個綁定（每個私有網路創建成功之後都會自動創建三個默認安全組），也可以通過快速入口前往安全組頁面創建安全組。由於官方鏡像系統內防火牆默認關閉，建議綁定僅開放22埠（Linux）或3389埠（Windows）的安全組，實例創建之後再根據訪問需求創建新的安全組並綁定。

10、配置公網帶寬
帶寬計費方式：京東雲提供按固定帶寬和按使用流量兩種帶寬計費類型的彈性公網IP，按固定帶寬計費按購買時設置的帶寬上限值付費，而與實際訪問公網所用帶寬無關，按使用流量計費則根據您實時訪問公網的實際流量計費。
線路：彈性公網IP線路分為：BGP和非BGP，若您需要更快更高效的網路接入請選用BGP。
帶寬范圍：1Mbps~200Mbps。在創建主機過程中可以暫不購買公網IP，完成主機創建後，再進行綁定。
NFS存儲如果只供VPC內雲主機使用，可以不購買公網IP和帶寬。

11、設置實例名稱、描述
您需要設置創建的主機名，名稱不可為空，只支持中文、數字、大小寫字母、英文下劃線「 _ 」及中劃線「 - 」，且不能超過32字元，如果為批量創建購買，名稱以「xxx1」、「xxx2」依次顯示。同時支持為實例添加描述，描述允許為空，若添加長度不能超過256字元。

12、設置密碼
可以選擇「立即設置」密碼，也可以選擇「暫不設置」（系統會以簡訊和郵件方式發送默認密碼），密碼除了用於SSH登錄實例時的密碼，也是控制台通過VNC登錄實例的密碼。

確認雲主機數量及購買時長 購買數量受限該地域您雲主機、雲硬碟、公網IP限額以及所選子網剩餘IP數量，若限額不夠，可通過提交工單提升限額。若購買包年包月實例，則需要設置購買時長，最短為1個月，最長為2年，支付十個月費用即可享受一年服務。若需要更長服務時長請提交工單。
點擊確認後，返回到控制台，顯示創建中，待狀態為運行，NFS服務主機創建完畢。

13、登陸雲主機

14、添加數據盤
打開，開始菜單-伺服器管理器-文件和存儲服務-磁碟，如下圖：

選擇數據硬碟，右鍵選擇新建卷，文件格式為NTSF

二、建立NFS服務

1、安裝NFS伺服器端組件
打開，開始菜單-伺服器管理器」，在主頁儀錶板中單擊「添加角色和功能」，如下圖所示。

在「開始之前」對話框中，會顯示配置成NFS伺服器必要的前提步驟，請按文字介紹的注意事項確認一下，如果沒有問題的話，可以單擊「下一步」，如下圖所示：

在「安裝類型」對話框中，選擇「基於角色或基於功能的安裝」，然後單擊「下一步」，如下圖所示：

在「伺服器選擇」對話框中，選擇「從伺服器池中選擇伺服器」，然後單擊「下一步」：

在「伺服器角色」對話框中，選擇「文件和存儲服務」中「NFS伺服器」，然後單擊「下一步」，如下圖所示：

繼續單擊「下一步」，如下圖所示：

在「確認」對話框中，可以看到我們從第一步到最後一步選擇的參數等信息，如果有要修改的地方，可以單擊「上一步」返回修改，確認沒有問題的話，可以單擊「安裝」，如下圖所示：

至此，Windows系統的NFS服務端安裝完畢，根據提示重啟伺服器。

2、創建共享服務
NFS服務端安裝完畢，回到伺服器管理器，選擇文件和存儲服務

選擇 共享-啟動新加共享向導

選擇「NFS共享-快速」

選擇數據盤，設置共享名稱

選擇「身份驗證」相關配置，如下圖所示：

設置共享許可權，許可權請根據實際需要設置

創建完畢，顯示」已成功創建共享「，如下圖所示：

3、設置共享文件夾
在要設定共享的文件夾屬性中，選擇「NFS共享」欄位，點擊「管理NFS共享」， 在「NFS高級共享」對話框中，選擇並勾選「共享此文件夾」：

返回伺服器管理器，共享對話框中，可以看到剛才新建的文件夾共享已經成功
參考資料：
1、文件存儲、塊存儲還是對象存儲？redhat官網
2、塊存儲、文件存儲、對象存儲這三者的本質差別是什麼？．知乎．2016-1-1[引用日期2017-10-04]
（https://ke..com/reference/18736489/a856jWYROoQogtX1hq-v--）
3、今非昔比：塊存儲的復雜度提高 ．TechTarget存儲[引用日期2015-10-21]（https://ke..com/reference/18736489/_rJK0l8aRaFmmhbzPj4Kk-4OMDrn9AGlEt1D-YeUws8wnhuYuc7rJUcaI-B0fg）

點擊"京東雲"了解更多詳情

B. Linux搭建NFS伺服器

作者：SpookZanG
linux搭建NFS伺服器
一、什麼是NFS服務
NFS是Network
File
System的簡寫,即網路文件系統.
網路文件系統是FreeBSD支持的文件系統中的一種，也被稱為NFS.
NFS允許一個系統在網路上與它人共享目錄和文件。通過使用NFS，用戶和程序可以象訪問本地文件一樣訪問遠端系統上的文件。
二、NFS的優勢
1.本地工作站使用更少的磁碟空間，因為通常的數據可以存放在一台機器上而且可以通過網路訪問到。
2.用戶不必在每個網路上機器里頭都有一個home目錄。Home目錄
可以被放在NFS伺服器上並且在網路上處處可用。
3.諸如軟碟機，CDROM，和
Zip®
之類的存儲設備可以在網路上面被別的機器使用。這可以減少整個網路上的可移動介質設備的數量。
NFS至少有兩個主要部分：一台伺服器和一台（或者更多）客戶機。客戶機遠程訪問存放在伺服器上的數據。為了正常工作，一些進程需要被配置並運行。
三、NFS的搭建
1、伺服器端
安裝NFS的服務程序
yum
install
-y
nfs-utils
寫配置文件
寫入
/music
192.168.0.0/255.255.255.0(rw,sync)
格式是：
要共享的目錄
共享的IP及掩碼或者域名（許可權,同步更新）
啟動服務
/etc/init.d/portmap
restart
/etc/init.d/nfs
restart
chkconfig
nfs
on
chkconfig
portmap
on
然後關閉防火牆以及更改Selinux關於NIS的選項
/etc/init.d/iptables
stop
（防護牆服務關閉）
chkconfig
iptables
off
system-config-selinux
（設置selinux）
2、客戶端
編輯fstab文件，實現開機自動掛載
mount
-t
nfs
IP:/目錄
掛載到的目錄
（此為臨時掛載）
如：mount
-t
nfs
192.168.0.9:/doce
/doc
編輯FSTAB文件
vim
/etc/init.d/fstab
IP:/目錄
掛載到的目錄
nfs
defaults
0
0
然後關閉防火牆以及更改Selinux關於NIS的選項
/etc/init.d/iptables
stop
（防護牆服務關閉）
chkconfig
iptables
off
system-config-selinux
（設置selinux）
至此，搭建完畢。

C. 小鳥雲的雲主機的Linux怎麼賣搭建搭建XFS文件系統

XFS是高性能文件系統，SGI為他們的IRIX平台而設計。自從年移植到Linux內核上，由於它的高性能，XFS成為了許多企業級系統的首選，特別是有大量數據，需要結構化伸縮性和穩定性的。例如，RHEL/CentOS 7 和Oracle Linux將XFS作為默認文件系統，SUSE/openSUSE已經為XFS做了長期支持。XFS有許多獨特的性能提升功能使他從眾多文件系統中脫穎而出，像可伸縮/並行 IO，元數據日誌，熱碎片整理，IO 暫停/恢復，延遲分配等。如果你想要創建和掛載XFS文件系統到你的Linux平台，下面是相關的操作命令。
安裝XFS系統工具集
首先，你需要安裝XFS系統工具集，這樣允許你執行許多XFS相關的管理任務。（例如：格式化，擴展，修復，設置配額，改變參數等）
$ sudo apt-get install xfsprogs # Debian, Ubuntu , Linux Mint系統$ sudo yum install xfsprogs # CentOS, RHEL系統$ sudo pacman -S xfsprogs #創建 XFS格式分區

先准備一個分區來創建XFS。假設你的分區在/dev/sdb,如下：
$ sudo fdisk /dev/sdb

假設此創建的分區叫/dev/sdb1。
接下來，格式化分區為XFS，使用mkfs.xfs命令。如果已有其他文件系統創建在此分區，必須加上」-f」參數來覆蓋它。
$ sudo mkfs.xfs -f /dev/sdb1
至此你已經准備好格式化後分區來掛載。假設/data 是XFS本地掛載點。使用下述命令掛載：
$ sudo mount -t xfs /dev/sdb1 /data

驗證XFS掛載是否成功：
$ df -Th /data

D. 如何部署hadoop分布式文件系統

一、實戰環境
系統版本：CentOS 5.8x86_64
java版本：JDK-1.7.0_25
Hadoop版本：hadoop-2.2.0
192.168.149.128namenode （充當namenode、secondary namenode和ResourceManager角色）
192.168.149.129datanode1 （充當datanode、nodemanager角色）
192.168.149.130datanode2 （充當datanode、nodemanager角色）

二、系統准備

1、Hadoop可以從Apache官方網站直接下載最新版本Hadoop2.2。官方目前是提供了linux32位系統可執行文件，所以如果需要在64位系統上部署則需要單獨下載src 源碼自行編譯。（如果是真實線上環境，請下載64位hadoop版本，這樣可以避免很多問題，這里我實驗採用的是32位版本）
1234 Hadoop
Java

2、我們這里採用三台CnetOS伺服器來搭建Hadoop集群，分別的角色如上已經註明。
第一步：我們需要在三台伺服器的/etc/hosts裡面設置對應的主機名如下（真實環境可以使用內網DNS解析）
[root@node1 hadoop]# cat /etc/hosts
# Do not remove the following line, or various programs
# that require network functionality will fail.
127.0.0.1localhost.localdomain localhost
192.168.149.128node1
192.168.149.129node2
192.168.149.130node3

（注* 我們需要在namenode、datanode三台伺服器上都配置hosts解析）
第二步：從namenode上無密碼登陸各台datanode伺服器，需要做如下配置:
在namenode 128上執行ssh-keygen，一路Enter回車即可。
然後把公鑰/root/.ssh/id_rsa.pub拷貝到datanode伺服器即可，拷貝方法如下：
ssh--id -i .ssh/id_rsa.pub [email protected]
ssh--id -i .ssh/id_rsa.pub [email protected]

三、Java安裝配置
tar -xvzf jdk-7u25-linux-x64.tar.gz &&mkdir -p /usr/java/ ; mv /jdk1.7.0_25 /usr/java/ 即可。
安裝完畢並配置java環境變數，在/etc/profile末尾添加如下代碼：
export JAVA_HOME=/usr/java/jdk1.7.0_25/
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=$JAVE_HOME/lib/dt.jar:$JAVE_HOME/lib/tools.jar:./

保存退出即可，然後執行source /etc/profile 生效。在命令行執行java -version 如下代表JAVA安裝成功。
[root@node1 ~]# java -version
java version "1.7.0_25"
Java(TM) SE Runtime Environment (build 1.7.0_25-b15)
Java HotSpot(TM) 64-Bit Server VM (build 23.25-b01, mixed mode)

（注* 我們需要在namenode、datanode三台伺服器上都安裝Java JDK版本）
四、Hadoop版本安裝
官方下載的hadoop2.2.0版本，不用編譯直接解壓安裝就可以使用了，如下：
第一步解壓:
tar -xzvf hadoop-2.2.0.tar.gz &&mv hadoop-2.2.0/data/hadoop/
（注* 先在namenode伺服器上都安裝hadoop版本即可，datanode先不用安裝，待會修改完配置後統一安裝datanode）

第二步配置變數：
在/etc/profile末尾繼續添加如下代碼，並執行source /etc/profile生效。
export HADOOP_HOME=/data/hadoop/
export PATH=$PATH:$HADOOP_HOME/bin/
export JAVA_LIBRARY_PATH=/data/hadoop/lib/native/
（注* 我們需要在namenode、datanode三台伺服器上都配置Hadoop相關變數）

五、配置Hadoop
在namenode上配置，我們需要修改如下幾個地方：
1、修改vi /data/hadoop/etc/hadoop/core-site.xml 內容為如下：
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl"href=\'#\'" Put site-specific property overrides inthisfile. -->
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://192.168.149.128:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/tmp/hadoop-${user.name}</value>
<description>A base forother temporary directories.</description>
</property>
</configuration>

2、修改vi /data/hadoop/etc/hadoop/mapred-site.xml內容為如下：
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl"href=\'#\'" Put site-specific property overrides inthisfile. -->
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>192.168.149.128:9001</value>
</property>
</configuration>

3、修改vi /data/hadoop/etc/hadoop/hdfs-site.xml內容為如下：
<?xml version="1.0"encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl"href=\'#\'" /name>
<value>/data/hadoop/data_name1,/data/hadoop/data_name2</value>
</property>
<property>
<name>dfs.data.dir</name>
<value>/data/hadoop/data_1,/data/hadoop/data_2</value>
</property>
<property>
<name>dfs.replication</name>
<value>2</value>
</property>
</configuration>

4、在/data/hadoop/etc/hadoop/hadoop-env.sh文件末尾追加JAV_HOME變數：
echo "export JAVA_HOME=/usr/java/jdk1.7.0_25/">> /data/hadoop/etc/hadoop/hadoop-env.sh

5、修改 vi /data/hadoop/etc/hadoop/masters文件內容為如下：
192.168.149.128

6、修改vi /data/hadoop/etc/hadoop/slaves文件內容為如下：
192.168.149.129
192.168.149.130

如上配置完畢，以上的配置具體含義在這里就不做過多的解釋了，搭建的時候不明白，可以查看一下相關的官方文檔。
如上namenode就基本搭建完畢，接下來我們需要部署datanode，部署datanode相對簡單，執行如下操作即可。
1 fori in`seq 129130` ; doscp -r /data/hadoop/ [email protected].$i:/data/ ; done

自此整個集群基本搭建完畢，接下來就是啟動hadoop集群了。

E. 校園內網如何搭建nas

校園內網搭建nas方法及要求如下：

首先你要確認你們學校的供電情況，晚上會斷電那種的學校，每天NAS都會斷電一次對硬碟可是個不小的體驗。

如果能24小時供電，那麼恭喜，可以往下看了。

首先一般來說在學校放NAS實在是不明智的選擇，如果一定要，那麼首先你需要一個路由器，不需要太高端的，普通的就行，但是要看學校是否開啟了除了PPPoE認證以外的認證（比如銳捷等IEEE 802.1X認證），如果開了，就需要找能用撥號器的路由器了，這里不展開。

假定你前面都搞定了，就只需要將路由器連上網，配置好用戶名密碼，然後將NAS的網口和路由器的LAN口連接起來，開機。

在同一個路由器下的電腦就可以訪問到NAS了，在系統設置裡面有內網穿透功能。

假定你用的是群暉，那麼就打開ConnectID功能，配置好你想要的ConnectID。

OK，只要路由器開著，網沒斷，你就可以通過ConnectID訪問NAS了。

但是學校一般沒有公網IP，就算有也不可能每個宿舍一個公網IP，而且運營商還屏蔽了SAMBA的埠，所以基本不太可能用SAMBA的方式來訪問了。

就用WEB頁面也相關APP試用一下吧。

NAS簡介

NAS（Network Attached Storage：網路附屬存儲）按字面簡單說就是連接在網路上，具備資料存儲功能的裝置，因此也稱為「網路存儲器」。它是一種專用數據存儲伺服器。

它以數據為中心，將存儲設備與伺服器徹底分離，集中管理數據，從而釋放帶寬、提高性能、降低總擁有成本、保護投資。其成本遠遠低於使用伺服器存儲，而效率卻遠遠高於後者。目前國際著名的NAS企業有Netapp、EMC、OUO等。

NAS解決方案通常配置為作為文件服務的設備，由工作站或伺服器通過網路協議（如TCP/IP）和應用程序（如網路文件系統NFS或者通用Internet文件系統CIFS）來進行文件訪問。大多數NAS連接在工作站客戶機和NAS文件共享設備之間進行。這些連接依賴於企業的網路基礎設施來正常運行。

為了提高系統性能和不間斷的用戶訪問，NAS採用了專業化的操作系統用於網路文件的訪問，這些操作系統既支持標準的文件訪問，也支持相應的網路協議，因此NAS技術能夠滿足特定的用戶需求。

例如當某些企業需要應付快速數據增長的問題，或者是解決相互獨立的工作環境所帶來的系統限制時，可以採用新一代NAS技術，利用集中化的網路文件訪問機制和共享來解決這些問題，從而達到減少系統管理成本，提高數據備份和恢復功能的目的。

F. 樹莓派搭建文件伺服器

https://www.raspberrypi.org/downloads/raspberry-pi-os/

安裝 Etcher 之迅段後啟動 Etcher，插入 SD 卡、選擇要安裝的 img 文件、選擇 SD 卡對應的磁碟分區
https://www.balena.io/etcher/

① 新建一個ssh空白文件，放到root目錄下，樹莓派開機會自動啟用
② 網路優先選擇有線網路
③ 無線網路
將刷好 Raspbian 系統的 SD 卡用電腦讀取。在 boot 分區，也就是樹莓派的 /boot 目錄下新建

具體詳情看下面
https://shumeipai.nxez.com/2017/09/13/raspberry-pi-network-configuration-before-boot.html

方法1:利用路由器軟體查看IP地址

方法2:

ssh連接默罩昌激認用戶名：pi 密碼：raspberry

方法3:IP Scanner

1.切換 root許可權 sudo su
2.編輯下列文件

連物襪接raw.githubusercontent.com失敗
step1 ：
在 https://site.ip138.com/raw.Githubusercontent.com/
輸入raw.githubusercontent.com查詢IP地址
step2 ：
sudo nano /etc/hosts
你查到的ip地址，香港的就行 raw.githubusercontent.com
比如：
151.101.76.133 raw.githubusercontent.com

OpenMediaVault項目地址：
https://github.com/OpenMediaVault-Plugin-Developers/installScript

執行安裝腳本：

step1:
輸入樹莓派的IP地址
初始用戶名：admin
密碼：openmediavault
step2:
1.連接硬碟
2.文件系統—>卸載硬碟
3.磁碟—>擦除
4.文件系統—>新建 文件系統選擇EXT4
5.掛載—>應用
6.共享文件夾—>新建一個文件夾 設置許可權
7.SMB/CIFS —>啟用
8.共享—>添加共享

mac登陸
前往：連接伺服器 smb://樹莓派的ip地址
windows
我的電腦—>右鍵—>映射網路驅動器—>找到共享的文件夾

G. 基於mogileFS搭建分布式文件系統--海量小文件的存儲利器

1.簡介

分布式文件系統（Distributed File System）是指文件系統管理的物理存儲資源不一定直接連接在本地節點上，而是通過計算機網路與節點相連。分布式文件系統的設計基於客戶機/伺服器模式。一個典型的網路可能包括多個供多用戶訪問的伺服器。另外，對等特性允許一些系統扮演客戶機和伺服器的雙重角色。例如，用戶可以「發表」一個允許其他客戶機訪問的目錄，一旦被訪問，這個目錄對客戶機來說就像使用本地驅動器一樣。

當下我們處在一個互聯網飛速發展的信息 社會 ，在海量並發連接的驅動下每天所產生的數據量必然以幾何方式增長，隨著信息連接方式日益多樣化，數據存儲的結構也隨著發生了變化。在這樣的壓力下使得人們不得不重新審視大量數據的存儲所帶來的挑戰，例如：數據採集、數據存儲、數據搜索、數據共享、數據傳輸、數據分析、數據可視化等一系列問題。

傳統存儲在面對海量數據存儲表現出的力不從心已經是不爭的事實，例如：縱向擴展受陣列空間限制、橫向擴展受交換設備限制、節點受文件系統限制。

然而分布式存儲的出現在一定程度上有效的緩解了這一問題，之所以稱之為緩解是因為分布式存儲在面對海量數據存儲時也並非十全十美毫無壓力，依然存在的難點與挑戰例如：節點間通信、數據存儲、數據空間平衡、容錯、文件系統支持等一系列問題仍處在不斷摸索和完善中。

2.分布式文件系統的一些解決方案

Google Filesystem適合存儲海量大個文件，元數據存儲與內存中

HDFS（Hadoop Filesystem）GFS的山寨版，適合存儲大量大個文件

TFS（Taobao Filesystem）淘寶的文件系統，在名稱節點上將元數據存儲與關系資料庫中，文件數量不在受限於名稱節點的內容空間，可以存儲海量小文件LustreOracle開發的企業級分布式系統，較重量級MooseFS基於FUSE的格式，可以進行掛載使用MogileFS

擅長存儲海量的小數據，元數據存儲與關系型資料庫中

1.簡介

MogileFS是一個開源的分布式文件系統，用於組建分布式文件集群，由LiveJournal旗下DangaInteractive公司開發，Danga團隊開發了包括 Memcached、MogileFS、Perlbal等不錯的開源項目：(註：Perlbal是一個強大的Perl寫的反向代理伺服器)。MogileFS是一個開源的分布式文件系統。

目前使用 MogileFS 的公司非常多,比如國外的一些公司,日本前幾名的公司基本都在使用這個.

國內所知道的使用 MogileFS 的公司有圖片託管網站 yupoo又拍,digg, 土豆, 豆瓣,1 號店, 大眾點評,搜狗,安居客等等網站.基本很多網站容量，圖片都超過 30T 以上。

2.MogileFS特性

1) 應用層提供服務，不需要使用核心組件

2）無單點失敗，主要有三個組件組成，分為tracker（跟蹤節點）、mogstore（存儲節點）、database（資料庫節點）

3）自動復制文件，復制文件的最小單位不是文件，而是class

4）傳輸中立，無特殊協議，可以通過NFS或HTTP實現通信

5）簡單的命名空間：沒有目錄，直接存在與存儲空間上，通過域來實現

6）不用共享任何數據

3.MogileFS的組成

1）Tracker--跟蹤器，調度器

MogileFS的核心，是一個調度器，mogilefsd進程就是trackers進程程序,trackers的主要職責有：刪除數據、復制數據、監控、查詢等等.這個是基於事件的( event-based ) 父進程/消息匯流排來管理所有來之於客戶端應用的交互(requesting operations to be performed), 包括將請求負載平衡到多個"query workers"中,然後讓 mogilefs的子進程去處理.

mogadm,mogtool的所有操作都要跟trackers打交道,Client的一些操作也需要定義好trackers,因此最好同時運行多個trackers來做負載均衡.trackers也可以只運行在一台機器上，使用負載均衡時可以使用搞一些簡單的負載均衡解決方案，如haproxy，lvs，nginx等，

tarcker的配置文件為/etc/mogilefs/mogilefsd.conf，監聽在TCP的7001埠

2）Database--資料庫部分

主要用來存儲mogilefs的元數據，所有的元數據都存儲在資料庫中，因此，這個數據相當重要，如果資料庫掛掉，所有的數據都不能用於訪問，因此，建議應該對資料庫做高可用

3）mogstored--存儲節點

數據存儲的位置，通常是一個HTTP（webDAV）伺服器，用來做數據的創建、刪除、獲取，任何 WebDAV 伺服器都可以, 不過推薦使用 mogstored . mogilefsd可以配置到兩個機器上使用不同埠… mogstored 來進行所有的 DAV 操作和流量,IO監測, 並且你自己選擇的HTTP伺服器(默認為 perlbal)用來做 GET 操作給客戶端提供文件.

典型的應用是一個掛載點有一個大容量的SATA磁碟. 只要配置完配置文件後mogstored程序的啟動將會使本機成為一個存儲節點.當然還需要mogadm這個工具增加這台機器到Cluster中.

配置文件為/etc/mogilefs/mogstored.conf，監聽在TCP的7500埠

4.基本工作流程

應用程序請求打開一個文件 (通過RPC 通知到 tracker, 找到一個可用的機器). 做一個 「create_open」 請求.

tracker 做一些負載均衡(load balancing)處理，決定應該去哪兒，然後給應用程序一些可能用的位置。

應用程序寫到其中的一個位置去 (如果寫失敗，他會重新嘗試並寫到另外一個位置去）.

應用程序 (client) 通過」create_close」 告訴tracker文件寫到哪裡去了.

tracker 將該名稱和域命的名空間關聯 (通過資料庫來做的)

tracker, 在後台, 開始復制文件，知道他滿足該文件類別設定的復制規則

然後,應用程序通過 「get_paths」 請求 domain+key (key == 「filename」) 文件, tracker基於每一位置的I/O繁忙情況回復(在內部經過 database/memcache/etc 等的一些抉擇處理), 該文件可用的完整 URLs地址列表.

應用程序然後按順序嘗試這些URL地址. (tracker』持續監測主機和設備的狀態，因此不會返回死連接,默認情況下他對返回列表中的第一個元素做雙重檢查，除非你不要他這么做..)

1.拓撲圖

說明：1.用戶通過URL訪問前端的nginx

2.nginx根據特定的挑選演算法，挑選出後端一台tracker來響應nginx請求

3.tracker通過查找database資料庫，獲取到要訪問的URL的值，並返回給nginx

4.nginx通過返回的值及某種挑選演算法挑選一台mogstored發起請求

5.mogstored將結果返回給nginx

6.nginx構建響應報文返回給客戶端

2.ip規劃

角色運行軟體ip地址反向代理nginx192.168.1.201存儲節點與調度節點1

mogilefs192.168.1.202存儲節點與調度節點2

mogilefs192.168.1.203資料庫節點

MariaDB192.168.1.204

3.資料庫的安裝操作並為授權

關於資料庫的編譯安裝，請參照本人相關博文http://wangfeng7399.blog.51cto.com/3518031/1393146，本處將不再累贅，本處使用的為yum源的安裝方式安裝mysql

4.安裝mogilefs. 安裝mogilefs，可以使用yum安裝，也可以使用編譯安裝，本處通過yum安裝

5.初始化資料庫

可以看到在資料庫中創建了一些表

6.修改配置文件，啟動服務

7.配置mogilefs

添加存儲主機

添加存儲設備

添加域

添加class

8.配置192.168.1.203的mogilefs 。切記不要初始化資料庫，配置應該與192.168.1.202一樣

9.嘗試上傳數據，獲取數據，客戶端讀取數據

上傳數據，在任何一個節點上傳都可以

獲取數據

客戶端查看數據

我們可以通過任何一個節點查看到數據

要想nginx能夠實現對後端trucker的反向代理，必須結合第三方模塊來實現

1.編譯安裝nginx

2.准備啟動腳本

3.nginx與mofilefs互聯

查看效果

5.配置後端truckers的集群

查看效果

大功告成了，後續思路，前段的nginx和資料庫都存在單點故障，可以實現高可用集群