FastDfs搭建以及Java使用
阿新 • • 發佈:2020-07-21
當前主流情況下都是走雲端儲存的,但有些專案非常注重保密性,在這種情況下只能存到私有的伺服器上。那麼一個檔案儲存系統就至關重要了。本篇部落格講的是FastDfs的安裝與使用,那麼話不多說,開始吧:
一. 首先修改host,因為後續會有很多修改ip的地方,用更改host的方式會方便很多
192.168.1.177 file.agatha.com
二. 下載安裝 libfastcommon
1. 下載libfastcommon wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz 2. 解壓、編譯、安裝 tar -zxvf V1.0.7.tar.gz cd libfastcommon-1.0.7 ./make.sh ./make.sh install 3. libfastcommon.so 安裝到了/usr/lib64/libfastcommon.so,但是FastDFS主程式設定的lib目錄是/usr/local/lib,所以需要建立軟連結 ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
三. 下載安裝FastDFS
1. 下載 wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz 2. 解壓、編譯、安裝 tar -zxvf V5.05.tar.gz cd fastdfs-5.05 ./make.sh ./make.sh install 3. 預設安裝方式安裝後的相應檔案與目錄 A、服務指令碼: /etc/init.d/fdfs_storaged /etc/init.d/fdfs_tracker B、配置檔案(這三個是作者給的樣例配置檔案) : /etc/fdfs/client.conf.sample /etc/fdfs/storage.conf.sample /etc/fdfs/tracker.conf.sample C、命令工具在 /usr/bin/ 目錄下: (4)FastDFS 服務指令碼設定的 bin 目錄是 /usr/local/bin, 但實際命令安裝在 /usr/bin/ 下,所以需要建立軟連結 ln -s /usr/bin/fdfs_trackerd /usr/local/bin ln -s /usr/bin/fdfs_storaged /usr/local/bin ln -s /usr/bin/stop.sh /usr/local/bin ln -s /usr/bin/restart.sh /usr/local/bin
四. 配置FastDFS跟蹤器(Tracker)
1. 進入 /etc/fdfs,複製 FastDFS 跟蹤器樣例配置檔案 tracker.conf.sample,並重命名為 tracker.conf cd /etc/fdfs cp tracker.conf.sample tracker.conf vim tracker.conf 2. 編輯tracker.conf ,其它的預設即可 # Tracker 資料和日誌目錄地址(根目錄必須存在,子目錄會自動建立) base_path=/ljzsg/fastdfs/tracker # HTTP 服務埠 http.server_port=80 3. 建立tracker基礎資料目錄,即base_path對應的目錄 # mkdir -p /ljzsg/fastdfs/tracker 4. 防火牆中開啟跟蹤埠(預設的22122),沒有防火牆就無需操作。 5. 啟動Tracker 初次成功啟動,會在 /ljzsg/fdfsdfs/tracker/ (配置的base_path)下建立 data、logs 兩個目錄。 可以用這種方式啟動 # /etc/init.d/fdfs_trackerd start 也可以用這種方式啟動,前提是上面建立了軟連結,後面都用這種方式 # service fdfs_trackerd start 檢視 FastDFS Tracker 是否已成功啟動 ,22122埠正在被監聽,則算是Tracker服務安裝成功。 # netstat -unltp|grep fdfs 關閉Tracker命令: # service fdfs_trackerd stop 6. 設定Tracker開機啟動 # chkconfig fdfs_trackerd on 或者: # vim /etc/rc.d/rc.local 加入配置: /etc/init.d/fdfs_trackerd start 7. tracker server 目錄及檔案結構 Tracker服務啟動成功後,會在base_path下建立data、logs兩個目錄。目錄結構如下: ${base_path} |__data | |__storage_groups.dat:儲存分組資訊 | |__storage_servers.dat:儲存伺服器列表 |__logs | |__trackerd.log: tracker server 日誌檔案
五. 配置 FastDFS 儲存 (Storage)
1. 進入 /etc/fdfs 目錄,複製 FastDFS 儲存器樣例配置檔案 storage.conf.sample,並重命名為 storage.conf cd /etc/fdfs cp storage.conf.sample storage.conf vim storage.conf 2. 編輯storage.conf # Storage 資料和日誌目錄地址(根目錄必須存在,子目錄會自動生成) base_path=/data/fastdfs/storage # 逐一配置 store_path_count 個路徑,索引號基於 0。 # 如果不配置 store_path0,那它就和 base_path 對應的路徑一樣。 store_path0=/data/fastdfs/file # tracker_server 的列表 ,會主動連線 tracker_server # 有多個 tracker server 時,每個 tracker server 寫一行 tracker_server=file.agatha.com:22122 # 訪問埠 http.server_port=80 3. 建立Storage基礎資料目錄,對應base_path目錄 # mkdir -p /data/fastdfs/storage # 這是配置的store_path0路徑 # mkdir -p /data/fastdfs/file 4. 防火牆中開啟儲存器埠(預設的 23000) 5. 啟動 Storage 啟動Storage前確保Tracker是啟動的。初次啟動成功,會在 /ljzsg/fastdfs/storage 目錄下建立 data、 logs 兩個目錄。 可以用這種方式啟動 # /etc/init.d/fdfs_storaged start 也可以用這種方式,後面都用這種 # service fdfs_storaged start 檢視 Storage 是否成功啟動,23000 埠正在被監聽,就算 Storage 啟動成功。 # netstat -unltp|grep fdfs 關閉Storage命令: # service fdfs_storaged stop 檢視Storage和Tracker是否在通訊: /usr/bin/fdfs_monitor /etc/fdfs/storage.conf 如果有:ACTIVE,表示成功 6. 設定 Storage 開機啟動 # chkconfig fdfs_storaged on 或者: # vim /etc/rc.d/rc.local 加入配置: /etc/init.d/fdfs_storaged start 7. Storage 目錄 同 Tracker,Storage 啟動成功後,在base_path 下建立了data、logs目錄,記錄著 Storage Server 的資訊。 在 store_path0 目錄下,建立了N*N個子目錄:
六. 檔案上傳測試
1. 修改 Tracker 伺服器中的客戶端配置檔案 cd /etc/fdfs cp client.conf.sample client.conf vim client.conf 修改如下配置即可,其它預設。 # Client 的資料和日誌目錄 base_path=/data/fastdfs/client # Tracker埠 tracker_server=file.agatha.com:22122 2. 上傳測試 mkdir -p /data/fastdfs/client 在linux內部執行如下命令上傳 99.jpeg # /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 99.jpeg 上傳成功後返回檔案ID號:http://file.agatha.com/group1/M00/00/00/wKgBhV8VTlaAGIzvAAdK_-sG-CI65.jpeg
七. nginx
1. 修改nginx.conf,訪問檔案 location /group1/M00 { alias /data/fastdfs/file/data; } 記得 nginx的許可權,調整為root 2. FastDFS 配置 Nginx 模組
八. Java客戶端使用
1. 加入依賴
<dependency>
<groupId>net.oschina.zcx7878</groupId>
<artifactId>fastdfs-client-java</artifactId>
<version>1.27.0.0</version>
</dependency>
2. 引入配置檔案
參考:
https://www.cnblogs.com/chiangchou/p/fastdfs.html
3. 客戶端API 使用
前輩封裝的FastDFS Java API
https://github.com/bojiangzhou/lyyzoo-fastdfs-java.git