使用Nginx反向代理到go-fastdfs的方法示例

2022-10-6 12:53| 查看: 1198 |來源: 互聯網

背景 go-fastdfs是支持http協議的一款分布式文件系統，在一般的項目中，很少是直接將文件系統的地址暴露出來的，大多數都會通過nginx等軟件進行反代過去，由 ...

背景

go-fastdfs是支持http協議的一款分布式文件系統，在一般的項目中，很少是直接將文件系統的地址暴露出來的，大多數都會通過nginx等軟件進行反代過去，由于我司的業務和網絡環境場景相對特殊，由公網部分(公有云)和內網部分(私有云)組成的混合云網絡體系，公有云主要就是作為一個出口和入口以及運行一些審計認證等應用，對上游請求進行處理，從而減少私有云的處理次數，提升性能。那么也正是因為這樣，在公網的環境下，要訪問到私有云提供的服務則必須使用反向代理。同樣道理，對于文件系統的訪問也如此，如何在nginx中進行配置才能使得外部的網絡請求可以反向代理到go-fastdfs呢？本文將逐步闡述。

一般配置

在一般的情況下，熟悉nginx的朋友都知道，如果需要配置反向代理，直接寫一個location上下文和proxy模塊即可，如果需要自定義前綴，使用一個rewrite模塊即可。簡單例子如下：

location ~ /dfs/group([0-9]) {
 proxy_pass http://localhost:8080;
 rewrite ^/dfs/(.*)$ /$1 break;
 proxy_set_header Host $host:$server_port;
 proxy_set_header X-Real-IP $remote_addr;
 proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}

到這里，一般的反代配置就算是可以了，那么對于go-fastdfs而言是否可以了呢？對于go-fastdfs一般上傳是可以了，但是呢，對于使用了tus做斷點續傳還是不夠，為什么呢？因為tus服務端會返回301重定向，并且需要攜帶一定的請求頭過去，所以還需要特別的設置一下。

支持Tus的反代配置

如果需要做tus的反代，要支持301重定向Location的重寫還要支持一定的請求頭轉發，那該如何配置呢？請參考下面的配置

location ~ /dfs1/group([0-9]) {
 access_log logs/dfs/access.log main;
 error_log logs/dfs/error.log error;
 rewrite ^/dfs1/(.*)$ /$1 break;
 proxy_pass http://localhost:8051;
 # Disable request and response buffering
 proxy_request_buffering off;
 proxy_buffering off;
 proxy_http_version 1.1;
 proxy_set_header Host $host:$server_port;
 proxy_set_header X-Real-IP $remote_addr;
 proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
 # 如果server_name不是公網域名，這個地方可以設置成ip
 proxy_set_header X-Forwarded-Host $hostname;
 proxy_set_header X-Forwarded-Proto $scheme;
 proxy_set_header Upgrade $http_upgrade;
 proxy_set_header Connection "upgrade";
 # 因為使用了前綴加rewrite，所以要修改返回的Location加上反向代理的前綴
 proxy_redirect ~^(.*)/group([0-9])/big/upload/(.*) /dfs/group$2/big/upload/$3;
 client_max_body_size 0;
}

上面要注意一下就是proxy_redirect和client_max_body_size這兩個配置，第一個配置是因為tus服務端返回的重定向Location是不會攜帶自定義前綴的，因此需要自己加入自定義的前綴，我這里是/dfs,如果是別的，更換下就好。第二個就是client_max_body_size了，這個是設置為0表示不管上傳多大的文件都不會報request too large的問題，直接轉發過去，如果需要設置，那么請設置大于等于chunkSize的數字。什么是chunkSize?就是tus客戶端分塊上傳的時候，每一塊的大小，具體請參考官方文檔。

負載均衡配置

在配置了集群服務器的情況下，上傳或者下載如何進行負載均衡呢？使用nginx做了反代，配合upstream模塊就可以實現了，具體參考如下配置

upstream dfs_stream {
 server host1:port;
 server host2:port;
 ip_hash;
}

上面的配置和一般的負載均衡沒有什么不一樣，唯一要注意的是要配置ip_hash，為什么呢？因為使用斷點續傳的時候，文件是分塊上傳的，如果不是ip_hash的話，有可能會前面幾片被上傳到A服務器，后面幾片被上傳到B服務器，那么這樣子文件就不是完整的了，因此需要注意這個問題。

本文最后更新于 2022-10-6 12:53，某些文章具有時效性，若有錯誤或已失效，請在網站留言或聯系站長：17tui@17tui.com

·END·

站長網微信號：w17tui，關注站長、創業、關注互聯網人 - 互聯網創業者營銷服務中心

免責聲明：本站部分文章和圖片均來自用戶投稿和網絡收集，旨在傳播知識，文章和圖片版權歸原作者及原出處所有，僅供學習與參考，請勿用于商業用途，如果損害了您的權利，請聯系我們及時修正或刪除。謝謝！

下一篇：詳解Nginx http資源請求限制的三種方法！上一篇：Windows系統安裝maven配置圖文教程

17站長網微信二維碼

始終以前瞻性的眼光聚焦站長、創業、互聯網等領域，為您提供最新最全的互聯網資訊，幫助站長轉型升級，為互聯網創業者提供更加優質的創業信息和品牌營銷服務，與站長一起進步！讓互聯網創業者不再孤獨！

掃一掃，關注站長網微信

精品免费在线观看-精品欧美-精品欧美成人bd高清在线观看-精品欧美高清不卡在线-精品欧美日韩一区二区

使用Nginx反向代理到go-fastdfs的方法示例

大家都在看

相關分類

熱門排行

最近更新