FastDFSの導入(A)

1.はじめに

FastDFSファイル管理機能が含まれます:などのファイルストレージ、ファイルの同期、ファイルアクセス(ファイルのアップロード、ファイルのダウンロード、ファイルの削除)を、大きなファイルの問題を解決するために、特に、アルバムなどのファイル・キャリアオンラインサービスのためにウェブサイト、ウェブサイトの文書、ウェブサイトの画像、動画サイト、および上そう。

冗長性、線膨張メカニズム、および高可用性、高性能およびその他の指標に焦点を当てるのFastDFS完全なアカウントは、それはファイルのアップロードおよびダウンロードサービスを提供するために、高性能なファイルサーバクラスタを構築するために使用FastDFSに簡単です。

 

  サーバートラッカー:追跡サーバー、スケジューリング作業の主な仕事、バランスをとる役割を果たして、ストレージサーバやグループのすべての管理を担当する、各ストレージトラッカーコネクトを開始した後、彼らは他の情報に属しているグループを通知し、かつ定期的にハートビートを維持します。

  サーバストレージ:ストレージサーバ、容量とバックアップサービスを提供しています。グループにユニットとしては、各グループが複数のストレージサーバーを持つことができ、データは互いをバックアップします。

  クライアント:サーバー展開で、私たち自身のプロジェクトであるクライアント、アップロードとダウンロードデータサーバ、。

 

2、FastDFSストレージ戦略

大容量をサポートするために、サブボリューム(またはパケット)を使用して、ストレージノード(サーバ)が編成されています。ストレージ・システムは、ボリューム・ファイルとボリュームが独立している間、すべてのボリュームのファイル容量は、ストレージシステム全体のファイル蓄積容量で、一つ以上のボリュームで構成されています。ボリュームは、1つまたは複数のストレージサーバから形成することができる、ファイルボリューム下ストレージサーバーが同じである、複数のストレージサーバのボリューム効果のバランスをとる冗長性と負荷を果たしました。

ボリュームサーバの増加は、既存のファイルの同期は、同期が完了した後、システムは自動的に新しいサーバーオンラインサービスに切り替え、システムによって自動的に完了します。メモリが少ないか、なくなっうとしているとき、あなたは動的にボリュームを追加することができます。だけなので、ストレージシステムの容量を拡張することを、1つ以上のサーバーを追加し、新しいロールのためにそれらを設定する必要があります。

3、FastDFSアップロードプロセス

FastDFS向使用者提供基本文件访问接口,比如upload、download、append、delete等,以客户端库的方式提供给用户使用。

Storage Server会定期的向Tracker Server发送自己的存储信息。当Tracker Server Cluster中的Tracker Server不止一个时,各个Tracker之间的关系是对等的,所以客户端上传时可以选择任意一个Tracker。

当Tracker收到客户端上传文件的请求时,会为该文件分配一个可以存储文件的group,当选定了group后就要决定给客户端分配group中的哪一个storage server。当分配好storage server后,客户端向storage发送写文件请求,storage将会为文件分配一个数据存储目录。然后为文件分配一个fileid,最后根据以上的信息生成文件名存储文件。

4、FastDFS的文件同步

写文件时,客户端将文件写至group内一个storage server即认为写文件成功,storage server写完文件后,会由后台线程将文件同步至同group内其他的storage server。

每个storage写文件后,同时会写一份binlog,binlog里不包含文件数据,只包含文件名等元信息,这份binlog用于后台同步,storage会记录向group内其他storage同步的进度,以便重启后能接上次的进度继续同步;进度以时间戳的方式进行记录,所以最好能保证集群内所有server的时钟保持同步。

storage的同步进度会作为元数据的一部分汇报到tracker上,tracke在选择读storage的时候会以同步进度作为参考。

5、FastDFS的文件下载

客户端uploadfile成功后,会拿到一个storage生成的文件名,接下来客户端根据这个文件名即可访问到该文件。

跟upload file一样,在downloadfile时客户端可以选择任意tracker server。tracker发送download请求给某个tracker,必须带上文件名信息,tracke从文件名中解析出文件的group、大小、创建时间等信息,然后为该请求选择一个storage用来服务读请求。

おすすめ

転載: www.cnblogs.com/dalianpai/p/11827311.html