2PB以上のQNAP NASを構築したい

QNAPのラックマウントハードウェアを使って2PB以上のNAS構築を計画しています。TS-h1677AXU-RP-R7-32Gを選定し、メモリを128GBにアップグレード、QXP-820S-B3408カードを2枚追加、さらにTL-R1620SEP-RPを4台、合計でSeagate 32TB SATA 6.0Gb/s 3.5インチHDDを80台搭載する予定です。質問は2つあります。1) この構成で問題なく動作し、記載したストレージ容量に対応できますか?2) 25Gbeアダプターはこの構成で意味がありますか、それとも10Gbeで十分でしょうか?2PB以上という要件に見合う他のおすすめ構成もあればぜひ教えてください。また、NASにSSDキャッシュを搭載することにも興味があります。

ここに小さな注意書きをご覧ください(ただし、おそらくZFS搭載のQuTSを狙っているのでしょう)

https://www.qnap.com/en-ca/compatibility-expansion?expansion=tl-r1620sep-rp

RAIDグループでサポートされる最大サイズは308TBです。
ストレージプールでサポートされる最大サイズは308TBです。(QTSバージョン4.2以降、ストレージプールの最小サイズは144GBです。)
ボリュームおよびiSCSI LUNの最大容量は、ドライブの容量とシステム仕様の両方に依存します。

  • NASのRAMが4GB未満の場合、最大容量は144TBです。
  • NASのRAMが4GB以上の場合、最大容量は250TBです。

また、これほど大容量のストレージでは、QNAPのキャッシュオプション(NVMeキャッシュ2、3、4台)では、ほとんどメリットを得られません。

@Bob、OPの計画はうまくいくでしょうか?(拡張シャーシは使ったことがありません)

「いいね!」 1

私の現在の考えは、Petabyte storage solution | QNAP を参考にしています。

TS-h2287XU-RP には 3.5インチベイが16基、2.5インチベイが6基あり、私はこれがSSDキャッシュ用だと思っていました。15TBのエンタープライズSSDを使用すれば約90TBになるので、キャッシュも可能だと思います。このようなハードウェアを扱うのは初めてなので、何かを注文する前にできるだけ計画を立てておきたいです。

8GBを超えるメモリを搭載したZFS QuTS NASは、すでにARCキャッシュを使用しています。

https://www.qnap.com/ja-jp/how-to/faq/article/why-is-ram-usage-so-high-in-quts-hero

また、キャッシュは魔法ではありません。同じブロックを何度も何度も読み込むアプリケーションがない限り、メリットはありません。(そして、これだけ多くのディスクがあれば、シーケンシャルリードもすでにかなり速いはずです)

「いいね!」 2

ご協力ありがとうございます。QNAPペタバイトストレージのページには「NASには少なくとも128GBのRAMが必要です」と記載されていますので、どれくらいRAMが余るかは分かりません。これは同じファイルを何度も読み込むビッグデータプロジェクト用ですが、キャッシュが絶対に必要というわけではありません。主な要件は2PB以上のストレージです。冗長化後に少し下回っても構いませんが、約2PB以上あれば成長の余地があります。

あなたは考え方を間違えています。QNAP TS-h2477AXU-RPを入手してください。そしてQuTSのみを実行します。TS-h2477AXU-RPにM.2 NVMeドライブを2台搭載し、ストレージプール1 > RAID 1構成でシステム用に使用します。その後、Seagate Ironwolf Pro SATAドライブを24台搭載します。28TBドライブをRAID 60構成(4台までドライブが故障可能—QNAPは24台でRAID 5やRAID 6を許可しません)にすると、使用可能なストレージは560TBになります。現在ではSeagate Ironwolf ProまたはSeagate EXOS 32TBドライブも入手可能なので、RAID 60後は使用可能なストレージが640TBになります。

さて、さらにストレージが必要な場合は、QNAP TL-R2400PES 24ベイエクスパンダーを購入します。これはQNAP QXP-3X8PESエクスパンダーを使用します。TS-h2477AXU-RPにはこれらの24ベイエクスパンダーを8台まで接続でき、メインシャーシと3台のエクスパンダーで2ペタバイトを実現できます。

それでもまだストレージが足りない場合は、QNAPがまもなく新しい60ベイTL-R6020Sepエクスパンダーをリリース予定で、これも複数台接続可能です。

参考までに、TL-R1620SEP-RPは新しいTS-h1677AXU-RPとは併用しません。24ベイエクスパンダーが必要ならTL-R2400PESを使えますが、16ベイエクスパンダーの場合はTL-R1600PES-RPと、先ほど述べた同じエクスパンダーカードを使用します。

他にも質問がありますか?どうぞお尋ねください。私はこのような巨大システムを常に扱っています。

Bob Zelin

追記:用途が明記されていません。スイッチへのユーザーインターフェースは10Gで十分ですか、それとも25Gが必要ですか?何をされる予定ですか?ビデオ編集ですか?保険会社ですか?病院ですか?ビデオ編集の場合はQNAP 25G CX6カードを搭載し、新しい素晴らしいQNAP QSW-M7230スイッチ(24ポート10G銅線イーサネット、4ポート25G SFP28、2ポート100G QSFP)に接続します。

「いいね!」 2

おそらくこれを意味しているのでしょう:

ARCは最大使用量が70%(グローバルストレージ設定で設定)で、ZFS/QuTSはRAM使用量と特に連動していないと思います。少なくともこのページによればそうです。

なので、35GB程度は余るかもしれません(上記ページでは3PB以上の場合は最低265GBと記載されていますが)。

「いいね!」 1

ありがとうございます、@Bob。私たちのユースケースはビッグデータで、ペタバイト規模のファイル(通常は約1MB~約250MB)が継続的に扱われます。他のハードウェア用にすでに100Gbeネットワークがありますので、おそらく25Gbeにしようと思っています(ここではHDDなので40Gbeや100Gbeにしてもメリットはないと考えていますが、合っていますか?)。

私の理解を確認させてください。QNAP TS-h2477AXU-RPにQNAP QXP-3X8PESを1枚、QNAP TL-R2400PESを3台接続するというご提案でしょうか?QNAP QXP-3X8PESの各ポートからそれぞれ1台のQNAP TL-R2400PESに接続し、3台目のQNAP TL-R2400PESは最初の2台のどちらかにデイジーチェーン接続する、という形でしょうか?

QNAP QXP-3X8PESはPCIスロット2に挿し(スロット1は空けておくことでスロット2がx8帯域幅を確保)、25Gbeカードはスロット3のx4 PCIに挿す、ということで合っていますか?

また、QNAP TS-h2477AXU-RPは本当に192GBのRAMだけで8台の24ベイ拡張ユニットをサポートできるのでしょうか?現在、QNAP TL-R2400PESを4台使用することを検討していますが、NASには256GBのRAMが必要になる可能性がありますか?

こんにちは ― エキスパンダーシャーシはデイジーチェーン接続します。エキスパンダーには「特殊な」ケーブルが付属しており、エキスパンダーカードから最初のエキスパンダーシャーシ、次に2台目、そして3台目へと単純に接続します。ネットワークについては、QNAP 25G CX6カードを購入します。これはSFP28であり、40Gではないため、スイッチの40Gポートには接続できません。適切なスイッチがない場合は、新しいQNAP QSW-M7230が素晴らしい選択肢です。10G baseT銅線ポート、4つのSFP28 25Gポート、2つの100Gポートを備えています。40Gはすでに終わった規格で、もはや40G製品を作っているメーカーはありません。

Bob Zelin

正直なところ、私には全く分かりません。新しいTL-R6020Sep 60ベイの方を検討してみてはいかがでしょうか?私はTS-h2477AXU-RPやTS-h3087XU-RP(どちらも24ベイのQNAP)で3台以上のエクスパンダーシャーシを組んだことがないので、正直に言ってご質問にはお答えできません。

ボブ・ゼリン