QTier unter QuTS Hero 6.0

Wir hatten schon zuvor Themen, bei denen direkte ZFS-Manipulationen im Desaster endeten.

qutears

Könntest du die folgende Checkliste durchgehen und prüfen, ob bei jedem Schritt Probleme auftreten? Falls möglich, teile bitte die Ergebnisse der einzelnen Schritte mit uns oder gib Bescheid, wo etwas schiefläuft. (Die ersten drei Schritte hast du wahrscheinlich schon überprüft, aber ich habe sie der Vollständigkeit halber beigefügt.)

Unsere aktuelle Vermutung ist, dass das Problem bei Schritt 4 liegt – möglicherweise müssen neue Daten geschrieben werden, bevor die Datenmigration ausgelöst wird.

Bitte schau dir das Ganze an und gib uns Bescheid, wie es läuft. Danke!

Schritt 1 : Im GUI Tiering-Zeitplan setzen
KEIN Mindestaufbewahrung einstellen

Schritt 2 : crontab-Einstellungen prüfen

0 8 * * * /sbin/zfs_storage_util --tier_migration pool_id=[pool_id] >/dev/null 2>&1

Schritt 3 : Im GUI Tiering einstellen
Ziel-Tier: Low-speedWrite-buffer

Schritt 4 : Daten-Dateien in den Testordner kopieren.

Daten von beliebigen Clients (SMB) in den als write-buffer festgelegten Ordner kopieren. Dann einige Minuten warten.

Schritt 5 : Manueller Befehl
/sbin/zfs_storage_util --tier_migration pool_id=[pool_id]

Schritt 6 : GUI prüfen

Schritt 7 : zpool-Befehl & [reloc] Zeit prüfen

[~] # zpool status

@SteveKo

Ich habe alle diese Schritte bereits vorher ausgeführt. Ich habe sie nochmal gemacht, aber es hat sich nichts geändert. Die ein-/ausgehenden Bytes sind immer noch alle null.

Wenn ich mir allerdings den Status von zpool anschaue (siehe unten, Pool 2 ist der mit ztier, über den wir sprechen), steht da, dass ztier seit dem 10. August nicht mehr gelaufen ist. Ich habe das Gefühl, das hängt damit zusammen, dass am 11. August das Scrubbing gestartet wurde, welches ich pausiert habe. Ist es möglich, dass ztier während des Scrubbings nicht läuft? Und dass das System bei pausiertem Scrubbing denkt, das Scrubbing wäre noch im Gange und somit qtier nie startet?

Danke,

Gaetan

$ zpool status
pool: zpool1
state: ONLINE
scan: scrub repaired 0 in 0 days 00:00:08 with 0 errors on Sat Aug  1 00:00:10 2026
prune: last pruned 0 entries, 0 entries are pruned ever
total pruning count #5, avg. pruning rate = 0 (entry/sec)
expand: none requested
ztier: [reloc] none requested
[smart] none requested
config:

NAME                                      STATE     READ WRITE CKSUM
zpool1                                    ONLINE       0     0     0
  qzfs/enc_0/disk_0xa_5F8DB4C502540276_3  ONLINE       0     0     0

errors: No known data errors

pool: zpool2
state: ONLINE
scan: scrub paused since Fri Aug 21 14:51:08 2026
scrub started on   Tue Aug 11 00:00:56 2026
230T scanned out of 261T
0 repaired, 88.01% done, no estimated completion time
prune: last pruned 1759474 entries, 77673019 entries are pruned ever
total pruning count #11, avg. pruning rate = 2974973 (entry/sec)
expand: migrated 54.8T in 1 days 00:06:55 with 0 errors on Wed Jul  8 07:42:10 2026
ztier: [reloc] migrated 0 in 0 days 01:26:29 with 0 errors on Mon Aug 10 23:06:36 2026
T1:(+0)(-0), T2:(+0)(-0), T3:(+0)(-0), T4:(+0)(-0), T5:(+0)(-0)
[smart] none requested
config:

NAME                                            STATE     READ WRITE CKSUM
zpool2                                          ONLINE       0     0     0
  mirror-0                                      ONLINE       0     0     0
    qzfs/enc_0/disk_0x1_S6VANE0TB02122_3        ONLINE       0     0     0
    qzfs/enc_0/disk_0x2_S6CKNN0TB03046_3        ONLINE       0     0     0
  raidz2-1                                      ONLINE       0     0     0
    qzfs/enc_1/disk_0x10001_5000039EA8D98686_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10002_5000039EA8D9532A_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10003_5000039EA8D958AD_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10004_5000039EA8D939E5_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10005_5000039EA8D99646_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10006_5000039EA8D9964B_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10013_5000CCA415C31B4A_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10014_5000CCA415C302E6_3  ONLINE       0     0     0
  raidz2-2                                      ONLINE       0     0     0
    qzfs/enc_1/disk_0x10007_5000039EA8D99B3C_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10008_5000039EA8D99349_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10009_5000039EA8D99737_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x1000a_5000039EA8D9977D_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x1000b_5000039EA8D99356_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x1000c_5000039EA8D955FF_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10015_5000CCA415C2493E_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10016_5000CCA415C3D24D_3  ONLINE       0     0     0
  raidz2-3                                      ONLINE       0     0     0
    qzfs/enc_1/disk_0x1000d_5000039EA8D98CD1_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x1000e_5000039EA8D997AF_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x1000f_5000039EA8D97F85_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10010_5000039EA8D969D2_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10011_5000039EA8D99751_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10012_5000039EA8D98DF8_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10017_5000CCA415C3E9F0_3  ONLINE       0     0     0
    qzfs/enc_1/disk_0x10018_5000CCA415C3CAFE_3  ONLINE       0     0     0

errors: No known data errors

pool: zpoolExt2
state: ONLINE
scan: resilvered 7.82M in 0 days 00:00:01 with 0 errors on Wed Jul  1 15:05:54 2026
prune: never
expand: none requested
ztier: [reloc] none requested
[smart] none requested
config:

NAME                                        STATE     READ WRITE CKSUM
zpoolExt2                                   ONLINE       0     0     0
  mirror-0                                  ONLINE       0     0     0
    qzfs/enc_0/disk_0x1_S6VANE0TB02122_2    ONLINE       0     0     0
    qzfs/enc_0/disk_0x2_S6CKNN0TB03046_2    ONLINE       0     0     0
    qzfs/enc_0/disk_0xa_5F8DB4C502540276_2  ONLINE       0     0     0

errors: No known data errors

Könntest du bitte prüfen, ob im Ereignisprotokoll Einträge wie „Started tiering“ auftauchen? Hast du in diesem Zeitraum auch einen Neustart versucht? Falls du vermutest, dass der Scrub-Prozess festhängt, könnte ein Neustart einen Versuch wert sein. Ich werde die Situation außerdem weiter intern mit unserem Team verfolgen.

Danke!

Hallo Steve,

ich habe das Ereignisprotokoll hochgeladen. Ich glaube, ich habe dort etwas gefunden. Du kannst sehen, dass ich das Pool-Scrubbing manuell gestoppt habe (orange Eintrag), während gerade eine Tiering-Operation lief. Danach habe ich das Scrubbing deaktiviert. Seitdem ist das Tiering nie wieder gestartet. Das Problem hängt also vermutlich irgendwie seltsam mit Tiering und Scrubbing zusammen.

Danke,

Gaetan

Nachdem ich das Pool-Scrubbing wieder aktiviert habe, funktioniert das Qtier plötzlich wieder! Es gibt definitiv eine nicht dokumentierte Wechselwirkung zwischen Pool-Scrubbing und Tiering.

Soweit ich mich erinnere, war die Reihenfolge der Ereignisse so:

Qtiering läuft und der Pool wurde gescrubbt

Manuell auf „Stop“ beim Scrubbing geklickt

Zukünftiges Scrubbing deaktiviert.

Qtier startet nie wieder.

Ich bin nicht sicher, ob das reproduzierbar ist, aber hoffentlich hilft das irgendwann jemandem weiter.

Keine qutears mehr!

Gaetan