Impostazioni avanzate di Deduplicazione dati
In questo documento viene descritto come modificare le impostazioni di deduplicazione avanzate. Per i carichi di lavoro consigliati, le impostazioni predefinite dovrebbero essere sufficienti. Il motivo principale per cui si modificano queste impostazioni è migliorare le prestazioni della deduplicazione dei dati con altri tipi di carichi di lavoro.
Modifica delle pianificazioni dei processi di deduplicazione dati
Le pianificazioni predefinite dei processi di deduplicazione dati sono progettate in modo da funzionare per i carichi di lavoro consigliati ed essere il meno possibile intrusive (escluso il processo Ottimizzazione della priorità che è abilitato per il tipo di utilizzo Backup). Quando i carichi di lavoro richiedono la disponibilità di un gran numero di risorse, è possibile garantire che i processi vengano eseguiti solo durante le ore di inattività oppure ridurre o aumentare la quantità di risorse di sistema che un processo di deduplicazione dati è autorizzato a consumare.
Modifica di una pianificazione della deduplicazione dei dati
I processi di deduplicazione dati vengono pianificati dal servizio Utilità di pianificazione di Windows, che consente di visualizzarli e modificarli nel percorso Microsoft\Windows\Deduplication. La deduplicazione dei dati include diversi cmdlet che semplificano la pianificazione.
Get-DedupSchedule
visualizza i processi pianificati correnti.New-DedupSchedule
crea un nuovo processo pianificato.Set-DedupSchedule
modifica un processo pianificato esistente.Remove-DedupSchedule
rimuove un processo pianificato.
Il motivo più comune per cui si modifica l'orario in cui devono essere eseguiti i processi di deduplicazione dei dati è la necessità di assicurarsi che vengano eseguiti durante le ore non lavorative. L'esempio dettagliato seguente illustra come modificare la pianificazione di Deduplicazione dati per uno scenario di giorno di sole: un host Hyper-V iperconvergente che è inattivo nei fine settimana e dopo le 19:00 durante la settimana. Per modificare la pianificazione, eseguire i cmdlet di PowerShell indicati di seguito in un contesto Amministratore.
Disabilitare i processi di ottimizzazione con pianificazione oraria.
Set-DedupSchedule -Name BackgroundOptimization -Enabled $false Set-DedupSchedule -Name PriorityOptimization -Enabled $false
Rimuovere i processi Garbage Collection e Pulitura dell'integrità attualmente pianificati.
Get-DedupSchedule -Type GarbageCollection | ForEach-Object { Remove-DedupSchedule -InputObject $_ } Get-DedupSchedule -Type Scrubbing | ForEach-Object { Remove-DedupSchedule -InputObject $_ }
Creare un processo di ottimizzazione notturno che venga eseguito alle 19:00 con priorità alta e tutte le CPU e tutta la memoria disponibili nel sistema.
New-DedupSchedule -Name "NightlyOptimization" -Type Optimization -DurationHours 11 -Memory 100 -Cores 100 -Priority High -Days @(1,2,3,4,5) -Start (Get-Date "2016-08-08 19:00:00")
Nota
La parte date del
System.Datetime
trasmesso a-Start
è irrilevante (purché sia nel passato), ma la parte time specifica quando deve iniziare il processo.Creare un processo di Garbage Collection settimanale che venga eseguito il sabato a partire dalle 7:00 con priorità alta e tutte le CPU e tutta la memoria disponibili nel sistema.
New-DedupSchedule -Name "WeeklyGarbageCollection" -Type GarbageCollection -DurationHours 23 -Memory 100 -Cores 100 -Priority High -Days @(6) -Start (Get-Date "2016-08-13 07:00:00")
Creare un processo di Pulitura dell'integrità settimanale che venga eseguito la domenica a partire dalle 7:00 con priorità alta e tutte le CPU e tutta la memoria disponibili nel sistema.
New-DedupSchedule -Name "WeeklyIntegrityScrubbing" -Type Scrubbing -DurationHours 23 -Memory 100 -Cores 100 -Priority High -Days @(0) -Start (Get-Date "2016-08-14 07:00:00")
Impostazioni disponibili a livello di processo
È possibile attivare o disattivare le impostazioni seguenti per i processi di deduplicazione dati nuovi o pianificati:
Nome parametro | Definizione | Valori accettati | Motivo per cui si vuole impostare questo valore |
---|---|---|---|
Tipo | Il tipo di processo che deve essere pianificato |
|
Questo valore è obbligatorio perché è il tipo di processo che si vuole pianificare. Questo valore non può essere modificato dopo che l'attività è stata pianificata. |
Priorità | Priorità di sistema del processo pianificato |
|
Questo valore consente al sistema di determinare la modalità di allocazione del tempo della CPU. Alto userà più tempo della CPU, Basso ne userà il minimo. |
giorni | I giorni in cui il processo è pianificato | Matrice di numeri interi da 0 a 6 che rappresenta i giorni della settimana:
|
Le attività pianificate devono essere eseguite in almeno un giorno. |
Core | La percentuale di core del sistema che deve usata da un processo | Numeri interi da 0 a 100 (indica una percentuale) | Per controllare il livello di impatto di un processo sulle risorse di calcolo del sistema |
DurationHours | Numero massimo di ore consentite per l'esecuzione di un processo | Numeri interi positivi | Per evitare che un processo venga eseguito fuori dall'orario di inattività di un carico di lavoro |
Attivato | Se il processo verrà eseguito | True/false | Per disabilitare un processo senza rimuoverlo |
Completa | Per la pianificazione di un processo di Garbage Collection completo | Opzione (true/false) | Per impostazione predefinita, ogni quarto processo è un processo di Garbage Collection completo. Con questa opzione, è possibile pianificare l'esecuzione di Garbage Collection completa in modo che sia più frequente. |
InputOutputThrottle | Specifica la quantità di limitazione di input/output applicata al processo | Numeri interi da 0 a 100 (indica una percentuale) | La limitazione garantisce che i processi non interferiscano con altri processi ad uso intensivo di I/O. |
Memoria | Percentuale di memoria del sistema che deve usata da un processo | Numeri interi da 0 a 100 (indica una percentuale) | Per controllare il livello di impatto del processo sulle risorse di memoria del sistema |
Nome | Il nome del processo pianificato | Stringa | Un processo deve avere un nome identificabile in modo univoco. |
ReadOnly | Indica che il processo di pulitura elabora e segnala i danneggiamenti che trova, ma non effettua alcuna azione di riparazione | Opzione (true/false) | Si vuole ripristinare manualmente i file che risiedono in sezioni danneggiate del disco. |
Avvio | Specifica l'ora in cui un processo deve iniziare | System.DateTime |
La parte date del System.Datetime trasmesso a Start è irrilevante (purché sia nel passato), ma la parte time specifica quando deve iniziare il processo. |
StopWhenSystemBusy | Specifica se la deduplicazione dei dati deve essere interrotta se il sistema è occupato | Opzione (true/false) | Questa opzione consente di controllare il comportamento della deduplicazione dei dati. Ciò è particolarmente importante se si vuole eseguire la deduplicazione dei dati mentre il carico di lavoro è attivo. |
Modifica delle impostazioni della deduplicazione dei dati a livello di volume
Attivazione e disattivazione delle impostazioni dei volumi
È possibile specificare impostazioni predefinite a livello di volume per la deduplicazione dei dati usando il tipo di utilizzo che si seleziona quando si abilita una deduplicazione per un volume. La deduplicazione dei dati include cmdlet che semplificano la modifica delle impostazioni a livello di volume:
I motivi principali per cui si modificano le impostazioni di volume per il tipo di utilizzo selezionato sono migliorare le prestazioni di lettura per file specifici, ad esempio elementi multimediali o altri tipi di file che sono già compressi, e regolare la deduplicazione dei dati per ottimizzarla al meglio per il carico di lavoro specifico. Nell'esempio seguente viene illustrato come modificare le impostazioni del volume della deduplicazione dei dati per un carico di lavoro che è molto simile a un carico di lavoro generale del file server, ma usa file di grandi dimensioni che cambiano frequentemente.
Vedere le impostazioni correnti del volume per il Volume condiviso cluster 1.
Get-DedupVolume -Volume C:\ClusterStorage\Volume1 | Select *
Abilitare OptimizePartialFiles nel Volume condiviso cluster 1 in modo che il criterio MinimumFileAge venga applicato a sezioni del file anziché all'intero file. Ciò garantisce che la maggior parte del file venga ottimizzata anche se le sezioni del file cambiano regolarmente.
Set-DedupVolume -Volume C:\ClusterStorage\Volume1 -OptimizePartialFiles
Impostazioni disponibili a livello di volume
Nome impostazione | Definizione | Valori accettati | Motivo per cui si vuole modificare questo valore |
---|---|---|---|
ChunkRedundancyThreshold | Numero di volte in cui si fa riferimento a un blocco prima che un blocco venga duplicato nella sezione hotspot dell'Archivio blocchi. Il valore della sezione hotspot indica che i cosiddetti blocchi "hot" a cui si fa riferimento di frequente usano più percorsi di accesso per migliorare i tempi di accesso. | Numeri interi positivi | Il motivo principale per cui si modifica questo numero è incrementare la percentuale di riduzione per i volumi con elevata duplicazione. In generale, il valore predefinito (100) è l'impostazione consigliata e non è necessario modificarlo. |
ExcludeFileType | Tipi di file che vengono esclusi dall'ottimizzazione | Matrice di estensioni file | Per alcuni tipi di file, in particolare i file multimediali o quelli già compressi, l'ottimizzazione non comporta particolari vantaggi. Questa impostazione consente di configurare quali tipi sono esclusi. |
ExcludeFolder | Specifica i percorsi delle cartelle che non devono essere considerate per l'ottimizzazione | Matrice di percorsi di cartelle | Per migliorare le prestazioni o evitare che il contenuto in determinati percorsi venga ottimizzato, è possibile escludere determinati percorsi nel volume dal processo di ottimizzazione. |
InputOutputScale | Specifica il livello di parallelizzazione IO (code IO) per la deduplicazione dei dati da usare in un volume durante un processo di post-elaborazione | Numeri interi positivi da 1 a 36 | Il motivo principale per cui si modifica questo valore è ridurre l'impatto sulle prestazioni di un elevato carico di lavoro IO limitando il numero di code IO che la deduplicazione dei dati può usare in un volume. Si noti che la modifica di questa impostazione dal valore predefinito può rallentare l'esecuzione dei processi di post-elaborazione della deduplicazione dei dati. |
MinimumFileAgeDays | Numero di giorni dopo la creazione del file prima che il file sia considerato conforme ai criteri per l'ottimizzazione. | Numeri interi positivi (incluso zero) | I tipi di uso predefinito e HyperV impostano questo valore su 3 per ottimizzare le prestazioni sui file attivi o creati di recente. È consigliabile modificare il valore per rendere più aggressiva la deduplicazione dei dati o se non è rilevante la latenza aggiuntiva associata alla deduplicazione. |
MinimumFileSize | Dimensione minima che un file deve avere per essere considerato conforme ai criteri per l'ottimizzazione | Numeri interi positivi (byte) maggiori di 32 KB | Il motivo principale della modifica di questo valore è escludere i file di piccole dimensioni che possono avere un valore di ottimizzazione limitato per risparmiare tempo di calcolo. |
NoCompress | Indica se i blocchi devono essere compressi prima di essere inseriti nell'Archivio blocchi | Vero/falso | Alcuni tipi di file, in particolare quelli multimediali e già compressi, non vengono compressi in modo appropriato. Questa impostazione consente di disattivare la compressione per tutti i file nel volume. Questa funzionalità è ideale se si sta ottimizzando un dataset che contiene molti file già compressi. |
NoCompressionFileType | Tipi di file i cui blocchi non devono essere compresso prima di essere aggiunti all'Archivio blocchi | Matrice di estensioni file | Alcuni tipi di file, in particolare quelli multimediali e già compressi, non vengono compressi in modo appropriato. Questa impostazione consente la disattivazione della compressione per tali file e quindi di risparmiare risorse della CPU. |
OptimizeInUseFiles | Se abilitata, i file con handle verranno considerati conformi ai criteri per l'ottimizzazione. | True/false | Abilitare questa impostazione se il carico di lavoro tiene aperti i file per lunghi periodi di tempo. Se questa impostazione non è abilitata, un file non verrà mai ottimizzato se il carico di lavoro ha un handle aperto per il file, anche se è solo occasionalmente l'accodamento dei dati alla fine. |
OptimizePartialFiles | Se abilitata, il valore di MinimumFileAge si applica ai segmenti di un file anziché all'intero file. | True/false | Abilitare questa impostazione se il carico di lavoro funziona con file di grandi dimensioni, modificati di frequente, in cui la maggior parte del contenuto del file rimane invariato. Se questa impostazione non è abilitata, questi file non verranno mai ottimizzati poiché continuano a essere modificati, anche se la maggior parte del contenuto dei file è pronto per essere ottimizzato. |
Verificare | Se abilitata, se l'hash di un blocco corrisponde a un blocco che è già presente nell'Archivio blocchi, i blocchi vengono confrontati byte per byte per verificare che siano identici. | True/false | Questa è una funzionalità di integrità che assicura che l'algoritmo hash che confronta i blocchi non commetta errori confrontando due blocchi di dati che sono effettivamente diversi ma hanno lo stesso hash. In pratica, è molto improbabile che questo si verifichi. L'abilitazione della funzionalità di verifica comporta un sovraccarico significativo per il processo di ottimizzazione. |
Modifica delle impostazioni della deduplicazione dei dati a livello di sistema
La deduplicazione dei dati include impostazioni aggiuntive a livello di sistema che possono essere configurate dal Registro di sistema. Queste impostazioni sono valide per tutti i processi e i volumi eseguiti nel sistema. Prestare particolare attenzione ogni volta che si modifica il Registro di sistema.
Ad esempio, è possibile disattivare completamente Garbage Collection. Altre informazioni sui motivi per cui queste operazioni possono risultare utili per lo scenario sono reperibili nelle Domande frequenti. Per modificare il Registro di sistema con PowerShell:
Se la deduplicazione dei dati è in esecuzione in un cluster:
Set-ItemProperty -Path HKLM:\System\CurrentControlSet\Services\ddpsvc\Settings -Name DeepGCInterval -Type DWord -Value 0xFFFFFFFF Set-ItemProperty -Path HKLM:\CLUSTER\Dedup -Name DeepGCInterval -Type DWord -Value 0xFFFFFFFF
Se la deduplicazione dei dati non è in esecuzione in un cluster:
Set-ItemProperty -Path HKLM:\System\CurrentControlSet\Services\ddpsvc\Settings -Name DeepGCInterval -Type DWord -Value 0xFFFFFFFF
Impostazioni disponibili a livello di sistema
Nome impostazione | Definizione | Valori accettati | Motivo per cui si vuole modificare il valore |
---|---|---|---|
WlmMemoryOverPercentThreshold | Questa impostazione consente ai processi di usare più memoria rispetto a quella che la deduplicazione dei dati ritiene effettivamente disponibile. Ad esempio, un'impostazione di 300 significa che il processo deve usare tre volte la memoria assegnata per essere annullato. | Numeri interi positivi (il valore 300 significa 300% o 3 volte) | Se si ha un'altra attività che verrà interrotta se la deduplicazione dei dati richiede più memoria |
DeepGCInterval | Questa impostazione consente di configurare l'intervallo in cui i processi di Garbage Collection normali diventano processi di Garbage Collection completi. L'impostazione n significa ogni n processi si ha un processo di Garbage Collection completo. Si noti che Garbage Collection completo è sempre disabilitato (indipendentemente dal valore del Registro di sistema) per i volumi con Tipo di utilizzo del backup. Start-DedupJob -Type GarbageCollection -Full può essere usato se si desidera un'operazione completa di Garbage Collection in un volume di backup. |
Numeri interi (-1 indica disabilitato) | Vedere questa domanda nelle Domande frequenti |
Domande frequenti
Dopo aver modificato un'impostazione di deduplicazione dei dati, i processi sono lenti o non terminano e le prestazioni del carico di lavoro sono peggiorate. Perché? Queste impostazioni offrono un notevole controllo sul modo in cui viene eseguita la deduplicazione dei dati. Usarle in modo responsabile e monitorare le prestazioni.
Desidero eseguire un processo di deduplicazione dati al momento, ma non voglio creare una nuova pianificazione. È possibile eseguire questa operazione? Sì, tutti i processi possono essere eseguiti manualmente.
Qual è la differenza tra Garbage Collection completa e normale? Esistono due tipi di processi di Garbage Collection:
- Processo di Garbage Collection normale: usa un algoritmo statistico per trovare grandi blocchi senza riferimenti che soddisfano determinati criteri (memoria e IOP ridotti). Un processo di Garbage Collection normale compatta un contenitore di archivio blocchi solo se una percentuale minima dei blocchi è priva di riferimento. Questo tipo di processo di Garbage Collection viene eseguito molto più velocemente e usa meno risorse rispetto a un processo di Garbage Collection completo. La pianificazione predefinita del processo di Garbage Collection normale è l'esecuzione una volta alla settimana.
- Processo di Garbage Collection completo: è un processo molto più accurato per la ricerca di blocchi senza riferimento e la liberazione di più spazio su disco. Il processo di Garbage Collection completo compatta ogni contenitore anche se solo un singolo blocco nel contenitore non ha riferimenti. Il processo di Garbage Collection completo inoltre libera sul disco spazio che può essere stato usato se si è verificato un arresto anomalo del sistema o un guasto all'alimentazione durante un processo di ottimizzazione. I processi di Garbage Collection completi ripristinano al 100% lo spazio disponibile che può essere ripristinato in un volume deduplicato richiedendo più tempo e risorse di sistema rispetto a un processo di Garbage Collection normale. Il processo di Garbage Collection completo in genere trova e rilascia fino al 5% più di dati senza riferimenti rispetto a un processo di Garbage Collection normale. La pianificazione predefinita del processo di Garbage Collection completo viene eseguita ogni quarta volta che è pianificato un processo di Garbage Collection.
Perché disabilitare i processi di Garbage Collection completi?
- I processi di Garbage Collection possono influire negativamente sulle copie shadow della durata del volume e sulle dimensioni del backup incrementale. I carichi di lavoro ad alta varianza o con numero elevato di operazioni di I/O possono subire un calo delle prestazioni a causa dei processi di Garbage Collection completi.
- È possibile eseguire manualmente un processo di Garbage Collection completo da PowerShell per pulire le perdite se si è verificato un arresto anomalo del sistema.