Trasferimento dei dati per set di dati di grandi dimensioni con larghezza di banda da rete da moderata a elevata
Questo articolo offre una panoramica delle soluzioni per il trasferimento dei dati quando la larghezza di banda di rete è moderata o elevata nell'ambiente e si pianifica il trasferimento di set di dati di grandi dimensioni. L'articolo descrive anche le opzioni di trasferimento dei dati consigliate e la rispettiva matrice di funzionalità chiave per questo scenario.
Per una panoramica di tutte le opzioni di trasferimento dei dati disponibili, vedere Scegliere una soluzione di trasferimento dei dati di Azure.
Descrizione dello scenario
Con set di dati di grandi dimensioni si intendono dati di dimensioni nell'ordine di TB o PB. Con larghezza di banda di rete da moderata a elevata si intende da 100 Mbps a 10 Gbps.
Opzioni consigliate
Le opzioni consigliate in questo scenario variano a seconda che larghezza di banda di rete sia moderata o elevata.
Larghezza di banda di rete moderata (100 Mbps - 1 Gbps)
Con la larghezza di banda di rete moderata, è necessario prevedere il tempo richiesto per il trasferimento dei dati in rete.
Usare la tabella seguente per stimare il tempo e, in base al risultato, scegliere tra un trasferimento offline e uno in rete. La tabella indica il tempo previsto per il trasferimento dei dati di rete, per diverse larghezze di banda di rete disponibili (presupponendo un utilizzo del 90%).
Se risulta che il trasferimento di rete sarà troppo lento, è consigliabile usare un dispositivo fisico. Le opzioni consigliate in questo caso sono i dispositivi di trasferimento offline della famiglia di prodotti Azure Data Box oppure Importazione/Esportazione di Azure con i propri dischi.
- Famiglia di prodotti Azure Data Box per i trasferimenti offline: usare i dispositivi Data Box forniti da Microsoft per spostare grandi quantità di dati in Azure quando sono presenti limiti di tempo, disponibilità di rete o costi. Copiare i dati locali usando strumenti come Robocopy. A seconda delle dimensioni dei dati da trasferire, è possibile scegliere tra Data Box Disk, Data Box o Data Box Heavy.
- Importazione/Esportazione di Azure: usare il servizio Importazione/Esportazione di Azure tramite la spedizione delle unità disco per importare in modo sicuro grandi quantità di dati nell'archivio BLOB di Azure e in File di Azure. È anche possibile usare questo servizio per trasferire i dati dall'archivio BLOB di Azure a unità disco per la spedizione al sito locale.
Se risulta che il trasferimento di rete sarà accettabile, è possibile usare uno degli strumenti seguenti, illustrati in dettaglio in Larghezza di banda di rete elevata.
Larghezza di banda di rete elevata (1 Gbps - 100 Gbps)
Se la larghezza di banda di rete disponibile è elevata, usare uno degli strumenti seguenti.
- AzCopy: usare questo strumento da riga di comando per copiare facilmente i dati da e verso l'archivio BLOB, file e tabelle di Azure con prestazioni ottimali. AzCopy supporta la concorrenza e il parallelismo e consente di riprendere le operazioni di copia in caso di interruzione.
- API REST/SDK di Archiviazione di Azure: quando si compila un'applicazione, è possibile sviluppare l'applicazione tramite le API REST di Archiviazione di Azure e usare gli SDK di Azure disponibili in più linguaggi.
- Famiglia di prodotti Azure Data Box per i trasferimenti online: Azure Stack Edge e Data Box Gateway sono dispositivi di rete online che possono spostare i dati all'interno e all'esterno di Azure. Usare il dispositivo fisico Azure Stack Edge quando è necessario eseguire simultaneamente l'inserimento continuo e la pre-elaborazione dei dati prima del caricamento. Data Box Gateway è una versione virtuale del dispositivo con le stesse capacità di trasferimento dati. In ogni caso, il trasferimento dei dati viene gestito dal dispositivo.
- Azure Data Factory: Data Factory deve essere usato per aumentare il numero di istanze per un'operazione di trasferimento e se sono necessarie funzionalità di orchestrazione e monitoraggio a livello aziendale. Usare Data Factory per trasferire regolarmente i file tra diversi servizi di Azure, l'ambiente locale o una combinazione dei due. Con Data Factory è possibile creare e pianificare flussi di lavoro basati sui dati, detti pipeline, che inseriscono dati provenienti da archivi diversi e automatizzano lo spostamento dati e la trasformazione dei dati.
Confronto tra funzionalità chiave
Le tabelle seguenti riepilogano le differenze nelle funzionalità chiave per le opzioni consigliate.
Larghezza di banda di rete moderata
Se si usa il trasferimento dei dati offline, usare la tabella seguente per conoscere le differenze nelle funzionalità chiave.
| Data Box Disk | Data Box | Data Box Heavy | Importazione/Esportazione | |
|---|---|---|---|---|
| Dimensioni dei dati | Fino a 35 TB | Fino a 80 TB per dispositivo | Fino a 800 TB per dispositivo | Variabile |
| Tipo di dati | BLOB di Azure File di Azure* |
BLOB di Azure File di Azure |
BLOB di Azure File di Azure |
BLOB di Azure File di Azure |
| Fattore di forma | 5 unità SSD per ordine | 1 dispositivo desktop da 23 kg per ordine | 1 dispositivo di grandi dimensioni da circa 230 kg per ordine | Fino a 10 HDD/unità SSD per ordine |
| Tempo di configurazione iniziale | Basso (15 min) |
Da basso a moderato (<30 min) |
Moderato (1-2 ore) |
Da moderato a elevato (variabile) |
| Inviare dati ad Azure | Sì | Sì | Sì | Sì |
| Esportare dati da Azure | No | No | No | Sì |
| Crittografia | AES a 128 bit | AES a 256 bit | AES a 256 bit | AES a 128 bit |
| Hardware | Fornito da Microsoft | Fornito da Microsoft | Fornito da Microsoft | Fornito dal cliente |
| Interfaccia di rete | USB 3.1/SATA | RJ 45, SFP+ | RJ45, QSFP+ | SATA II/SATA III |
| Integrazione di partner | In parte | Alto | Alto | In parte |
| Spedizione | Gestita da Microsoft | Gestita da Microsoft | Gestita da Microsoft | Gestita dal cliente |
| Usare quando i dati vengono spostati | Entro un confine commerciale | Entro un confine commerciale | Entro un confine commerciale | Oltre i confini geografici, ad esempio dagli USA all'UE |
| Prezzi | Prezzi | Prezzi | Prezzi | Prezzi |
* Data Box Disk non supporta condivisioni file di grandi dimensioni e non mantiene i metadati dei file
Se si usa il trasferimento dei dati online, usare la tabella nella sezione seguente per la larghezza di banda di rete elevata.
Larghezza di banda di rete elevata
| Strumenti AzCopy, Azure PowerShell, Interfaccia della riga di comando di Azure |
API REST, SDK di Archiviazione di Azure | Data Box Gateway o Azure Stack Edge | Azure Data Factory | |
|---|---|---|---|---|
| Tipo di dati | BLOB di Azure, file di Azure, tabelle di Azure | BLOB di Azure, file di Azure, tabelle di Azure | BLOB di Azure, file di Azure | Supporta più di 70 connettori dati per archivi e formati dati |
| Fattore di forma | Strumenti da riga di comando | Interfaccia programmatica | Microsoft fornisce un dispositivo fisico o virtuale |
Servizio nel portale di Azure |
| Configurazione singola iniziale | Facile | Moderato | Da semplice (<30 minuti) a moderata (1-2 ore) | Estesa |
| Pre-elaborazione dei dati | No | No | Sì (con calcolo Edge) | Sì |
| Trasferire da altri cloud | No | No | No | Sì |
| Tipo di utente | Professionisti IT o sviluppatori | Sviluppo | Professionista IT | Professionista IT |
| Prezzi | Gratuiti, si applicano le tariffe per dati in uscita | Gratuiti, si applicano le tariffe per dati in uscita | Prezzi di Azure Stack Edge Prezzi di Data Box Gateway |
Prezzi |
Passaggi successivi
Informazioni su come trasferire dati con Importazione/Esportazione.
Informazioni su come:
Informazioni su come trasferire dati con Azure Data Factory.
Usare le API REST per trasferire i dati: