Gegevensoverdracht voor grote gegevenssets met gemiddelde tot grote netwerkbandbreedte
Dit artikel biedt een overzicht van de oplossingen voor gegevensoverdracht wanneer u een gemiddelde tot hoge netwerkbandbreedte in uw omgeving hebt en u van plan bent grote gegevenssets over te dragen. In het artikel worden ook de aanbevolen opties voor gegevensoverdracht en de respectieve sleutelmogelijkhedenmatrix voor dit scenario beschreven.
Voor een overzicht van alle beschikbare opties voor gegevensoverdracht gaat u naar Een oplossing voor Azure-gegevensoverdracht kiezen.
Scenariobeschrijving
Grote gegevenssets verwijzen naar gegevensgrootten in de volgorde van TB's tot EN MET's. Gemiddelde tot hoge netwerkbandbreedte verwijst naar 100 Mbps tot 10 Gbps.
Aanbevolen opties
De opties die worden aanbevolen in dit scenario, zijn afhankelijk van of u beschikt over de gemiddelde netwerkbandbreedte of de hoge netwerkbandbreedte.
Gemiddelde netwerkbandbreedte (100 Mbps - 1 Gbps)
Met gemiddelde netwerkbandbreedte moet u de tijd voor gegevensoverdracht via het netwerk projecteren.
Gebruik de volgende tabel om de tijd in te schatten en kies op basis daarvan tussen een offlineoverdracht of een netwerkoverdracht. In de tabel ziet u de verwachte tijd voor netwerkgegevensoverdracht, voor verschillende beschikbare netwerkbandbreedten (uitgaande van 90% gebruik).
Als de netwerkoverdracht naar verwachting te traag is, moet u een fysiek apparaat gebruiken. De aanbevolen opties in dit geval zijn de offline overdrachtsapparaten uit de Azure Data Box-serie of Azure Import/Export met uw eigen schijven.
- Azure Data Box-serie voor offlineoverdracht: gebruik apparaten van door Microsoft geleverde Data Box-apparaten om grote hoeveelheden gegevens naar Azure te verplaatsen wanneer u beperkt bent door tijd, netwerkbeschikbaarheid of kosten. On-premises gegevens kopiëren met behulp van hulpprogramma's zoals Robocopy. Afhankelijk van de grootte van de gegevens die u wilt overdragen, kunt u kiezen uit Data Box Disk, Data Box of Data Box Heavy.
- Azure Import/Export: gebruik de Azure Import/Export-service door uw eigen schijfstations te verzenden om grote hoeveelheden gegevens veilig te importeren in Azure Blob Storage en Azure Files. Deze service kan ook worden gebruikt om gegevens over te dragen van Azure Blob-opslag naar schijfstations en te verzenden naar uw on-premises-locaties.
Als de netwerkoverdracht naar verwachting redelijk is, kunt u een van de volgende hulpprogramma's gebruiken die worden beschreven in Hoge netwerkbandbreedte.
Hoge netwerkbandbreedte (1 Gbps - 100 Gbps)
Als de beschikbare netwerkbandbreedte hoog is, gebruikt u een van de volgende hulpprogramma's.
- AzCopy : gebruik dit opdrachtregelprogramma om eenvoudig gegevens te kopiëren van en naar Azure Blobs, Files en Table Storage met optimale prestaties. AzCopy biedt ondersteuning voor gelijktijdigheid en parallellisme, en de mogelijkheid om kopieerbewerkingen te hervatten als deze worden onderbroken.
- Azure Storage REST API's/SDK's : wanneer u een toepassing bouwt, kunt u de toepassing ontwikkelen op basis van Azure Storage REST API's en de Azure SDK's gebruiken die in meerdere talen worden aangeboden.
- Azure Data Box-serie voor onlineoverdrachten : Azure Stack Edge en Data Box Gateway zijn onlinenetwerkapparaten die gegevens van en naar Azure kunnen verplaatsen. Gebruik een fysiek Azure Stack Edge-apparaat wanneer er tegelijkertijd continue opname en voorverwerking van de gegevens nodig is voordat de gegevens worden geüpload. Data Box Gateway is een virtuele versie van het apparaat met dezelfde mogelijkheden voor gegevensoverdracht. De gegevensoverdracht wordt altijd beheerd met het apparaat.
- Azure Data Factory: Data Factory moet worden gebruikt om een overdrachtsbewerking uit te schalen en als er behoefte is aan indeling en bewakingsmogelijkheden op ondernemingsniveau. Gebruik Data Factory om regelmatig bestanden over te brengen tussen verschillende Azure-services, on-premises, of een combinatie van deze twee. Met Data Factory kunt u gegevensgestuurde werkstromen (pijplijnen genoemd) maken en plannen die gegevens uit verschillende gegevensarchieven opnemen, en die de verplaatsing en transformatie van gegevens automatiseren.
Vergelijking van de belangrijkste mogelijkheden
De volgende tabellen bevatten een overzicht van de verschillen in de belangrijkste mogelijkheden voor de aanbevolen opties.
Gemiddelde netwerkbandbreedte
Als u offline gegevensoverdracht gebruikt, gebruikt u de volgende tabel om inzicht te hebben in de verschillen in de belangrijkste mogelijkheden.
Data Box Disk | Data Box | Data Box Heavy | Import/Export | |
---|---|---|---|---|
Gegevensgrootte | Maximaal 35 TB's | Maximaal 80 TB per apparaat | Maximaal 800 TB per apparaat | Variabele |
Gegevenstype | Azure-blobs Azure Files* |
Azure-blobs Azure Files |
Azure-blobs Azure Files |
Azure-blobs Azure Files |
Formulierfactor | 5 SSD's per bestelling | 1 x 50 pond. apparaat van desktopformaat per bestelling | 1 x ~500 pond. groot apparaat per bestelling | Maximaal 10 HDD's/SSD's per bestelling |
Initiële installatietijd | Beperkt (15 minuten) |
Laag naar gemiddeld (<30 minuten) |
Matig (1-2 uur) |
Gemiddeld tot moeilijk (variabele) |
Gegevens verzenden naar Azure | Ja | Ja | Ja | Ja |
Gegevens vanuit Azure exporteren | No | Nee | Nee | Ja |
Versleuteling | AES 128-bits | AES 256-bits | AES 256-bits | AES 128-bits |
Hardware | Door Microsoft geleverd | Door Microsoft geleverd | Door Microsoft geleverd | Door de klant opgegeven |
Netwerkinterface | USB 3.1/SATA | RJ 45, SFP+ | RJ45, QSFP+ | SATA II/SATA III |
Partnerintegratie | Enkele | Hoog | Hoog | Enkele |
Verzending | Door Microsoft beheerd | Door Microsoft beheerd | Door Microsoft beheerd | Door de klant beheerd |
Gebruiken wanneer gegevens worden verplaatst | Binnen een handelsgrens | Binnen een handelsgrens | Binnen een handelsgrens | Over geografische grenzen heen, bijvoorbeeld de VS naar de EU |
Prijzen | Prijzen | Prijzen | Prijzen | Prijzen |
* Data Box Disk biedt geen ondersteuning voor grote bestandsshares en behoudt geen metagegevens van bestanden
Als u onlinegegevensoverdracht gebruikt, gebruikt u de tabel in de volgende sectie voor een hoge netwerkbandbreedte.
Hoge netwerkbandbreedte
Hulpprogramma's AzCopy, Azure PowerShell, Azure CLI |
Azure Storage REST API's, SDK's | Data Box Gateway of Azure Stack Edge | Azure Data Factory | |
---|---|---|---|---|
Gegevenstype | Azure Blobs, Azure Files, Azure Tables | Azure Blobs, Azure Files, Azure Tables | Azure Blobs, Azure Files | Ondersteunt meer dan 70 gegevensconnectors voor gegevensarchieven en -indelingen |
Vormfactor | Opdrachtregelprogramma's | Programmatische interface | Microsoft levert een virtuele of fysiek apparaat |
Service in Azure Portal |
Eerste eenmalige installatie | Gemakkelijk | Matig | Gemakkelijk (<30 minuten) te matigen (1-2 uur) | Uitgebreide |
Voorverwerking van gegevens | No | Nee | Ja (met Edge-rekenkracht) | Yes |
Overdracht van andere clouds | No | Nee | Nee | Ja |
Gebruikerstype | IT-professionals of ontwikkelaars | Dev | IT pro | IT pro |
Prijzen | Gratis, kosten voor uitgaand gegevensverkeer van toepassing | Gratis, kosten voor uitgaand gegevensverkeer van toepassing |
Prijzen voor Azure Stack Edge Prijzen voor Data Box Gateway |
Prijzen |
Volgende stappen
Meer informatie over het overdragen van gegevens met Import/Export.
Meer informatie over het volgende:
Meer informatie over het overdragen van gegevens met Azure Data Factory.
Gebruik de REST API's om gegevens over te dragen: