Traitement d'un téra-octets de données en moins de 30', ça vous tente ?
Si je vous dis chargement et parsing de 1 téra-octets de données depuis des fichiers à plat puis déversement de toutes ces données dans une base de données SQL Server 2008 x64 tournant sous Windows Server 2008 x64, le tout en 25 minutes, ça vous évoque quelque chose ?
Et bien c'est le nouveau record qui vient d'être réalisé par les équipes Microsoft et Unisys. Vous trouverez tous les détails de ce nouveau record mondial sur le blog de l'équipe en charge des performances sur SQL Server :
https://blogs.msdn.com/sqlperf/archive/2008/02/27/etl-world-record.aspx
Ca calme quand même car cela un fait un taux de transfert ETL de près de 2 téra-octets par heure quand même ! :-)
Comments
Anonymous
February 27, 2008
PingBack from http://www.biosensorab.org/2008/02/28/traitement-dun-tera-octets-de-donnees-en-moins-de-30-ca-vous-tente/Anonymous
May 20, 2008
Dommage que tu ne l'ais pas eu pour le chargement de la base du lancement SQL 2005. A moins que ce soit lié au hardware.Anonymous
May 20, 2008
Ah ouais, c'est clair !! En même temps, on n'aurait pas vécu l'épopée du remplissage d'une base avec plus de 1 milliard de records dans une seule table ! :-)