C’est quelque chose qui paraît fou, mais c’est pourtant une réalité : l’intégralité des films et séries disponibles sur Netflix sont en réalité stockés chez Amazon.

Dans une publication datant de fin décembre 2020, Netflix explique dans les grandes lignes, l’architecture de sa plateforme de streaming.

L’intégralité des données de Netflix sont stockées sur Amazon S3 (ou Amazon Simple Storage Service), permettant une flexibilité incomparable avec une infrastructure en propre.

Sur ce substrat, Netflix a conçu un outil d’allocation des requêtes clients, permettant d’assurer un niveau de performance élevé et réparti de façon uniforme entre les différentes interactions avec les bases de données, qu’on appelle des ETLs (pour Extract Transform and Load)

Baptisé AutOptimize, cet outil est en fait un moyen de définir des méthodes d’optimisation centralisées, pouvant être ensuite répliquées sur des ETLs spécifiques, pour lesquels l’effort individuel d’optimisation aurait été trop complexe.

Au-delà de la performance technique, Netflix explique en fait comment il est possible d’intégrer quotidiennement des pétaoctets de données, tout en garantissant un bon niveau d’accessibilité de l’ensemble.

https://netflixtechblog.com/optimizing-data-warehouse-storage-7b94a48fdcbe