Amplify
La plateforme de données permet d'économiser les sorties et de stocker plus intelligemment avec Snowflake + Backblaze
Amplify
Amplify, une plateforme de traitement de données, utilise Snowflake, un fournisseur de nuages de données, comme plaque tournante centrale pour toutes leurs données. À l'origine, ils utilisaient Amazon S3 comme stockage d'objets pour la préparation préalable au téléchargement, mais des flux de travail de données rigides et Frais d'évacuation élevés d'AWS a entravé les préférences de format et les tarifs des clients grâce à leurs ressources de démarrage.
Amplify est passé d'Amazon S3 à Backblaze B2. Comme Backblaze avait un fournisseur Terraform et qu'il était utilisable avec la même API S3, Amplify a pu migrer vers Backblaze avec un minimum de changements de code. La mise en œuvre a pris un total de deux semaines sans interruption, résolvant immédiatement le problème des frais de egress d'Amplify tout en maintenant un service de haute qualité ininterrompu.
Grâce aux scripts Terraform compatibles Backblaze, Amplify garantit que l'efficacité de l'intégration des clients demeure élevée. Avec egress libre de Backblaze jusqu'à trois fois plus de données stockées, les clients Amplify (et leurs clients) peuvent télécharger des ensembles de données aussi souvent que nécessaire dans les formats qu'ils veulent sans que cela coûte une fortune. Jusqu'à présent, Backblaze a permis aux clients d'Amplify d'économiser 70 % sur la egress, un chiffre qui ne fait que s'aggraver avec le temps.
Amplify aide les fournisseurs de données à conclure plus de transactions, à accélérer l'entrée des clients et à augmenter la satisfaction de leurs clients grâce à la plateforme tout-en-un de vente et de livraison de données d'Amplify. La plateforme permet aux fournisseurs de fournir des données dans les nuages et les formats tout en économisant sur les coûts de egress et de stockage.
La plateforme Amplify ingère toutes les données que les fournisseurs répartissent généralement sur une variété de sources, puis les transmet à travers une couche de stockage et de transformation de données alimentée par Flocon de neige et Backblaze B2. Snowflake alimentera les transformations de données en formats normalisés, qui peuvent ensuite être utilisés dans des environnements analytiques en nuage comme Google BigQuery ou Tableau. Snowflake transforme également les données en options de consommation basées sur des fichiers comme .csv ou .parquet qui sont mises en scène dans Backblaze B2. Si les consommateurs préfèrent travailler avec des fichiers hors ligne, Amplify peut facilement transférer les données de Backblaze B2 via API, SFTP ou téléchargement direct.
Avant de cofonder Amplify, la directrice technique Amya Pathare a produit des tableaux de bord analytiques pour les parties prenantes de Mastercard en tant que vice-présidente, Perspectives commerciales et ingénierie des données. Alors que les tableaux de bord visuels avaient leur place, le tableau de bord le plus populaire n'était qu'un tableau de chiffres, et de nombreuses équipes voulaient exporter les données pour effectuer leur propre analyse. Cela a mené son équipe dans une démarche de transformation visant à fournir efficacement un accès libre-service aux données tout en se préoccupant des autorisations, de la qualité des données et de la diversité des piles technologiques. À l'instar de nombreuses grandes entreprises qui ont connu une croissance par acquisition, le transfert de données entre les unités opérationnelles s'apparente à un transfert de données entre les entreprises. Pathare a cofondé Amplify en 2022 pour faciliter le partage de données entre les organisations et s'efforcer véritablement de démocratiser les données. Dewey, l'un des premiers clients d'Amplify, donne aux chercheurs d'universités comme Stanford, Yale et le MIT l'accès à des centaines de produits de données provenant de dizaines de fournisseurs de données différents, illustrant ainsi la puissance et les opportunités débloquées par l'accès aux données sans friction.
Lorsque tout le monde n'est pas sur la même technologie, le transfert de données est difficile et ennuyeux. C'est ce que nous avons prévu de corriger avec Amplify.
Aleya Pathare, cofondatrice et directrice des services, Amplify
Lors de son lancement, Amplify devait :
Un jour, Pathare a reçu un courriel disant Amplify les crédits AWS gratuits étaient sur le point d'être épuisés. Parallèlement, la clientèle d'Amplify augmentait et, à son tour, les clients de leurs clients téléchargeaient davantage d'ensembles de données. Soudain, leurs frais de egress ont été multipliés par dix par rapport à ceux qu'ils paient pour l'entreposage seul.
Pathare a commencé à chercher un meilleur moyen de garder toutes ces données hautement accessibles sans brûler le financement de démarrage d'Amplify. Il a comparé Backblaze à d'autres solutions comme Azure, Digital Ocean, Google Cloud Services (GCS) et Wasabi. Pathare avait trois priorités principales qui ont fait de Backblaze le meilleur choix :
Pour tout projet d'infrastructure, l'objectif est que vous n'ayez pas à y penser une fois que vous l'avez mis en place. C'est pourquoi Backblaze est un grand plus pour nous.
Aleya Pathare, cofondatrice et directrice des services, Amplify
Il n'a fallu que deux semaines pour qu'Amplify mette complètement en œuvre Backblaze B2. « Nous étions motivés à le faire rapidement puisque nous perdions de l'argent de jour en jour », dit Pathare. Ils ont transféré le stockage de fichiers d'Amazon S3 vers un Backblaze B2 Bucket unique pour chaque client Amplify, complétant ainsi la migration sans temps d'arrêt. Les preuves de concept en cours de route ont permis de garantir que Pathare serait en mesure de fournir de manière fiable des fonctionnalités clés tout en mettant en place des contrôles d'accès pour empêcher les données des différents clients d'Amplify de se mélanger.
Backblaze avait la meilleure structure de prix que nous ayons trouvée.
Aleya Pathare, cofondatrice et directrice des services, Amplify
Grâce à la egress sans frais de Backblaze pour un maximum de trois fois la moyenne mensuelle de données stockées, Amplify a économisé jusqu'à 70 %. Bien que Pathare s'attend à ce que les besoins de stockage d'Amplify augmentent à mesure que l'entreprise grandit, l'élimination de ces frais de egress élevés signifie que les économies d'Amplify ne feront qu'aggraver au fur et à mesure qu'un ensemble de données donné sera téléchargé. Ces économies vont directement aux efforts de développement de produits d'Amplify et les aident à demeurer concurrentiels sur le marché surpeuplé du traitement de données.
