A Pragmatic Data Stack
Alban Perillat-Merceroz - https://twitter.com/a_perillat Teads traite des Téraoctets de données chaque jour avec une Stack Data qui reflète la culture de notre ingénierie : pragmatique. Comme beaucoup de systèmes logiciels, c'est un mélange de composant à l'état de l'art, de dette technique et de bouts de ficelles. Je vous présenterai le véritable cheminement des données de Teads : ingestion et traitement en streaming de milliards d'événements analytiques par jour (Kafka, Flink), Data Lake et traitement par batch (S3, Spark, EMR), entrepôt de données, transformations et décisionnel (BigQuery, Redshift, dbt, Looker) Sunny Tech 2023
June 29, 2023