Arnaud Koster

ARHS Spikeseed

I lead a fantastic team of 120+ IT specialists in cloud, machine learning, security, backend, frontend, and mobile development. We provide IT services in many fields and environments, from early-stage startups to huge companies and public institutions.

I do believe in teamwork and that we are Better, Faster, Stronger (♬)… when part of a team. So it’s paramount for me to involve my teammates as much as possible in all these activities.

My main technology interests are backend, big data, cloud, and machine learning.

Twitter : @arnaudkoster

Blog: http://spikeseed.cloud

Track : Cloud & Scaling

Type de présentation : Conference

> Design d’une pipeline de données cloud-native avec AWS

Avec plus de 200 services AWS disponibles, il est parfois difficile de s'y retrouver et de démarrer le design de sa nouvelle application. A mes yeux, cet ensemble de services est une opportunité pour utiliser les bons outils, les bonnes technos, pour faire le job.

Aujourd'hui, nous allons donc nous pencher sur la conception d'une pipeline de données cloud-native (et serverless) avec AWS, capable de se mettre à l'échelle tout en restant efficace d'un point de vue des coûts.

Pour ce faire, nous allons progressivement architecturer la pipeline en couvrant les 6 grands domaines (Data ingestion, Storage, Cataloging, Processing, Consumption, Security & Governance), le tout en utilisant uniquement les services d'AWS dits cloud-native et serverless.