Solocal est une entreprise leader en publicité et marketing numérique pour les entreprises locales, également spécialisée en recherche et intermédiation entre particuliers et professionnels.
Mission : Datalake Finance
Décommissionnement d’un ancien système vers une solution Big Data évolutive.
Tâches effectuées :
- Développement et Conception d’une plateforme d’ingestion, validation et enrichissement de données chaude (Kafka) et froide (HDFS) permettant d’alimenter le datalake
- Mise en place d’un modèle hiérarchique de données facilitant les requêtes ad hoc en SQL
- Anonymisation des données
Stack: Spark, Kafka, Scala, Hadoop, Impala, Docker
Architecture
Produits