Data Engineer AWS

Posted 2 Days Ago
Be an Early Applicant
Montréal, QC, CAN
Hybrid
Senior level
Big Data • Information Technology • Analytics • Business Intelligence
The Role
Concevoir, développer et industrialiser des plateformes de données modernes sur AWS. Le rôle couvre l’ingestion, la transformation, l’orchestration, les architectures Data Lake, Data Warehouse et Lakehouse, ainsi que l’optimisation des performances, coûts, qualité, sécurité et gouvernance. La personne collaborera avec des équipes pluridisciplinaires, participera aux pratiques DataOps, DevOps et CI/CD, contribuera aux choix d’architecture et accompagnera les membres juniors. Cinq ans d’expérience minimum en Data Engineering, Big Data ou intégration de données sont requis.
Summary Generated by Built In

AgileDSS est une entreprise canadienne spécialisée dans la data, avec son siège à Montréal et des filiales à Québec et Nantes (France). Depuis près de deux décennies, nous aidons les grandes sociétés françaises et canadiennes à développer des écosystèmes analytiques uniques et sur mesure.
Rejoindre AgileDSS signifie faire partie d'une équipe entrepreneuriale qui met l'accent sur le développement personnel et professionnel, en travaillant sur des projets où notre expertise en BI, Cloud, Data Engineering et DataOps est non seulement reconnue pour son excellence, mais aussi pour notre approche à la fois humaine et innovante.
Nous sommes constamment à la recherche de personnes ambitieuses, dotées d'un esprit entrepreneurial et d'une passion pour la data, pour accompagner nos clients ou pour contribuer à l'évolution d'AgileDSS.
Actuellement, nous avons besoin d'un Data Engineer AWS.

Ce que nous recherchons 🔍

Ton rôle

Dans le cadre de la croissance de notre pratique Data & IA, nous recherchons un·e Développeur·se Senior Big Data AWS.

Tu contribueras à la conception, au développement et à l’industrialisation de plateformes de données modernes sur AWS, permettant à nos clients de valoriser pleinement leurs données.

Tu interviendras sur l’ensemble du cycle de vie des solutions de données, de l’ingestion jusqu’à la mise en production, en passant par la transformation, l’orchestration et l’optimisation des traitements. Tu évolueras au sein d’équipes pluridisciplinaires et accompagneras nos clients dans leurs initiatives de modernisation et de transformation data.

Tes responsabilités

  • Concevoir et développer des solutions de données modernes dans l’écosystème AWS

  • Mettre en place et maintenir des pipelines d’ingestion, de transformation et d’orchestration de données (ETL / ELT)

  • Concevoir, développer et faire évoluer des architectures Data Lake, Data Warehouse et Lakehouse

  • Développer des traitements distribués à l’aide de Python, Spark et PySpark

  • Intégrer différentes sources de données : API, applications SaaS, bases de données, fichiers et flux temps réel

  • Participer à la définition des architectures de données et aux choix technologiques

  • Mettre en œuvre les bonnes pratiques DataOps, DevOps et CI/CD

  • Automatiser les déploiements et contribuer à l’Infrastructure as Code

  • Optimiser la performance, la fiabilité et les coûts des plateformes de données AWS

  • Participer à l’implantation des mécanismes de qualité, de sécurité, d’observabilité et de gouvernance des données

  • Collaborer étroitement avec les architectes, analystes, scientifiques de données, développeurs et parties prenantes d’affaires

  • Contribuer à la qualité du code par les revues techniques, les standards de développement et la documentation

  • Accompagner et mentorer les membres plus juniors de l’équipe

  • Participer activement aux cérémonies Agile et à l’amélioration continue des solutions

Ton profil

Expérience

  • Minimum de 5 ans d’expérience en Data Engineering, Big Data ou intégration de données

  • Expérience significative dans la conception et le développement de solutions de données sur AWS

  • Expérience avec des environnements de données à grande échelle

  • Expérience en contexte de service-conseil, un atout

Compétences techniques

  • Excellente maîtrise de Python

  • Excellente maîtrise du SQL

  • Solide expérience avec Spark et PySpark

  • Expérience dans la conception et l’industrialisation de pipelines ETL / ELT

  • Maîtrise des services AWS liés à la donnée :

    • Amazon S3

    • AWS Glue

    • Amazon Redshift

    • Amazon Athena

    • AWS Lambda

    • AWS Step Functions

    • Amazon EventBridge

  • Expérience avec dbt pour la transformation et la modélisation des données

  • Expérience avec Terraform ou un autre outil d’Infrastructure as Code

  • Bonne maîtrise de Git et des pratiques CI/CD

  • Connaissance des concepts Data Lake, Data Warehouse et Lakehouse

  • Expérience avec les intégrations via API REST

  • Bonne compréhension des enjeux de sécurité, de gouvernance et de qualité des données

  • Expérience des méthodologies Agile / Scrum

Atouts

  • Expérience avec Apache Iceberg ou d’autres formats de tables ouverts

  • Expérience avec Apache Airflow ou Amazon MWAA

  • Expérience avec Docker et Kubernetes (EKS)

  • Connaissance de Kafka ou Amazon MSK

  • Expérience avec Snowflake ou Databricks

  • Connaissance des pratiques DataOps et MLOps

  • Certifications AWS (Data Engineer, Developer ou Solutions Architect)

  • Expérience en accompagnement ou mentorat technique

Mais n’oublions pas le savoir-être

Avant toute chose, nous recherchons une personne qui s’épanouira dans notre environnement.

Si tu es passionné·e par la donnée, que tu aimes résoudre des problèmes complexes, apprendre continuellement et partager tes connaissances, tu trouveras rapidement ta place chez agileDSS.

Nous accordons autant d’importance aux compétences techniques qu’aux qualités humaines. L’autonomie, la collaboration, la curiosité intellectuelle, la rigueur et le sens du service sont des éléments essentiels à la réussite chez agileDSS.

Ce qu’on t’offre

Nous sommes avant tout une équipe de collaborateurs à taille humaine qui a à cœur le bien-être de ses employés,

c’est pourquoi nous t’offrons:

  • Une rémunération annuelle fixe et une bonification annuelle selon l’atteinte de ta performance

  • Des objectifs individuels accessibles et réalistes pour garantir un environnement sans pression

  • Des assurances collectives (télé-médecine, dentaire, vision, soins...) 

  • Jours Personnels - Maladies progressives en fonction de l'ancienneté

  • Semaines de vacances augmentent progressivement en fonction de l'ancienneté, en plus des jours de Noël.

  • Remboursement des abonnements de sport, art et culture

  • Remboursement du transport à 100% (métro, bus, voiture,...)

  • Horaires flexibles et télétravail

  • Plan de développement pour chaque employé et coaching avec un mentor

  • Environnement non hiérarchique favorisant l’intrapreneuriat

  • Activités mensuelles de team building

Et bien d’autres encore !

agileDSS : Votre prochaine bonne décision.

 

Vous hésitez encore ?

Découvrez notre blogue : https://agiledss.com/blogue

Skills Required

  • Minimum de 5 ans d’expérience en Data Engineering, Big Data ou intégration de données
  • Expérience significative dans la conception et le développement de solutions de données sur AWS
  • Expérience avec des environnements de données à grande échelle
  • Excellente maîtrise de Python
  • Excellente maîtrise du SQL
  • Solide expérience avec Spark et PySpark
  • Expérience dans la conception et l’industrialisation de pipelines ETL / ELT
  • Maîtrise d’Amazon S3, AWS Glue, Amazon Redshift, Amazon Athena, AWS Lambda, AWS Step Functions et Amazon EventBridge
  • Expérience avec dbt pour la transformation et la modélisation des données
  • Expérience avec Terraform ou un autre outil d’Infrastructure as Code
  • Bonne maîtrise de Git et des pratiques CI/CD
  • Connaissance des concepts Data Lake, Data Warehouse et Lakehouse
  • Expérience avec les intégrations via API REST
  • Bonne compréhension des enjeux de sécurité, de gouvernance et de qualité des données
  • Expérience des méthodologies Agile / Scrum
  • Expérience en contexte de service-conseil
  • Expérience avec Apache Iceberg ou d’autres formats de tables ouverts
  • Expérience avec Apache Airflow ou Amazon MWAA
  • Expérience avec Docker et Kubernetes, notamment EKS
  • Connaissance de Kafka ou Amazon MSK
  • Expérience avec Snowflake ou Databricks
  • Connaissance des pratiques DataOps et MLOps
  • Certifications AWS Data Engineer, Developer ou Solutions Architect
  • Expérience en accompagnement ou mentorat technique
Am I A Good Fit?
beta
Get Personalized Job Insights.
Our AI-powered fit analysis compares your resume with a job listing so you know if your skills & experience align.

The Company
HQ: Montreal
53 Employees

What We Do

agileDSS Group helps its clients base their business decisions on a unified data ecosystem. Together, we will transform your data into a lever for value creation.

Similar Jobs

2K Logo 2K

Artiste technique sénior·e UI / Senior UI Tech Artist

Gaming • Information Technology • Mobile • Software • Esports
Remote or Hybrid
Québec, QC, CAN
4200 Employees

2K Logo 2K

Gameplay Engineer

Gaming • Information Technology • Mobile • Software • Esports
Hybrid
Montréal, QC, CAN
4200 Employees

Akamai Technologies Logo Akamai Technologies

Account Executive

Cloud • Security • Software • Cybersecurity
In-Office or Remote
2 Locations
10285 Employees
224K-404K Annually

DraftKings Logo DraftKings

Senior Software Engineer

Digital Media • Gaming • Information Technology • Software • Sports • Esports • Big Data Analytics
Remote or Hybrid
Canada
6400 Employees

Similar Companies Hiring

Milestone Systems Thumbnail
Artificial Intelligence • Security • Software • Analytics • Big Data Analytics
Lake Oswego, OR
1500 Employees
NODA AI Thumbnail
Artificial Intelligence • Information Technology • Software • Cybersecurity
Sydney, AU
54 Employees
Golden Pet Brands Thumbnail
Digital Media • eCommerce • Information Technology • Marketing Tech • Pet • Retail • Social Media
El Segundo, California
178 Employees

Sign up now Access later

Create Free Account

Please log in or sign up to report this job.

Create Free Account