Senior Data Engineer - Hybrid
Acosta Group
**DESCRIPTION**
**The Senior Data Engineer** role reports to the Manager, Data Engineering. The role is part of our Enterprise Data Platform team that manages the ingestion, storage, modeling, and consumption of data for Acosta and our clients. The ideal candidate will have extensive experience in data engineering, strong proficiency in Azure, Databricks, Snowflake knowledge, and a proven track record of working on large-scale data projects. Candidate must have strong communications skills and ability to collaborate with technical and nontechnical audience. The role is responsible for supporting workloads running on the Azure Big Data environment and associated technologies. This position will be responsible for designing, creating, and monitoring the data solutions, resolving incidents, optimizing workloads, tuning solutions, and making solution enhancements. The role will focus on development and production support and will be involved in R&D of emerging technologies with the application administrators and technical architects.
**RESPONSABILITÉS**
**Essential Functions of this Position**
* Building data ingestion and ETL pipelines at an enterprise level, following corporate standards and best practices
* Work with Tech Leads and Architects to understand and implement solutions based on high level designs and requirements
* Stay current with big data, ETL and general data technologies, with a strong focus on the Azure technology stack
* Investigate new and emerging technologies based on future needs of the Data Platform and architectural direction
* Monitoring, investigating, and maintaining ongoing production systems, specifically triggered and schedule ETL pipelines and data ingestion patterns
* Optimization and refactoring of existing platform and legacy solutions
* Migration of legacy systems into a modern data platform
* Mentor Data Engineers on the Data Platform team
* Other duties as assigned
**LES QUALIFICATIONS**
**Minimum Education and Work Experience**
* Bachelor’s degree in Technology Industry is preferred, or equivalent related work experience may be substituted for some of the educational requirements
* 8 years of related work experience
**Knowledge, Skills, and Abilities Requirements**
* 5+years developing and supporting applications leveraging a big data stack (such as Azure)
* 5+years of experience with data integration/ETL tools such as Azure Data Factory or alternatives
* 3+years of experience with SDLC knowledge in both waterfall and agile methodologies
* 2+years of experience on following tools: SQL, Scala, Python, Spark, Kafka, and other related languages
* Experience in scripting languages & automation such as bash and Python
* Hands-on experience with source code management system (SVN, Git) and continuous integration tools (Azure Devops or alternatives)
* Experience with Snowflake Technology Stack strongly preferred
* Experience with Data Modelling strongly preferred
* Experience in data warehousing (Data Vault methodology preferred)
* Experience in handling data processing, delivering distributed and highly scalable applications
* Experience with high-volume, transaction processing software applications
* Good understanding of workload management, schedulers, scalability, and distributed platform architectures
* Excellent communication skills (both written and oral) combined with strong interpersonal skills
* Strong analytical skills and thought processes combined with the ability to be flexible and work analytically in a problem-solving environment
**A French version of this job description is also available here: https://french.acosta.jobs/ | Une version française de cette description de poste est également disponible ici : https://french.acosta.jobs/**
**Catégorie d'emploi:** **Administration**
**Type de position:** **Full time**
**Unité commerciale:** **Corporate**
**Échelle salariale:** **$100,000.00 - $1,250,000.00**
**Company:** **Mosaic Sales Solutions Canada Operating Co**
**Req ID:** **3901**
**\#fr**
About Us: Acosta et Mosaic sont les forces motrices en matière de ventes et de marketing derrière les marques les plus reconnues et éprouvées auprès des principaux détaillants aux États-Unis et au Canada. Nous proposons des services flexibles qui maximisent l’efficacité. Acosta possède le talent et la technologie nécessaires pour élaborer des stratégies axées sur les données, la portée et les relations, afin de mettre en œuvre ces stratégies, ainsi que les outils pour surveiller, suivre et optimiser les résultats basés sur les indicateurs pour les clients et les détaillants. Acosta et ses filiales, de bonne foi, estiment que cette fourchette de rémunération affichée est la fourchette précise pour ce poste au moment de cette publication. Acosta pourrait finalement payer plus ou moins que la fourchette affichée en fonction des qualifications des candidats et des lieux. Cette fourchette peut être modifiée à l’avenir. Acosta et ses filiales sont des employeurs offrant l’égalité des chances. Nous nous engageons à fournir des aménagements pour les personnes handicapées. Si vous avez besoin d’un aménagement, nous travaillerons avec vous pour répondre à vos besoins, dans la mesure requise par la loi. Les déclarations ci-dessus ont pour but de décrire la nature générale et le niveau de travail effectué par les personnes affectées à cette classification. Elles ne doivent pas être interprétées comme une liste exhaustive de toutes les responsabilités, tâches et compétences requises du personnel ainsi classé. Mosaic se réserve le droit de modifier tout ou partie des descriptions de poste à sa discrétion afin de répondre aux besoins de l’entreprise, voire de les dépasser. En soumettant votre candidature, vous acceptez et acceptez la Déclaration de confidentialité d’Acosta et les Conditions d’utilisation. Acosta, and its subsidiaries, is an Equal Opportunity Employer
Confirm your E-mail: Send Email
All Jobs from Acosta Group