Ihre aktuelle Jobsuche

AWS Data Engineer (Pyspark), London, Hybrid, £65,000

Role Overview

We are looking for an experienced AWS Data Cloud engineer to join our team. In this role, you will be responsible for designing, deploying, and maintaining our cloud-based infrastructure based on Amazon Web Services and, occasionally, other technologies. You will collaborate with other teams to ensure our cloud environment meets all architectural, operational, and integration requirements.

Skills/Qualifications:

* Bachelor's degree in Computer Science or any other Engineering field
* Certification in AWS Solution Developer/Solution Architect
* 3+ years of hands-on experience as a data engineer within AWS Cloud
* Expertise and hands-on experience in

1 AWS Glue
2 AWS Lambda
3 API Gateway,
4 S3, Amazon Redshift
5 Apache Airflow
6 Infrastructure and architectural best practices supporting Amazon Redshift

* Experience with cloud platforms
* Expertise in collecting, migrating and transforming data using Python, SQL, Spark
* Experience in REST APIs for data transfers
* Experience in modern data processing platforms, data warehouses and data lakes
* Expert skills in building cloud-based data pipelines using data orchestration and workflow platforms
* Advanced SQL skills, with a deep understanding of how to write performant SQL and debug problems
* Experienced with Agile development methodologies, processes, and procedures
* Developing and maintaining applications written for Amazon Simple Queue Service, Amazon Simple Notification Service and Amazon EventBridge.
* Leveraging AWS SDKs to interact with AWS services from your application
* Knowledge and experience with testing, releasing, and CI/CD pipeline deployments into AWS using tools like GitHub, CircleCI, BitBucket
* Demonstrated ability to build self-service, self-healing, highly scalable and secure cloud software capabilities

Please reach out with your latest CV.

Senior Data Engineer | Databricks |

Full remote

6 month initial contract

Up to £600 outside IR35

Senior Data Engineer: Python, AWS, Databricks, SQL

Senior Data Engineer required to take on a pivotal role in the enhancement of a new AWS Databricks platform. Your role will be to help further develop and optimise the company's cloud capabilities across all functions of the business.

We are looking for a hands-on Data Engineer who is well-versed in Python programming and Databricks. You will also have experience implementing AWS Data Solutions. For this role, you will be working closely with a team of data engineers and data scientists to build robust data pipelines to help operationalise the team's applications. You will report into IT to ensure consistency across technical solutions and infrastructure.

Responsibilities:

* Implementation of custom data pipelines using Python

* Design & develop data solutions within an AWS Databricks environment

* Collaborate with Data Architects, Project Managers & Data Engineers to build scalable data pipelines

* Work in a DevOps environment

* Ability to engage with all levels of the business and work in cross-functional teams

Requirements:

* Expert use of Python

* Extensive experience on a Databricks platform

* Knowledge of DevOps methodologies

Job Description

Mon client qui est un intégrateur reconnu, propose des solutions ERP et CRM recrute un Data engineer en DATA/IA/IOT en CDI

Role & Responsibilities

* Participer à la création des modules IA
* Créer et optimiser les pipelines de données
* Créer, structurer et organiser les datalake
* Concevoir et mettre en place l'architecture data des projets

Skills & Qualifications

* Créer des pipelines de données fiables de manière autonom
* Solide maîtrisse SQL, et NoSQL
* Une solide compréhension de l'ETL
* Solide maîtrisse des frameworks liés au Big Data

Wir suchen für den Fachbereich Data & Analytics von einem Kunden in ganz Deutschland:

Cloud Data Engineer (w/m/d)

Anforderungen:

- Erfahrung mit Cloud Analystics (Azure, AWS, GCP) oder Big Data (Haddop, Kafka)
- Know-How in der Softwareentwicklung mit Java, Scala oder Python
- Von Vorteil: Erfahrung mit Buildtools und CI/CD Pipelines
- Von Vorteil: gute Kenntnisse von verschiedenen Cloud-Strategien und lac Technologien
- Verhandlungssicheres Deutsch- und gute Englischkenntnisse

Worum es geht:

Das Unternehmen ist einer der führenden IT-Dienstleister im deutschsprachigen Raum. Mit rund 6.800 Mitarbeitenden unterstützt das Unternehmen Kunden aus verschiedenen Branchen bei der Digitalen Transformation.

Das Competence Center Data Engineering ist verantwortlich für die Umsetzung komplexer Big Data und Cloud Analytics Projekte für namhafte große Kunden. Als Data Engineer bist du Teil eines innovativen und stetig wachsenden Software Engineering Teams. Du profitierst von erfahrenen Kolleginnen und Kollegen und absolvierst ein spezielles Ausbildungsprogramm, um dein Wissen auszubauen und zu vertiefen.

Deine Aufgaben als Cloud Data Engineer:

* Implementieren von Data Pipelines, Data Ingest und Data Processing
* Engineering von Container basierten Analytics Plattformen und effizienten CI/CD Pipelines
* Projektbasierte Umsetzung von Business Anforderungen mit Analytics Services von AWS, Azure und GCP oder etablierten On Premises Big Data Technologien
* StetigeWeiterbildung in Technologienausdem Cloud- und Software Engineering-Umfeld

Dafür wird dir geboten:

* 30 Tage Urlaubstage im Jahr
* Zeitliche und örtliche Flexibilität (bundesweit remote möglich + 2 - 4 Monate pro Jahr Remote-Arbeit aus dem (EU-)Ausland möglich je nach Aufgabenbereiche
* Offene Unternehmenskultur, dynamisches Arbeitsumfeld und moderner Führungsstil
* Spannende abwechslungsreiche Projekte im Cloud-Umfeld mit unterschiedlichen Industrien
* Projektzuweisung, die deiner Kapazität und deinem Interesse entspricht
* Etabiliertes Umfeld, in dem du dich technisch und professionell weiterentwickeln kannst
* Unterstützung deiner persönlichen und fachlichen Weiterentwicklung mit einem breiten Angebot von Weiterbildungen und Zertifizierungen
* Patenschaft von fachlichen Kolleg*innen und solides On-Boarding Programm
* Freiraum für eigene Kreativität und Entwicklung

Hiring Process:

1st Gespräch mit dem Fachbereich - 2nd Gespräch mit dem Fachbereich - Angebot/Absage

Für denselben Geschäftsbereich suchen wir ebenfalls nach DataOps Engineers, Data Architects und Consultants in ganz Deutschland. Bewerbe dich gerne bei uns, auch wenn du nicht alle Anforderungen erfüllen kannst.

Impressum - https://www.frankgroup.com/de/impressum/

Wir suchen für den Fachbereich Data & Analytics von einem Kunden in ganz Deutschland:

Cloud Data Engineer (w/m/d)

Anforderungen:

- Erfahrung mit Cloud Analystics (Azure, AWS, GCP) oder Big Data (Haddop, Kafka)
- Know-How in der Softwareentwicklung mit Java, Scala oder Python
- Von Vorteil: Erfahrung mit Buildtools und CI/CD Pipelines
- Von Vorteil: gute Kenntnisse von verschiedenen Cloud-Strategien und lac Technologien
- Verhandlungssicheres Deutsch- und gute Englischkenntnisse

Worum es geht:

Das Unternehmen ist einer der führenden IT-Dienstleister im deutschsprachigen Raum. Mit rund 6.800 Mitarbeitenden unterstützt das Unternehmen Kunden aus verschiedenen Branchen bei der Digitalen Transformation.

Das Competence Center Data Engineering ist verantwortlich für die Umsetzung komplexer Big Data und Cloud Analytics Projekte für namhafte große Kunden. Als Data Engineer bist du Teil eines innovativen und stetig wachsenden Software Engineering Teams. Du profitierst von erfahrenen Kolleginnen und Kollegen und absolvierst ein spezielles Ausbildungsprogramm, um dein Wissen auszubauen und zu vertiefen.

Deine Aufgaben als Cloud Data Engineer:

* Implementieren von Data Pipelines, Data Ingest und Data Processing
* Engineering von Container basierten Analytics Plattformen und effizienten CI/CD Pipelines
* Projektbasierte Umsetzung von Business Anforderungen mit Analytics Services von AWS, Azure und GCP oder etablierten On Premises Big Data Technologien
* StetigeWeiterbildung in Technologienausdem Cloud- und Software Engineering-Umfeld

Dafür wird dir geboten:

* 30 Tage Urlaubstage im Jahr
* Zeitliche und örtliche Flexibilität (bundesweit remote möglich + 2 - 4 Monate pro Jahr Remote-Arbeit aus dem (EU-)Ausland möglich je nach Aufgabenbereiche
* Offene Unternehmenskultur, dynamisches Arbeitsumfeld und moderner Führungsstil
* Spannende abwechslungsreiche Projekte im Cloud-Umfeld mit unterschiedlichen Industrien
* Projektzuweisung, die deiner Kapazität und deinem Interesse entspricht
* Etabiliertes Umfeld, in dem du dich technisch und professionell weiterentwickeln kannst
* Unterstützung deiner persönlichen und fachlichen Weiterentwicklung mit einem breiten Angebot von Weiterbildungen und Zertifizierungen
* Patenschaft von fachlichen Kolleg*innen und solides On-Boarding Programm
* Freiraum für eigene Kreativität und Entwicklung

Hiring Process:

1st Gespräch mit dem Fachbereich - 2nd Gespräch mit dem Fachbereich - Angebot/Absage

Für denselben Geschäftsbereich suchen wir ebenfalls nach DataOps Engineers, Data Architects und Consultants in ganz Deutschland. Bewerbe dich gerne bei uns, auch wenn du nicht alle Anforderungen erfüllen kannst.

Impressum - https://www.frankgroup.com/de/impressum/

Wir suchen für den Fachbereich Data & Analytics von einem Kunden in ganz Deutschland:

(Senior) Cloud Data Engineer (w/m/d)

Anforderungen:

- Mehrjährige Erfahrung mit Cloud Analystics (Azure, AWS, GCP) oder Big Data (Haddop, Kafka)
- Know-How in der Softwareentwicklung mit Java, Scala oder Python
- Von Vorteil: Erfahrung mit Buildtools und CI/CD Pipelines
- Von Vorteil: gute Kenntnisse von verschiedenen Cloud-Strategien und lac Technologien
- Verhandlungssicheres Deutsch- und gute Englischkenntnisse

Worum es geht:

Das Unternehmen ist einer der führenden IT-Dienstleister im deutschsprachigen Raum. Mit rund 6.800 Mitarbeitenden unterstützt das Unternehmen Kunden aus verschiedenen Branchen bei der Digitalen Transformation.

Das Competence Center Data Engineering ist verantwortlich für die Umsetzung komplexer Big Data und Cloud Analytics Projekte für namhafte große Kunden. Als Data Engineer bist du Teil eines innovativen und stetig wachsenden Software Engineering Teams. Du profitierst von erfahrenen Kolleginnen und Kollegen und absolvierst ein spezielles Ausbildungsprogramm, um dein Wissen auszubauen und zu vertiefen.

Deine Aufgaben als Cloud Data Engineer:

* Implementieren von Data Pipelines, Data Ingest und Data Processing
* Engineering von Container basierten Analytics Plattformen und effizienten CI/CD Pipelines
* Projektbasierte Umsetzung von Business Anforderungen mit Analytics Services von AWS, Azure und GCP oder etablierten On Premises Big Data Technologien
* StetigeWeiterbildung in Technologienausdem Cloud- und Software Engineering-Umfeld

Dafür wird dir geboten:

* 30 Tage Urlaubstage im Jahr
* Zeitliche und örtliche Flexibilität (bundesweit remote möglich + 2 - 4 Monate pro Jahr Remote-Arbeit aus dem (EU-)Ausland möglich je nach Aufgabenbereiche
* Offene Unternehmenskultur, dynamisches Arbeitsumfeld und moderner Führungsstil
* Spannende abwechslungsreiche Projekte im Cloud-Umfeld mit unterschiedlichen Industrien
* Projektzuweisung, die deiner Kapazität und deinem Interesse entspricht
* Etabiliertes Umfeld, in dem du dich technisch und professionell weiterentwickeln kannst
* Unterstützung deiner persönlichen und fachlichen Weiterentwicklung mit einem breiten Angebot von Weiterbildungen und Zertifizierungen
* Patenschaft von fachlichen Kolleg*innen und solides On-Boarding Programm
* Freiraum für eigene Kreativität und Entwicklung

Hiring Process:

1st Gespräch mit dem Fachbereich - 2nd Gespräch mit dem Fachbereich - Angebot/Absage

Für denselben Geschäftsbereich suchen wir ebenfalls nach DataOps Engineers, Data Architects und Consultants in ganz Deutschland. Bewerbe dich gerne bei uns, auch wenn du nicht alle Anforderungen erfüllen kannst.

Impressum - https://www.frankgroup.com/de/impressum/

Wir suchen für den Fachbereich Data & Analytics von einem Kunden in ganz Deutschland:

(Senior) Cloud Data Engineer (w/m/d)

Anforderungen:

- Mehrjährige Erfahrung mit Cloud Analystics (Azure, AWS, GCP) oder Big Data (Haddop, Kafka)
- Know-How in der Softwareentwicklung mit Java, Scala oder Python
- Von Vorteil: Erfahrung mit Buildtools und CI/CD Pipelines
- Von Vorteil: gute Kenntnisse von verschiedenen Cloud-Strategien und lac Technologien
- Verhandlungssicheres Deutsch- und gute Englischkenntnisse

Worum es geht:

Das Unternehmen ist einer der führenden IT-Dienstleister im deutschsprachigen Raum. Mit rund 6.800 Mitarbeitenden unterstützt das Unternehmen Kunden aus verschiedenen Branchen bei der Digitalen Transformation.

Das Competence Center Data Engineering ist verantwortlich für die Umsetzung komplexer Big Data und Cloud Analytics Projekte für namhafte große Kunden. Als Data Engineer bist du Teil eines innovativen und stetig wachsenden Software Engineering Teams. Du profitierst von erfahrenen Kolleginnen und Kollegen und absolvierst ein spezielles Ausbildungsprogramm, um dein Wissen auszubauen und zu vertiefen.

Deine Aufgaben als Cloud Data Engineer:

* Implementieren von Data Pipelines, Data Ingest und Data Processing
* Engineering von Container basierten Analytics Plattformen und effizienten CI/CD Pipelines
* Projektbasierte Umsetzung von Business Anforderungen mit Analytics Services von AWS, Azure und GCP oder etablierten On Premises Big Data Technologien
* StetigeWeiterbildung in Technologienausdem Cloud- und Software Engineering-Umfeld

Dafür wird dir geboten:

* 30 Tage Urlaubstage im Jahr
* Zeitliche und örtliche Flexibilität (bundesweit remote möglich + 2 - 4 Monate pro Jahr Remote-Arbeit aus dem (EU-)Ausland möglich je nach Aufgabenbereiche
* Offene Unternehmenskultur, dynamisches Arbeitsumfeld und moderner Führungsstil
* Spannende abwechslungsreiche Projekte im Cloud-Umfeld mit unterschiedlichen Industrien
* Projektzuweisung, die deiner Kapazität und deinem Interesse entspricht
* Etabiliertes Umfeld, in dem du dich technisch und professionell weiterentwickeln kannst
* Unterstützung deiner persönlichen und fachlichen Weiterentwicklung mit einem breiten Angebot von Weiterbildungen und Zertifizierungen
* Patenschaft von fachlichen Kolleg*innen und solides On-Boarding Programm
* Freiraum für eigene Kreativität und Entwicklung

Hiring Process:

1st Gespräch mit dem Fachbereich - 2nd Gespräch mit dem Fachbereich - Angebot/Absage

Für denselben Geschäftsbereich suchen wir ebenfalls nach DataOps Engineers, Data Architects und Consultants in ganz Deutschland. Bewerbe dich gerne bei uns, auch wenn du nicht alle Anforderungen erfüllen kannst.

Impressum - https://www.frankgroup.com/de/impressum/

Mon client recherche un chef de projet intégration :



► Vous interagissez avec les équipes R&D, Infra et B.E ainsi que la Direction pour le développement et l'évolution du Produit en adéquation avec la stratégie de l'entreprise,

► Vous assurez un rôle de référent technique sur les technologies mises en oeuvre, et accompagnez le bureau d'étude ainsi que les équipes techniques dans la définition et la spécification technique ainsi que la planification des projets.

► Vous participez à la préparation et l'exécution des tests d'intégration et fonctionnels POC / MVP (en lien avec les équipes dev): suivi des nouvelles fonctionnalités, préparation des plans de test en accord avec les spécifications détaillées, déroulement des TI/TF, remontée des bugs en tickets JIRA

► Vous aurez à charge de configurer le logiciel pour répondre aux objectifs client, préparation de l'environnement utilisateur, développement de services à façon dans l'environnement du logiciel (règles automatisées, tableaux de bord, visualisations, alarmes...)

► Vous aurez à charge l'import de base de données d'équipements et d'usagers, ainsi que la configuration de connexion réseau aux équipements

► Vous serez garant de la documentation utilisateur et support

* Le profil idéal

► Titulaire d'une formation d'Ingénieur (ou équivalente) en Informatique ou électronique avec 3 ans d'expérience minimum en gestion de projet d'intégration IoT,

► Vous avez déjà évolué dans l'environnement de l'IoT (PME et Entreprises dans les Smart Cities, Services, ...) et mis en place des solutions digitales fonctionnelles avec de l'intégration et du traitement de données,
► Vous avez une base solide sur les fondamentaux en technologie de réseaux IoT et cellulaires, conception d'architectures de plateformes et de réseaux sécurisés, conception technique de nouveaux produits en collaboration avec le service R&D, analyse de traitement de données massives générées par les objets connectées,

► Stack Technique: IOT (Lora, BLE, M2M, Brocker MQTT, LNS Chirpstack, Thingsboard), IT (Réseaux et base de données SQL/NO SQL), Compétences en Javascript souhaitée,

► Vous comprenez les normes et réglementations appliquées à la cybersécurité : ISO2700X, IEC 62443, NIS



► Vous êtes à l'aise avec le travail en mode agile (scrum),

► Vous êtes à l'aise avec JIRA, Confluence, Trello et Microsoft Teams, les outils de développement et de déploiement, environnements de test.



Pour postuler :

☎️ +33 9 70 73 81 54
📧 s.tridi@jeffersonfrank.com

We are looking for a data engineer in Oslo!

With over 100 years experience in transportation, construction, operations and maintenance, you will be joining a growing team who are making the first moves towards digitalisation in a very traditional industry

The platform you help build, and subsequent features & insights available, have the ability to impact how an entire industry operates

All teams across the business are committed to this goal, and there has been a lot of engagement as it makes processes easier for stakeholders and customers alike

Longer-term this digital transformation will expand into adding data science / ML capabilities into the team, and allow for automated decision making

You will initially be joining a small but growing internal data team, where you can have the flexibility to work cross functionally and to explore & grow with a variety of day-to-day tasks.

Some of your key responsibilities will include:

* Helping to build the data platform on Azure
* Orchestrating data from various sources - cleaning, transformation and making it useful to users
* Engineering and implementing scalable systems and data pipelines
* Communicating with stakeholders across the business to understand processes, value drivers, and capture business requirements

We are looking for you to have the following skills & experiences:

* 2+ years' experience in a similar role
* Experience working on Cloud (preference for Azure)
* Experience building ETL pipelines - orchestrating raw data from different systems
* Experience with Big Data technologies is advantageous

It is a great chance to help take the lead within your area of expertise. You will have the ability to influence the direction of an industry which is not data-driven yet - we are making the first move and hope you will help us have a great impact!

For any questions, contact Lucy on l.whiting@frankgroup.com

Senior Data Engineer | Databricks |

1 - 2 times in office per month, London

£70,000 PA

There is a performance based bonus of up to 8% but this is not guaranteed.

28 days holiday, plus bank, individual private healthcare and pension.





Senior Data Engineer: Python, Azure, Databricks, SQL

The primary focus of the role is Databricks Data Engineering. You will be building data pipelines using Databricks, coding using PySpark, and supporting internal applications as the client are moving away from a legacy application into new bespoke applications which rely on Databricks. You will also be using Python for Data Transformations and work across the Azure Data Platform.

Must Have:

* Strong Databricks Data Engineering skills, not just admin but actually building data pipelines in Databricks and using it regularly.
* Strong coding experience with Pyspark.
* Strong experience in SQL Server and Python coding.
* Knowledge of Azure Data Factory.
* Strong 3-5 years working as a Data Engineer.
* Github source control experience.
* Excellent communication skills