Für unseren Kunden in Frankfurt am Main sind wir aktuell auf der Suche nach einem Consultant Apache Spark/Solr/Kafka/NiFi mit AWS o. Azure (m/w/d).

Falls Sie die folgende Projektbeschreibung interessiert und Sie die Anforderungen ausreichend abdecken, bitten wir Sie um kurzfristige Rückmeldung unter Angabe Ihrer Kontaktdaten, Ihrer Konditionen für den genannten Einsatzort (Stunden- oder Tagessatz) sowie Ihres Profils (vorzugsweise in Word).

Projektstandort: Frankfurt am Main (100% on-site)

Dauer: 01.04.2019 - 03.01.2020

Volumen: 120 PT

Abgabefrist beim Kunden: 12.03.2019

Kurzbeschreibung Projekt:

Aufgaben:

Die Leistungserbringung erfolgt überwiegend im Rahmen agiler Vorgehensmodelle (z.B. SCRUM). In diesem Fall sind die dort spezifischen Prozesse zu berücksichtigen und es ist ein regelmäßiger Austausch mit dem Team erforderlich.

Entsprechend dem im agilen Team gegebenen Vorgehen sind regelmäßige Abstimmungen notwendig, die Aufgaben-Verteilungsprozesse (z.B. Pull von Tasks gemäß Kompetenz und in Abstimmung mit dem Team) durchzuführen und die entsprechenden fachlichen Kommunikationsinstrumente (z.B. JIRA) zu bedienen.

- Beratung bei der Erstellung einer cloud-fähigen Architektur zur Erfassung und Speicherung von großen Mengen an Textdaten

- Beratung bei der Erstellung einer cloud-fähigen Architektur zur Verarbeitung von großen Datenmengen auf Basis von Data Mining Algorithmen in Apache Spark

- Beratung bei der Portierung des bestehenden Hortonworks Hadoop Ökosystem in die Cloud, insb. nach Amazon AWS

- Dokumentation der Vorgänge und der umzusetzenden Architektur

- Präsentation der Architektur an die Entwicklerteams sowie bis auf Managementebene

Anforderungen:

- Mindestens 2 Jahre nachweisbare Erfahrung im Bereich Amazon AWS oder Microsoft Azure Cloud, insb. in den Gebieten Amazon EMR und Amazon ECS

- Mindestens 3 Jahre nachweisbare Erfahrung mit Apache Spark/Kafka/NiFi

- Erfahrung bei der Erstellung einer nachhaltigen Architektur zur Verarbeitung von großen Datenmengen auf Basis von Data Mining Algorithmen in Apache Spark

- Mindestens 10 Jahre nachweisbare Erfahrung in der Dokumentation und Beschreibung von Softwarearchitekturen bzw. Datenbankarchitekturen

- Mindestens 5 Jahre nachweisbare Erfahrung mit NoSQL insbesondere Mongo DB

- Mindestens 5 Jahre nachweisbare Erfahrung mit Spring Framework bzw. Spring Boot

- Mindestens 3 Jahre nachweisbare Erfahrung in Text Mining sowie Data Mining und Umsetzung/Anwendung von Text Mining in Java / Apache Spark

Wünschenswert:

- Erfahrung in Java und Scala Entwicklung

- Erfahrung mit Microsoft SQL Server und Apache SolR

- Erfahrung in agiler Softwareentwicklung

Für Fragen, Anregungen oder Wünsche stehen wir Ihnen gern zur Verfügung.