2 x Data Engineer / Big Data utvecklare - Stockholm
Just now we have a request from one of our Swedish clients for 2 x Data Engineer / Big Data utvecklare.
As our client explained:
Inom Kundens IT-avdelning drivs ett större förändringsarbete med att transformera dagens IT-lösningar för att bättre stödja ett modernt och enhetligt arbetssätt och ge en hög användarupplevelse.
Arbetsuppgifterna omfattar att:
- Ladda data in i Data Lake.
- Upptäck förändringar på källsystemet och hantera CDC-processer.
- Sätta riktlinjer för dataintagprocessen
- Coacha och vidareutveckla juniora utvecklare
- Kunna skriva tekniska kravspecifikationer och ha dialog med arkitekter, produktägare ansvariga för källsystemen samt andra intressenter.
Primärt används teknik som:
- Apache Hadoop (Hive, HDFS, YARN, Sqoop, Ambari)
- Apache Spark (SQL, Scala, Python, R)
- Apache NiFi
- Apache Kafka
- Apache Ranger och Atlas
Ska-krav (obligatoriska krav):
- Konsulten ska ha minst 5 års dokumenterad erfarenhet av Big Data lösningar i en Datasjö-produktionsmiljö.
- Konsulten ska ha dokumenterad erfarenhet av Apache Hadoop stack (Cloudera eller Hortonworks), Apache MapReduce,Apache HDFS,Apache Spark, Apache NiFi, Apache Kafka.
- Konsulten ska ha dokumenterad erfarenhet av högpresterande och skalbara lösningar för datasjö inom Hadoop miljön.
- Konsulten ska ha dokumenterad erfarenhet och god förståelse av Hadoop säkerhet.
- Konsulten ska ha dokumenterad erfarenhet och god förståelse av Hadoop heatmaps,log och fil hantering.
- Konsulten ska ha goda kunskaper i SQL, logisk datamodellering och dimensionsmodellering.
Bör-krav:
- Konsulten bör ha erfarenhet av agila arbetsmetoder såsom Scrum och Kanban.
- Konsulten bör ha erfarenhet av ETL.
- Konsulten bör ha kunskap från datavetenskapsområden som ML / DL / NLP / AI, Python, R, - TensorFlow, QlikView, QlickSense, Knime, OrientDB.
- Konsulten bör känna till förändringshanteringsprinciper som CI / CD och ha erfarenhet av att arbeta med unit och system tester integrerade i CI/CD.
- Konsulten bör ha efarenhet av att jobba med person- och organisationsdata samt GDPR.
- Konsulten bör ha erfarenhet av säkerhetsprinciper (autentisering och auktorisering, kryptering) och installeras i datalagringsmiljön med hjälp av teknologier som Kerberos, AD, LDAP, etc.
- Konsulten bör ha förmåga att självständigt driva och genomföra ett eget arbete.
- Konsulten bör vara engagerad, noggrann, strukturerad och ansvarstagande.
- Konsulten bör ha förmåga att samarbeta effektivt med hela arbetslaget genom att delta i och leda arbetsmöten, workshops och andra tekniker.
Duration: Until the 2020-09-30, with a possibility of extension.
Start: 2019-09-09
Place: Stockholm
If you feel qualified for this position or know someone else who is, could you or your colleague please contact me as soon as possible (in Swedish or English) with the following:
• an updated CV in Word format (in Swedish)
• a price per hour
• an availability date
Send your information to michael@konsultfabriken.se