Cloudera-Entwickler (m/w/d)

Deine Aufgabe Dies ist eine Senior Cloudera Developer (Data Engineer) Rolle, die 6 bis 10 Jahre Erfahrung erfordert. Diese Position ist in Pune angesiedelt. Aufgaben Entwerfen, entwickeln und implementieren von Datenlösungen mit Cloudera-Technologien wie Hadoop, Spark und Hive Zusammenarbeit mit Data Engineers zur Optimierung von Datenpipelines und Datenverarbeitungsworkflows Enge Zusammenarbeit mit Datenanalysten und Data Scientists, um Datenqualität und -integrität sicherzustellen Fehlersuche und Lösung von Problemen mit Datenverarbeitungs- und Datenspeichersystemen Auf dem neuesten Stand bleiben über aktuelle Trends und Best Practices in der Cloudera-Entwicklung Teilnahme an Code-Reviews und Feedback an Teammitglieder geben Durchführung von Extract, Transform und Load (ETL) Prozessen mit Spark Integration von Spark Streaming mit anderen Technologien wie Kafka Bereitstellung und Verwaltung von Spark-Anwendungen auf einem Hadoop-Cluster oder auf GCP Dataproc Dein Profil Wir suchen einen Senior Cloudera Developer (Data Engineer) mit umfangreicher Erfahrung in Spark, Hadoop-Ökosystem und GCP-Diensten zur Gestaltung und Implementierung von Datenlösungen. Muss-Kriterien 6 bis 10 Jahre Erfahrung Kompetenz in der Arbeit mit Spark Verständnis der Spark-Architektur und Fehlertoleranz-Mechanismen Kompetenz in der Verwendung von Spark DataFrames und Spark SQL für die Abfrage strukturierter Daten Fähigkeiten bei der Durchführung von Extract Transform and Load (ETL)-Prozessen mit Spark Fundierte Kenntnisse in Python Bachelor-Abschluss in Informatik, Informationstechnologie oder einem verwandten Bereich Nachgewiesene Erfahrung als Cloudera Developer oder in einer ähnlichen Rolle Solides Verständnis von Cloudera-Technologien wie Hadoop, Spark und Hive Erfahrung mit Datenmodellierung, Data Warehousing und Datenintegration Ausgeprägte Programmierkenntnisse in Java, Scala oder Python Ausgezeichnete Problemlösungsfähigkeiten Hervorragende Kommunikationsfähigkeiten Fähigkeit, sowohl eigenständig als auch im Team zu arbeiten Wünschenswert Erfahrung in der Optimierung von Spark-Ausführungsplänen Erfahrung mit der Integration von Spark Streaming mit anderen Technologien wie Kafka Vertrautheit mit dem Hadoop-Ökosystem einschließlich Tools wie HDFS, Hive, Cloudera-Stack Erfahrung mit der Bereitstellung und Verwaltung von Spark-Anwendungen auf einem Hadoop-Cluster oder auf GCP Dataproc Erfahrung mit Java-Programmierung Kenntnisse in DevOps-Tools und -Praktiken (CI/CD, Docker) Praktische Erfahrung mit GCP-Diensten (Dataproc, Cloud Function, Cloud Run, Pub Sub, BigQuery) Über uns T-Systems Information and Communication Technology India Private Limited (T-Systems ICT India Pvt. Ltd.) ist stolzer Empfänger der prestigeträchtigen Great Place To Work® Certification™. Als hundertprozentige Tochtergesellschaft der T-Systems International GmbH ist T-Systems India an den Standorten Pune, Bangalore und Nagpur tätig und verfügt über ein engagiertes Team von über 3500 Mitarbeitern , die Dienstleistungen für Konzernkunden erbringen. T-Systems bietet integrierte End-to-End-IT-Lösungen und treibt die digitale Transformation von Unternehmen in allen Branchen voran, darunter: Automobilindustrie Fertigung Logistik und Transport Gesundheitswesen Öffentlicher Sektor T-Systems entwickelt vertikale, unternehmensspezifische Softwarelösungen für diese Sektoren. T-Systems International GmbH ist ein Unternehmen für Informationstechnologie und digitale Transformation mit Präsenz in über 20 Ländern und einem Umsatz von mehr als 4 Milliarden Euro. T-Systems ist ein weltweit führender Anbieter von digitalen Dienstleistungen und verfügt über mehr als 20 Jahre Erfahrung in der Transformation und dem Management von IT-Systemen. Als Tochtergesellschaft der Deutschen Telekom und Marktführer in Deutschland bietet T-Systems International sichere, integrierte Informationstechnologie und digitale Lösungen aus einer Hand.