Vorlage für die Stellenbeschreibung eines Big-Data-Ingenieurs
Wir suchen einen talentierten Big-Data-Ingenieur für die Entwicklung und Verwaltung der Big-Data-Lösungen unseres Unternehmens. In dieser Rolle müssen Sie Big-Data-Tools und -Frameworks entwerfen und implementieren, ELT-Prozesse implementieren, mit Entwicklungsteams zusammenarbeiten, Cloud-Plattformen erstellen und das Produktionssystem warten.
Um als Big-Data-Ingenieur erfolgreich zu sein, sollten Sie über fundierte Kenntnisse der Hadoop-Technologien, ausgezeichnete Projektmanagementfähigkeiten und erstklassige Fähigkeiten zur Problemlösung verfügen. Ein erstklassiger Big Data Engineer versteht die Bedürfnisse des Unternehmens und entwickelt skalierbare Datenlösungen für seine aktuellen und zukünftigen Anforderungen.
Aufgaben des Big-Data-Ingenieurs:
- Treffen mit Managern, um den Big-Data-Bedarf des Unternehmens zu ermitteln.
- Entwicklung von Hadoop-Systemen.
- Laden unterschiedlicher Datensätze und Durchführen von Vorverarbeitungsdiensten mit Hive oder Pig.
- Finalisierung des Systemumfangs und Bereitstellung von Big-Data-Lösungen.
- Verwaltung der Kommunikation zwischen dem internen System und dem Umfrageanbieter.
- Zusammenarbeit mit den Software-Forschungs- und Entwicklungsteams.
- Aufbau von Cloud-Plattformen für die Entwicklung von Unternehmensanwendungen.
- Aufrechterhaltung der Produktionssysteme.
- Schulung des Personals zum Datenressourcenmanagement.
Anforderungen an einen Big-Data-Ingenieur:
- Bachelor-Abschluss in Computertechnik oder Informatik.
- Vorherige Erfahrung als Big-Data-Ingenieur.
- Fundierte Kenntnisse von Hadoop, Spark und ähnlichen Frameworks.
- Kenntnisse in Skriptsprachen wie Java, C++, Linux, Ruby, PHP, Python und R.
- Kenntnisse über NoSQL- und RDBMS-Datenbanken, einschließlich Redis und MongoDB.
- Vertrautheit mit Mesos-, AWS- und Docker-Tools.
- Ausgezeichnete Projektmanagementfähigkeiten.
- Gute kommunikative Fähigkeiten.
- Fähigkeit, komplexe Netzwerk-, Daten- und Softwareprobleme zu lösen.