Data Engineering für Einsteiger

Methode
Logo von HECKER CONSULTING

Tipp: Haben Sie Fragen? Für weitere Details einfach auf "Kostenlose Informationen" klicken.

Beschreibung

Data Science kann allgemein als der Prozess definiert werden, Daten nützlich zu machen und Data Engineering ist ein wichtiger Teil des Wie und Warum.

 

Wenn Sie sich Data Science wie einen Rennwagen vorstellen, sind die Data Engineers die Boxen-Crew. Sie fahren nicht das Auto, aber sie sorgen dafür, dass das Auto viel leichter zu fahren ist.

Dateningenieure sorgen dafür, dass der Datenfluss reibungslos funktioniert, überwachen Systeme, sehen Probleme voraus und reparieren die Datenpipeline, wenn Probleme auftreten. Sie extrahieren und sammeln Daten aus verschiedenen Quellen und laden sie in eine einzige, leicht abfragbare Datenbank.

Sie werden die wesentlichen Grundlagen des Data Engineering…

Gesamte Beschreibung lesen

Frequently asked questions

Es wurden noch keine Besucherfragen gestellt. Wenn Sie weitere Fragen haben oder Unterstützung benötigen, kontaktieren Sie unseren Kundenservice.

Noch nicht den perfekten Kurs gefunden? Verwandte Themen: Data Engineering, Data Science, Microsoft SQL Server, SQL & MySQL und Big Data.

Data Science kann allgemein als der Prozess definiert werden, Daten nützlich zu machen und Data Engineering ist ein wichtiger Teil des Wie und Warum.

 

Wenn Sie sich Data Science wie einen Rennwagen vorstellen, sind die Data Engineers die Boxen-Crew. Sie fahren nicht das Auto, aber sie sorgen dafür, dass das Auto viel leichter zu fahren ist.

Dateningenieure sorgen dafür, dass der Datenfluss reibungslos funktioniert, überwachen Systeme, sehen Probleme voraus und reparieren die Datenpipeline, wenn Probleme auftreten. Sie extrahieren und sammeln Daten aus verschiedenen Quellen und laden sie in eine einzige, leicht abfragbare Datenbank.

Sie werden die wesentlichen Grundlagen des Data Engineering kennenlernen und hören vin Schlüsselthemen wie Data Wrangling, Datenbankschemata und die Entwicklung von ETL-Pipelines. Außerdem nutzen Sie verschiedene Data-Engineering-Tools wie Hive, Hadoop, Spark und Airflow.

Am Ende werden Sie wissen, warum der Data Engineer eine der wichtigsten Personen in einer datengesteuerten Organisation ist.

 

Einführung in Data Engineering

  • Was ist Data Engineering?
  • Einführung in Data Engineering
  • Dateningenieur versus Datenwissenschaftler
  • Wesentliche Werkzeuge für Data Engineering

Datenbanken und Dataframes

  • Einführung in Datenbanken und ihre Typen
  • Verstehen von Datenbankschemata
  • Verteiltes Rechnen

Daten-Engineering-Werkzeuge

  • MapReduce und Hadoop
  • Hive
  • Spark
  • Airflow

ETL-Pipelines

  • Quellen der Datenextraktion
  • Datenextraktion aus einer PostgreSQL-Datenbank
  • Transformieren von Daten
  • Laden von Daten in eine DB
  • Planen der ETL-Pipeline mit Airflow

 

Es gibt so viele Schlagworte in der Tech-Branche in diesen Tagen. Man kennt sich aus mit maschinellem Lernen, künstlicher Intelligenz, neuronalen Netzwerken usw. Und obwohl das Schreiben von Algorithmen zur Erstellung von Vorhersagen eine wichtige neue Fähigkeit ist, ist es nicht die einzige, die man braucht, um in diesem Bereich einzusteigen. Im modernen Big-Data-System ist die Person, die Algorithmen schreibt, nicht diejenige, die die Daten bereinigt. Das Auslegen von Daten für Wissenschaftler und Forscher ist mittlerweile ein komplexes Problem für sich selbst. Das ist der Punkt, an dem Dateningenieure einspringen und ihre Rolle in diesem Ökosystem finden. Sie werden die Grundlagen des Data Engineering lernen. Sie werden damit beginnen, die Bedeutung von Data Engineering zu verstehen, wie es sich von Data Science unterscheidet und welche Tools Sie beherrschen sollten, um Datenpipelines zu entwickeln. Dann werden Sie die Grundlagen eines Big-Data-Systems untersuchen, wie Datenbanken und verteiltes Rechnen. Im weiteren Verlauf lernen Sie die Tools kennen, die bei der Entwicklung einer ETL-Datenpipeline für jede Art von Problem nützlich sein können. Abschließend werden Sie die erlernten Konzepte und Tools anwenden, um Ihre eigene ETL-Pipeline zu entwickeln und zu planen.

 

Die Weiterbildung "Data Engineering für Einsteiger" bieten wir Ihnen als Coaching, Workshop, Training - Live-Online und Vor-Ort an.

 

Werden Sie über neue Bewertungen benachrichtigt

Es wurden noch keine Bewertungen geschrieben.

Schreiben Sie eine Bewertung

Haben Sie Erfahrung mit diesem Training? Schreiben Sie jetzt eine Bewertung und helfen Sie Anderen dabei die richtige Weiterbildung zu wählen. Als Dankeschön spenden wir € 1,00 an Stiftung Edukans.

Es wurden noch keine Besucherfragen gestellt. Wenn Sie weitere Fragen haben oder Unterstützung benötigen, kontaktieren Sie unseren Kundenservice.

Bitte füllen Sie das Formular so vollständig wie möglich aus

Anrede
(optional)
(optional)
(optional)
(optional)
(optional)

Haben Sie noch Fragen?

(optional)
Damit Ihnen per E-Mail oder Telefon weitergeholfen werden kann, speichern wir Ihre Daten.
Mehr Informationen dazu finden Sie in unseren Datenschutzbestimmungen.