Big Data Engineer – Master's Program – Een uniek leer- en certificeringstraject!

Big Data Engineer – Master's Programma

Een uniek leer- en certificeringstraject!

Dit Big Data Engineer Master's Program, ontwikkeld in samenwerking met IBM, biedt training in de competitieve vaardigheden die nodig zijn voor een lonende carrière in data engineering. Je leert het Hadoop big data framework te beheersen, de functionaliteit van Apache Spark te benutten met Python, datalijnen te vereenvoudigen met Apache Kafka en de open source database management tool MongoDB te gebruiken om data op te slaan in big data omgevingen.

Belangrijkste kenmerken

• Industrie-erkende certificaten van IBM (voor IBM cursussen) en AVC
• Real-life projecten die praktijkgerichte industriële training bieden
• 30+ veelgevraagde vaardigheden
• Lifetime toegang tot de eLearning
• 35 uur zelfstudie
• 132 uur training onder leiding van een instructeur
• Masterclasses, exclusieve mentorsessies en hackathons door IBM

Leerdoelen

Aan het einde van dit Big Data Engineer Master's Programma, zul je in staat zijn om:

• Een diepgaand begrip te verwerven van de flexibele en veelzijdige frameworks in het Hadoop ecosysteem, zoals Pig, Hive, Impala, HBase, Sqoop, Flume en Yarn
• Beheers tools en vaardigheden zoals het maken van datamodellen, database-interfaces, geavanceerde architectuur, Spark, Sala, RDD, SparkSQL, Spark Streaming, Spark ML, GraphX, Sqoop, Flume, Pig, Hive, Impala en Kafka-architectuur.
• Begrijpen hoe je Data kunt modelleren, opnemen, repliceren en sharden met het NoSQL-databasemanagementsysteem MongoDB.
• Krijg expertise in het creëren en onderhouden van analytische infrastructuur en bezit de ontwikkeling, inzet, het onderhoud en de monitoring van architectuurcomponenten
• Inzichten verwerven in hoe de productiviteit van bedrijven kan worden verbeterd door big data te verwerken op platformen die het volume, de snelheid, de verscheidenheid en de waarheidsgetrouwheid ervan aankunnen
• Leer hoe Kafka in de praktijk wordt gebruikt, inclusief de architectuur en componenten, doe praktijkervaring op met het verbinden van Kafka met Spark en werk met Kafka Connect.
• Begrijpen hoe Amazon EMR te gebruiken voor het verwerken van Data met behulp van Hadoop ecosysteem tools

Doelgroep

Een Big Data Engineer bouwt en onderhoudt Datastructuren en architecturen voor het opnemen, verwerken en implementeren van Data voor grootschalige, data intensieve toepassingen. Het is een veelbelovende carrière voor zowel nieuwe als ervaren professionals met een passie voor data:

• IT-professionals
• Banking en financiële professionals
• Databasebeheerders
• Beginners in het data engineering domein
• Studenten in UG/ PG-programma's

Inhoud Master's Programma 

1. Big Data voor Data Engineering (1 uur)
2. Big Data Hadoop en Spark Developer (84 uur)
3. PySpark Training (3 uur)
4. MongoDB Developer en Administrator (56 uur)
5. Apache Kafke (10 uur)
6. AWS Technical Essentials (17,5 uur)
7. AWS Big Data Certificering (61)
8. Big Data afstudeeropdracht (56 uur)
9. Extra's
   • AWS Technical Essentials
   • Java Certificering
   • Inudstry Master Class - Data Engineering

1. Big Data voor Data Engineering

In deze inleidende cursus van IBM leert u de basisconcepten en terminologieën van big data en de toepassingen ervan in verschillende sectoren. U krijgt inzicht in het verbeteren van de bedrijfsproductiviteit door het verwerken van grote hoeveelheden Data en het extraheren van waardevolle informatie.

Belangrijkste leerdoelen

• Begrijpen wat big data is, bronnen van big data en voorbeelden uit de praktijk
• Leer het belangrijkste verschil tussen big data en data science
• Beheers het gebruik van big data voor operationele analyse en betere klantenservice
• Kennis opdoen van het ecosysteem van big data en het Hadoop-raamwerk

Cursusprogramma

• Les 1 - Wat zijn Big Data?
• Les 2 - Big Data: Beyond the Hype
• Les 3 - Big Data en Data Science
• Les 4 - Use Cases
• Les 5 - Verwerken van Big Data

2. Big Data Hadoop en Spark Developer

AVC's Big Data Hadoop Training Cursus helpt u big data en Hadoop ecosysteem tools zoals HDFS, YARN, MapReduce, Hive, Impala, Pig, HBase, Spark, Flume, Sqoop, en Hadoop Frameworks, inclusief aanvullende concepten van de levenscyclus van big data-verwerking. Tijdens deze online Hadoop-training onder leiding van een instructeur werk je aan realtime projecten in de detailhandel, het toerisme, de financiële sector en andere domeinen. Deze big data cursus bereidt je ook voor op Cloudera's CCA175 Big Data certificering.

Belangrijkste leerdoelen

• Leren navigeren door het Hadoop-ecosysteem en begrijpen hoe het gebruik ervan kan worden geoptimaliseerd
• Gegevens invoeren met Sqoop, Flume en Kafka
• Implementeer partitionering, bucketing en indexering in Hive
• Werken met RDD in Apache Spark
• Real-time streaming Data verwerken
• DataFrame-bewerkingen uitvoeren in Spark met SQL-query's
• Door de gebruiker gedefinieerde functies (UDF) en door de gebruiker gedefinieerde attribuutfuncties (UDAF) implementeren in Spark

Cursusprogramma

• Les 1 - Inleiding tot Bigdata en Hadoop
• Les 2 - Hadoop Architecture Distributed Storage (HDFS) en YARN
• Les 3 - Gegevensinvoer in Big Data Systemen en ETL.
• Les 4 - Distributed Processing MapReduce Framework en Pig
• Les 5 - Apache Hive
• Les 6 - NoSQL Databases HBase
• Les 7 - Basisprincipes van functioneel programmeren en Scala
• Les 8 - Apache Spark Next-Generation Big Data Framework
• Les 9 - Spark Core Processing RDD
• Les 10 - Spark SQL Processing DataFramesspan
• Les 11 - Spark MLLib Modelleren van BigData met Spark
• Les 12 - Stream Processing Frameworks en Spark Streaming
• Les 13 - Spark GraphX

3. PySpark Training

Pyspark Training geeft een diepgaand overzicht van Apache Spark, de open-source query engine voor het verwerken van grote datasets, en hoe deze te integreren met Python met behulp van de PySpark interface. Deze cursus laat je zien hoe je data-intensieve toepassingen kunt bouwen en implementeren terwijl je je verdiept in high-performance machine learning. Je leert hoe je gebruik kunt maken van Spark RDD, Spark SQL, Spark MLlib, Spark Streaming, HDFS, Sqoop, Flume, Spark GraphX en Kafka.

Belangrijkste leerdoelen

• Begrijpen hoe je de functionaliteit van Python kunt gebruiken in het Spark ecosysteem.
• De architectuur van Apache Spark onder de knie krijgen en een Python-omgeving voor Spark opzetten
• Leer over verschillende technieken voor het verzamelen van Data, begrijp RDD's en hoe deze te contrasteren met DataFrames, hoe Data uit files en HDFS te lezen en hoe te werken met schema's
• Verkrijg uitgebreide kennis van verschillende tools die onder het Spark ecosysteem vallen, zoals Spark SQL, Spark MlLib, Sqoop, Kafka, Flume en Spark Streaming.
• Creëer en verken verschillende API's om met Spark DataFrames te werken en leer hoe je Data kunt aggregeren, transformeren, filteren en sorteren met DataFrames.

Cursusprogramma

• Les 01 - Een korte inleiding over Pyspark
• Les 02 - Robuuste gedistribueerde datasets
• Les 03 - Veerkrachtige gedistribueerde datasets en acties
• Les 04 - DataFrames en Transformaties
• Les 05 - Gegevensverwerking met Spark DataFrames

4. Apache Kafke 

In deze Apache Kafka certificeringscursus leer je de architectuur, installatie, configuratie en interfaces van Kafka open-source messaging. Met deze Kafka training leer je de basis van Apache ZooKeeper als gecentraliseerde service en ontwikkel je de vaardigheden om Kafka in te zetten voor real-time messaging. Deze cursus maakt deel uit van het Big Data Hadoop Architect Master's Program en wordt aanbevolen voor ontwikkelaars en analytics professionals die hun expertise willen uitbreiden.

Belangrijkste leerdoelen

• Het belang van big data beschrijven
• De fundamentele concepten van Kafka beschrijven
• De architectuur van Kafka beschrijven
• Uitleggen hoe je Kafka installeert en configureert
• Uitleggen hoe Kafka te gebruiken voor real-time berichtenuitwisseling

Cursusprogramma

• Les 1 - Aan de slag met Big Data en Apache Kafka
• Les 2 - Kafka-producent
• Les 3 - Kafka Consumer
• Les 4 - Kafka-operaties en tuning van de prestaties
• Les 5 - Kafka Cluster Architectuur en Kafka beheren
• Les 6 - Kafka Monitoring en Schema Registry
• Les 7 - Kafka-streams en Kafka-connectors
• Les 8 - Integratie van Kafka met Storm
• Les 9 - Kafka Integratie met Spark en Flume
• Les 10 - Admin Client en beveiliging van Kafka

5. MongoDB Developer en Administrator

Word een deskundige MongoDB-ontwikkelaar en -beheerder met diepgaande kennis van NoSQL en beheers de vaardigheden van datamodellering, ingestion, query, sharding en datareplicatie. Deze cursus bevat op de industrie gebaseerde projecten in de domeinen elearning en telecom. De cursus is het meest geschikt voor databasebeheerders, softwareontwikkelaars, systeembeheerders en analyseprofessionals.

Belangrijkste leerdoelen

• Ontwikkel expertise in het schrijven van Java en NodeJS toepassingen met MongoDB
• De vaardigheden beheersen van replicatie en sharding van Data in MongoDB om lees/schrijfprestaties te optimaliseren
• Installeren, configureren en onderhouden van de MongoDB-omgeving
• Praktijkervaring opdoen met het maken en beheren van verschillende soorten indexen in MongoDB voor het uitvoeren van query's
• Vakkundig ongestructureerde Data opslaan in MongoDB
• Vaardigheden ontwikkelen voor het verwerken van enorme hoeveelheden Data met MongoDB-tools
• Vaardigheden opdoen in MongoDB-configuratie, back-upmethoden en monitoring- en operationele strategieën
• Verdiep je in het beheren van DB Notes, Replica set en master-slave concepten.

Cursusprogramma

• Les 1 - Inleiding tot NoSQL databases
• Les 2 - MongoDB: Een database voor het moderne web
• Les 3 - CRUD Operations in MongoDB
• Les 4 - Indexeren en aggregeren
• Les 5 - Replicatie en Sharding
• Les 6 - Java en Node JS applicatie ontwikkelen met MongoDB
• Les 7 - Beheer van MongoDB Cluster Operaties

6. AWS Technical Essentials

In deze AWS Technical Essentials cursus leert u hoe u door de AWS management console navigeert, de AWS beveiligingsmaatregelen, opslag en database opties begrijpt en expertise opdoet in webservices zoals RDS en EBS. Deze cursus, die is opgesteld in lijn met de nieuwste AWS-syllabus, helpt u vaardig te worden in het identificeren en efficiënt gebruiken van AWS-services.

Belangrijkste leerdoelen

• Begrijp de fundamentele concepten van het AWS-platform en cloud computing
• AWS-concepten, terminologieën, voordelen en implementatieopties identificeren om aan bedrijfsvereisten te voldoen
• Identificeer implementatie- en netwerkopties in AWS

Cursusprogramma

• Les 01 - Inleiding tot Cloud Computing
• Les 02 - Inleiding tot AWS
• Les 03 - Opslag en contentlevering
• Les 04 - Compute Services en Netwerken
• Les 05 - AWS Managed Services en Databases
• Les 06 - Uitrol en beheer

7. AWS Big Data Certificatie Training

In deze AWS Big Data certificeringscursus raakt u vertrouwd met concepten van cloud computing en de bijbehorende implementatiemodellen; het Amazon web services cloud platform; Kinesis Analytics; AWS big data opslag, verwerking, analyse, visualisatie en beveiligingsdiensten; EMR; AWS Lambda en Glue; machine learning algoritmen; en nog veel meer.

Belangrijkste leerdoelen

• Ontdekken hoe Amazon EMR te gebruiken voor het verwerken van de Data met behulp van Hadoop ecosysteem tools
• Begrijpen hoe je Amazon Kinesis kunt gebruiken voor real-time verwerking van big data
• Analyseer en transformeer big data met Kinesis Streams
• Gegevens visualiseren en query's uitvoeren met Amazon QuickSight

Cursusprogramma

• Les 01 - AWS in Big Data Inleiding.
• Les 02 - Collection
• Les 03 - Opslag
• Les 04 - Verwerking I
• Les 05 - Verwerking II
• Les 06 - Analyse I
• Les 07 - Analyse II
• Les 08 - Visualisatie
• Les 09 - Veiligheid

8. Big Data afsluitend project

Dit Big Data afsluitend-project geeft je de kans om de vaardigheden die je tijdens dit programma hebt geleerd toe te passen. Je leert hoe je een big data probleem uit de praktijk oplost door middel van speciale mentorsessies. Dit project is de laatste stap in het leertraject en stelt je in staat om je expertise in big data te laten zien aan toekomstige werkgevers.

9. Extra's:

AWS Technical Essentials

Deze AWS Technical Essentials cursus leert u hoe u door de AWS management console kunt navigeren, de AWS beveiligingsmaatregelen, opslag en database opties kunt begrijpen en expertise kunt opdoen in webservices zoals RDS en EBS. Deze cursus, die is opgesteld in lijn met de nieuwste AWS-syllabus, helpt je vaardig te worden in het identificeren en efficiënt gebruiken van AWS-services.

Java-certificeringstraining

Deze geavanceerde Java certificatietraining is ontworpen om je door de concepten van Java te leiden, van inleidende technieken tot geavanceerde programmeervaardigheden. Deze Java cursus geeft je ook de kennis van Core Java 8, operatoren, arrays, loops, methodes en constructors terwijl je hands-on ervaring opdoet met JDBC en JUnit framework.

Industry Master Class - Data Engineering

Woon een interactieve online Masterclass bij en krijg inzicht in de wereld van data engineering.

---

AVC’s Masterprograms FAQ

Wat is de waarde van het Master Certificaat?

De Master programma's van AVC helpen je om gewilde vaardigheden op een versnelde manier te beheersen en je marktwaarde te vergroten. Wat je carrièredoelen ook zijn, of je nu een beginner bent of op zoek bent naar mogelijkheden om je vaardigheden bij te schaven om van carrière te veranderen, de Master programma's van AVC zullen helpen deze doelen te versnellen. Deze certificaten zijn zeer gewild.

Opmerking: Wij zijn geen universiteit en kennen geen universitaire graden toe. Deze Master betekent dat je het hele programma hebt doorlopen en alle belangrijke kennis over het onderwerp hebt opgedaan, waardoor je het onderwerp volledig hebt beheerst. Elk onderdeel van het programma resulteert ook in een certificaat.

Welke kennis en ervaring zijn vereist voor de Master programma's?

Over het algemeen is er geen eerdere ervaring vereist om aan het programma deel te nemen. De training begint op een inleidend niveau en vordert stap voor stap naar het expert niveau. Basiskennis of ervaring met het onderwerp is echter altijd nuttig. Bekijk de specifieke cursusdetails.

Dit programma is zelfgestuurd, wat betekent dat je in je eigen tempo kunt leren. Je begint met een praktijkgerichte e-learningmodule, gevolgd door een reeks online cursussen die zijn afgestemd op jouw behoeften, waarbij je de vrijheid hebt om de data en tijden te kiezen die het beste in jouw schema passen - en als je een sessie mist, kun je deze eenvoudig opnieuw inplannen. Elke sessie wordt voor jouw gemak opgenomen, zodat je het materiaal zo vaak als nodig kunt herzien.

Aan het einde van het programma heb je uitgebreide kennis opgedaan en ben je in staat om deze toe te passen in verschillende praktische taken en projecten.

Hoe lang duurt het om het Master programma af te ronden?

Dit is heel individueel. Sommige mensen doorlopen het programma vrij snel (ongeveer 2-3 maanden), anderen hebben meer tijd nodig. Je hebt een jaar lang toegang tot het programma en de eLearning. Als je 5 tot 10 uur per week aan het programma besteedt, duurt het ongeveer 6 maanden om het programma af te ronden. Opmerking: Sommige andere Master programma's duren langer. Dit is een schatting.

Wat is het format van de Master programma's? Moet ik naar een trainingscentrum komen?

De meeste programma's zijn volledig gebaseerd op afstandsonderwijs. De meeste omvatten intensieve online bootcamps met eLearning die je in je eigen tempo kunt voltooien. Deze leerpaden bestaan uit verschillende cursussen en onderwerpen die gerelateerd zijn aan specifieke vaardigheden voor een rol of baan. Er zijn ook online klaslokaalsessies via ons geavanceerde professionele afstandsonderwijssysteem. Er zijn verschillende tijdsloten om uit te kiezen en we nemen altijd de sessies op, zodat je ze kunt beluisteren als je iets hebt gemist of informatie wilt herzien. Er is altijd iemand beschikbaar om je te helpen en te ondersteunen als je vragen hebt over de vaardigheden die je leert.

Wanneer kan ik de Master online cursussen volgen?

De cursustijden variëren per groep. Je krijgt toegang tot een dashboard met meerdere tijdsloten voor elke sessie of elk onderwerp, zodat je kunt kiezen wat het beste voor je werkt. Sessies kunnen worden ingepland op doordeweekse middagen, weekend-ochtenden of avonden, afhankelijk van de interesse van de deelnemers en de beschikbaarheid van de trainer. Als je een sessie mist, kun je altijd de opnames bekijken, zodat je geen inhoud mist.

Wanneer heb ik mijn Master Certificaat behaald?

Zodra je minimaal 85% van het cursusmateriaal hebt voltooid, kun je je certificaat ontgrendelen. Dit geldt voor alle Master programma's. Een van de criteria voor het verkrijgen van het Master Certificaat is het bijwonen van de live cursussen. Er kunnen echter uitzonderingen worden gemaakt als je niet live kunt deelnemen, maar het is wel vereist dat je de opnames bekijkt. Raadpleeg de specifieke cursusdetails of stuur ons een e-mail voor meer informatie.