Course Outline
Inleiding tot Apache Spark
- De rol van Spark in de verwerking van big data
- Spark-architectuur en zijn componenten
Instellen Apache Spark
- Hardware- en softwarevereisten
- Installatieprocedures voor standalone- en clustermodi
- Best practices voor configuratie voor systeembeheerders
Spark-clusters beheren
- Tools en technieken voor clusterbeheer
- Spark-toepassingen en clusterresources bewaken
- Beveiligingsconfiguraties en gebruikersbeheer
Prestaties afstemmen en optimaliseren
- Toewijzing en planning van middelen
- Tuning Spark voor optimale prestaties
- Identificeren en oplossen van veelvoorkomende knelpunten
Problemen oplossen en problemen oplossen
- Veelvoorkomende uitdagingen voor Spark-beheer
- Diagnostische hulpmiddelen en technieken voor het oplossen van problemen
- Stapsgewijze aanpak voor het oplossen van veelvoorkomende problemen
- Praktische tips voor het handhaven van een gezonde Spark-omgeving
Onderwerpen over geavanceerd beheer
- Integratie met andere big data-tools
- Zorgen voor hoge beschikbaarheid en disaster recovery
- Spark-clusters upgraden en schalen
Samenvatting en volgende stappen
Requirements
- Basiskennis van netwerkconfiguratie en -beheer
- Bekendheid met Linux besturingssysteem en opdrachtregelinterface
- Interesse in het leren over gedistribueerde computersystemen en big data-beheer
Audiëntie
- Systeembeheerders
Getuigenissen (9)
I liked that it was practical. Loved to apply the theoretical knowledge with practical examples.
Aurelia-Adriana - Allianz Services Romania
Cursus - Python and Spark for Big Data (PySpark)
This is one of the best hands-on with exercises programming courses I have ever taken.
Laura Kahn
Cursus - Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP
Veel praktijkvoorbeelden, verschillende manieren om hetzelfde probleem aan te pakken, en soms niet zo voor de hand liggende trucs om de huidige oplossing te verbeteren
Rafał - Nordea
Cursus - Apache Spark MLlib
Machine Translated
The VM I liked very much The Teacher was very knowledgeable regarding the topic as well as other topics, he was very nice and friendly I liked the facility in Dubai.
Safar Alqahtani - Elm Information Security
Cursus - Big Data Analytics in Health
Sufficient hands on, trainer is knowledgable
Chris Tan
Cursus - A Practical Introduction to Stream Processing
very interactive...
Richard Langford
Cursus - SMACK Stack for Data Science
Betrokkenheid en bereidheid om secundaire onderwerpen uit te leggen.
Marek - Krajowy Rejestr Długów Biuro Informacji Gospodarczej S.A.
Cursus - Apache Spark Fundamentals
Machine Translated
Having hands on session / assignments
Poornima Chenthamarakshan - Intelligent Medical Objects
Cursus - Apache Spark in the Cloud
Oefeningen en uitwisselingen tijdens vragen en antwoorden
Antoine - Physiobotic
Cursus - Scaling Data Pipelines with Spark NLP
Machine Translated