HDFS Architecture and Programming

Holen Sie sich eines unserer besten Angebote und erweitern Sie Ihre Fähigkeiten mit 50% Rabatt auf Coursera Plus. Jetzt sparen.

kurs ist nicht verfügbar in Deutsch (Deutschland)

Wir übersetzen es in weitere Sprachen. Sehen Sie sich die Sprachen an, die wir anbieten.

HDFS Architecture and Programming

Dieser Kurs ist Teil von Spezialisierung „Big Data Processing Using Hadoop“

Dozent: Karthik Shyamsunder

Bei enthalten

Mehr erfahren

4 Module

Verschaffen Sie sich einen Einblick in ein Thema und lernen Sie die Grundlagen.

Stufe Mittel

Empfohlene Erfahrung

1 Woche zu vervollständigen

unter 10 Stunden pro Woche

Flexibler Zeitplan

In Ihrem eigenen Lerntempo lernen

4 Module

Verschaffen Sie sich einen Einblick in ein Thema und lernen Sie die Grundlagen.

Stufe Mittel

Empfohlene Erfahrung

1 Woche zu vervollständigen

unter 10 Stunden pro Woche

Flexibler Zeitplan

In Ihrem eigenen Lerntempo lernen

Was Sie lernen werden

Understand HDFS architecture, components, and how it ensures scalability and availability for big data processing.
Learn to configure Hadoop for Java programming and perform file CRUD operations using HDFS APIs.
Master advanced HDFS programming concepts like compression, serialization, and working with specialized file structures like Sequence and Map files.

Kompetenzen, die Sie erwerben

Kategorie: File Systems
Kategorie: Data Storage
Kategorie: Data Storage Technologies
Kategorie: Data Infrastructure
Kategorie: Development Environment
Kategorie: Big Data
Kategorie: File I/O
Kategorie: Java
Kategorie: Scalability
Kategorie: Distributed Computing
Kategorie: File Management
Kategorie: Data Processing
Kategorie: Infrastructure Architecture

Werkzeuge, die Sie lernen werden

Kategorie: Data Persistence
Kategorie: Java Programming
Kategorie: Apache Hadoop

Wichtige Details

Zertifikat zur Vorlage

Zu Ihrem LinkedIn-Profil hinzufügen

Bewertungen

9 Aufgaben

Unterrichtet in Englisch

Erfahren Sie, wie Mitarbeiter führender Unternehmen gefragte Kompetenzen erwerben.

Weitere Informationen zu Coursera für Unternehmen

Logos von Petrobras, TATA, Danone, Capgemini, P&G und L'Oreal

Erweitern Sie Ihre Fachkenntnisse

Dieser Kurs ist Teil der Spezialisierung Spezialisierung „Big Data Processing Using Hadoop“

Wenn Sie sich für diesen Kurs anmelden, werden Sie auch für diese Spezialisierung angemeldet.

Lernen Sie neue Konzepte von Branchenexperten
Gewinnen Sie ein Grundverständnis bestimmter Themen oder Tools
Erwerben Sie berufsrelevante Kompetenzen durch praktische Projekte
Erwerben Sie ein Berufszertifikat zur Vorlage

In diesem Kurs gibt es 4 Module

The course “HDFS Architecture and Programming” offers a comprehensive understanding of the Hadoop Distributed File System (HDFS) architecture, components, and advanced programming techniques. You will gain practical experience in setting up and configuring Hadoop for Java development, while mastering key concepts such as file and directory CRUD operations, data compression, and serialization. By the end of the course, you will be proficient in using HDFS to handle large-scale data processing, enabling you to build scalable, high-availability solutions.

What sets this course apart is its hands-on approach, where you will work directly with HDFS, writing client programs and applying advanced techniques such as using Sequence and Map Files for specialized data storage. Whether you're new to Hadoop or looking to refine your existing skills, this course equips you with the tools and knowledge to become proficient in HDFS programming, making you a valuable asset in the field of Big Data.

This course provides a comprehensive understanding of Hadoop Distributed File System (HDFS) architecture and its key components. Students will gain hands-on experience with HDFS, learning how to set up Java programming environments and configure Hadoop. The course covers essential topics such as the HDFS programming model, file and directory CRUD operations, and compression techniques. You will also explore serialization, deserialization, and specialized file structures like Sequence and Map Files. By the end of the course, You will be equipped to leverage HDFS for scalable, highly available big data solutions.

Das ist alles enthalten

2 Lektüren

In this module, we will cover the working model and architecture behind Hadoop Distributed File System (HDFS) 1.0 and the capabilities and deficiencies of HDFS 1.0 architecture.

Das ist alles enthalten

6 Videos4 Lektüren3 Aufgaben

6 VideosInsgesamt 103 Minuten

Introduction - HDFS Architecture2 Minuten
HDFS Architecture33 Minuten
Hands-on HDFS Architecture33 Minuten
Block Size, Replication, and Rack Awareness17 Minuten
HDFS Architectural Capabilities17 Minuten
Summary - HDFS Architecture1 Minute

4 LektürenInsgesamt 85 Minuten

HDFS Architecture15 Minuten
Block Size, Replication, and Rack Awareness15 Minuten
HDFS Architectural Capabilities15 Minuten
Self-Reflective Reading: Comparing Hadoop's HDFS and MapR's FileSystem40 Minuten

3 AufgabenInsgesamt 90 Minuten

HDFS Architecture60 Minuten
Mastering HDFS: Architecture Overview and Hands-On Experience15 Minuten
Deep Dive into HDFS: Block Size, Replication, and Architectural Capabilities15 Minuten

In this module, we will cover HDFS programming concepts, HDFS API, and steps to write an HDFS client program for CRUD (Create, Read, Update and Delete) on files.

Das ist alles enthalten

6 Videos5 Lektüren3 Aufgaben

6 VideosInsgesamt 106 Minuten

Introduction - HDFS Programming Basics2 Minuten
HDFS C API Overview11 Minuten
Hadoop Configuration API and Dev Env Setup38 Minuten
HDFS Java API Overview19 Minuten
File CRUD34 Minuten
Summary - HDFS Programming Basics2 Minuten

5 LektürenInsgesamt 105 Minuten

HDFS C API Overview15 Minuten
Hadoop Configuration API and Dev Env Setup20 Minuten
HDFS Java API Overview15 Minuten
File CRUD15 Minuten
Self-Reflective Reading: Design Reflection: Error Handling in File Deletion40 Minuten

3 AufgabenInsgesamt 90 Minuten

HDFS Programming Basics60 Minuten
Getting Started with HDFS Programming: Basics, C API, and Configuration15 Minuten
HDFS Programming Essentials: Java API, File CRUD Operations, and Summary15 Minuten

In this module, we will cover HDFS advanced programming concepts, such as CRUD on directories, compression, serialization and deserialization, and file-based data structures like sequence files.

Das ist alles enthalten

6 Videos5 Lektüren3 Aufgaben

6 VideosInsgesamt 77 Minuten

Introduction - HDFS Advanced Programming2 Minuten
Directory CRUD14 Minuten
File Compression Decompression20 Minuten
Serialization Deserialization18 Minuten
File-Based Data Structures21 Minuten
Summary - HDFS Advanced Programming3 Minuten

5 LektürenInsgesamt 80 Minuten

Directory CRUD15 Minuten
File Compression Decompression10 Minuten
Serialization Deserialization10 Minuten
File-Based Data Structures15 Minuten
Self-Reflective Reading: Hadoop's Serialization Decision30 Minuten

3 AufgabenInsgesamt 90 Minuten

HDFS Programming Advanced60 Minuten
Advanced HDFS Programming: Directory CRUD and File Compression/Decompression15 Minuten
Advanced HDFS Programming: Serialization, File-Based Data Structures, and Summary15 Minuten

Erwerben Sie ein Karrierezertifikat.

Fügen Sie dieses Zeugnis Ihrem LinkedIn-Profil, Lebenslauf oder CV hinzu. Teilen Sie sie in Social Media und in Ihrer Leistungsbeurteilung.

Dozent

Karthik Shyamsunder

Johns Hopkins University

4 Kurse1.487 Lernende

von

Johns Hopkins University

Mehr von Data Management entdecken

Status: Kostenloser Testzeitraum
Johns Hopkins University
YARN MapReduce Architecture and Advanced Programming
Kurs
Status: Kostenloser Testzeitraum
EDUCBA
Hadoop: Analyze, Configure & Manage Big Data
Kurs
University of California San Diego
Hadoop Platform and Application Framework
Kurs
Status: Kostenloser Testzeitraum
Pearson
Hadoop and Spark Fundamentals: Unit 1
Kurs

Warum entscheiden sich Menschen für Coursera für ihre Karriere?

Felipe M.

Lernender seit 2018

„Es ist eine großartige Erfahrung, in meinem eigenen Tempo zu lernen. Ich kann lernen, wenn ich Zeit und Nerven dazu habe.“

Jennifer J.

Lernender seit 2020

„Bei einem spannenden neuen Projekt konnte ich die neuen Kenntnisse und Kompetenzen aus den Kursen direkt bei der Arbeit anwenden.“

Larry W.

Lernender seit 2021

„Wenn mir Kurse zu Themen fehlen, die meine Universität nicht anbietet, ist Coursera mit die beste Alternative.“

Chaitanya A.

„Man lernt nicht nur, um bei der Arbeit besser zu werden. Es geht noch um viel mehr. Bei Coursera kann ich ohne Grenzen lernen.“

Häufig gestellte Fragen

To access the course materials, assignments and to earn a Certificate, you will need to purchase the Certificate experience when you enroll in a course. You can try a Free Trial instead, or apply for Financial Aid. The course may offer 'Full Course, No Certificate' instead. This option lets you see all course materials, submit required assessments, and get a final grade. This also means that you will not be able to purchase a Certificate experience.

When you enroll in the course, you get access to all of the courses in the Specialization, and you earn a certificate when you complete the work. Your electronic Certificate will be added to your Accomplishments page - from there, you can print your Certificate or add it to your LinkedIn profile.

Yes. In select learning programs, you can apply for financial aid or a scholarship if you can’t afford the enrollment fee. If fin aid or scholarship is available for your learning program selection, you’ll find a link to apply on the description page.