Coursera

Bewertung und Optimierung der LLM-Leistung

Holen Sie sich eines unserer besten Angebote und erweitern Sie Ihre Fähigkeiten mit 50% Rabatt auf Coursera Plus. Jetzt sparen.

Coursera

Bewertung und Optimierung der LLM-Leistung

LearningMate

Dozent: LearningMate

Bei Coursera Plus enthalten

Fragen Sie Coursera

Verschaffen Sie sich einen Einblick in ein Thema und lernen Sie die Grundlagen.
Stufe Mittel

Empfohlene Erfahrung

4 Stunden zu vervollständigen
Flexibler Zeitplan
In Ihrem eigenen Lerntempo lernen
Verschaffen Sie sich einen Einblick in ein Thema und lernen Sie die Grundlagen.
Stufe Mittel

Empfohlene Erfahrung

4 Stunden zu vervollständigen
Flexibler Zeitplan
In Ihrem eigenen Lerntempo lernen

Was Sie lernen werden

  • Bewerten Sie LLMs anhand von Metriken wie BLEU und ROUGE, führen Sie A/B-Tests zur Ermittlung der statistischen Signifikanz durch und optimieren Sie die Modellleistung mit datengestützten Strategien.

Kompetenzen, die Sie erwerben

  • Kategorie: Entwicklung von Testskripten
  • Kategorie: Datengestützte Entscheidungsfindung
  • Kategorie: Statistische Analyse
  • Kategorie: Bewertung des Modells
  • Kategorie: Einbettungen
  • Kategorie: Verarbeitung natürlicher Sprache
  • Kategorie: Modellierung großer Sprachen
  • Kategorie: Statistische Methoden
  • Kategorie: Wahrscheinlichkeitsrechnung und Statistik
  • Kategorie: Statistische Inferenz
  • Kategorie: LLM-Bewerbung
  • Kategorie: Statistische Hypothesenprüfung
  • Kategorie: Skripting
  • Kategorie: Leistungsmetrik
  • Kategorie: Modell-Optimierung

Werkzeuge, die Sie lernen werden

  • Kategorie: Schnelles Engineering

Wichtige Details

Zertifikat zur Vorlage

Zu Ihrem LinkedIn-Profil hinzufügen

Bewertungen

3 Zuweisungen¹

KI-bewertet siehe Haftungsausschluss
Unterrichtet in Englisch

Erfahren Sie, wie Mitarbeiter führender Unternehmen gefragte Kompetenzen erwerben.

 Logos von Petrobras, TATA, Danone, Capgemini, P&G und L'Oreal

Erweitern Sie Ihre Fachkenntnisse

Dieser Kurs ist Teil der Spezialisierung Spezialisierung „LLM Optimierung & Bewertung“
Wenn Sie sich für diesen Kurs anmelden, werden Sie auch für diese Spezialisierung angemeldet.
  • Lernen Sie neue Konzepte von Branchenexperten
  • Gewinnen Sie ein Grundverständnis bestimmter Themen oder Tools
  • Erwerben Sie berufsrelevante Kompetenzen durch praktische Projekte
  • Erwerben Sie ein Berufszertifikat zur Vorlage

In diesem Kurs gibt es 3 Module

Dieses Einführungsmodul legt den Grundstein für die quantitative Bewertung von Large Language Models (LLM). Die Lernenden erfahren, warum es nicht nachhaltig ist, sich bei der Beurteilung der Modellleistung auf Intuition zu verlassen, und setzen sich mit den grundlegenden Metriken auseinander, die zur Erstellung automatisierter, objektiver Bewertungssysteme verwendet werden. Wir behandeln sowohl Metriken zur lexikalischen Ähnlichkeit (wie BLEU und ROUGE-L), die die Textstruktur bewerten, als auch semantische Metriken (wie die Kosinusähnlichkeit), die die Bedeutung erfassen. Am Ende dieses Moduls verfügen die Lernenden über das konzeptionelle Verständnis und den praktischen Code, um ihr erstes automatisiertes Bewertungsskript zu erstellen.

Das ist alles enthalten

2 Videos1 Lektüre1 Aufgabe1 Unbewertetes Labor

Dieses Modul führt vom reinen Datenmaterial zu fundierten Schlussfolgerungen. Die Lernenden werden erkennen, warum statistische Genauigkeit beim Vergleich von LLM-Ergebnissen unverzichtbar ist. Sie lernen, klare Hypothesen zu formulieren, A/B-Tests zu entwerfen und zu analysieren sowie Ergebnisse wie p-Werte und Konfidenzintervalle zu interpretieren, um echte Leistungssteigerungen von zufälligen Schwankungen zu unterscheiden. Am Ende dieses Moduls sind die Lernenden in der Lage, datengestützte Entscheidungen mit Zuversicht zu treffen und sicherzustellen, dass Änderungen an Prompts, Modellen oder Parametern zu statistisch signifikanten Verbesserungen führen.

Das ist alles enthalten

3 Videos1 Lektüre1 Aufgabe1 Unbewertetes Labor

Dieses Modul führt vom reinen Datenmaterial zu fundierten Schlussfolgerungen. Die Lernenden werden erkennen, warum statistische Genauigkeit beim Vergleich von LLM-Ergebnissen unverzichtbar ist. Sie lernen, klare Hypothesen zu formulieren, A/B-Tests zu entwerfen und zu analysieren sowie Ergebnisse wie p-Werte und Konfidenzintervalle zu interpretieren, um echte Leistungssteigerungen von zufälligen Schwankungen zu unterscheiden. Am Ende dieses Moduls sind die Lernenden in der Lage, datengestützte Entscheidungen mit Zuversicht zu treffen und sicherzustellen, dass Änderungen an Prompts, Modellen oder Parametern zu statistisch signifikanten Verbesserungen führen.

Das ist alles enthalten

3 Videos1 Lektüre1 Aufgabe1 Unbewertetes Labor

Erwerben Sie ein Karrierezertifikat.

Fügen Sie dieses Zeugnis Ihrem LinkedIn-Profil, Lebenslauf oder CV hinzu. Teilen Sie sie in Social Media und in Ihrer Leistungsbeurteilung.

Dozent

LearningMate
276 Kurse34.751 Lernende

von

Coursera

Mehr von Maschinelles Lernen entdecken

Warum entscheiden sich Menschen für Coursera für ihre Karriere?

Felipe M.

Lernender seit 2018
„Es ist eine großartige Erfahrung, in meinem eigenen Tempo zu lernen. Ich kann lernen, wenn ich Zeit und Nerven dazu habe.“

Jennifer J.

Lernender seit 2020
„Bei einem spannenden neuen Projekt konnte ich die neuen Kenntnisse und Kompetenzen aus den Kursen direkt bei der Arbeit anwenden.“

Larry W.

Lernender seit 2021
„Wenn mir Kurse zu Themen fehlen, die meine Universität nicht anbietet, ist Coursera mit die beste Alternative.“

Chaitanya A.

„Man lernt nicht nur, um bei der Arbeit besser zu werden. Es geht noch um viel mehr. Bei Coursera kann ich ohne Grenzen lernen.“

Häufig gestellte Fragen

¹ Einige Aufgaben in diesem Kurs werden mit AI bewertet. Für diese Aufgaben werden Ihre Daten in Übereinstimmung mit Datenschutzhinweis von Courseraverwendet.