Episode

Episode 215: Wenn Rauschen zu Geschichten wird - Wie Transformer halluzinieren

Podcast
Knowledge Science - Alles über KI, ML und NLP
Published
Oct 14, 2025
Duration seconds
2180
Processing state
not_requested
Canonical source
https://www.buzzsprout.com/1687822/episodes/18011432-episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren.mp3
Audio
https://www.buzzsprout.com/1687822/episodes/18011432-episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren.mp3
JSON
/v1/public/podcasts/knowledge-science-alles-ber-ki-ml-und-nlp-1383759/episodes/episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren
Markdown
/podcast/knowledge-science-alles-ber-ki-ml-und-nlp-1383759/episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren.md

Actions

  • POST https://stenobird.com/v1/public/podcasts/knowledge-science-alles-ber-ki-ml-und-nlp-1383759/episodes/episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren/transcription-requests
    Idempotently request low-priority transcript generation for this episode.
  • GET https://stenobird.com/podcast/knowledge-science-alles-ber-ki-ml-und-nlp-1383759/episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren.md
    Read the agent-friendly Markdown representation of this episode resource.

Summary

Send us Fan Mail Warum erfindet KI manchmal Fakten, die nicht existieren? In dieser Episode analysieren Sigurd und Carsten ein faszinierendes Paper, das mit Sparse Autoencodern dem Ursprung von Halluzinationen auf den Grund geht. Das Überraschende: Füttert man Transformer mit reinem statistischen Rauschen, aktivieren sie stabile interne Konzepte wie Schildkröten, Segelboote oder Baseballs. Die Erkenntnis: Je unsicherer der Input, desto stärker greift das Modell auf seinen internen Bias zurück...