Episode
Episode 215: Wenn Rauschen zu Geschichten wird - Wie Transformer halluzinieren
- Published
- Oct 14, 2025
- Duration seconds
- 2180
- Processing state
not_requested
Actions
POST https://stenobird.com/v1/public/podcasts/knowledge-science-alles-ber-ki-ml-und-nlp-1383759/episodes/episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren/transcription-requests
Idempotently request low-priority transcript generation for this episode.GET https://stenobird.com/podcast/knowledge-science-alles-ber-ki-ml-und-nlp-1383759/episode-215-wenn-rauschen-zu-geschichten-wird-wie-transformer-halluzinieren.md
Read the agent-friendly Markdown representation of this episode resource.
Summary
Send us Fan Mail Warum erfindet KI manchmal Fakten, die nicht existieren? In dieser Episode analysieren Sigurd und Carsten ein faszinierendes Paper, das mit Sparse Autoencodern dem Ursprung von Halluzinationen auf den Grund geht. Das Überraschende: Füttert man Transformer mit reinem statistischen Rauschen, aktivieren sie stabile interne Konzepte wie Schildkröten, Segelboote oder Baseballs. Die Erkenntnis: Je unsicherer der Input, desto stärker greift das Modell auf seinen internen Bias zurück...