LayerNorm vs. RMSNorm: Warum RMSNorm reicht
LayerNorm zentriert und skaliert, RMSNorm nur skaliert. Warum die Zentrierung verzichtbar ist, ohne Modellqualität zu verlieren, zeigt eine geometrische Erklärung.
15.02.2026·Blog
~/notes
Notizen aus dem Data Science Studium. Code, Gedanken, Experimente.
PyTorch: Warum view() nach transpose() fehlschlägt
transpose() macht Tensoren non-contiguous (logische ≠ physische Reihenfolge). view() funktioniert nur mit contiguous Tensoren → RuntimeError. Lösung: reshape() statt view()!
31.10.2025·Blog
SwabianGPT: Wie ich ein LLM für Dialekt-Übersetzung feingetuned habe
Eine praktische Reise durch das Fine-Tuning eines LLAMA 3.1 Modells zur Übersetzung zwischen Standarddeutsch und schwäbischem Dialekt, Datenaufbereitung mit synthetischem Kontext, QLoRA-basierte …
02.01.2025·Blog
Building a Neural Network from Scratch with Python & NumPy
A beginner-friendly guide to neural networks: from individual neurons to a complete Python model that predicts house prices using NumPy.
27.08.2024·Blog
Leetcode Problem 26: Duplikate aus sortiertem Array entfernen
Eine JavaScript-Lösung für LeetCodes "Remove Duplicates"-Problem, die die Entwicklung vom initialen Ansatz zur finalen Implementierung zeigt, mit Erklärungen der aufgetretenen Bugs und den unterwegs …
03.07.2024·Blog
LeetCode Problem 35: Search Insert Position in JavaScript
Eine prägnante Lösung für LeetCodes Search Insert Position Problem, die mit linearer Suche findet, wo ein Zielwert in einem sortierten Array hingehört, und dabei exzellente Laufzeit-Performance …
28.03.2024·Blog
Leetcode Problem 7: Umgedrehter Integer
Lösungsansatz für LeetCode-Problem 07: „Reverse Integer"
07.03.2024·Blog
Lineare Regression im Machine Learning: Ein Einstieg für Anfänger
Ein verständlicher Einstieg in die lineare Regression mit Modell, Kostenfunktion und Gradientenabstieg, erklärt am Beispiel von Lernstunden und Noten.
25.01.2024·Blog