@docd42.bsky.social
🔊 De-Noising
Beim Training wird absichtlich Rauschen hinzugefügt. Das Modell lernt, Lücken zu füllen.
Bei der Textgenerierung passiert das umgekehrt: Aus „statistischem Rauschen“ baut KI Schritt für Schritt eine kohärente Antwort.
Mathe = Sprache der KI.
#AI#Mathematik#KI#GPT
Beim Training wird absichtlich Rauschen hinzugefügt. Das Modell lernt, Lücken zu füllen.
Bei der Textgenerierung passiert das umgekehrt: Aus „statistischem Rauschen“ baut KI Schritt für Schritt eine kohärente Antwort.
Mathe = Sprache der KI.
#AI#Mathematik#KI#GPT
August 31, 2025 at 12:00 PM
🔊 De-Noising
Beim Training wird absichtlich Rauschen hinzugefügt. Das Modell lernt, Lücken zu füllen.
Bei der Textgenerierung passiert das umgekehrt: Aus „statistischem Rauschen“ baut KI Schritt für Schritt eine kohärente Antwort.
Mathe = Sprache der KI.
#AI#Mathematik#KI#GPT
Beim Training wird absichtlich Rauschen hinzugefügt. Das Modell lernt, Lücken zu füllen.
Bei der Textgenerierung passiert das umgekehrt: Aus „statistischem Rauschen“ baut KI Schritt für Schritt eine kohärente Antwort.
Mathe = Sprache der KI.
#AI#Mathematik#KI#GPT
✨ Soft-Attention
Ein Wort schaut nicht nur auf 1 Nachbarn, sondern gewichtet ALLE Kontexte.
So erkennt ein Modell: „Energie“ hängt stärker mit „Netz“ & „Nachhaltigkeit“ zusammen als mit „Cocktail“ – egal wie weit die Wörter auseinanderstehen. #KI#GPT#AI
Ein Wort schaut nicht nur auf 1 Nachbarn, sondern gewichtet ALLE Kontexte.
So erkennt ein Modell: „Energie“ hängt stärker mit „Netz“ & „Nachhaltigkeit“ zusammen als mit „Cocktail“ – egal wie weit die Wörter auseinanderstehen. #KI#GPT#AI
August 31, 2025 at 11:59 AM
✨ Soft-Attention
Ein Wort schaut nicht nur auf 1 Nachbarn, sondern gewichtet ALLE Kontexte.
So erkennt ein Modell: „Energie“ hängt stärker mit „Netz“ & „Nachhaltigkeit“ zusammen als mit „Cocktail“ – egal wie weit die Wörter auseinanderstehen. #KI#GPT#AI
Ein Wort schaut nicht nur auf 1 Nachbarn, sondern gewichtet ALLE Kontexte.
So erkennt ein Modell: „Energie“ hängt stärker mit „Netz“ & „Nachhaltigkeit“ zusammen als mit „Cocktail“ – egal wie weit die Wörter auseinanderstehen. #KI#GPT#AI
Warum versteht KI, dass „Hund“ näher bei „Katze“ liegt als bei „Mund“? 🐶🐱👄
Nicht wegen Buchstaben, sondern wegen Mathematik: Transformer speichern Wörter als Vektoren in einem Raum, wo Nähe = Bedeutung.
#KI #Transformer#Mathematik
Nicht wegen Buchstaben, sondern wegen Mathematik: Transformer speichern Wörter als Vektoren in einem Raum, wo Nähe = Bedeutung.
#KI #Transformer#Mathematik
August 31, 2025 at 11:58 AM
Warum versteht KI, dass „Hund“ näher bei „Katze“ liegt als bei „Mund“? 🐶🐱👄
Nicht wegen Buchstaben, sondern wegen Mathematik: Transformer speichern Wörter als Vektoren in einem Raum, wo Nähe = Bedeutung.
#KI #Transformer#Mathematik
Nicht wegen Buchstaben, sondern wegen Mathematik: Transformer speichern Wörter als Vektoren in einem Raum, wo Nähe = Bedeutung.
#KI #Transformer#Mathematik