Lernbereich

Das Modell

TRIBE v2 — ein Deep-Learning-Modell, das vorhersagt, wie dein Gehirn auf Sprache reagiert.

↓ Scroll to explore

Was ist TRIBE v2?

TRIBE v2 ist ein multimodales Brain-Encoding-Modell. Es nimmt Text, Audio oder Video als Input und sagt vorher, welche Hirnregionen wie stark aktiviert werden würden.

Trainiert auf echten fMRT-Daten von Probanden, die Filme geschaut und Geschichten gehört haben.

Video
Audio
Text

TRIBE v2

Meta AI Research

Gehirn-Aktivierungskarte

20.484 Messpunkte

Die scoreyourbrain Pipeline

Was passiert, wenn du eine Challenge abschickst?

Vom Textfeld bis zum Score in 10 Schritten.

1

Du schreibst deinen Text

Du gibst deinen Text in das Challenge-Feld ein. Je nach Challenge hast du ein bestimmtes Zeichenlimit. Ein Versuch — dein Satz gegen alle anderen.

2

Übersetzung ins Englische

TRIBE v2 wurde auf englischen Daten trainiert. Deshalb wird dein deutscher Text automatisch per KI ins Englische übersetzt.

Deutsch

"Es war einmal ein dunkler Wald..."

KI-Übersetzung

Englisch

"Once upon a time there was a dark forest..."

3

Text → Audio

TRIBE v2 verarbeitet Audio — nicht Text. Deshalb wird dein Text per Text-to-Speech in eine Audiodatei umgewandelt. Auch bei reinen Text-Challenges läuft die Analyse über Audio.

"Once upon a time..."

Text-to-Speech

4

TRIBE v2 analysiert das Audio

Das Audio wird durch TRIBE v2 geschickt — ein KI-Modell, trainiert auf echten Gehirn-Scans. Es sagt vorher, wie stark jeder der über 20.000 Messpunkte auf der Gehirnoberfläche aktiviert wird.

TRIBE v2

Meta AI Research

Vorhersage pro Zeitschritt

5

Das Maximum zählt

TRIBE v2 erzeugt Vorhersagen für jeden Moment des Audios. Aus all diesen Zeitpunkten nehmen wir pro Messpunkt den höchsten Wert — denn einzelne Wörter können starke Peaks auslösen, die ein Durchschnitt verwässern würde.

Aktivierung über Zeit

↓ Höchster Wert pro Punkt

→ 1 Wert pro Messpunkt auf dem Gehirn

6

Die Gehirn-Heatmap

Die Werte werden auf das 3D-Gehirnmodell übertragen. Jeder Punkt bekommt eine Farbe: blau = wenig Aktivierung, rot = viel. Das ist die Heatmap, die du auf deiner Ergebnisseite siehst.

niedrig → hoch
7

Auswertung der 10 Schlüsselregionen

Aus den tausenden Messpunkten werden die 10 Hirnregionen ausgewertet, die für Sprache und Emotion am wichtigsten sind. Für jede Region wird der Durchschnitt aller zugehörigen Punkte berechnet.

RegionAktivierung
PSL1.82
FOP11.74
STGa1.65
TPOJ11.55
AAIC1.41
IFSa1.38
8

Gewichtetes Scoring

Nicht jede Region zählt gleich viel. Die Gewichte wurden anhand echter Daten optimiert — Regionen, die am zuverlässigsten zwischen emotionalen und neutralen Texten unterscheiden, bekommen mehr Gewicht.

RegionAkt.× Gew.
PSL1.82×1.00
FOP11.74×1.00
STGa1.65×1.00
TPOJ11.55×1.00
AAIC1.41×0.50
IFSa1.38×0.50
55b1.22×0.25
TGd1.15×0.25
STSvp0.98×0.10
450.91×0.10
Gewichteter Durchschnitt1.52= Rohwert
9

Dein Score: 0–100

Der Rohwert wird auf eine verständliche Skala von 0 bis 100 umgerechnet. 0 bedeutet: kaum Reaktion. 100 bedeutet: maximale Aktivierung in den Zielregionen.

0/100
0 — neutral100 — maximal
10

Dein Ergebnis

Das ist, was du auf der Ergebnisseite siehst — dein Score, die Top-ROIs und die interaktive 3D-Heatmap.

89/100
PSL
1.82
FOP1
1.74
STGa
1.65

→ Leaderboard-Rang: #3