Måling · sprogmodel · entropi

Maskinen der lærer at gætte

Den henter artikler fra Wikipedia, læser dem én for én og forsøger hele tiden at forudsige det næste ord i en tekst, den aldrig har set før. Kurven nedenfor er dens vidnesbyrd: hvor mange bits information den mangler pr. ord. Falder den, har maskinen lært noget — og det er den eneste definition af "lære" der kan måles.

Læringskurve — bits pr. ord på tilbageholdt tekst — model   --- Shannon 1951: menneske ≈ 5 bits/ord
Artikler læst
0
Ord i alt
0
Ordforråd
0
Bits pr. ord
—

Hvad den har hentet

Intet endnu. Tryk "Sæt i gang".

Hvad den selv siger

Maskinen har ikke lært nok til at sige noget endnu.