NIST (metryczny)
NIST to metoda oceny jakości tekstu, który został przetłumaczony za pomocą tłumaczenia maszynowego . Jego nazwa pochodzi od amerykańskiego Narodowego Instytutu Standardów i Technologii .
Opiera się na metryce BLEU , ale z pewnymi zmianami. Podczas gdy BLEU po prostu oblicza precyzję w n-gramach, dodając równą wagę do każdego z nich, NIST oblicza również, ile informacji zawiera dany n-gram . Oznacza to, że gdy zostanie znaleziony poprawny n-gram , im rzadszy jest ten n-gram, tym większa będzie jego waga.
Na przykład, jeśli bigram „na” zostanie poprawnie dopasowany, otrzyma mniejszą wagę niż prawidłowe dopasowanie bigramu „interesujące obliczenia”, ponieważ jest to mniej prawdopodobne.
NIST różni się również od BLEU w obliczaniu kary za zwięzłość, o ile niewielkie różnice w długości tłumaczenia nie wpływają tak bardzo na ogólny wynik.