Płytka analiza

Shallow parsing (również chunking lub light parsing ) to analiza zdania , która najpierw identyfikuje części składowe zdań (rzeczowniki, czasowniki, przymiotniki itp.), a następnie łączy je z jednostkami wyższego rzędu, które mają dyskretne znaczenia gramatyczne ( grupy rzeczowników lub frazy , grupy czasowników itp.). Podczas gdy najbardziej elementarne algorytmy porcjowania po prostu łączą części składowe na podstawie elementarnych wzorców wyszukiwania (np. określonych przez wyrażenia regularne ), podejścia wykorzystujące techniki uczenia maszynowego (klasyfikatory, modelowanie tematyczne itp.) mogą uwzględniać informacje kontekstowe i w ten sposób komponować fragmenty w taki sposób, aby lepiej odzwierciedlały relacje semantyczne między podstawowymi składnikami. Oznacza to, że te bardziej zaawansowane metody omijają problem polegający na tym, że kombinacje elementarnych składników mogą mieć różne znaczenia wyższego poziomu w zależności od kontekstu zdania.

Jest to technika szeroko stosowana w przetwarzaniu języka naturalnego . Jest to podobne do koncepcji analizy leksykalnej języków komputerowych. Pod nazwą „hipoteza płytkiej struktury” jest również używana jako wyjaśnienie, dlaczego drugiego języka często nie potrafią poprawnie analizować złożonych zdań.

Cytaty

Źródła

Linki zewnętrzne

Zobacz też


Pobrano z „ https://en.wikipedia.org/w/index.php?title=Shallow_parsing&oldid=1040423192 ”