TODO
572 Bytes
- liczba przed kropką kończącą zdanie jest interpretowana jako ordnum
- przenieść ustalanie weight do następnego modułu
- problem z kodowaniem utf:
Odkryłem gdzie jest problem z kodowaniem utf.
Mianowicie dla zdania "Fan: Niech nie straszą, Że to bomba jest kalorii." preprocesor zwraca segmentacje w której jeden z segmentów zawiera pole lemma z niepoprawnym znakiem.
Pole wygląda następująco: "Ż\BCe".
- przecinek "," nie jest traktowany jako Symbol a jedynie jako Interp, co może stwarzać problemy przy parsowaniu MWE uwzględniającym fleksję.