Общо взето, lemmatization предлага по-добра прецизност от стеминг, но за сметка на изземването. Както видяхме, изземването и лемматизацията са ефективни техники за разширяване на припомнянето, като лемматизацията се отказва от част от това припомняне, за да се увеличи прецизността. Но и двете техники могат да се чувстват като груби инструменти.
Кое е по-добро лемматизация спрямо стеминг?
Изходното и лемматизирането генерират основната форма на флексираните думи. … Stemming следва алгоритъм със стъпки за изпълнение на думите, което го прави по-бърз. Докато при лемматизацията сте използвали WordNet corpus и корпус за стоп думи, за да създадете лема, което я прави по-бавна от стемпинга.
Трябва ли да използвам както стеминг, така и лемматизация?
Кратък отговор- използвайте стеминг, когато пространството на речника е малко и документите са големи. Обратно, използвайте вграждане на думи, когато пространството на vocab е голямо, но документите са малки. Въпреки това, не използвайте лемматизация, тъй като съотношението увеличена производителност към увеличени разходи е доста ниско.
Лемматизацията и произтичането едно и също ли са?
Изходът и лемматизацията са методи, използвани от търсачките и чатботовете за анализиране на значението зад дума. Stemming използва основата на думата, докато лемматизацията използва контекста, в който се използва думата.
Трябва ли да използвам лемматизация?
Лемматизацията също е важна за обучение на вектори на думи, тъй като преброяването е точнов рамките на прозореца на думата ще бъде нарушена от неуместна флексия като просто множествено число или сегашно време. Общото правило за това дали да лемматизирате не е изненадващо: ако не подобрява производителността, не лемматизирайте.
