Что означает Лемма простыми словами
Для существительного это обычно именительный падеж единственного числа, для глагола — инфинитив. Формы «покупаю», «покупали» и «купить» могут быть связаны с одной леммой в зависимости от языка и анализатора. Одинаковое написание без контекста иногда имеет несколько разборов.
Леммы позволяют считать не только точные строки, а употребление одного слова в разных формах. Это делает частотный анализ полезнее, но теряет часть грамматического контекста: вопрос «нет доставки» нельзя свести к одной лемме «доставка» без учёта отрицания.
Пример
Анализатор объединяет «заявка», «заявки» и «заявок» в группу леммы «заявка». Маркетолог видит общую частоту понятия, а затем возвращается к предложениям, чтобы понять значение каждого употребления.
Как применять на практике
- Выберите морфологический анализатор, который поддерживает язык и нужную точность.
- Храните рядом исходную форму и контекст, чтобы можно было проверить спорный разбор.
- Используйте леммы для группировки, но решения о смысле принимайте по полному предложению.
Частые ошибки
- Называть леммой любую обрезанную основу слова.
- Считать одинаковую лемму доказательством одинакового смысла во всех контекстах.
- Удалять служебные слова до анализа отрицаний и отношений между объектами.