Добавьте формы леммы лексем к документам
Используйте addLemmaDetails, чтобы добавить формы леммы в документы.
Функция поддерживает английский и японский текст.
updatedDocuments = addLemmaDetails(documents) добавляет, что лемма назначает в updatedDocuments = addLemmaDetails(documents)documents и обновляет маркерные детали. Чтобы получить детали леммы от updatedDocuments, используйте tokenDetails.
Используйте addLemmaDetails перед использованием lower, upper, и функции normalizeWords как addLemmaDetails используют информацию, которая удалена этими функциями.
addEntityDetails | addLanguageDetails | addLemmaDetails | addPartOfSpeechDetails | addSentenceDetails | addTypeDetails | normalizeWords | tokenDetails | tokenizedDocument