Добавьте формы леммы лексем к документам
Используйте addLemmaDetails
, чтобы добавить формы леммы в документы.
Функция поддерживает английский и японский текст.
updatedDocuments = addLemmaDetails(documents)
добавляет, что лемма назначает в updatedDocuments
= addLemmaDetails(documents
)documents
и обновляет маркерные детали. Чтобы получить детали леммы от updatedDocuments
, используйте tokenDetails
.
Используйте addLemmaDetails
перед использованием lower
, upper
, и функции normalizeWords
как addLemmaDetails
используют информацию, которая удалена этими функциями.
addEntityDetails
| addLanguageDetails
| addLemmaDetails
| addPartOfSpeechDetails
| addSentenceDetails
| addTypeDetails
| normalizeWords
| tokenDetails
| tokenizedDocument