Добавьте, что тип маркера назначает в документы
обнаруживает типы маркера в updatedDocuments
= addTypeDetails(documents
)documents
и обновляет маркерные детали. Функция добавляет, что тип назначает в лексемы с неизвестным типом только. Получить типы маркера от updatedDocuments
Использование tokenDetails
.
задает дополнительные опции с помощью одной или нескольких пар "имя-значение".updatedDocuments
= addTypeDetails(documents
,Name,Value
)
Совет
Использование addTypeDetails
перед использованием lower
, upper
, и erasePunctuation
функции как addTypeDetails
информация об использовании, которая удалена этими функциями.
abbreviations
| addEntityDetails
| addLanguageDetails
| addLemmaDetails
| addPartOfSpeechDetails
| addSentenceDetails
| corpusLanguage
| splitSentences
| tokenDetails
| tokenizedDocument
| topLevelDomains