Примените функцию к словам в документах
вызывает функцию, заданную указателем на функцию newDocuments
= docfun(func
,documents
)func
и элементы передач documents
как вектор строки из слов.
Если func
принимает точно один входной параметр, затем слова newDocuments(i)
выход func(string(documents(i)))
.
Если func
принимает два входных параметра, затем слова newDocuments(i)
выход func(string(documents(i)),details)
, где details
содержит соответствующие маркерные детали, выведенные tokenDetails
.
Если func
изменяет количество слов в документе, затем docfun
удаляет маркерные детали из того документа.
docfun
не выполняет вызовы функционального func
в определенном порядке.
вызывает функцию, заданную указателем на функцию newDocuments
= docfun(func
,documents1,...,documentsN)func
и элементы передач documents1,…,documentsN
как представляют векторы в виде строки из слов, где N является количеством входных параметров к функциональному func
. Слова newDocuments(i)
выход func(string(documents1(i)),...,string(documentsN(i)))
.
Каждый documents1,…,documentsN
должен быть одного размера.
decodeHTMLEntities
| lower
| upper
| tokenDetails
| addSentenceDetails
| addPartOfSpeechDetails
| plus
| replace
| regexprep
| tokenizedDocument
| bagOfWords
| bagOfNgrams