NSLinguisticTaggerOmitWords
Omit tokens of type
NSLinguisticTagWord
(items considered to be words).
型NSLinguisticTagWord
のトークン(単語であるとみなされる項目)を省きます。
NSLinguisticTaggerOmitPunctuation
Omit tokens of type
NSLinguisticTagPunctuation
(all punctuation).
型NSLinguisticTagPunctuation
のトークン(全ての句読点)を省きます。
NSLinguisticTaggerOmitWhitespace
Omit tokens of type
NSLinguisticTagWhitespace
(whitespace of all sorts).
型NSLinguisticTagWhitespace
のトークン(全ての種類の空白)を省きます。
NSLinguisticTaggerOmitOther
Omit tokens of type
NSLinguisticTagOther
(non-linguistic items, such as symbols).
型NSLinguisticTagOther
のトークン(非言語学的項目、表象など)を省きます。
NSLinguisticTaggerJoinNames
Typically, multiple-word names will be returned as multiple tokens, following the standard tokenization practice of the tagger. If this option is set, then multiple-word names will be joined together and returned as a single token.
概して、複数単語の名前は複数のトークンとして返されるでしょう、そのタガーの標準トークン化慣習に従って。このオプションが設定されるならば、そのとき複数単語の名前は1つに結合されて単一のトークンとして返されます。