static var omitPunctuation : NSLinguisticTagger.Options
Omit tokens of type
punctuation
(all punctuation).
型punctuation
のトークン(全ての句読点)を省きます。
static var omitWhitespace : NSLinguisticTagger.Options
Omit tokens of type
whitespace
(whitespace of all sorts).
型whitespace
のトークン(全ての種類の空白)を省きます。
static var joinNames : NSLinguisticTagger.Options
Typically, multiple-word names will be returned as multiple tokens, following the standard tokenization practice of the tagger. If this option is set, then multiple-word names will be joined together and returned as a single token.
概して、複数単語の名前は複数のトークンとして返されるでしょう、そのタガーの標準トークン化慣習に従って。このオプションが設定されるならば、そのとき複数単語の名前は1つに結合されて単一のトークンとして返されます。