compileConcept - Wie wird der Parameter `tokenizer` verwendet?
Réponse
Der Parameter `tokenizer` gibt an, welcher Tokenizer im Konzeptmodell verwendet werden soll. Wenn der Parameter auf den Standardwert 'STANDARD' gesetzt ist, wird ein sprachspezifischer Tokenizer angewendet. Wenn der Parameter auf 'BASIC' gesetzt ist, wird ein einfacher Tokenizer angewendet, der Wörter nach Leerzeichen, Satzzeichen und chinesischen, japanischen, koreanischen und thailändischen Zeichen trennt. Der Wert 'BASIC' ist nur für Chinesisch, Japanisch oder Koreanisch verfügbar.
SAS und alle anderen Produkt- oder Dienstleistungsnamen von SAS Institute Inc. sind eingetragene Marken oder Marken von SAS Institute Inc. in den USA und anderen Ländern. ® zeigt die Registrierung in den USA an. WeAreCAS ist eine unabhängige Community-Site und nicht mit SAS Institute Inc. verbunden.
Diese Website verwendet technische und analytische Cookies, um Ihre Erfahrung zu verbessern.
Mehr erfahren.