| Kinosearch :: ניתוח :: Tokenizer kinosearch :: ניתוח :: Tokenizer הוא tokenizing להתאמה אישית. |
הורד עכשיו |
Kinosearch :: ניתוח :: Tokenizer דירוג וסיכום
- רישיון:
- Perl Artistic License
- שם המפרסם:
- Marvin Humphrey
- אתר האינטרנט של המוציא לאור:
- http://search.cpan.org/~creamyg/KinoSearch-0.162/lib/KinoSearch/Search/SearchServer.pm
Kinosearch :: ניתוח :: Tokenizer תגים
Kinosearch :: ניתוח :: Tokenizer תיאור
Kinosearch :: ניתוח :: ToKenizer הוא tokenizing להתאמה אישית. :: ניתוח :: ניתוח :: ToKenizer הוא tokenizing.Synopsis שלי $ whitespace_tokenizer = kinosearch :: ניתוח :: tokenizer-> חדש (token_re => QR / S + /,); # או ... $ word_char_tokenizer = kinosearch :: ניתוח :: ניתוח :: tokenizer-> חדש (token_re => QR / W + /,); # או ... $ שלי apostrophing_tokenizer = kinosearch :: ניתוח :: Tokenizer-> חדש; # לאחר ... ברגע שיש לך tokenizer, לשים אותו לתוך polyanalyzer שלי $ polyanalyzer = kinosearch :: ניתוח :: polyanalyzer-> חדש (Analyzer => ,); באופן כללי " Tokenizing "הוא תהליך של פירוק מחרוזת לתוך מערך של" אסימונים ". # לפני: מחרוזת $ שלי = "שלושה עכברים עיוורים"; # אחרי: @tokens = QW (שלושה עכברים עיוורים); Kinosearch :: ניתוח :: Tokenizer מחליט היכן הוא צריך לשבור את הטקסט על בסיס הערך של ToKen_re. # לפני: מחרוזת $ שלי = "אוכל, יורה ועלים"; # tokenized על ידי $ whitespace_tokenizer @tokens = QW (אוכל, יורה ועלים); # Tokenized על ידי $ word_char_tokenizer @tokens = QW (אוכל יורה ועלים); דרישות: · דרישות PERL: · פרל
Kinosearch :: ניתוח :: Tokenizer תוכנה קשורה