KinoSearch :: Analysis :: Tokenizer

KinoSearch :: Analysis :: Tokenizer é um tokenizing customizável.
Baixe Agora

KinoSearch :: Analysis :: Tokenizer Classificação e resumo

Propaganda

  • Rating:
  • Licença:
  • Perl Artistic License
  • Preço:
  • FREE
  • Nome do editor:
  • Marvin Humphrey
  • Site do editor:
  • http://search.cpan.org/~creamyg/KinoSearch-0.162/lib/KinoSearch/Search/SearchServer.pm

KinoSearch :: Analysis :: Tokenizer Tag


KinoSearch :: Analysis :: Tokenizer Descrição

KinoSearch :: Analysis :: Tokenizer é um tokenizing customizável. KinoSearch :: Analysis :: Tokenizer é um tokenizing personalizável.synopsis Meu $ Whitespace_Tokenizer = KinoSearch :: Análise :: Tokenizer-> Novo (Token_re => QR / S + /,); # ou ... Meu $ Word_Char_Tokenizer = KinoSearch :: Análise :: Tokenizer-> Novo (Token_re => QR / W + /,); # ou ... Minha $ apóstophising_tokenizer = KinoSearch :: Análise :: Tokenizer-> Novo; # então ... uma vez que você tem um tokenizer, coloque-o em um polianalyzer meu $ Polianalyzer = KinoSearch :: Análise :: Polianalyzer-> Novo (analisadores => , genericamente, O tokenizing "é um processo de quebrar uma string em uma matriz de" tokens ". # Antes: Meu $ String = "Três camundongos cegos"; # Depois de: @tokens = QW (três ratos cegos); KinoSearch :: Análise :: Tokenizer decide onde deve quebrar o texto com base no valor de Token_re. # antes: meu $ string = "come, disparos e folhas."; # tokenized por $ whitespace_tokenizer @tokens = qw (come, disparos e folhas.); # Tokenized por $ word_char_tokenizer @tokens = qw (come brotos e folhas); requisitos: · Requisitos de Perl: · Perl.


KinoSearch :: Analysis :: Tokenizer Software Relacionado