Tokenizer Texto dividido em tokens de acordo com um conjunto de expressões regulares especificadas
Baixe Agora

Tokenizer Classificação e resumo

Tokenizer Tag

desenvolve aprender RealBasic desenvolvimento realbásico Exemplo Realbasic. Aprenda Realbasic.

Tokenizer Descrição

Dividir o texto em tokens de acordo com um conjunto de expressões regulares que você especificar A classe Tokenizer RealBasic permite que os desenvolvedores dividam facilmente o texto em tokens de acordo com um conjunto de expressões regulares especificadas. O tokenizer pode ser usado para uma variedade de propósitos - para analisar arquivos de dados, ou mesmo como parte do primeiro estágio para um analisador de linguagem de programação. Sua funcionalidade é semelhante à Lexx Library do mundo do UNIX. O aplicativo de teste de tokenizer demonstra usando a classe Tokenizer para analisar um programa básico simples em seus tokens constituintes, que são exibidos em uma lista abaixo do campo de entrada de texto. O programa de exemplo contém um erro intencional - a palavra "NTeger" deve ser "inteiro" - que serve para demonstrar como o tokenizer alinha os tokens inesperados. O aplicativo é definido para re-tokenize o texto sempre que for alterado, então tente editar o programa e observe como a lista de token é regenerada. Requisitos: · Realbasic. O que há de novo nesta versão: · Corrigido problema com o uso de \ para corresponder ao \ caractere imediatamente antes de um (ou [suporte.

Tokenizer Software Relacionado