Kylm. KYOTO Language Modeling Toolkit
Baixe Agora

Kylm. Classificação e resumo

Kylm. Tag

modelo conjunto de ferramentas linguagem modelo. modelador de linguagem Kit de ferramentas de modelador. modelador

Kylm. Descrição

Kyoto Language Modeling Toolkit Kylm é um kylm é um toolkit de modelagem de idioma livre e aberto escrito em Java para aplicações de processamento de linguagem natural.Kylm pode lidar com a modelagem de caracteres por caracteres de palavras desconhecidas, combinação de modelo de linguagem, comparação e avaliação, bem como uma série de técnicas de suavização. Aqui estão algumas características principais de "Kylm": · Dois programas, countngrams e crossentropia · Apoio aos modelos de linguagem N-Gram e várias técnicas de suavização (máxima probabilidade, boa-teia, descontagem absoluta, Witten-Bell, Kneser-Ney) · Suporte para entrada / saída em ARPA e formato binário · Scripts Junit para realizar testes de regressão Requisitos: · Java. O que há de novo nesta versão: · Suporte para modelos de linguagem baseados em classe · Apoio à melhoria do facto de alisamento de Kneser-Ney. 0.0.3 (6/22/2009) · Corrigiu a criação de cadeias vazias quando vários espaços brancos existem uma variedade de melhorias de velocidade e memória (remoção de listas vinculadas, indexação do nó raiz) · Adicionado suporte para modelagem baseada em caracteres de palavras desconhecidas · Corrigido aparamento por isso funciona com modelos bem suavizados · Corrigido um problema ao encanamento de dados no CountNgrams corrigimos um problema com a saída WFST que estava matando o contexto de início de frases. 0.0.2 (5/28/2009) · Novos recursos: Agora é possível cortar N-grams por contar uma lista de vocabulário definido pode ser usado para limitar a saída do vocabulário no formato ATT WFST é possível documentação foi melhorada · Questões pendentes: aparar não funciona em conjunto com suavização de boa temperatura

Kylm. Software Relacionado