Methabot. rastreador do sistema de arquivos
Baixe Agora

Methabot. Classificação e resumo

Methabot. Tag

rede Ftp. rastejante Crawler da Web. rastreador de FTP Crawler do sistema de arquivos

Methabot. Descrição

Crawler do sistema de arquivos O software MethaMabot é uma web, ftp e sistema de arquivos local de velocidade otimizada, scriptable e altamente configurável. Suporta uma análise de fileType script, uma ampla variedade de opções de personalização e é facilmente configurada para ajustar qualquer necessidade específica de qualquer dúvida. Com o uso do sistema de módulo e linguagem de script, os usuários são capazes de assumir o controle total ou parcial do processo de rastreamento e decidir, no entanto, methabot Deve armazenar dados da Web, estatísticas e muito mais.Just executando MethaBot a partir da linha de comando Você é capaz de configurar arquivos personalizados, filtragem de expressões, comportamento e muito mais, então você não precisa ser um escrivão! Aqui estão algumas características principais de "Methabot": · É rápido, projetado a partir do solo e com a otimização de velocidade em mente. · Scriptable através de Javascript com E4X · Filtragem de acesso definido pelo usuário (de acordo com o tipo MIME, extensão de arquivo ou expressão UMEX) · Multi-threaded · Altamente configurável a partir da linha de comando · Sistema de módulo extensível, suportando analisadores e filtros de dados personalizados. · Filtragem simples, mas poderosa de URLs através da UMEX. · Download automatizado · Suporte para manuseio automático de cookie ao executar o http · Rede confiável e tolerante a falhas · Portátil, testado com sucesso no Linux de 32 bits / 64 bits 2.6, 32 bits / 64 bits FreeBSD 6.x / 7.0, Windows XP e Mac OS X. deve funcionar em quase todos os sistemas operacionais do UNIX. Requisitos: · Cabeceiros do Spidermonkey. · Curl e libcurl O que há de novo nesta versão: · Bugfix, quando o espreito externo foi usado, o limite de profundidade foi confuso. · Correções de limpeza de uso de memória · A opção Dynamic-URL não está mais definida como Pesquisa por padrão, uma vez que diminui o rastejamento significativamente · O sistema de construção agora cria e instala alguns arquivos de cabeçalho que os módulos podem usar ao vincular · Metha-config Ferramenta adicionada · Lmm_mysql movido fora deste pacote

Methabot. Software Relacionado