| RobôExcluchusionRulesparser. Uma alternativa ao módulo robotparser do Python |
Baixe Agora |
RobôExcluchusionRulesparser. Classificação e resumo
- Licença:
- Perl Artistic License
- Nome do editor:
- Philip Semanchuk
- Site do editor:
- http://semanchuk.com/philip/
RobôExcluchusionRulesparser. Tag
RobôExcluchusionRulesparser. Descrição
Uma alternativa ao módulo robotparser do Python RoboTexclusionRulesparser é uma alternativa ao módulo de biblioteca padrão do Python RobotParser. Ele busca e analisa os arquivos robots.txt e pode responder a perguntas sobre se um determinado agente de usuário é permitido ou não visitar um determinado URL., Respeito para expira cabeçalhos e compreensão das diretivas de rastreamento e sitemap e sintaxe de curinga em nomes de caminho. Documentação completa (incluindo uma comparação com o módulo de biblioteca padrão RobotParser) está disponível em Readme.html. Requisitos: · Pitão
RobôExcluchusionRulesparser. Software Relacionado