Robots.txt Editor

Descrição

Robots.txt é um editor visual para arquivos de exclusão de robô e um software de análise de log. Ele permite que um usuário crie rápida e facilmente os arquivos robots.txt necessários para instruir os spiders dos mecanismos de pesquisa, que são partes de um site da Web, a não serem indexados e tornados pesquisáveis ​​pelo público geral da Web e, em seguida, identificar os spiders, que não siga essas instruções. O programa fornece ao usuário uma maneira de fazer login em seu servidor FTP ou de rede local e, em seguida, selecionar os documentos e diretórios que não devem ser pesquisáveis. Por meio deste programa você poderá gerar visualmente arquivos robots.txt padrão da indústria; identificar spiders maliciosos e indesejados e bani-los do seu site; rastreadores diretos de mecanismos de pesquisa para as páginas apropriadas de sites multilíngues; mantenha os spiders fora das áreas confidenciais e privadas do seu site; rastrear visitas de aranha e muito mais. Atualizações e upgrades de programas gratuitos sem restrições no tempo; número ilimitado de sites da Web para trabalhar.