– root@injetionsec:~#

Usando o wget

16.10.2015 (6:06 pm) – Filed under: Linux ::

Estava navegando na deep web a alguns dias e vi a necessidade de fazer alguns downloads de arquivos em “.pdf” via wget, mas estava com alguns problemas estava me retornando erro 503 “503 service unavailable”  veja á imagem e as possíveis causas:

errr00o

– Pode ser causado por alguma restrições de largura de banda do servidores que hospedam os sites .onion por impor uma limitação para download máximo dos arquivos, torna-se difícil de fazer o download.
– Pode ser problema de proxy(você deve entrar em contato com o administrador do site, ou desativar o uso de um proxy)[1]
– Se o site remoto não aceitar proxy pode tentar o seguinte comando:
______ root@kali:~# wget –no-proxy www.site.com/9yyrh.rar
– Talvez o servidor devido a vários pedidos pode gerar uma sobrecarga temporária ou esta em manutenção do servidor
– Servidor pode ter alguma proteção contra DDoS como CloudFlare, nesse caso você pode acessar esse link[2] é ver os comentários que a galera faz sobre.

A solução que encontrei para o meu problema é forçar o wget baixar arquivos em um ritmo mais lento, isso deve ser feito usando a opção -w[3], que por padrão tem um argumento em segundos (você também pode especificar minutos). Se os arquivos não são grandes pode especificar entre 40-60 segundos por arquivo que devera ser o suficiente.

Dependendo do argumento que passar o download pode levar várias horas; caso tenha um grande número de arquivos escolha um intervalo ponderado, para que não exceda o limite de largura de banda do servidor. No meu caso o que funcionou foi o seguinte comando.

wget -r -np -w 5 -A “.pdf” http://www.site.com/eletronic/

 

Referências
[1]http://askubuntu.com/questions/283394/why-does-wget-fail-with-503-service-unavailable-error
[2]http://superuser.com/questions/888507/problems-with-wget-to-a-cloudflare-hosted-site-503-service-unavailable
[3]http://www.gnu.org/software/wget/manual/html_node/Download-Options.html
http://ubuntuforums.org/showthread.php?t=884447
http://www.gnu.org/software/wget/manual/html_node/Recursive-Download.html