wget – DevHouse Internet Software Development House http://localhost:8080 Desenvolvimento de Sistemas para Internet e Mobile Tue, 23 Jun 2026 08:58:43 +0000 pt-BR hourly 1 https://wordpress.org/?v=4.8.14 Copiar / Download de um site inteiro com WGET [ripar] http://localhost:8080/copiar-download-de-um-site-inteiro-com-wget-ripar/ http://localhost:8080/copiar-download-de-um-site-inteiro-com-wget-ripar/#respond Sat, 11 Oct 2014 08:44:03 +0000 http://www.devhouse.com.br/?p=765 Para copiar um site inteiro, incluindo fotos, arquivos js e css usando o wget no Linux execute o seguinte comando:

 

$ wget \
     --user-agent="Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.94 Safari/537.36" \
     --recursive \
     --no-clobber \
     --page-requisites \
     --html-extension \
     --convert-links \
     --restrict-file-names=windows \
     --domains exemplo.com \
     --no-parent \
     -e robots=off \
     --load-cookies=cookies.txt \
         exemplo.com/blog

o parâmetro –domains informa ao wget para só baixar arquivos daquele domínio.
O último diz de qual raiz copiar. Nesse caso eu só copiaria os arquivos, recursivamente, do /blog do site exemplo.com.

A explicação dos parâmetros segue abaixo. Depois eu traduzo:

–recursive: download the entire Web site.

–domains website.org: don’t follow links outside website.org.

–no-parent: don’t follow links outside the directory tutorials/html/.

–page-requisites: get all the elements that compose the page (images, CSS and so on).

–html-extension: save files with the .html extension.

–convert-links: convert links so that they work locally, off-line.

–restrict-file-names=windows: modify filenames so that they will work in Windows as well.

–no-clobber: don’t overwrite any existing files (used in case the download is interrupted and
resumed).

]]>
http://localhost:8080/copiar-download-de-um-site-inteiro-com-wget-ripar/feed/ 0
wgetmd5 um shell script que verifica o md5 do download com wget http://localhost:8080/wgetmd5-um-shell-script-que-verifica-o-md5-do-download-com-wget/ http://localhost:8080/wgetmd5-um-shell-script-que-verifica-o-md5-do-download-com-wget/#comments Mon, 20 Aug 2012 18:05:45 +0000 http://www.devhouse.com.br/?p=377 Quando é necessário fazer download de arquivos grandes, como distribuições linux, é prudente não confiarmos totalmente no browser para estes downloads pois alguns pacotes podem ser perdidos sem dar erro no download e depois temos problemas com o sistema sem saber por que.

Então, para treinar a construção de bash scripts e também já automatizar essa pequena tarefa que criei o wgetmd5 que nada mais é a junção do wget com o md5sum para calcular o hash md5 do download e comparar com o arquivo md5 que for indicado como parâmetro.

O uso é:

$ wgetmd5 url_do_arquivo url_do_arquivo_md5

Ex:

$ wgetmd5 ftp://ftp.gimp.org/pub/gimp/v2.8/gimp-2.8.0.tar.bz2 ftp://ftp.gimp.org/pub/gimp/v2.8/gimp-2.8.0.tar.bz2.md5


]]>
http://localhost:8080/wgetmd5-um-shell-script-que-verifica-o-md5-do-download-com-wget/feed/ 3