Re: [Gutl-l] wget options

[Hugo Florentino]

On Thu, 27 Mar 2014 09:41:00 -0400, Osmany O'Connor wrote:

una pregunta un poco fuera de este tema, pero veo que que lo
mencionas debajo en tu respuesta como reparas por ejemplo un ISO que
la suma de verificación después de la descarga difiere con rsync?


Bueno, sucede que esas descargas que mencionaba que se me corrompieron 
las hice de un servidor linux con servicio ssh, de modo que la fue mas o 
menos asi:


rsync -avz elusuario@elservidor:/larutaremota/elarchivoadescargar 
/larutalocaldondehiceladescarga/


Incluso en ocasiones esto no me funcionaba con archivos muy grandes, de 
modo que dividía el archivo (tanto remota como localmente) en pedazos de 
digamos 10MB y hacía un sha1 de los archivos remotos, lo comprobaba 
contra los archivos locales y entonces hacia un rsync sobre los pedazos 
diferentes y finalmente empataba los pedazos locales para formar el 
archivo original. Parece complicado pero en realidad no lo es tanto, y 
el esfuerzo bien vale la pena para evitar descargar digamos los isos de 
dvd de Debian. ;)


--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que est� limpio.

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Leodanis Pozo Ramos]

El 03/26/2014 09:55 PM, Hugo Florentino escribió:

On Wed, 26 Mar 2014 09:13:49 -0400, Leodanis Pozo Ramos wrote:

Me refiero básicamente a pérdida de datos en la descarga que está
corriendo wget en el momento en que le das killall. Esta es una forma
abrupta de terminar un proceso y puede, digo yo, causar pérdida de
datos. Esto puede parecer insignificante, pero dadas las condiciones
de nuestra red y las velocidades actuales, por lo menos a mi me duele
hasta un kb.



Se a lo que te refieres, yo cuando comencé a usar este acercamiento 
tenía la misma preocupación, pero wget ha demostrado comportarse de 
una manera bastante estable ante las órdenes de terminación por parte 
del sistema operativo.
En mi experiencia, solo recuerdo dos o tres casos de corrupciones al 
descargar archivos de mas de 1GB (afortunadamente pude repararlos con 
rsync), pero no fue a causa de usar killall, sino porque mi 
cortafuegos tenía problemas en el disco, después que se lo cambié no 
he vuelto a notar esos problemas.





__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Bueno, ya esto que dices me trae determinada tranquilidad espiritual...

saludos,

lpozo


MAS Holguineros MAS Podemos
Empresa Comercializadora de Combustibles
Holguín

--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que está limpio.

 próxima parte 
Se ha borrado un adjunto en formato HTML...
URL: 

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Osmany O'Connor]

una pregunta un poco fuera de este tema, pero veo que que lo mencionas 
debajo en tu respuesta como reparas por ejemplo un ISO que la suma de 
verificación después de la descarga difiere con rsync?

El 26/03/14 21:55, Hugo Florentino escribió:

On Wed, 26 Mar 2014 09:13:49 -0400, Leodanis Pozo Ramos wrote:

Me refiero básicamente a pérdida de datos en la descarga que está
corriendo wget en el momento en que le das killall. Esta es una forma
abrupta de terminar un proceso y puede, digo yo, causar pérdida de
datos. Esto puede parecer insignificante, pero dadas las condiciones
de nuestra red y las velocidades actuales, por lo menos a mi me duele
hasta un kb.



Se a lo que te refieres, yo cuando comencé a usar este acercamiento 
tenía la misma preocupación, pero wget ha demostrado comportarse de 
una manera bastante estable ante las órdenes de terminación por parte 
del sistema operativo.
En mi experiencia, solo recuerdo dos o tres casos de corrupciones al 
descargar archivos de mas de 1GB (afortunadamente pude repararlos con 
rsync), pero no fue a causa de usar killall, sino porque mi 
cortafuegos tenía problemas en el disco, después que se lo cambié no 
he vuelto a notar esos problemas.





__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l


--
Sl2: O§many Oconnor



--
Se integran todos los eventos de Ciencias Técnicas de la Universidad de Oriente:

*- Convención Internacional de Ciencias Técnicas
23 al 27 de Junio de 2014:
http://cienciastecnicas.eventos.uo.edu.cu/

Convocatoria a nuestro evento internacional de mayor experiencia:

*- 21 Conferencia de Química: 
3 al 5 de diciembre de 2014

http://ciq.eventos.uo.edu.cu/
--




--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que está limpio.

 próxima parte 
Se ha borrado un adjunto en formato HTML...
URL: 

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Hugo Florentino]

On Wed, 26 Mar 2014 09:13:49 -0400, Leodanis Pozo Ramos wrote:

Me refiero básicamente a pérdida de datos en la descarga que está
corriendo wget en el momento en que le das killall. Esta es una forma
abrupta de terminar un proceso y puede, digo yo, causar pérdida de
datos. Esto puede parecer insignificante, pero dadas las condiciones
de nuestra red y las velocidades actuales, por lo menos a mi me duele
hasta un kb.



Se a lo que te refieres, yo cuando comencé a usar este acercamiento 
tenía la misma preocupación, pero wget ha demostrado comportarse de una 
manera bastante estable ante las órdenes de terminación por parte del 
sistema operativo.
En mi experiencia, solo recuerdo dos o tres casos de corrupciones al 
descargar archivos de mas de 1GB (afortunadamente pude repararlos con 
rsync), pero no fue a causa de usar killall, sino porque mi cortafuegos 
tenía problemas en el disco, después que se lo cambié no he vuelto a 
notar esos problemas.



--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que est� limpio.

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Leodanis Pozo Ramos]

El 03/25/2014 06:34 PM, Hugo Florentino escribió:

On Tue, 25 Mar 2014 12:07:05 -0400, Leodanis Pozo Ramos wrote:

Ñoo. está buena esa... Lo único que se me ocurre es decirle a cron
que mate el proceso que levantó la descarga a la hora que decidas...
ahora sí, esto puede ocacionar pérdiad de datos creo yo...



No necesariamente se pierden datos.

Supongamos que uno programa este comando para que se ejecute 
diariamente a las 8PM:


cd /var/tmp && wget --limit-rate=22k -bci /var/tmp/descargas.url

Y que en el crontab del superusuario uno programa "killall wget" para 
que se ejecute todos los días a las 7AM


Cuando pasa la noche se habrán descargado una o varias cosas, o todas, 
que pueden revisarse en el log de wget pero incluso si no se revisa y 
no se ha terminado de descargar todo, cuando llegue nuevamente la hora 
programada, wget continuará las descargas que quedaron pendiantes, y 
dejará lo que ya está descargado intacto.


Este es el acercamiento que uso yo, y hasta ahora me ha funcionado bien.



__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l
Me refiero básicamente a pérdida de datos en la descarga que está 
corriendo wget en el momento en que le das killall. Esta es una forma 
abrupta de terminar un proceso y puede, digo yo, causar pérdida de 
datos. Esto puede parecer insignificante, pero dadas las condiciones de 
nuestra red y las velocidades actuales, por lo menos a mi me duele hasta 
un kb.


saludos,

lpozo


MAS Holguineros MAS Podemos
Empresa Comercializadora de Combustibles
Holguín

--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que está limpio.

 próxima parte 
Se ha borrado un adjunto en formato HTML...
URL: 

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Hugo Florentino]

On Tue, 25 Mar 2014 12:07:05 -0400, Leodanis Pozo Ramos wrote:

Ñoo. está buena esa... Lo único que se me ocurre es decirle a cron
que mate el proceso que levantó la descarga a la hora que decidas...
ahora sí, esto puede ocacionar pérdiad de datos creo yo...



No necesariamente se pierden datos.

Supongamos que uno programa este comando para que se ejecute 
diariamente a las 8PM:


cd /var/tmp && wget --limit-rate=22k -bci /var/tmp/descargas.url

Y que en el crontab del superusuario uno programa "killall wget" para 
que se ejecute todos los días a las 7AM


Cuando pasa la noche se habrán descargado una o varias cosas, o todas, 
que pueden revisarse en el log de wget pero incluso si no se revisa y no 
se ha terminado de descargar todo, cuando llegue nuevamente la hora 
programada, wget continuará las descargas que quedaron pendiantes, y 
dejará lo que ya está descargado intacto.


Este es el acercamiento que uso yo, y hasta ahora me ha funcionado 
bien.


--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que est� limpio.

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Leodanis Pozo Ramos]

Ñoo. está buena esa... Lo único que se me ocurre es decirle a cron que 
mate el proceso que levantó la descarga a la hora que decidas... ahora 
sí, esto puede ocacionar pérdiad de datos creo yo...


saludos,

lpozo

PD: debiste decir "se interrumpa" en lugar de "termine", personalmente 
me gustaría que mis descargas terminaran en un segundo, pero la red está 
insufrible... jeje


El 03/25/2014 11:51 AM, Jesús Miguel Iriarte Oñoz escribió:
cómo le digo al una descarga con wget que termine a una hora 
determinada?...


opciones...

saludos



Empresa de Investigaciones y Proyectos Hidr?ulicos de Camaguey
Ave. Libertad #20
Telef. 298004-281735





__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l




MAS Holguineros MAS Podemos
Empresa Comercializadora de Combustibles
Holguín

--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que está limpio.

 próxima parte 
Se ha borrado un adjunto en formato HTML...
URL: 

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Norveris]

Lo primero que tienes que hacer es tener el archivo o script con la descarga 
configurada ejemplo:

#!/bin/sh

cd /donde/lo vas a descargar/

wget -c http://direccion del fichero a descargar
wget -c http://otro fichero a descargar

exit 0





Programas en el cron a qué hora lo vas a descargar ej:

Editas   /etc/crontab y agregas una línea

15 1* * *   root /dirección/de/donde/esta/el/script.sh  /dev/null 2>&1


Es decir que todos los días a la 1:15 am se va a iniciar la descarga o 
simplemente ejecutas el script manual

Para detenerlo manual en la consola #pkill wget
Para detenerlo automático  Editas   /etc/crontab y agregas una línea

00 07  * * * root /usr/bin/pkill wget>/dev/null 2>&1



Tira para aca cualquier cosa.


-Mensaje original-
De: gutl-l-boun...@jovenclub.cu [mailto:gutl-l-boun...@jovenclub.cu] En nombre 
de Jesús Miguel Iriarte Oñoz
Enviado el: martes, 25 de marzo de 2014 11:52 a.m.
Para: GUTL Linux
Asunto: [Gutl-l] wget options

cómo le digo al una descarga con wget que termine a una hora determinada?...

opciones...

saludos



Empresa de Investigaciones y Proyectos Hidr ulicos de Camaguey Ave. Libertad 
#20 Telef. 298004-281735



--
Este mensaje ha sido analizado por MailScanner en busca de virus y otros 
contenidos peligrosos, y se considera que est  limpio.



-- 
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que est� limpio.

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

Re: [Gutl-l] wget options

[Juset Castañeda A]

En Tue, 25 Mar 2014 11:51:30 -0400, Jesús Miguel Iriarte Oñoz  
 escribió:



cómo le digo al una descarga con wget que termine a una hora
determinada?...

opciones...

saludos




Eso lo puedes regular con el cron, ejecutas:
crontab- e

Modificas el fichero
00 07 * * * killall wget

--
Saludos, Juset
Administrador del Sistema Informatico
Unidad Empresarial de Base Provari Camaguey
Telf: (53)(32) 261844

GNU/Linux Debian Wheezy
Linux user  # 383170
"El tiempo no se gasta, se gasta la vida de quien lo pierde"

--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que est� limpio.

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l

[Gutl-l] wget options

[Jesús Miguel Iriarte Oñoz]

cómo le digo al una descarga con wget que termine a una hora 
determinada?...


opciones...

saludos



Empresa de Investigaciones y Proyectos Hidr�ulicos de Camaguey
Ave. Libertad #20
Telef. 298004-281735



--
Este mensaje ha sido analizado por MailScanner
en busca de virus y otros contenidos peligrosos,
y se considera que est� limpio.

__
Lista de correos del Grupo de Usuarios de Tecnologías Libres de Cuba.
Gutl-l@jovenclub.cu
https://listas.jovenclub.cu/cgi-bin/mailman/listinfo/gutl-l