Re: [linux] Système de fichier

2004-09-13 Par sujet Arnaud Vandyck
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1

Mon, 06 Sep 2004 12:58:29 +0200, 
Fabian Vilers [EMAIL PROTECTED] wrote: 

 Alain EMPAIN wrote:
 | Pour ma part j'utilise reiserfs depuis des années sans le moindre
 | problème; j'ai une fois généré par erreur plus de 30 fichiers dans
 | la même directory, et il s'en tirait toujours très honorablement !

 Ok, merci pour ton expérience (merci Benoit aussi ;-)

Ce serait marrant de savoir comment on peut créer *accidentellement*
30 fichiers mais je suppose que ça doit vite arriver ;-)

 Je ne cherche pas spécialement la performance mais vraiment la qualité
 de pouvoir se redresser d'un, ou plusieurs, voir systématique shutdown
 en retirant la prise :-)

Vous travaillez dans le même labo ou quoi! :-D

- -- 
Arnaud Vandyck
http://fosdem.org/
Free and Open Source Developers' European Meeting
February 26-27 2005,
Bruxelles, Belgium
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.5 (GNU/Linux)

iD8DBQFBRYQn4vzFZu62tMIRAgdtAKCghOSQXlkwXn8nanASAH0KAnA93wCeLO/B
eFBKFoiji3Dk41iAnWyJtgY=
=UxxF
-END PGP SIGNATURE-

___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-13 Par sujet Alain EMPAIN
Arnaud Vandyck wrote:
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1
Mon, 06 Sep 2004 12:58:29 +0200, 
Fabian Vilers [EMAIL PROTECTED] wrote: 

 

Alain EMPAIN wrote:
| Pour ma part j'utilise reiserfs depuis des années sans le moindre
| problème; j'ai une fois généré par erreur plus de 30 fichiers dans
| la même directory, et il s'en tirait toujours très honorablement !
Ok, merci pour ton expérience (merci Benoit aussi ;-)
   

Ce serait marrant de savoir comment on peut créer *accidentellement*
30 fichiers mais je suppose que ça doit vite arriver ;-)
 

Bonne question Araud :
pour disperser de gros jobs sur ma 'grille' de calcul (cf Sun Grid 
Engine), je pars d'une TRES longue liste de courtes séquences de DNA 
(des millions) et je divise cette liste en morceaux optimaux (+- 100.000 
séquences) afin de lancer sur la grille chaque sous-liste.

Au cours des tests d'évaluation de ce seuil optimal, j'ai fait une 
coquille et je me suis retrouvé avec de très petites (donc très 
nombreuses) sous-séquences - cela a généré un très grand nombre de jobs 
avec leurs fichiers de données, logs etc.

Voilà pour la petite histoire !
   ALain
Je ne cherche pas spécialement la performance mais vraiment la qualité
de pouvoir se redresser d'un, ou plusieurs, voir systématique shutdown
en retirant la prise :-)
   

Vous travaillez dans le même labo ou quoi! :-D
- -- 
Arnaud Vandyck
http://fosdem.org/
Free and Open Source Developers' European Meeting
February 26-27 2005,
Bruxelles, Belgium
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.5 (GNU/Linux)

iD8DBQFBRYQn4vzFZu62tMIRAgdtAKCghOSQXlkwXn8nanASAH0KAnA93wCeLO/B
eFBKFoiji3Dk41iAnWyJtgY=
=UxxF
-END PGP SIGNATURE-
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech
 


--

Dr Alain EMPAIN  [EMAIL PROTECTED] [EMAIL PROTECTED]
 Bioinformatics, Molecular Genetics, 
 Fac. Med. Vet., University of Liège, Belgium
 Bd de Colonster, B43   B-4000 Liège (Sart-Tilman)
WORK: +32 4 366 3821  FAX: +32 4 366 4122
HOME: rue des Martyrs,7  B- 4550 Nandrin   
 +32 85 51 23 41  GSM: +32 497 70 17 64

I worry about my child and the Internet all the time, even though she's
too young to have logged on yet. Here's what I worry about. I worry that
10 or 15 years from now, she will come to me and say 'Daddy, where were
you when they took freedom of the press away from the Internet?' 
--Mike Godwin, Electronic Frontier Foundation 


___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-13 Par sujet Arnaud Vandyck
Mon, 13 Sep 2004 13:54:41 +0200, 
Alain EMPAIN [EMAIL PROTECTED] wrote: 

 Arnaud Vandyck wrote:

[...]

Ce serait marrant de savoir comment on peut créer *accidentellement*
30 fichiers mais je suppose que ça doit vite arriver ;-)

 Bonne question Araud :

 pour disperser de gros jobs sur ma 'grille' de calcul (cf Sun Grid
 Engine), je pars d'une TRES longue liste de courtes séquences de DNA
 (des millions) et je divise cette liste en morceaux optimaux (+- 100.000
 séquences) afin de lancer sur la grille chaque sous-liste.

 Au cours des tests d'évaluation de ce seuil optimal, j'ai fait une
 coquille et je me suis retrouvé avec de très petites (donc très
 nombreuses) sous-séquences - cela a généré un très grand nombre de jobs
 avec leurs fichiers de données, logs etc.

 Voilà pour la petite histoire !

Avec les masses de données que tu traites, la réponse ne m'étonne pas
;-) Mais ne me dit pas qu'en plus, tu t'amuses à retirer la prises
plusieurs fois en quelques minutes (bon, je rigole) ;-)

Allez, une bonne semaine à tout le monde.

-- 
Arnaud Vandyck
http://fosdem.org/
Free and Open Source Developers' European Meeting
February 26-27 2005,
Bruxelles, Belgium

___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-07 Par sujet Rémi Letot
On Mon, 2004-09-06 at 09:50, Fabian Vilers wrote:
 -BEGIN PGP SIGNED MESSAGE-
 Hash: SHA1
 
 Bonjour à tous,
 
 Je recherche un système de fichier sur lequel installer linux. Sa seule
 qualité devrait être sa résistance (donc, sans de perte de données) à
 une extinction brutale de la machine. Serait utile sur un système
 embarqué par exemple.

De toute façon un FS journalisé, qui garanti que le FS lui-même sera
toujours consistant. Mais les FS journalisés ne garantissent en général
rien pour les data. Il semble que le plus résistant aux corruptions de
données soit ext3. Je l'ai lu, et mon expérience (bien qu'empirique) le
confirme.

Et si vraiment il arrive à se tirer dans le pied, c'est aussi celui pour
lequel les outils de récupération (chkfs,...) sont les plus aboutis,
notamment grâce à l'héritage ext2.

Bref, si tu n'as pas besoin des spécificités de reizer, xfs, jfs,..., ce
qui semble être le cas, ext3 devrait te convenir parfaitement.

Un pojnt à tenir à l'oeuil, surtout pour un système embarqué, c'est la
taille du média sur lequel tu vas créer ton FS. Dans l'ordre de grandeur
cartes mémoires, certains FS sont éliminés d'office par la place
qu'ils prennent avant même de stocker des données.

A+,
-- 
Rémi

___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: Re: [linux] Système de fichier

2004-09-07 Par sujet fred badel
Hello,

Merci pour ton expérience. J'ai toujours utilisé ext2/3 et il est vrai
que je n'ai jamais rencontré de problèmes même après coupure de courant
et autres.

Je vais légèrement ré-orienté ma question: existe-t-il un filesystem ou
un patch kernel pour obliger l'écriture immédiate des données sur le
support? Je me doute que ce genre de système va sacrifier les
performances, mais dans quelles mesures?

Encore merci à tous,
Fabian

il existe des options que tu peux passer à ton système de fichier via /etc/fstab ... 
va jeter un oeil ici :
http://www.linux-france.org/article/sys/ext3fs/ext3.html#s5
peut-être que tu y trouvera ton bonheur ... c'est en tout cas un debut de piste ...

hth
fred

___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-07 Par sujet Kennedy van Dam Eric
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1
Fabian Vilers wrote:
| Rémi Letot wrote: | Un pojnt à tenir à l'oeuil, surtout pour un
| système embarqué, c'est la | taille du média sur lequel tu vas
| créer ton FS. Dans l'ordre de grandeur | cartes mémoires,
| certains FS sont éliminés d'office par la place | qu'ils prennent
| avant même de stocker des données. | | A+,
|
| Merci pour ton expérience. J'ai toujours utilisé ext2/3 et il est
| vrai que je n'ai jamais rencontré de problèmes même après coupure
| de courant et autres.
|
| Je vais légèrement ré-orienté ma question: existe-t-il un
| filesystem ou un patch kernel pour obliger l'écriture immédiate des
| données sur le support? Je me doute que ce genre de système va
| sacrifier les performances, mais dans quelles mesures?
|
Je pense qu'il te suffit de modifier ton /etc/fstab en donnant comme
option sync.
Cela forcera ton OS à enregistrer tout de suite les modifs (Man mount
pour plus d'informations :) )
- --
Eric Kennedy van Dam
It-Optics
Ingénieur Linux
URL: http://www.it-optics.com
Mail: [EMAIL PROTECTED]
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.4 (GNU/Linux)
Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org
iD8DBQFBPWrZM4kcRapwsDYRArRHAJ41MvC6Kk0MbaPXJXfkNqqhFNu5rACfaNk6
x50J8vhFN/bGh9aMrg9yUy4=
=SXqQ
-END PGP SIGNATURE-
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-07 Par sujet Alain EMPAIN
fred badel wrote:
Hello,
 

Merci pour ton expérience. J'ai toujours utilisé ext2/3 et il est vrai
que je n'ai jamais rencontré de problèmes même après coupure de courant
et autres.
Je vais légèrement ré-orienté ma question: existe-t-il un filesystem ou
un patch kernel pour obliger l'écriture immédiate des données sur le
support? Je me doute que ce genre de système va sacrifier les
performances, mais dans quelles mesures?
Encore merci à tous,
Fabian
   

il existe des options que tu peux passer à ton système de fichier via /etc/fstab ... 
va jeter un oeil ici :
http://www.linux-france.org/article/sys/ext3fs/ext3.html#s5
peut-être que tu y trouvera ton bonheur ... c'est en tout cas un debut de piste ...

hth
fred
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech
 

si tu utilises de la flash, note bien qu'un journaling fs va la fatiguer 
bien plus vite.
   Alain

--

Dr Alain EMPAIN  [EMAIL PROTECTED] [EMAIL PROTECTED]
 Bioinformatics, Molecular Genetics, 
 Fac. Med. Vet., University of Liège, Belgium
 Bd de Colonster, B43   B-4000 Liège (Sart-Tilman)
WORK: +32 4 366 3821  FAX: +32 4 366 4122
HOME: rue des Martyrs,7  B- 4550 Nandrin   
 +32 85 51 23 41  GSM: +32 497 70 17 64

I worry about my child and the Internet all the time, even though she's
too young to have logged on yet. Here's what I worry about. I worry that
10 or 15 years from now, she will come to me and say 'Daddy, where were
you when they took freedom of the press away from the Internet?' 
--Mike Godwin, Electronic Frontier Foundation 


___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-07 Par sujet Rémi Letot
On Tue, 2004-09-07 at 09:42, Fabian Vilers wrote:
 -BEGIN PGP SIGNED MESSAGE-
 Hash: SHA1
 
 Rémi Letot wrote:
 | Un pojnt à tenir à l'oeuil, surtout pour un système embarqué, c'est la
 | taille du média sur lequel tu vas créer ton FS. Dans l'ordre de grandeur
 | cartes mémoires, certains FS sont éliminés d'office par la place
 | qu'ils prennent avant même de stocker des données.
 |
 | A+,
 
 Merci pour ton expérience. J'ai toujours utilisé ext2/3 et il est vrai
 que je n'ai jamais rencontré de problèmes même après coupure de courant
 et autres.
 
 Je vais légèrement ré-orienté ma question: existe-t-il un filesystem ou
 un patch kernel pour obliger l'écriture immédiate des données sur le
 support? 

option sync à passer au mount : 

mount -o sync /dev/tondevice /point/de/montage

Tu peux aussi placer l'option dans fstab.

 Je me doute que ce genre de système va sacrifier les
 performances, mais dans quelles mesures?

Ca dépend très fort de ton application et de la façon dont elle écrit
sur le disque. Ca dépend aussi de la charge du système, et de sa
puissance.

-- 
Rémi


___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-07 Par sujet Fabian Vilers
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1
Alain EMPAIN wrote:
| si tu utilises de la flash, note bien qu'un journaling fs va la fatiguer
| bien plus vite.
Ce sera un HD ou un mix en CF pour le systeme (RO) et HD pour les datas.
Evidement, ce sont les datas qu'on ne veux pas perdre ;-)
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.4 (GNU/Linux)
Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org
iD8DBQFBPXRu3Qzx239StfYRAkIrAJ9Ax1SKJxkOSkpiOZz2aj2w7eO60QCdGFi8
EUvmzdLSXTaFw3zdgEVFYkA=
=B9YD
-END PGP SIGNATURE-
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-07 Par sujet Christophe Monniez
Je crois qu'il y a un patch pour downgrader vers le kernel de MS Windows
si tu veux un système qui écrit directement sur le filesystem sans
bufferiser :)

Le problème c'est qu'il n'y a pas besoin de panne de courant pour tout
bousiller.



Le mar 07/09/2004 à 09:42, Fabian Vilers a écrit :
 -BEGIN PGP SIGNED MESSAGE-
 Hash: SHA1
 
 Rémi Letot wrote:
 | Un pojnt à tenir à l'oeuil, surtout pour un système embarqué, c'est la
 | taille du média sur lequel tu vas créer ton FS. Dans l'ordre de grandeur
 | cartes mémoires, certains FS sont éliminés d'office par la place
 | qu'ils prennent avant même de stocker des données.
 |
 | A+,
 
 Merci pour ton expérience. J'ai toujours utilisé ext2/3 et il est vrai
 que je n'ai jamais rencontré de problèmes même après coupure de courant
 et autres.
 
 Je vais légèrement ré-orienté ma question: existe-t-il un filesystem ou
 un patch kernel pour obliger l'écriture immédiate des données sur le
 support? Je me doute que ce genre de système va sacrifier les
 performances, mais dans quelles mesures?
 
 Encore merci à tous,
 Fabian
 -BEGIN PGP SIGNATURE-
 Version: GnuPG v1.2.4 (GNU/Linux)
 Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org
 
 iD8DBQFBPWZm3Qzx239StfYRAlYJAKDCTbMWPNjamNbMQ6DDJ4k/0fWFvgCfUUmG
 VmvIA3uBXzE3HIsticVWK50=
 =tVhs
 -END PGP SIGNATURE-
 --
 The information contained in this electronic message may be legally
 privileged and confidential under applicable law, and is intended only for
 the use of the individual or entity named above. If the recipient of this
 message is not the above-named intended recipient, you are hereby notified
 that any dissemination, copy or disclosure of this communication is strictly
 prohibited. If you have received this communication in error, please notify
 Keyware, +32 2 526 16 16 and purge the communication immediately without
 making any copy or distribution.
 
 ___
 Linux Mailing List - http://www.unixtech.be
 Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
 Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
 IRC: chat.unixtech.be:6667 - #unixtech
-- 
Christophe Monniez
On a long enough timeline, the survival rate for everything drops to
zero.
-- Fight Club --

___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


[linux] Système de fichier

2004-09-06 Par sujet Fabian Vilers
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1
Bonjour à tous,
Je recherche un système de fichier sur lequel installer linux. Sa seule
qualité devrait être sa résistance (donc, sans de perte de données) à
une extinction brutale de la machine. Serait utile sur un système
embarqué par exemple.
Merci à vous,
Fabian
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.4 (GNU/Linux)
Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org
iD8DBQFBPBa13Qzx239StfYRAqVHAKCxa2VXHivLCEXfd1oaxxDBXy4GiwCcC4L+
JE/LEDWMKV3v+9wGqpQSDe4=
=R9ok
-END PGP SIGNATURE-
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-06 Par sujet Alain EMPAIN
Fabian Vilers wrote:
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1
Bonjour à tous,
Je recherche un système de fichier sur lequel installer linux. Sa seule
qualité devrait être sa résistance (donc, sans de perte de données) à
une extinction brutale de la machine. Serait utile sur un système
embarqué par exemple.
Merci à vous,
Fabian
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.4 (GNU/Linux)
Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org
iD8DBQFBPBa13Qzx239StfYRAqVHAKCxa2VXHivLCEXfd1oaxxDBXy4GiwCcC4L+
JE/LEDWMKV3v+9wGqpQSDe4=
=R9ok
-END PGP SIGNATURE-
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech

Pour ma part j'utilise reiserfs depuis des années sans le moindre 
problème; j'ai une fois généré par erreur plus de 30 fichiers dans 
la même directory, et il s'en tirait toujours très honorablement !

Bonne journée,
   Alain
--

Dr Alain EMPAIN  [EMAIL PROTECTED] [EMAIL PROTECTED]
 Bioinformatics, Molecular Genetics, 
 Fac. Med. Vet., University of Liège, Belgium
 Bd de Colonster, B43   B-4000 Liège (Sart-Tilman)
WORK: +32 4 366 3821  FAX: +32 4 366 4122
HOME: rue des Martyrs,7  B- 4550 Nandrin   
 +32 85 51 23 41  GSM: +32 497 70 17 64

I worry about my child and the Internet all the time, even though she's
too young to have logged on yet. Here's what I worry about. I worry that
10 or 15 years from now, she will come to me and say 'Daddy, where were
you when they took freedom of the press away from the Internet?' 
--Mike Godwin, Electronic Frontier Foundation 


___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech


Re: [linux] Système de fichier

2004-09-06 Par sujet Fabian Vilers
-BEGIN PGP SIGNED MESSAGE-
Hash: SHA1
Alain EMPAIN wrote:
| Pour ma part j'utilise reiserfs depuis des années sans le moindre
| problème; j'ai une fois généré par erreur plus de 30 fichiers dans
| la même directory, et il s'en tirait toujours très honorablement !
Ok, merci pour ton expérience (merci Benoit aussi ;-)
Je ne cherche pas spécialement la performance mais vraiment la qualité
de pouvoir se redresser d'un, ou plusieurs, voir systématique shutdown
en retirant la prise :-)
Fabian
-BEGIN PGP SIGNATURE-
Version: GnuPG v1.2.4 (GNU/Linux)
Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org
iD8DBQFBPELV3Qzx239StfYRApvRAJ9Mae7FId1CEVT2WBXmm1hzFZ75TgCfVZSK
t5stO8OxeAkEmoTK/rbvw3U=
=MufG
-END PGP SIGNATURE-
___
Linux Mailing List - http://www.unixtech.be
Subscribe/Unsubscribe: http://www.unixtech.be/mailman/listinfo/linux
Archives: http://www.mail-archive.com/[EMAIL PROTECTED]
IRC: chat.unixtech.be:6667 - #unixtech