Re: [rech] cluster , et calcul distribué et parallelisé !
Bonjour, Pour créer un cluster de calcul basé sur Debian je m’appuierai sur ce qui est largement utilisé sur les HPC soit SLURM. qui est chargé de distribuer les modules de calcul sur l’ensemble des nœuds du calcul parallèle et gérer les files d’attente. À ce propos, voici ce que j’ai trouvé comme doc : https://connect.ed-diamond.com/GNU-Linux-Magazine/glmf-185/construire-son-cluster-hpc <https://connect.ed-diamond.com/GNU-Linux-Magazine/glmf-185/construire-son-cluster-hpc> https://slurm.schedmd.com <https://slurm.schedmd.com/> Après il faut bien savoir que cela demande une programmation parallèle… et un réseau suffisant pour assurer les échanges de données. http://www.lisa.u-pec.fr/~aelchheb/FORMATION%20LINUX%20HPC.pdf <http://www.lisa.u-pec.fr/~aelchheb/FORMATION%20LINUX%20HPC.pdf> https://hpc.isima.fr/lib/exe/fetch.php?media=wiki:presentation.pdf <https://hpc.isima.fr/lib/exe/fetch.php?media=wiki:presentation.pdf> En espérant que cela t'aide > Le 14 févr. 2022 à 13:12, ptilou a écrit : > > Slt, > > Je fais partie d’une association qui fait la promotion de debian et du > logiciel libre, l’association dispose d’unités centrales, je propose à > l’association de faire un cluster pour voir l’intérêt du titre du threats. > > Donc je cherche des informations ? > Je suis navré de vous informer qu’il n’y a pas d’argent, je m’y intéresse et > essaye de federer pour connaître le fonctionnement ! > > Donc cela s’adresse à quelqu’un qui maîtrise le kernel et ses réglages, pour > savoir si un parc machine entérocolites qui d’après ce document : > > https://tel.archives-ouvertes.fr/tel-2933/document > > Fait qu’il existe un arbitre ? > Y a plusieurs kernel qui s’exécute, d’après n document du site kernel.org, et > donc je suppose une couche supérieur qui partage et effectue les calcul ? > > Je trouve que le niveau a baisser, peut-être que c’est de ma faute (?), et > donc en français y aurait il une oreille attentive ? > > Je pense mais je vérifierai que l’association d’Ivry utilise la dernière > version de Debian stable, si il existe une distribution Linux plus adapté > merci de m’orienter ? > > — > Ptilou > -- Pierre Malard Responsable architectures système GeoSUD IRD - UMR Espace-Dev - UMS CPST Maison de la Télédétection 500 rue Jean-François Breton 34093 Montpellier Cx 5 France « On ne peut pas pousser à fond l'éducation politique et l'éducation tout court de masses sans l'accompagner d'un développement économique, culturel et social parallèle. » Romain Gary - "Les racines du ciel" |\ _,,,---,,_ /,`.-'`'-. ;-;;,_ |,4- ) )-,_. ,\ ( `'-' '---''(_/--' `-'\_) πr perl -e '$_=q#: 3|\ 5_,3-3,2_: 3/,`.'"'"'`'"'"' 5-. ;-;;,_: |,A- ) )-,_. ,\ ( `'"'"'-'"'"': '"'"'-3'"'"'2(_/--'"'"' `-'"'"'\_): 24πr::#;y#:#\n#;s#(\D)(\d+)#$1x$2#ge;print' - --> Ce message n’engage que son auteur <-- signature.asc Description: Message signed with OpenPGP
Re: [rech] cluster , et calcul distribué et parallelisé !
peut-être ici http://www.sebastien-han.fr/blog/2011/07/04/introduction-au-cluster-sous-linux/ François-Marie Le 14/02/2022 à 13:12, ptilou a écrit : Slt, Je fais partie d’une association qui fait la promotion de debian et du logiciel libre, l’association dispose d’unités centrales, je propose à l’association de faire un cluster pour voir l’intérêt du titre du threats. Donc je cherche des informations ? Je suis navré de vous informer qu’il n’y a pas d’argent, je m’y intéresse et essaye de federer pour connaître le fonctionnement ! Donc cela s’adresse à quelqu’un qui maîtrise le kernel et ses réglages, pour savoir si un parc machine entérocolites qui d’après ce document : https://tel.archives-ouvertes.fr/tel-2933/document Fait qu’il existe un arbitre ? Y a plusieurs kernel qui s’exécute, d’après n document du site kernel.org, et donc je suppose une couche supérieur qui partage et effectue les calcul ? Je trouve que le niveau a baisser, peut-être que c’est de ma faute (?), et donc en français y aurait il une oreille attentive ? Je pense mais je vérifierai que l’association d’Ivry utilise la dernière version de Debian stable, si il existe une distribution Linux plus adapté merci de m’orienter ? — Ptilou
[rech] cluster , et calcul distribué et parallelisé !
Slt, Je fais partie d’une association qui fait la promotion de debian et du logiciel libre, l’association dispose d’unités centrales, je propose à l’association de faire un cluster pour voir l’intérêt du titre du threats. Donc je cherche des informations ? Je suis navré de vous informer qu’il n’y a pas d’argent, je m’y intéresse et essaye de federer pour connaître le fonctionnement ! Donc cela s’adresse à quelqu’un qui maîtrise le kernel et ses réglages, pour savoir si un parc machine entérocolites qui d’après ce document : https://tel.archives-ouvertes.fr/tel-2933/document Fait qu’il existe un arbitre ? Y a plusieurs kernel qui s’exécute, d’après n document du site kernel.org, et donc je suppose une couche supérieur qui partage et effectue les calcul ? Je trouve que le niveau a baisser, peut-être que c’est de ma faute (?), et donc en français y aurait il une oreille attentive ? Je pense mais je vérifierai que l’association d’Ivry utilise la dernière version de Debian stable, si il existe une distribution Linux plus adapté merci de m’orienter ? — Ptilou
Re: Conseils sur l'exploitation d'un cluster Keepalived
Hello
Le Wed, 18 Aug 2021 16:35:23 +0200,
Olivier a écrit :
> 1. Le doc [1] mentionne un mécanisme de track file avec lequel il me
> semble possible de changer à la volée la priorité d'un noeud et donc
> de forcer son état Actif ou Passif. Ai-je bien compris ce mécanisme ?
> Y a-t-il des alternatives ?
avec ce mécanisme, mon paragraphe lance un script shell.
Quand je veux forcer un déplacement de master :
* mon script shell check la présence d'un fichier. si ce fichier est
présent je "exit 1" , keepalived fait la bascule en conséquence
* s'assurer de ne pas automatiquement revenir sur " le master
historique " : nopreempt de mémoire
* ne pas faire autre chose que 0 ou 1 comme code retour du script ce
qui est > 1 ne semble pas pris en compte par keepalived
vrrp_script chk_mysql {
script "/etc/keepalived/scripts/chk_mysql.sh"
[...]
[...]
track_script {
chk_mysql
}
>
> 2. Quels sont les risques d'un cluster dont des membres sont dans des
> versions Debian différentes (le but est d'aider à la montée de
> version) ?
J'ai jamais eu de problèmes
>
> 3. J'imagine mettre à niveau de la façon suivante:
j'ai pas compris :-D
Conseils sur l'exploitation d'un cluster Keepalived
Bonjour, J'ai cluster Keepalived à deux noeuds sous Debian. À chaque instant, l'un des deux est actif quand l'autre est passif. Ces deux noeuds sont des VM hébergées sur des hôtes différents et indépendants. Pour faciliter les opérations de mise à jour (changement d'OS ou de version de logiciel), je m'interroge sur l'intérêt de doubler le nombre de noeud sur chaque hôte toute en ne conservant, normalement à chaque instant, qu'un unique noeud actif. Avant de tester cela, je serai très curieux de lire vos commentaires, suggestions et retours d'expérience sur ce type de mises en oeuvre. Mes questions en vrac, sont: 1. Le doc [1] mentionne un mécanisme de track file avec lequel il me semble possible de changer à la volée la priorité d'un noeud et donc de forcer son état Actif ou Passif. Ai-je bien compris ce mécanisme ? Y a-t-il des alternatives ? 2. Quels sont les risques d'un cluster dont des membres sont dans des versions Debian différentes (le but est d'aider à la montée de version) ? 3. J'imagine mettre à niveau de la façon suivante: 3.1 le même jour, on immobilise deux noeuds passifs (1 sur chaque hôte de virtualisation) 3.2 on met à jour les 2 noeuds immobilisés 3.3 à l'heure idoine, on bascule vers l'un des 2 noeuds à jour (avec retour arrière en cas d'échec) 3.4 quelques temps après, on immobilise deux noeuds restants et on répète les opérations 3.1 à 3.4 Voyez-vous une meilleure façon de procéder ? Pour moi, ses inconvénients (qui me semblent acceptables) sont: deux ruptures de service à chaque migration, deux noeuds sont migrés sans véritablement avoir été testés. [1] https://www.redhat.com/sysadmin/advanced-keepalived Slts
Re: Monter un cluster avec debian 10
Le lundi 21 décembre 2020, 20:45:04 CET roger.tar...@free.fr a écrit : > Merci. > J'avais entendu parlé de proxmox mais encore creusé. > > En gros, c'est "combien de fois plus rapide" à installer avec proxmox par > rapport à ma propre installation KVM+etc. ? Je risque quoi, ou je perds > quoi à l'installer sur une debian 10 ? J'ai trouvé ce tuto récent pour > stretch/buster : https://chrtophe.developpez.com/tutoriels/proxmox/ Alors, si tu n'as pas déjà fait, une installation corosync/pacemaker, c'est des jours, et encore, tu ne maitrisera pas tout. Les installes que j'avais faite, je m'étais simplifier la vie en utilisant l'outil de configuration drbd de linbit. Avec Proxmox, je l'ai toujours installé sur une Debian et pas avec leur installer, pour pouvoir mieux maitriser l'installe et en particulier le partitionnement. > Pour le matos, j'aurais plutôt intérêt à avoir 3-4 bonnes machines de bureau > pas chères plutôt que deux serveurs professionnels moyennement chers. C'est > ça ? Ca dépend évidement de ce que tu veux faire. Et avec quel niveau de service, si c'est à la maison ou dans un datacenter... Tu as aussi l'option de serveurs professionnels d'occasion. Proxmox sans Ceph, mais avec ZFS + réplication asynchrone (zfs send/recevive), c'est déjà bien, et ça peut être multi-site (enfin, multi=2). > Est-ce qu'on peut vraiment les distribuer en plusieurs lieux ou alors > doit-on avoir un seul lieu ? (éventuelle contrainte d'un SAN ou Ceph ?) Non, sauf sit tes deux sites peuvent être considérés comme un seul (même réseau niveau 2 et surtout latence très faible).
Monter un cluster avec debian 10
J'aimerais monter un cluster de 2 machines avec KVM, pacemaker/corosync (qui semble permettre plus de deux noeuds). 1/ Quel matériel peut-on envisager ? Je pensais à deux options : - soit des petits serveurs, qui seront robustes et évolutifs ex : Dell Poweredge T110 Xeon (c'était capable de supporter 9k requêtes web par seconde il y a quelques années) - soit des tours de bureau, qui seront plus silencieuses ex : HP ProDesk 600 G2 Intel Core i3-6100 3.70 GHz 2/ Pour ce qui est de la mise en oeuvre sur debian10, je suis plutôt optimiste car j'ai entendu que "ce serait trivial". Quelles choses faut-il absolument anticiper pour que ça soit une expérience satisfaisante et pas un cauchemar de Noël ? J'ai aperçu cette doc [ https://wiki.debian.org/Debian-HA/ClustersFromScratch | https://wiki.debian.org/Debian-HA/ClustersFromScratch, ] courte et qui parle de Jessie ( [ https://wiki.debian.org/Debian-HA/ClustersFromScratch?action=info | dernière modification 2019-11-27 ] ) Et cet article de 0213-15 [ https://blogduyax.madyanne.fr/2013/haute-disponibilite-avec-corosync-et-pacemaker/ | https://blogduyax.madyanne.fr/2013/haute-disponibilite-avec-corosync-et-pacemaker/ ] Est-ce que ça suffit ou il y a beaucoup mieux ? 3/ Plusieurs noeuds distribués Certaines configurations en HA recommandent une faible latence entre deux noeuds (1 ms de ping response time), ce qui oblige à les avoir pas trop éloignées. Or, je voudrais placer les deux noeuds en deux lieux différents, au cas où une faille géante engloutirait ma région... Du coup,comment s'appréhende la HA distribuée" avec debian ? Peut-on à la fois avoir deux machines très éloignées ? (au moins du point de vu du ping response time ) Merci rt
create 2 VG for 2 cluster of disk in LVM in preseed.cfg
hello, in LVM whith partman, i would like to create 2 VG for 2 cluster of disk. how does it work? i don't have succeed with my preseed.cfg recipe. however, it's possible while manual install with an iso. best regards thanks jeb
Re: Utilité cluster virtuel
Salut, On est bien d'accord que étant sur la meme machine physique, je n'ai pas réelement une haute disponibilité et performance ?! On peut en effet facilement imaginer que haute-dispo, avec une seule machine, bah nan. Du coup, performance en prend un coup, mais bon, ça doit dépendre de tellement de choses...! -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: https://lists.debian.org/cagkqbrn3-bft4ayxug3zc4wxrc1fsaj+ngrkp7dqpohagpx...@mail.gmail.com
Utilité cluster virtuel
Bonsoir à tous :) Je vous écris pour avoir votre avis sur l’objet cité ci-dessus. Voilà donc la question que je me pose : Je souhaiterais savoir quel serait l’avantage de créer un cluster Postgres (par exemple) via Docker (sur la meme machine) comparé à une simple machine Postgres. On est bien d’accord que étant sur la meme machine physique, je n’ai pas réelement une haute disponibilité et performance ?! Bien cordialement. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: https://lists.debian.org/4b7cd153-b912-4720-bc79-845c1af98...@gmail.com
Re: Utilité cluster virtuel
Le 27/01/2015 22:45, Florian Blanc a écrit : Bonsoir à tous :) Je vous écris pour avoir votre avis sur l’objet cité ci-dessus. Voilà donc la question que je me pose : Je souhaiterais savoir quel serait l’avantage de créer un cluster Postgres (par exemple) via Docker (sur la meme machine) comparé à une simple machine Postgres. On est bien d’accord que étant sur la meme machine physique, je n’ai pas réelement une haute disponibilité et performance ?! Bien cordialement. J'y vois éventuellement tout de même deux avantages : 1) Le jour ou tu a une autre machine de disponible, c'est très facile de déplacer un de tes conteneurs sur la nouvelle machine 2) En cas de maintenance sur PostgreSQL, si ton appli le permet, tu peux arrêter un conteneur, faire tes manips, redémarrer, arrêter l'autre conteneur, manips et redémarrage. Si ton cluster, c'est de la réplication, au pire tu auras une période pendant laquelle ton appli ne pourra que lire, mais pas complètement arrêtée... -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: https://lists.debian.org/54c81a4f.3000...@nuagelibre.org
Re: Monter son cluster
Le 25/11/2013 00:12, Sylvain L. Sauvage a écrit : Le dimanche 24 novembre 2013 22:39:27 RHATAY Sami a écrit : Salut à tous, […] est-ce qu'il est possible d'utiliser ce cluster pour faire bosser une application et de partager les calculs entre les nœuds ou faut-il écrire soi-même une application qui pourra être ensuite exécutée. La transparence dépend du type de cluster. Est-ce que la « machine » résultante est vue comme une seule (grosse) machine avec plusieurs processeurs ou non. Dans le premier cas, il faut que l’application soit multi- thread ou multi-processus. Dans le second, il faut qu’elle utilise en plus les mécanismes adéquats (p.ex. PVM). (dans beaucoup de tutos qui utilisent MPICH2, ils testent le montage avec un programme pour calculer Pi)[…] Et certains s’arrêtent une fois qu’ils ont réussi ça parce que, en fin de compte, ils n’ont rien d’autre à lui faire faire… J'espère avoir été clair dans mon message À peu près ;o) Bonjour, merci pour la réponse ! Du coup, par où je peux commencer ? J'imagine que le plus simple est simuler une seule machine avec un seul processeur ? Merci! Cordialement -- RHATAY Sami IUT Vannes - INFO1 -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/5294781e.5020...@etud.univ-ubs.fr
Re: Monter son cluster
Le mardi 26 novembre 2013 11:29:50 RHATAY Sami a écrit : […] J'espère avoir été clair dans mon message À peu près ;o) Bonjour, ’jour, merci pour la réponse ! Du coup, par où je peux commencer ? J'imagine que le plus simple est simuler une seule machine avec un seul processeur ? Bon alors c’est moi qui n’ai pas été clair ;o) Il n’y a aucune façon de combiner plusieurs CPU pour en faire un seul « plus puissant ». Une grappe, c’est pour avoir plus de CPU / RAM en combinant des machines, aux dépends des coûts en communication entre les machines. Le nombre de CPU de la grappe est le total du nombre de CPU des machines (moins peut-être quelques uns réservés pour la gestion de la grappe). Certaines façons de créer une grappe rendent transparente la présence des machines sous-jacentes. Les programmes utilisateur n’ont alors pas à être modifiés par rapport à une machine multi- processeur mais ils doivent quand même être multi-threadés pour utiliser les capacités de la machine. Les autres façons (MPICH, PVM, Torque, « maison »…) installent un service sur les nœuds pour y recevoir et faire exécuter des tâches (des « clients », des logiciels qui sont « prévus pour »). Là, on voit les machines sous-jacentes. (Mais le mécanisme de distribution peut choisir le « bon » nœud pour la « bonne » tâche tout seul.) C’est la technique la plus simple et la plus « grand public ». En ce qui concerne les tâches à effectuer, pour que ça ait un intérêt et que tout le temps ne soit pas passé en communications, il faut qu’elles soient très calculatoires et divisibles. Le calcul de π est un exemple simple parce qu’on peut en calculer la n-ième « hexadécimale » (chiffre en base 16) sans connaître les autres : chaque nœud peut s’occuper de calculer tout seul un certain nombre de chiffres et on n’a plus qu’à tout rassembler le tout à la fin. Folding@Home est aussi un bon exemple. Un bon nombre d’outils de calcul (Scilab…) savent utiliser PVM ou MPICH. Je crois qu’il y avait des patch pour POVRay 3.6 (le vénérable ray-traceur) pour lui faire utiliser PVM. Et c’est quand même plus sympa de calculer de jolies images que les chiffres de π… -- Sylvain Sauvage -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/1458040.MNzgc5Zgeo@earendil
Re: Monter son cluster
Le 26/11/2013 15:36, Sylvain L. Sauvage a écrit : Le mardi 26 novembre 2013 11:29:50 RHATAY Sami a écrit : […] J'espère avoir été clair dans mon message À peu près ;o) Bonjour, ’jour, merci pour la réponse ! Du coup, par où je peux commencer ? J'imagine que le plus simple est simuler une seule machine avec un seul processeur ? Bon alors c’est moi qui n’ai pas été clair ;o) Il n’y a aucune façon de combiner plusieurs CPU pour en faire un seul « plus puissant ». Une grappe, c’est pour avoir plus de CPU / RAM en combinant des machines, aux dépends des coûts en communication entre les machines. Le nombre de CPU de la grappe est le total du nombre de CPU des machines (moins peut-être quelques uns réservés pour la gestion de la grappe). Certaines façons de créer une grappe rendent transparente la présence des machines sous-jacentes. Les programmes utilisateur n’ont alors pas à être modifiés par rapport à une machine multi- processeur mais ils doivent quand même être multi-threadés pour utiliser les capacités de la machine. [...] A une époque, j'avais regardé OpenMosix, qui devait rendre assez transparent la migration de process entre les noeuds. Mais c'est mort : http://openmosix.sourceforge.net/ Il y a la notion de Single Image System : https://en.wikipedia.org/wiki/Single_system_image Mes deux centimes. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/5294dc0d.3020...@nuagelibre.org
Re: Monter son cluster
Le Tue, 26 Nov 2013 18:36:13 +0100, Gilles Mocellin gilles.mocel...@nuagelibre.org a écrit : Le 26/11/2013 15:36, Sylvain L. Sauvage a écrit : Le mardi 26 novembre 2013 11:29:50 RHATAY Sami a écrit : […] J'espère avoir été clair dans mon message À peu près ;o) Bonjour, ’jour, merci pour la réponse ! Du coup, par où je peux commencer ? J'imagine que le plus simple est simuler une seule machine avec un seul processeur ? Bon alors c’est moi qui n’ai pas été clair ;o) Il n’y a aucune façon de combiner plusieurs CPU pour en faire un seul « plus puissant ». Une grappe, c’est pour avoir plus de CPU / RAM en combinant des machines, aux dépends des coûts en communication entre les machines. Le nombre de CPU de la grappe est le total du nombre de CPU des machines (moins peut-être quelques uns réservés pour la gestion de la grappe). Certaines façons de créer une grappe rendent transparente la présence des machines sous-jacentes. Les programmes utilisateur n’ont alors pas à être modifiés par rapport à une machine multi- processeur mais ils doivent quand même être multi-threadés pour utiliser les capacités de la machine. [...] A une époque, j'avais regardé OpenMosix, qui devait rendre assez transparent la migration de process entre les noeuds. Mais c'est mort : http://openmosix.sourceforge.net/ Il y a la notion de Single Image System : https://en.wikipedia.org/wiki/Single_system_image Mes deux centimes. bonjour, il y a plusieures années je m'était penché dessus ceci : http://www.calvin.edu/~adams/research/microwulf/ le matériel date un peut mais le principe est toujours valide slt bernard -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/20131126190920.66074cfa.bernard.schoenac...@free.fr
Monter son cluster
Salut à tous, en faisant quelques recherches sur le Raspberry Pi j'ai vu que certains avaient monté leur petit cluster personnel (de 4 à 64 nœuds). Je m'y suis donc intéressé. j'aimerai commencer par un monter un sur 3 ordinateurs puis ensuite reproduire sur un montage de RPi. Mais quelque chose m'échappe, sur les tutos, une fois monté, est-ce qu'il est possible d'utiliser ce cluster pour faire bosser une application et de partager les calculs entre les nœuds ou faut-il écrire soi-même une application qui pourra être ensuite exécutée. (dans beaucoup de tutos qui utilisent MPICH2, ils testent le montage avec un programme pour calculer Pi) Un exemple pour illustrer : J'aimerai par exemple d'essayer cracker une archive RAR protégée par mot de passe (un petit bien sûr) avec le soft rarcrack en essayant de partager les calculs entre les nœuds, pour voir si on peut y voir une différence comparé à une exécution sur un seul ordinateur. Ou autre exemple j'ai vu certains qui faisaient un écho un très grand nombre de fois, et qui regardaient comment variait le temps d'exécution avec 1,2,3 nœuds voire plus. J'espère avoir été clair dans mon message Merci ! Cordialement -- RHATAY Sami IUT Vannes - INFO1 -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/5292720f.8080...@etud.univ-ubs.fr
Re: Monter son cluster
Le dimanche 24 novembre 2013 22:39:27 RHATAY Sami a écrit : Salut à tous, […] est-ce qu'il est possible d'utiliser ce cluster pour faire bosser une application et de partager les calculs entre les nœuds ou faut-il écrire soi-même une application qui pourra être ensuite exécutée. La transparence dépend du type de cluster. Est-ce que la « machine » résultante est vue comme une seule (grosse) machine avec plusieurs processeurs ou non. Dans le premier cas, il faut que l’application soit multi- thread ou multi-processus. Dans le second, il faut qu’elle utilise en plus les mécanismes adéquats (p.ex. PVM). (dans beaucoup de tutos qui utilisent MPICH2, ils testent le montage avec un programme pour calculer Pi)[…] Et certains s’arrêtent une fois qu’ils ont réussi ça parce que, en fin de compte, ils n’ont rien d’autre à lui faire faire… J'espère avoir été clair dans mon message À peu près ;o) -- Sylvain Sauvage -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/23498085.xKf0mncOjo@earendil
LTSP Cluster avec Debian
Bonjour, J'aimerai savoir si certains d'entre vous ont déjà mis en place que ce soit pour la production ou en prototype l'installation de LTSP Cluster ? Des liens existent mais point de Debian... Sinon je me mettrai au travail à ce sujet mais s'il existe déjà un tuto, c'est déjà pas mal ! D'avance merci pour vos réponse, Linuxement vôtre, David P. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/4d9251b6.8040...@free.fr
[debian/ubuntu] cluster de serveurs ou cloud privé
Bonjour à tous, J'ai en projet d'héberger et de louer une application à différents clients; ceux-ci auront un profil pour se connecter. L'accès à cette application se fera via Internet. Aujourd'hui je me perds un peu dans les termes : cluster de serveurs et cloud computing. Mon objectif est d'assurer une disponibilité à 99,9% de mon application pour mes différents clients. Personnellement, je pencherai pour un cluster haute disponibilité. Mais voilà, on me dit que le succès de ce premier hébergement va nous amener à héberger d'autres applications dans le même registre et même à héberger pour le compte de certains clients des applications métiers. Je veux savoir si en déployant un cluster haute disponibilité avec pacemaker sur debian/ubuntu je pourrai évoluer plus tard vers Ubuntu Enterprise Cloud ou devrais-je continuer en faisant des clusters ? Merci à tous pour vos réponses avisées. -- Dominique Claver KOUAME Consultant indépendant en télécoms 25 BP 1464 Abidjan 25 Contacts: +225 45802315 +225 02316080
Re: [debian/ubuntu] cluster de serveurs ou cloud pri vé
Le Tue, 13 Jul 2010 11:53:38 + (GMT), Dominique Claver KOUAME kdcla...@yahoo.fr a écrit : J'ai en projet d'héberger et de louer une application à différents clients; ceux-ci auront un profil pour se connecter. L'accès à cette application se fera via Internet. Donc, du SaaS. Aujourd'hui je me perds un peu dans les termes : cluster de serveurs et cloud computing. Ce sont 2 choses totalement différentes, quoique non-exclusives. Cluster de SVRs ex: gogole: des milliers de requêtes arrivent sur peu de frontaux et sont réparties vers les milliers de SVRs (load balancing) qui sont eux-même en clusters HA. Cloud computing: Externalisation, en Gal, d'applications de calculs pour lesquelles on peut acheter du temps CPU (donc ajouter des machines au cluster et accélérer la vitesse de calcul.) Enfin, c'était la déf. de base, maintenant le clouding rassemble tout et n'importe quoi en étant présenté comme LE futur (IMHO il-y-a des sacrées gamelles à venir dans ce secteur...) Mon objectif est d'assurer une disponibilité à 99,9% de mon application pour mes différents clients. Personnellement, je pencherai pour un cluster haute disponibilité. Mais voilà, on me dit que le succès de ce Vi, ça semble être la solution idoine. premier hébergement va nous amener à héberger d'autres applications dans le même registre Donc le nombre de CPUs/HDz/machines se multipliera, pas vraiment un PB. et même à héberger pour le compte de certains clients des applications métiers. Ca, il vaut mieux éviter, ou à l'extrême limite avec des contrats juridiques en béton armé. En Gal quand ça commence à merder, le client te repasse la patate chaude en arguant que les PBs viennent de chez toi et pas de son programme. Sans compter les PBs de sécurité dont TU seras responsable puisqu'hébergeur. Et sans compter qu'à moins de passer un temps non-négligeable à scanner tes machines, tu ne sauras pas exactement ce qu'il-y-aura dessus. Ca dépend donc aussi grandement de la législation de ton pays. Et faire de la sous-traitance dans ce secteur veut dire tout abandonner au provider principal, ce qui posera des PBs notamment de confidentialité des données. Je veux savoir si en déployant un cluster haute disponibilité avec pacemaker sur debian/ubuntu je pourrai évoluer plus tard vers Ubuntu Enterprise Cloud ou devrais-je continuer en faisant des clusters ? Perso, je resterai sur du cluster HA; maintenant je n'ai pas d'expérience poussée sur le clouding et d'autres te donneront sûrement des explications plus poussées et précieuses. -- Spelling is a lossed art. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/20100713142531.4e227...@anubis.defcon1
Re : [debian/ubuntu] cluster de serveurs ou cloud pr ivé
Merci à Jean-Yves, Merci pour cette explication claire et succincte. Une seconde question Je voudrais savoir si dans la configuration en cluster, je peux ajouter à volonté des serveurs sans que cela ne pose de problèmes, un peu comme si je venais accroître la capacité de stockage, ou devrais comme je l'ai prévu pour le démarrage, dédier chaque fois deux (02) serveurs pour une application Merci encore pour vos avis. -- Dominique Claver KOUAME Consultant indépendant en télécoms 25 BP 1464 Abidjan 25 Contacts: +225 45802315 +225 02316080 De : Jean-Yves F. Barbier 12u...@gmail.com À : debian-user-french@lists.debian.org Envoyé le : Mar 13 juillet 2010, 12h 25min 31s Objet : Re: [debian/ubuntu] cluster de serveurs ou cloud privé Le Tue, 13 Jul 2010 11:53:38 + (GMT), Dominique Claver KOUAME kdcla...@yahoo.fr a écrit : J'ai en projet d'héberger et de louer une application à différents clients; ceux-ci auront un profil pour se connecter. L'accès à cette application se fera via Internet. Donc, du SaaS. Aujourd'hui je me perds un peu dans les termes : cluster de serveurs et cloud computing. Ce sont 2 choses totalement différentes, quoique non-exclusives. Cluster de SVRs ex: gogole: des milliers de requêtes arrivent sur peu de frontaux et sont réparties vers les milliers de SVRs (load balancing) qui sont eux-même en clusters HA. Cloud computing: Externalisation, en Gal, d'applications de calculs pour lesquelles on peut acheter du temps CPU (donc ajouter des machines au cluster et accélérer la vitesse de calcul.) Enfin, c'était la déf. de base, maintenant le clouding rassemble tout et n'importe quoi en étant présenté comme LE futur (IMHO il-y-a des sacrées gamelles à venir dans ce secteur...) Mon objectif est d'assurer une disponibilité à 99,9% de mon application pour mes différents clients. Personnellement, je pencherai pour un cluster haute disponibilité. Mais voilà, on me dit que le succès de ce Vi, ça semble être la solution idoine. premier hébergement va nous amener à héberger d'autres applications dans le même registre Donc le nombre de CPUs/HDz/machines se multipliera, pas vraiment un PB. et même à héberger pour le compte de certains clients des applications métiers. Ca, il vaut mieux éviter, ou à l'extrême limite avec des contrats juridiques en béton armé. En Gal quand ça commence à merder, le client te repasse la patate chaude en arguant que les PBs viennent de chez toi et pas de son programme. Sans compter les PBs de sécurité dont TU seras responsable puisqu'hébergeur. Et sans compter qu'à moins de passer un temps non-négligeable à scanner tes machines, tu ne sauras pas exactement ce qu'il-y-aura dessus. Ca dépend donc aussi grandement de la législation de ton pays. Et faire de la sous-traitance dans ce secteur veut dire tout abandonner au provider principal, ce qui posera des PBs notamment de confidentialité des données. Je veux savoir si en déployant un cluster haute disponibilité avec pacemaker sur debian/ubuntu je pourrai évoluer plus tard vers Ubuntu Enterprise Cloud ou devrais-je continuer en faisant des clusters ? Perso, je resterai sur du cluster HA; maintenant je n'ai pas d'expérience poussée sur le clouding et d'autres te donneront sûrement des explications plus poussées et précieuses. -- Spelling is a lossed art. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/20100713142531.4e227...@anubis.defcon1
Re: [debian/ubuntu] cluster de serveurs ou cloud pri vé
Le Tue, 13 Jul 2010 12:37:42 + (GMT), Dominique Claver KOUAME kdcla...@yahoo.fr a écrit : Je voudrais savoir si dans la configuration en cluster, je peux ajouter à volonté des serveurs sans que cela ne pose de problèmes, un peu comme si je venais accroître la capacité de stockage, ou devrais comme je l'ai prévu pour le démarrage, dédier chaque fois deux (02) serveurs pour une application Merci encore pour vos avis. Non, ajouter des machines dans un cluster HA ne fait qu'ajouter de la redondance. Pour le stockage, par contre, tu peux l'externaliser et y accéder à partir de différents SVRs/clusters (Fiber, e-SCSI, etc) Il faut aussi vérifier 2 choses: que le centre d'hébergement soit correctement alimenté (onduleurs online + groupe électrogène de secours) et, particulièrement dans ton cas, que la clim l'est aussi. -- Does he treat your breasts like unripe grapefruit? Who needs him? -- `J', The Sensuous Woman -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/20100713150535.14247...@anubis.defcon1
Re: [HS] Mini-cluster pour calcul intensif
Le 20/04/2010 14:33, Vincent Danjean a écrit : On 16/04/2010 17:19, giggzounet wrote: intéressant! j'ai aussi vu que certain ont l'hyper threading...et évidemment ça a l'air vachement intéressant. en gros je pourrais avoir avec 4 proc jusqu'à 32 threads (4*8*2) :) mais bon je ne sais pas si le chassis supporte ces processeurs. Je réagis juste sur ce point : attention à l'hyper-threading. Ça te fait effectivement des threads en plus MAIS (sauf applications bien particulières) ça ne double pas tes performances : en effet, les deux hyperthread par coeur se partagent un grand nombre des ressources du coeur (unités de calcul, cache, ...) D'autre part, le partage des ressources entre ces deux hyperthreads est fait par le matériel lui-même donc le logiciel sera incapable de diriger l'ordonnancement sur ces deux hyperthreads. Suivant les applis, c'est important ou pas. J'ai vu beaucoup de plate-formes de calcul hautes-performances où l'hyperthreading est désactivé. Enfin, de manière plus générale (et comme déjà évoqué dans cette discussion), dans les plate-forme multi coeur, un point TRÈS important et souvent négligé en première approche est la bande passante vers la mémoire. Je suis incapable de te faire un résumé de ce qui existe actuellement sur le marché mais c'est un point très important pour ta plate-forme (plus que la vitesse des processeurs à mon avis) ok. pour l'hyperthreading je vais voir. autant avoir un proc qui le supporte si on a assez de sous et ensuite je ferai qqs tests :) je suis d'accord avec toi pour la bande passante vers la mémoire. mais question idiote dans le spécifications où se cache cette donnée ? Merci! bientot le fil va se transformer en : install debian sur un mini cluster :D bye -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/hqm6rk$15...@dough.gmane.org
Re: [HS] Mini-cluster pour calcul intensif
On 16/04/2010 17:19, giggzounet wrote: intéressant! j'ai aussi vu que certain ont l'hyper threading...et évidemment ça a l'air vachement intéressant. en gros je pourrais avoir avec 4 proc jusqu'à 32 threads (4*8*2) :) mais bon je ne sais pas si le chassis supporte ces processeurs. Je réagis juste sur ce point : attention à l'hyper-threading. Ça te fait effectivement des threads en plus MAIS (sauf applications bien particulières) ça ne double pas tes performances : en effet, les deux hyperthread par coeur se partagent un grand nombre des ressources du coeur (unités de calcul, cache, ...) D'autre part, le partage des ressources entre ces deux hyperthreads est fait par le matériel lui-même donc le logiciel sera incapable de diriger l'ordonnancement sur ces deux hyperthreads. Suivant les applis, c'est important ou pas. J'ai vu beaucoup de plate-formes de calcul hautes-performances où l'hyperthreading est désactivé. Enfin, de manière plus générale (et comme déjà évoqué dans cette discussion), dans les plate-forme multi coeur, un point TRÈS important et souvent négligé en première approche est la bande passante vers la mémoire. Je suis incapable de te faire un résumé de ce qui existe actuellement sur le marché mais c'est un point très important pour ta plate-forme (plus que la vitesse des processeurs à mon avis) A+ Vincent -- Vincent Danjean GPG key ID 0x9D025E87 vdanj...@debian.org GPG key fingerprint: FC95 08A6 854D DB48 4B9A 8A94 0BF7 7867 9D02 5E87 Unofficial packages: http://moais.imag.fr/membres/vincent.danjean/deb.html APT repo: deb http://perso.debian.org/~vdanjean/debian unstable main -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/4bcd9f2d.9040...@free.fr
Re: [HS] Mini-cluster pour calcul intensif
bon je vais voir s'il n'est pas possible d'obtenir d'autres offres. En regardant sur le site d'IBM il n'y pas vraiment d'autres choix que ce chassis là... L'IBM System x3850 X5 est tout frais, et en Xeon 7500. donc ce que l'on m'avait dit sont encore valable pour les CPU de la série 7400...merde alors. as tu des liens de préférence en anglais pour que je puisse montrer ça à mon chef. L'article de bit-tech, en lien dans mon précédent mail, compare assez bien l'ancienne architecture et la nouvelle (pages 2-3). Il y a également ceci, par exemple : http://anandtech.com/show/3648/xeon-7500-dell-r810/1 vi. mais j'ai pas encore trouvé de rack avec 4 sockets les supportant. Dell R910, IBM System X3850 X5, par exemple. Bon WE -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/1271500603.2503.23.ca...@jf-desktop
[HS] Mini-cluster pour calcul intensif
Bonjour, bon encore un HS. désolé. Je dois construire un mini-cluster pour faire du calcul intensif dans mon labo. En gros on souhaite avoir entre 16 et 64 cores avec un peu de RAM. Je voudrais installer linux dessus et vraisemblablement debian stable. J'ai une série de questions : - le nombre de cores n'est pas encore fixé. Je ne souhaite pas avoir les derniers modèles de processeurs sortis. Car ils sont très très chers. Mais je m'intéresse à la différence dual-core/quad-core/octo-core (j'ai lu pas mal de liens sur le net). Il y a 5 ou 6 ans, j'entendais dire par les maitres du calcul intensif qu'il valait mieux utiliser des dual-core que des quad-core. ça allait plus vite. Je suppose que les choses ont bien changé en 5 ans. Est ce que les quad-core ou octo-core sont maintenant conseillés pour le calcul intensif ? - d'un point de vue install debian : + apparemment je vais avoir des intel Xeon. C'est quoi comme architecture ces bêtes là ? + J'ai demandé de faire de disques pour faire du RAID software. mais je n'y connais rien en RAID. en gros quel type de RAID me conseiller vous, sachant que c'est du calcul intensif. ça doit aller vite et il y a bcp d'accès disque. Ensuite quels sont les mots clés (j'ai aucune formation d'info de base... :D ) ? + y a t il des debian special faite pour les cluster ? ou alors des distrib spécial cluster ? Merci d'avance, Guillaume -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/hq92ok$5d...@dough.gmane.org
Re: [HS] Mini-cluster pour calcul intensif
-BEGIN PGP SIGNED MESSAGE- Hash: SHA1 Salut, Boinc , cela ne t'intéresserait pas J'ai eu l'occasion de voir en local ... Mais techniquement c'est jouable ... Un serveur Boinc en local Ou directement monté tes machine en ESX et créer une VM géante avec tous les cores ... giggzounet a écrit : Bonjour, bon encore un HS. désolé. Je dois construire un mini-cluster pour faire du calcul intensif dans mon labo. En gros on souhaite avoir entre 16 et 64 cores avec un peu de RAM. Je voudrais installer linux dessus et vraisemblablement debian stable. J'ai une série de questions : - le nombre de cores n'est pas encore fixé. Je ne souhaite pas avoir les derniers modèles de processeurs sortis. Car ils sont très très chers. Mais je m'intéresse à la différence dual-core/quad-core/octo-core (j'ai lu pas mal de liens sur le net). Il y a 5 ou 6 ans, j'entendais dire par les maitres du calcul intensif qu'il valait mieux utiliser des dual-core que des quad-core. ça allait plus vite. Je suppose que les choses ont bien changé en 5 ans. Est ce que les quad-core ou octo-core sont maintenant conseillés pour le calcul intensif ? - d'un point de vue install debian : + apparemment je vais avoir des intel Xeon. C'est quoi comme architecture ces bêtes là ? + J'ai demandé de faire de disques pour faire du RAID software. mais je n'y connais rien en RAID. en gros quel type de RAID me conseiller vous, sachant que c'est du calcul intensif. ça doit aller vite et il y a bcp d'accès disque. Ensuite quels sont les mots clés (j'ai aucune formation d'info de base... :D ) ? + y a t il des debian special faite pour les cluster ? ou alors des distrib spécial cluster ? Merci d'avance, Guillaume -BEGIN PGP SIGNATURE- Version: GnuPG v1.4.9 (GNU/Linux) Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org iEYEARECAAYFAkvIH78ACgkQcvW/yJuiUQmWoACfeqSrng+poXOReVIr1q6+Cj97 Ha8An3SzDQ3AoGBwSHphQ7IACNO+aJlV =o5iq -END PGP SIGNATURE- =-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-= Filtered-With-Copfilter: Version 0.84beta4 (ProxSMTP 1.8) Copfilter-Virus-Scanned: ClamAV 0.94.2/10743/Wed Apr 14 15:57:54 2010 by Markus Madlener @ http://www.copfilter.org -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/4bc81fc0.9060...@informatiqueetentreprise.fr
Re: [HS] Mini-cluster pour calcul intensif
[post reçu en privé. je renvois sur la liste] salut, Bonjour, Le principe : effectuer 16, 32 ou 64 jobs en même temps à une vitesse moindre te donnera in fine un résulta plus intéressant que 1 seul job à vitesse plus élevée. 1. Ton application est-elle multi-threading ? Oui optimiser en maximisant le nombre de cores Non optimiser ailleurs :) je fais du calcul intensif (c'est mon métier) alors jusque là ça va :) pour rentrer un peu plus dans le détail. les codes sont tous parallélisés et donc plus j'ai de core mieux c'est... 2. Difference dual ou quad = vitesse du processeur Plus la vitesse est élevée, plus les calculs seront effectués rapidement. apparemment non. ce n'est pas que ça. il y avait une grosse différence d'architecture entre dual et quad, il y a 5 ans. cela entrainait une moins bonne communication entre les core d'un quad core. en gros la même appli lancée sur un quadcore et 2 dualcore, allait plus vite sur les 2 dual core...et je me demandais si cette tendance c'était inversée. 3.Si tu es un peu bricoleur, si nécessité de nombreux cores et si budget serré eBay allemagne J'y ai trouvé des carte-mères 4 CPU quad core à des pris hors concurrence. Tu y trouves également les cpu. Il faut seulement un peu plus de temps et la pratique de l'assemblage de PC. 4. J'ai vu sur Google plus d'infos sur les clusters sous FreeBSD que sous Debian. Pour tes recherches le keyword est BeoWulf http://fr.wikipedia.org/wiki/Cluster_Beowulf Quelques pistes: http://www.informatik.uni-koeln.de/fai/fai-guide-fr/ar01s07.html http://tldp.org/HOWTO/html_single/Beowulf-HOWTO/ http://www.mcsr.olemiss.edu/bookshelf/articles/how_to_build_a_cluster.html http://freebsd.bebik.net/wiki/index.php/Monter_un_cluster_avec_FreeBSD http://www-igm.univ-mlv.fr/~dr/XPOSE2001/vayssade/architecture% 20recommandee.htm http://sio.obspm.fr/fichiersHTML/calcul.html peut-être cecic : http://packages.debian.org/fr/etch-m68k/r-cran-cluster je vais mater les liens. merci! Bonne chance . ouais je crois que je vais en avoir besoin :) Bye GiGGz -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/hq9jq7$21...@dough.gmane.org
Re: [HS] Mini-cluster pour calcul intensif
Re, On Fri, Apr 16, 2010 at 09:14:27AM +0200, giggzounet wrote: - d'un point de vue install debian : + apparemment je vais avoir des intel Xeon. C'est quoi comme architecture ces bêtes là ? S'il est récent, probablement de l'EM64T, soit le pendant Intel de l'AMD64. Mais ça dépend quand même fort du Xeon :-) A+ -- JFS. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/20100416133641.ga14...@hermes.jfs.dt
Re: [HS] Mini-cluster pour calcul intensif
Bonjour, En gros on souhaite avoir entre 16 et 64 cores avec un peu de RAM. Si tu es sur un seul cluster, tu aurais déjà besoin d'avoir une carte-mère quadriCPU, pour obtenir 16 cores... (je me base sur le fait que tu ne veux pas des derniers CPUs sortis - autrement dit, y aura pas plus que des quadricoeurs). Niveau budget, ça te situe déjà assez haut... - le nombre de cores n'est pas encore fixé. Je ne souhaite pas avoir les derniers modèles de processeurs sortis. Car ils sont très très chers. Mais je m'intéresse à la différence dual-core/quad-core/octo-core (j'ai lu pas mal de liens sur le net). Il y a 5 ou 6 ans, j'entendais dire par les maitres du calcul intensif qu'il valait mieux utiliser des dual-core que des quad-core. ça allait plus vite. Je suppose que les choses ont bien changé en 5 ans. Est ce que les quad-core ou octo-core sont maintenant conseillés pour le calcul intensif ? Les nouveaux ne sont pas nécessairement les plus chers. On trouve des Xeon DP E5540 (quadcore, 2.53 Ghz, 8MB de cache L2) à 650€, alors que les Xeon DP E5630 (quadcore, 2.53 Ghz, 12MB de cache L2) se trouvent à 480€. Pourtant, les E5630 sont plus récents (et plus performants, grâce à leur cache plus important). Les tarifs indiqués viennent du comparateur geizhals.at/deutschland. En ce qui concerne les performances dual/quad-core, tu parles sans doute des quadricoeurs du type des Intel Core 2 Quad, qui étaient en fait constitués de deux bi-coeurs (Core 2 Duo), sur le même die, et qui utilisaient le bus FSB pour communiquer entre eux (ce qui constituait effectivement un goulot d'étranglement au niveau des performances, la vitesse du FSB étant bien inférieure à celle des bus internes des CPUs). Tous les quadricoeurs basés sur des architectures actuelles (les Athlon/Phenom II chez AMD, les Core i5/i7 chez Intel) sont nativement des quadricoeurs : ce goulot d'étranglement a donc disparu. - d'un point de vue install debian : + apparemment je vais avoir des intel Xeon. C'est quoi comme architecture ces bêtes là ? Xeon = gamme pro d'Intel, ce qui signifie un contrôle qualité plus strict, et, dans le cas des gammes récentes, quelques spécificités : le contrôleur mémoire est compatible ECC sur les Xeon, les gammes DP (Double Processing) intègrent un second lien QPI, les gammes MP (Multi Processing) en intègrent encore deux supplémentaires. Pour le reste, ils sont identiques aux Core i7 (en socket 1366). Donc l'architecture ne change pas par rapport à ces processeurs grand public : amd64 (qui n'est pas particulièrement liée aux processeurs AMD, simplement c'est AMD qui a inauguré ce type d'architecture avec ses Athlon 64). Intel appelle ça l'EM64T dans ses fiches techniques, et ça ne change rien (amd64, x86_64, EM64T, etc... sont en fait synonymes). Ne pas se laisser tenter en voyant l'Intel IA64 sous prétexte qu'il y a Intel dedans : c'est une architecture réservée aux gammes Itanium. Les architectures récentes à regarder pour ce que tu souhaites faire sont les Gulftown et les Gainestown. (Xeon DP série 5500 et 5600). Il existe également des hexacores (certains Xeon DP 5600). Vu ton but, je n'indique ici que des Xeon DP, conçus pour fonctionner dans un environnement bi-CPU. Je n'indique également que les gammes récentes. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/1271427926.2667.38.ca...@jf-desktop
Re: [HS] Mini-cluster pour calcul intensif
Le 16/04/2010 16:25, Jean-François Pirlet a écrit : Bonjour, En gros on souhaite avoir entre 16 et 64 cores avec un peu de RAM. Si tu es sur un seul cluster, tu aurais déjà besoin d'avoir une carte-mère quadriCPU, pour obtenir 16 cores... (je me base sur le fait que tu ne veux pas des derniers CPUs sortis - autrement dit, y aura pas plus que des quadricoeurs). Niveau budget, ça te situe déjà assez haut... la boite avec laquelle je suis en relation m'a proposé un chassis IBM x3850 M2. ça a l'air bien. pour le prix...ben c'est po moi qui paye :D et puis pour avoir de beaux résultats et de belles courbes, on ne compte pas :) - le nombre de cores n'est pas encore fixé. Je ne souhaite pas avoir les derniers modèles de processeurs sortis. Car ils sont très très chers. Mais je m'intéresse à la différence dual-core/quad-core/octo-core (j'ai lu pas mal de liens sur le net). Il y a 5 ou 6 ans, j'entendais dire par les maitres du calcul intensif qu'il valait mieux utiliser des dual-core que des quad-core. ça allait plus vite. Je suppose que les choses ont bien changé en 5 ans. Est ce que les quad-core ou octo-core sont maintenant conseillés pour le calcul intensif ? Les nouveaux ne sont pas nécessairement les plus chers. On trouve des Xeon DP E5540 (quadcore, 2.53 Ghz, 8MB de cache L2) à 650€, alors que les Xeon DP E5630 (quadcore, 2.53 Ghz, 12MB de cache L2) se trouvent à 480€. Pourtant, les E5630 sont plus récents (et plus performants, grâce à leur cache plus important). Les tarifs indiqués viennent du comparateur geizhals.at/deutschland. intéressant! j'ai aussi vu que certain ont l'hyper threading...et évidemment ça a l'air vachement intéressant. en gros je pourrais avoir avec 4 proc jusqu'à 32 threads (4*8*2) :) mais bon je ne sais pas si le chassis supporte ces processeurs. En ce qui concerne les performances dual/quad-core, tu parles sans doute des quadricoeurs du type des Intel Core 2 Quad, qui étaient en fait constitués de deux bi-coeurs (Core 2 Duo), sur le même die, et qui utilisaient le bus FSB pour communiquer entre eux (ce qui constituait effectivement un goulot d'étranglement au niveau des performances, la vitesse du FSB étant bien inférieure à celle des bus internes des CPUs). Tous les quadricoeurs basés sur des architectures actuelles (les Athlon/Phenom II chez AMD, les Core i5/i7 chez Intel) sont nativement des quadricoeurs : ce goulot d'étranglement a donc disparu. ah ok. donc plus de problème. et c'est pareil pour les proc avec plus de 4 coeurs ? je vois par exemple un octocore avec hyperthreading...ça donne envie, mais ne vaut il mieux pas avoir 2 chassis avec des quadcores... ? - d'un point de vue install debian : + apparemment je vais avoir des intel Xeon. C'est quoi comme architecture ces bêtes là ? Xeon = gamme pro d'Intel, ce qui signifie un contrôle qualité plus strict, et, dans le cas des gammes récentes, quelques spécificités : le contrôleur mémoire est compatible ECC sur les Xeon, les gammes DP (Double Processing) intègrent un second lien QPI, les gammes MP (Multi Processing) en intègrent encore deux supplémentaires. Pour le reste, ils sont identiques aux Core i7 (en socket 1366). ok. je vais regarder ça. Donc l'architecture ne change pas par rapport à ces processeurs grand public : amd64 (qui n'est pas particulièrement liée aux processeurs AMD, simplement c'est AMD qui a inauguré ce type d'architecture avec ses Athlon 64). Intel appelle ça l'EM64T dans ses fiches techniques, et ça ne change rien (amd64, x86_64, EM64T, etc... sont en fait synonymes). Ne pas se laisser tenter en voyant l'Intel IA64 sous prétexte qu'il y a Intel dedans : c'est une architecture réservée aux gammes Itanium. ok. Les architectures récentes à regarder pour ce que tu souhaites faire sont les Gulftown et les Gainestown. (Xeon DP série 5500 et 5600). Il existe également des hexacores (certains Xeon DP 5600). Vu ton but, je n'indique ici que des Xeon DP, conçus pour fonctionner dans un environnement bi-CPU. Je n'indique également que les gammes récentes. ben si tu as des configs type, ça m'intéresse!!! :) ...tu peux me contacter en privé (je ne suis pas sur que la pub pour certaines marques soit appréciées sur la liste...). En tout cas merci pour tes éclaircissements! Bon we Guillaume -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/hq9v6m$gm...@dough.gmane.org
Re: [HS] Mini-cluster pour calcul intensif
la boite avec laquelle je suis en relation m'a proposé un chassis IBM x3850 M2. ça a l'air bien. Ceci te limite, il me semble, aux Xeon 7400. Dommage, c'est l'ancienne architecture quadriprocesseur d'Intel, qui souffrait beaucoup de sa bande passante très limitée (même type de problème que les quads constitués de deux bi-coeurs qui communiquent via FSB, sauf qu'ici on a 2/4 CPUs de 4/6 cores chacun, soit 8 à 24 cores, qui communiquent entre eux et accèdent à la RAM via le FSB - c'est encore pire, quoi). C'est une plateforme sur laquelle on a observé des résultats parfois assez surprenants (par exemple, dans certains cas, elle se montrait moins performante qu'une plateforme bi-CPU bien moins chère parce que la bande passante disponible était tout simplement trop faible). Il parait d'ailleurs que ça ne s'est pas extrêmement bien vendu. (mais bon, il faut relativiser, le marché de ce genre de produits est de toute façon assez restreint). (évidemment, lorsqu'on ne doit pas faire énormément d'accès à la RAM, et lorsque les communications entre CPUs sont limitées, cette plateforme est très performante...) Note : les Xeon 7500 résolvent ce problème, normalement (4 liens QPI, un pour communiquer avec le chipset, et les trois autres pour communiquer avec les trois autres CPUs de la plateforme, ainsi qu'un contrôleur mémoire quad-channel intégré à chaque CPU). Mais ils ne sont pas compatibles avec le x3850 M2 (pas le même type de socket CPU). intéressant! j'ai aussi vu que certain ont l'hyper threading...et évidemment ça a l'air vachement intéressant. en gros je pourrais avoir avec 4 proc jusqu'à 32 threads (4*8*2) :) mais bon je ne sais pas si le chassis supporte ces processeurs. Non. ah ok. donc plus de problème. et c'est pareil pour les proc avec plus de 4 coeurs ? je vois par exemple un octocore avec hyperthreading...ça donne envie, mais ne vaut il mieux pas avoir 2 chassis avec des quadcores... ? Les Xeon 7500 j'imagine? Ils n'ont effectivement pas ce genre de problème. Tout dépend des usages. Si l'anglais ne te dérange pas, tu peux lire ceci : http://www.bit-tech.net/hardware/cpus/2010/04/07/intel-xeon-x7560-nehalem-ex-review/1 On le voit clairement, dans certains cas la plateforme en Xeon 7500 écrase sa concurrence, dans d'autres cas, en revanche, une plateforme biCPU en Xeon 5600, bien moins chère, s'avère également bien meilleure... ben si tu as des configs type, ça m'intéresse!!! :) ...tu peux me contacter en privé (je ne suis pas sur que la pub pour certaines marques soit appréciées sur la liste...). Je n'ai pas ça en stock pour ce genre de matériel, malheureusement. Je connais beaucoup mieux le monde du grand public que celui du matériel pro (qui m'intéresse également, d'où le fait que je connais 2-3 trucs là-dessus, mais pas pour la partie achat). ;) Bon WE également. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/1271442582.2292.92.ca...@jf-desktop
Re: [HS] Mini-cluster pour calcul intensif
Jean-François Pirlet a écrit : la boite avec laquelle je suis en relation m'a proposé un chassis IBM x3850 M2. ça a l'air bien. Ceci te limite, il me semble, aux Xeon 7400. Dommage, c'est l'ancienne architecture quadriprocesseur d'Intel, qui souffrait beaucoup de sa bande passante très limitée (même type de problème que les quads constitués de deux bi-coeurs qui communiquent via FSB, sauf qu'ici on a 2/4 CPUs de 4/6 cores chacun, soit 8 à 24 cores, qui communiquent entre eux et accèdent à la RAM via le FSB - c'est encore pire, quoi). C'est une plateforme sur laquelle on a observé des résultats parfois assez surprenants (par exemple, dans certains cas, elle se montrait moins performante qu'une plateforme bi-CPU bien moins chère parce que la bande passante disponible était tout simplement trop faible). Il parait d'ailleurs que ça ne s'est pas extrêmement bien vendu. (mais bon, il faut relativiser, le marché de ce genre de produits est de toute façon assez restreint). bon je vais voir s'il n'est pas possible d'obtenir d'autres offres. En regardant sur le site d'IBM il n'y pas vraiment d'autres choix que ce chassis là... (évidemment, lorsqu'on ne doit pas faire énormément d'accès à la RAM, et lorsque les communications entre CPUs sont limitées, cette plateforme est très performante...) bon c'est du calcul intensif parallèle. de la CFD (computational fluid dynamics) donc si, énorme consommation de RAM et énormes communications entre CPUs. Note : les Xeon 7500 résolvent ce problème, normalement (4 liens QPI, un pour communiquer avec le chipset, et les trois autres pour communiquer avec les trois autres CPUs de la plateforme, ainsi qu'un contrôleur mémoire quad-channel intégré à chaque CPU). Mais ils ne sont pas compatibles avec le x3850 M2 (pas le même type de socket CPU). donc ce que l'on m'avait dit sont encore valable pour les CPU de la série 7400...merde alors. as tu des liens de préférence en anglais pour que je puisse montrer ça à mon chef. intéressant! j'ai aussi vu que certain ont l'hyper threading...et évidemment ça a l'air vachement intéressant. en gros je pourrais avoir avec 4 proc jusqu'à 32 threads (4*8*2) :) mais bon je ne sais pas si le chassis supporte ces processeurs. Non. ah ok. donc plus de problème. et c'est pareil pour les proc avec plus de 4 coeurs ? je vois par exemple un octocore avec hyperthreading...ça donne envie, mais ne vaut il mieux pas avoir 2 chassis avec des quadcores... ? Les Xeon 7500 j'imagine? Ils n'ont effectivement pas ce genre de problème. vi. mais j'ai pas encore trouvé de rack avec 4 sockets les supportant. Tout dépend des usages. Si l'anglais ne te dérange pas, tu peux lire ceci : http://www.bit-tech.net/hardware/cpus/2010/04/07/intel-xeon-x7560-nehalem-ex-review/1 oki je vais regarder. On le voit clairement, dans certains cas la plateforme en Xeon 7500 écrase sa concurrence, dans d'autres cas, en revanche, une plateforme biCPU en Xeon 5600, bien moins chère, s'avère également bien meilleure... ben si tu as des configs type, ça m'intéresse!!! :) ...tu peux me contacter en privé (je ne suis pas sur que la pub pour certaines marques soit appréciées sur la liste...). Je n'ai pas ça en stock pour ce genre de matériel, malheureusement. Je connais beaucoup mieux le monde du grand public que celui du matériel pro (qui m'intéresse également, d'où le fait que je connais 2-3 trucs là-dessus, mais pas pour la partie achat). ;) ben moi c'est pareil. et là je suis un peu perdu :) et en plus ça ne fait pas partie de mes heures de travail...damned heuresement que j'aime les pc :) bye -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/fr/FrenchLists Pour vous DESABONNER, envoyez un message avec comme objet unsubscribe vers debian-user-french-requ...@lists.debian.org En cas de soucis, contactez EN ANGLAIS listmas...@lists.debian.org Archive: http://lists.debian.org/hqaf4q$gp...@dough.gmane.org
Re: cluster
Le jeudi 08 janvier 2009, philippe monroux a écrit : Bonjour, Bonjour. J'ai une tâche lourde à réaliser et dispose de 3 machines sous debian. Quelqu'un connaît-il une solution pas trop compliquée à mettre en œuvre pour faire un cluster et accélérer la réalisation de la tâche. Oui. Faire une série de batchs découpant la tâche et les répartir sur les différentes machines avant de centraliser à la main les résultats peut être une solution de parallèlisme pas trés lourde à mettre en place, et qui ne prend pas forcément plus de temps à faire que la mise en place d'une solution qui fait le même boulot automatiquement. Bien sûr je peux chercher mais si quelqu'un a une expérience sur le rapport complexité/efficacité cela me ferait gagner du temps merci par avance. -- Philippe Monroux E 55.3 S 21.5 http://zygomaths.pagespro-orange.fr/index.html AMA, ça dépend surtout de quel type de tâche tu veux répartir: il y a des solutions généralistes de clustering, mais il y a aussi des solutions spécifiques de redondance, de tolérance aux pannes et plusieurs solutions de répartition plus ou moins spécifiques, sans en passer forcément par un pur cluster (qui ne devient nécessaire d'aprés moi que quand on a besoin d'un bus de données mutualisé rapide entre les calculateurs). Tu devrais plutot dire si c'est une tâche de calcul, si ça risque d'être gourmand en lecture/écriture de données, si le pipeline de traitement est de type en série ou si c'est du parallèle, etc... Tous genre de détails permettant de t'aiguiller vers une solution adaptée. Un autre détail intéressant est de savoir si c'est pour une opération one shot, ou si ça va se répèter. ++, MATT -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to debian-user-french-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Re: cluster
Bonjour, J ai réalisé derniérement une installation de Sun Grid Engine sur des machines lenny. L installation à partir des sources s effectue rapidemment : on trouve plein de docs sur le site de sun. A partir des paquets debian , c est rapide mais finalement , on comprend moins bien comment cela marche ! C' est idéal pour répartir des travaux sous forme de batch . Ensuite j ai installé ganglia pour avoir des logs graphiques du cluster . Cordialement, philippe monroux a écrit : Bonjour, J'ai une tâche lourde à réaliser et dispose de 3 machines sous debian. Quelqu'un connaît-il une solution pas trop compliquée à mettre en œuvre pour faire un cluster et accélérer la réalisation de la tâche. Bien sûr je peux chercher mais si quelqu'un a une expérience sur le rapport complexité/efficacité cela me ferait gagner du temps merci par avance. -- == Pour tout service d'ASSISTANCE, y compris de sécurité, UTILISEZ: http://ent.univ-brest.fr onglet Assistance utilisateur --- Christian Dare CRI/Departement Electroniquetel CRI :02-98-01-82-39 6 Avenue le Gorgeu tel STAPS :02-98-01-82-60 C.S. 93837 fax CRI :02-98-01-70-30 29238 Brest Cedex 3 --- -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to debian-user-french-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Re: cluster
Bonjour Philippe, je pense que la question initiale avant de savoir quel outil utiliser et de savoir qu'elle est cette tâche et à quel point elle est parallelisable ? Typiquement s'il y a de la base de données, tu risques aller au devant de gros soucis de locks en parallelisant ou idem avec des manipulations de fichiersSi c'est du calcul lourd, cela peut surement mieux se passer en effet,algo genre Monaco ou autre Dans le cas de manipulation physique de données (fichiers/bases) des schedulers peuvent se charger de la répartition sur diverses machines,mais je ne sais pas s'il existe des equivalents Open Source à des ETL type Genio. en espérant avoir pu t'aider Jerome Le 8 janvier 2009 04:53, philippe monroux phi-fm...@orange.fr a écrit : Bonjour, J'ai une tâche lourde à réaliser et dispose de 3 machines sous debian. Quelqu'un connaît-il une solution pas trop compliquée à mettre en œuvre pour faire un cluster et accélérer la réalisation de la tâche. Bien sûr je peux chercher mais si quelqu'un a une expérience sur le rapport complexité/efficacité cela me ferait gagner du temps merci par avance. -- Philippe Monroux E 55.3 S 21.5 http://zygomaths.pagespro-orange.fr/index.html -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to debian-user-french-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org -- Jerome Moliere - Mentor/J http://romjethoughts.blogspot.com/ auteur Eyrolles
Re: cluster
De (from) (von) jerome.moli...@gmail.com : Bonjour Philippe, je pense que la question initiale avant de savoir quel outil utiliser et de savoir qu'elle est cette tâche et à quel point elle est parallelisable ? Typiquement s'il y a de la base de données, tu risques aller au devant de gros soucis de locks en parallelisant ou idem avec des manipulations de fichiersSi c'est du calcul lourd, cela peut surement mieux se passer en effet,algo genre Monaco ou autre Dans le cas de manipulation physique de données (fichiers/bases) des schedulers peuvent se charger de la répartition sur diverses machines,mais je ne sais pas s'il existe des equivalents Open Source à des ETL type Genio. en espérant avoir pu t'aider Jerome En fait je viens de recevoir en cadeau une caméra numérique HD et mon but est la conversion pour en faire profiter la famille. Bon l'idée des batchs me parait pas mal. Mais si j'ai pas mal de petit bouts de films ça risque d'être pénible de découper. Je peux faire un script remarquez. Maintenant je vais examiner les différentes soluces proposées sachant qu'il y a pas mal de calculs. Merci. -- Philippe Monroux E 55.3 S 21.5 http://zygomaths.pagespro-orange.fr/index.html -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to debian-user-french-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Re: cluster
Le 8 janvier 2009 12:13, philippe monroux phi-fm...@orange.fr a écrit : De (from) (von) jerome.moli...@gmail.com : Bonjour Philippe, je pense que la question initiale avant de savoir quel outil utiliser et de savoir qu'elle est cette tâche et à quel point elle est parallelisable ? Typiquement s'il y a de la base de données, tu risques aller au devant de gros soucis de locks en parallelisant ou idem avec des manipulations de fichiersSi c'est du calcul lourd, cela peut surement mieux se passer en effet,algo genre Monaco ou autre Dans le cas de manipulation physique de données (fichiers/bases) des schedulers peuvent se charger de la répartition sur diverses machines,mais je ne sais pas s'il existe des equivalents Open Source à des ETL type Genio. en espérant avoir pu t'aider Jerome En fait je viens de recevoir en cadeau une caméra numérique HD et mon but est la conversion pour en faire profiter la famille. Bon l'idée des batchs me parait pas mal. Mais si j'ai pas mal de petit bouts de films ça risque d'être pénible de découper. Je peux faire un script remarquez. Maintenant je vais examiner les différentes soluces proposées sachant qu'il y a pas mal de calculs. a noter que j'avais oublie l'espace d'un instant (honte à moi) l'excellent ETL Open Source (en java) Talend... -- Jerome Moliere - Mentor/J http://romjethoughts.blogspot.com/ auteur Eyrolles
Re: cluster
philippe monroux wrote: Bonjour, J'ai une tâche lourde à réaliser et dispose de 3 machines sous debian. Quelqu'un connaît-il une solution pas trop compliquée à mettre en 1/2uvre pour faire un cluster et accélérer la réalisation de la tâche. Bien sûr je peux chercher mais si quelqu'un a une expérience sur le rapport complexité/efficacité cela me ferait gagner du temps merci par avance. Déjà si les CPU sont multicoeurs, en parallélisant les tâches sur la même machine tu obtiendras un bonne amélioration (pas de goulot d'étranglement par le LAN). Bonne soirée, GL -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to debian-user-french-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
cluster
Bonjour, J'ai une tâche lourde à réaliser et dispose de 3 machines sous debian. Quelqu'un connaît-il une solution pas trop compliquée à mettre en œuvre pour faire un cluster et accélérer la réalisation de la tâche. Bien sûr je peux chercher mais si quelqu'un a une expérience sur le rapport complexité/efficacité cela me ferait gagner du temps merci par avance. -- Philippe Monroux E 55.3 S 21.5 http://zygomaths.pagespro-orange.fr/index.html -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to debian-user-french-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Re: Cluster Debian pour un nul
Mathieu Coin wrote: Bonjour, Je souhaiterais avoir quelques renseignements à propos de l'utilisation de Debian pour monter un cluster. j'ai trouvé plusieurs site traitant de ce sujet mais je n'arrive pas à savoir quels services sont respectivement nécessaire au niveau head node et aux workers. Connaissez-vous des tutoriels ou pouvez-vous me renseigner ? Cordialement, Mathieu Coin. Un peu plus d'infos peut-être ... Cluster de calcul ou cluster de répartition de charge ? Quelle application ou service doit-on répartir ? Architecture réseau ou CPU disponible ? Bye Guillaume -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Cluster Debian pour un nul
Bonjour, Je souhaiterais avoir quelques renseignements à propos de l'utilisation de Debian pour monter un cluster. j'ai trouvé plusieurs site traitant de ce sujet mais je n'arrive pas à savoir quels services sont respectivement nécessaire au niveau head node et aux workers. Connaissez-vous des tutoriels ou pouvez-vous me renseigner ? Cordialement, Mathieu Coin. -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.org/DebFrFrenchLists Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Cluster Debian pour un nul
On Mon, Sep 29, 2008 at 08:52:11PM +0200, Mathieu Coin wrote: Bonjour, Je souhaiterais avoir quelques renseignements à propos de l'utilisation de Debian pour monter un cluster. j'ai trouvé plusieurs site traitant de ce sujet mais je n'arrive pas à savoir quels services sont respectivement nécessaire au niveau head node et aux workers. Connaissez-vous des tutoriels ou pouvez-vous me renseigner ? Déjà, il faudrait nous donner plus d'informations. Il y a plusieurs formes de cluster : - Haute disponibilité (heartbeat http://www.linux-ha.org/ ou RedHat Cluster Suite, même sous Windows) - Répartition de charge (LVS, divers reverse proxies) - Cluster de calcul distribué (Beowolf, si ça existe encore... Globus) signature.asc Description: Digital signature
Cluster debian
Bonjour, Je suis en passe d'acheter 2 petits serveurs en rack (NEC Express5800/120Rg-1 SAS) [marché informatique = pas trop le choix] que je souhaite clusteriser et connecter (les 2 serveurs) à une petite baie de disque (pas encore choisie) J'ai vu des offres de cluster de ce type avec Redhat EL 5. Est-il possible de faire un cluster maison avec Debian ? Faut-il obligatoire de fibre channel pour relier la baie de disque ? Que me faut-il prévoir ? Erreurs à éviter ... Merci. -- Guy Roussin
Re: Cluster debian
Guy Roussin wrote: Est-il possible de faire un cluster maison avec Debian ? Faut-il obligatoire de fibre channel pour relier la baie de disque ? Que me faut-il prévoir ? Erreurs à éviter ... Lis le thread Projet de cluster avec Etch d'avant-hier sur ce sujet. -- Daniel -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Cluster debian
Merci Daniel, ce thread m'avait echappé ... Guy Daniel Caillibaud a écrit : Guy Roussin wrote: Est-il possible de faire un cluster maison avec Debian ? Faut-il obligatoire de fibre channel pour relier la baie de disque ? Que me faut-il prévoir ? Erreurs à éviter ... Lis le thread Projet de cluster avec Etch d'avant-hier sur ce sujet.
Re: Projet de cluster avec Etch
oui mais quand tu installes HeartBeat tu a aussi ldirector qui gere le LVS pour toi. De plus LVS est un load balancer UDP et TCP et non pas TCP. On 5/22/07, Gilles Mocellin [EMAIL PROTECTED] wrote: Le Monday 21 May 2007 20:12:14 Jeremy Garrouste, vous avez écrit: perso je te conseille ipvs et heartbeat tout simplement. Ipvs configuré avec ipvsadm tu a de la doc sur http://www.linuxvirtualserver.org/Documents.htmlet heartbeat de linuxHA. Tu peux même tout faire avec LinuxHA, c'est exactement pareil au final. Oula, c'est pas pareil ! heartbeat (Linux HA) gère la Haute disponibilité : la bascule d'adresses IP virtuelles d'une machine à l'autre et des ressources (stockage, applications). Linux Virtual Server est un load balancer TCP. Il peut être rendu hautement disponible avec heartbeat. Donc, ce que moi je conseillerais : 1) utiliser LVS, sécurisé avec heartbeat pour répartir les requêtes sur les deux serveurs de toutes les applications qui n'ont pas besoin de partager de l'information entre plusieurs sessions. En gros, c'est vrai pour - DNS Un primaire et un sceondaire sur l'autre noeud. - Web/PHP avec session affinity dans LVS. Attention, du coup, pour un client, un seul serveur est utilisé, c'est seulement avec plusieurs clients que la répartition se fera réellement. Si l'application ne gère pas de session, on peut se passer d'affinité de session, mais avec du PHP/MySQL, ça m'étonnerait qu'il n'y ait pas de sessions ! 2) utiliser heartbeat pour basculer les autres applis d'un noeud à l'autre en cas de problème - DHCP Prévoire une copie régulière des leases entre les noeud, ou activer le failover (rarement utilisé) - MySQL Utiliser une méthode pour avoir le contenu de la base disponible sur l'autre noeud, stockage sur SAN, baie partagée, ou synchro DRBD, ou bases de données en maitre/esclave. J'ai déjà monter des cluster sans load balancing, avec heartbeat et RedHat Cluster Suite (plus complexe), pas de soucis. J'ai testé une seule fois l'aspect load balancing avec un serveur apache+Tomcat, mais sans gestion de session. Je vais bientôt devoir mettre en place un cluster de proxies sur cette base ( LVS), donc j'y crois ! -- Jeremy GARROUSTE
Projet de cluster avec Etch
Bonjour à tous, Je projette de mettre en place un mini cluster avec 2 machines tournant sous Etch. Pentium 4 (1.5Mhz et 1.6Mhz), 1Go Ram chacune et environ 250Go chacune de capacité disque. L'objectif recherché est tout d'abord la disponibilité (si une machine est indisponible, le système doit continuer de fonctionner de façon transparente pour l'utilisateur final); et si possible une meilleure performance des applications (répartition de charge). Les principales fonctions de ces machines seront les suivantes : Serveur DNS, DHCP, Web, PHP, Mysql. Le nombre de clients oscille entre 3 et 8. Quant aux connexions Web, elles seront ponctuelles et ne devraient pas dépasser 10 users. Mes recherches sur ce thème me conduisent vers des solutions diverses et variées: Mosix, Beowulf, LVS, PVFS, etc. J'aimerais avoir vos retours sur le sujet, et vos conseils sur ce genre de mise en place (les pièges à éviter, les galères à anticiper, les mises à jour des systèmes, etc.) Merci beaucoup d'avance, Pierre -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Projet de cluster avec Etch
Pierre a écrit : Bonjour à tous, salut Je projette de mettre en place un mini cluster avec 2 machines tournant sous Etch. Pentium 4 (1.5Mhz et 1.6Mhz), 1Go Ram chacune et environ 250Go chacune de capacité disque. L'objectif recherché est tout d'abord la disponibilité (si une machine est indisponible, le système doit continuer de fonctionner de façon transparente pour l'utilisateur final); et si possible une meilleure performance des applications (répartition de charge). commence par là: http://www.linux-ha.org/ Les principales fonctions de ces machines seront les suivantes : Serveur DNS, DHCP, Web, PHP, Mysql. Le nombre de clients oscille entre 3 et 8. Quant aux connexions Web, elles seront ponctuelles et ne devraient pas dépasser 10 users. Mes recherches sur ce thème me conduisent vers des solutions diverses et variées: Mosix, Beowulf, LVS, PVFS, etc. OpenMosix a l'avantage d'être un patch kernel et de migrer automatiquement les process; maintenant, ça fait double emploi avec le HA (à moins que tu ne veuilles mettre en place une grosse ferme de serveurs :) J'aimerais avoir vos retours sur le sujet, et vos conseils sur ce genre de mise en place (les pièges à éviter, les galères à anticiper, les mises à jour des systèmes, etc.) rien de particulier si tu lis bien les docs -- There comes a time in the affairs of a man when he has to take the bull by the tail and face the situation. -- W. C. Fields
Re: Projet de cluster avec Etch
perso je te conseille ipvs et heartbeat tout simplement. Ipvs configuré avec ipvsadm tu a de la doc sur http://www.linuxvirtualserver.org/Documents.htmlet heartbeat de linuxHA. Tu peux même tout faire avec LinuxHA, c'est exactement pareil au final. On 5/21/07, Pierre [EMAIL PROTECTED] wrote: Bonjour à tous, Je projette de mettre en place un mini cluster avec 2 machines tournant sous Etch. Pentium 4 (1.5Mhz et 1.6Mhz), 1Go Ram chacune et environ 250Go chacune de capacité disque. L'objectif recherché est tout d'abord la disponibilité (si une machine est indisponible, le système doit continuer de fonctionner de façon transparente pour l'utilisateur final); et si possible une meilleure performance des applications (répartition de charge). Les principales fonctions de ces machines seront les suivantes : Serveur DNS, DHCP, Web, PHP, Mysql. Le nombre de clients oscille entre 3 et 8. Quant aux connexions Web, elles seront ponctuelles et ne devraient pas dépasser 10 users. Mes recherches sur ce thème me conduisent vers des solutions diverses et variées: Mosix, Beowulf, LVS, PVFS, etc. J'aimerais avoir vos retours sur le sujet, et vos conseils sur ce genre de mise en place (les pièges à éviter, les galères à anticiper, les mises à jour des systèmes, etc.) Merci beaucoup d'avance, Pierre -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED] -- Jeremy GARROUSTE
Re: Projet de cluster avec Etch
Voici un excellent tuto en francais : http://doc.ubuntu-fr.org/heartbeat On 5/21/07, Jeremy Garrouste [EMAIL PROTECTED] wrote: perso je te conseille ipvs et heartbeat tout simplement. Ipvs configuré avec ipvsadm tu a de la doc sur http://www.linuxvirtualserver.org/Documents.html et heartbeat de linuxHA. Tu peux même tout faire avec LinuxHA, c'est exactement pareil au final. On 5/21/07, Pierre [EMAIL PROTECTED] wrote: Bonjour à tous, Je projette de mettre en place un mini cluster avec 2 machines tournant sous Etch. Pentium 4 (1.5Mhz et 1.6Mhz), 1Go Ram chacune et environ 250Go chacune de capacité disque. L'objectif recherché est tout d'abord la disponibilité (si une machine est indisponible, le système doit continuer de fonctionner de façon transparente pour l'utilisateur final); et si possible une meilleure performance des applications (répartition de charge). Les principales fonctions de ces machines seront les suivantes : Serveur DNS, DHCP, Web, PHP, Mysql. Le nombre de clients oscille entre 3 et 8. Quant aux connexions Web, elles seront ponctuelles et ne devraient pas dépasser 10 users. Mes recherches sur ce thème me conduisent vers des solutions diverses et variées: Mosix, Beowulf, LVS, PVFS, etc. J'aimerais avoir vos retours sur le sujet, et vos conseils sur ce genre de mise en place (les pièges à éviter, les galères à anticiper, les mises à jour des systèmes, etc.) Merci beaucoup d'avance, Pierre -- Lisez la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Vous pouvez aussi ajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED] -- Jeremy GARROUSTE -- Jeremy GARROUSTE
Re: Projet de cluster avec Etch
Le Monday 21 May 2007 20:12:14 Jeremy Garrouste, vous avez écrit : perso je te conseille ipvs et heartbeat tout simplement. Ipvs configuré avec ipvsadm tu a de la doc sur http://www.linuxvirtualserver.org/Documents.htmlet heartbeat de linuxHA. Tu peux même tout faire avec LinuxHA, c'est exactement pareil au final. Oula, c'est pas pareil ! heartbeat (Linux HA) gère la Haute disponibilité : la bascule d'adresses IP virtuelles d'une machine à l'autre et des ressources (stockage, applications). Linux Virtual Server est un load balancer TCP. Il peut être rendu hautement disponible avec heartbeat. Donc, ce que moi je conseillerais : 1) utiliser LVS, sécurisé avec heartbeat pour répartir les requêtes sur les deux serveurs de toutes les applications qui n'ont pas besoin de partager de l'information entre plusieurs sessions. En gros, c'est vrai pour - DNS Un primaire et un sceondaire sur l'autre noeud. - Web/PHP avec session affinity dans LVS. Attention, du coup, pour un client, un seul serveur est utilisé, c'est seulement avec plusieurs clients que la répartition se fera réellement. Si l'application ne gère pas de session, on peut se passer d'affinité de session, mais avec du PHP/MySQL, ça m'étonnerait qu'il n'y ait pas de sessions ! 2) utiliser heartbeat pour basculer les autres applis d'un noeud à l'autre en cas de problème - DHCP Prévoire une copie régulière des leases entre les noeud, ou activer le failover (rarement utilisé) - MySQL Utiliser une méthode pour avoir le contenu de la base disponible sur l'autre noeud, stockage sur SAN, baie partagée, ou synchro DRBD, ou bases de données en maitre/esclave. J'ai déjà monter des cluster sans load balancing, avec heartbeat et RedHat Cluster Suite (plus complexe), pas de soucis. J'ai testé une seule fois l'aspect load balancing avec un serveur apache+Tomcat, mais sans gestion de session. Je vais bientôt devoir mettre en place un cluster de proxies sur cette base ( LVS), donc j'y crois ! pgp0zw5tFlDHi.pgp Description: PGP signature
[etch] RedHat Cluster Suite ou heartbeat ?
Je suis en train de monter un cluster, afin de migrer un vieillissant cluster Mandrake 9.2 géré par heartbeat. Comme ça me fatigue, je vais me défouler un peu ! J'ai déjà eu des problèmes avec heartbeat, split brain, et corruption de données (et oui, l'I/O fencing, c'est pas facile à mettre en place sans matériel adapté comme des interrupteurs pilotables). C'est pourquoi je voudrais tester redhat cluster suite, qui est disponible dans etch. Enfin, je croyais. Bon, tout est quasiment là, sauf rgmanager, system-config-cluster. - rgmanager sert à la gestion des ressources du cluster, sans lui, notre cluster ne sert pas à grand chose. Il peut être obtenu en régénérant les paquets avec un ajout dans le fichier debian/control qui liste les paquets. Et oui, il manquait. - system-config-cluster, on peut s'en passer en créant à la main le fichier XML de configuration, en s'inspirant d'exemples et de docs à droite à gauche. A noter qu'il est disponible sous µUbuntu, mais pas instalable directement à cause de noms de paquets différents. D'autres problèmes encore : - il faut charger des modules (cman et dlm), je les ai ajouter à /etc/modules - Il manque des scripts de démarrage, pour clvmd et clurmgrd - le script de démarrage de fence ne fait rien, il faut faire un fence_tool join. Bref. Je n'en suis que là. Si quelqu'un a déjà fait l'expérience de redhat cluster suite, et aussi de heartbeat 2 en parallèle, je serait ravi de lire ses conseils. Dois-je abandonné et revenir à heartbeat, en supposant que heartbeat 2 est aussi robuste et permet de gérer aussi facilement du fencing (switchs brocades, cartes HP iLO...) ? pgpvWuIYWihEp.pgp Description: PGP signature
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Mike a écrit : Heu je ne pensais pas du tout avoir un /etc vide. /etc est laissé telle qu'elle sauf pour le service en question. Par exemple pour samba, je copie /etc/samba sur la partition DRBD et je fais un lien. Vu que c'est heartbeat qui controle le lancement du service, par de pb au boot. J'ai déjà monter un projet avec un PDC-BDC mais il fallait une meilleure HA des données de la société. De plus, la réplication LDAP est une bonne chose mais elle ne se fait que di maitre vers l'esclave. Si l'esclave prend le relais, aucune modif ne peut etre autorisé vu qu'elle ne sera pas automatiquement répercutée sur le maitre lors de son retour sur le réseau. Pour ce qui est de BIND, c'est que là aussi le tout est géré correctement sauf pour les mises à jour de DHCP auto. Dans le cas du projet, tous les services utilisent Heartbeat et DRBD (et bientot MON). Mais je voulais si je pouvais avoir des problèmes en travaillant avec des liens symboliques. Aucun problème avec les liens symboliques. En fait tu as plusieurs choix : - Laisser les fichiers dans /etc, et à chaque fois que tu faits une modif sur le maitre, tu penses à la scp sur l'esclave. - Faire des liens symboliques vers la partition drbd - Modifier tes scripts d'init pour que les logiciels cherchent directement leur config sur la partition drbd (à grand coup de -f par exemple) Y'a des avantages et des inconvénients à chaque fois, prends ce qui te parait le plus naturel. Cordialement, -- Nicolas Schmitz Centre de Ressources Informatiques Ecole Centrale de Nantes -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Heu je ne pensais pas du tout avoir un /etc vide. /etc est laissé telle qu'elle sauf pour le service en question. Par exemple pour samba, je copie /etc/samba sur la partition DRBD et je fais un lien. Vu que c'est heartbeat qui controle le lancement du service, par de pb au boot. J'ai déjà monter un projet avec un PDC-BDC mais il fallait une meilleure HA des données de la société. De plus, la réplication LDAP est une bonne chose mais elle ne se fait que di maitre vers l'esclave. Si l'esclave prend le relais, aucune modif ne peut etre autorisé vu qu'elle ne sera pas automatiquement répercutée sur le maitre lors de son retour sur le réseau. Pour ce qui est de BIND, c'est que là aussi le tout est géré correctement sauf pour les mises à jour de DHCP auto. Dans le cas du projet, tous les services utilisent Heartbeat et DRBD (et bientot MON). Mais je voulais si je pouvais avoir des problèmes en travaillant avec des liens symboliques. pourquoi ne pas faire des mount avec l'option bind? ci joint la sortie de mount sur une de mes machines sous drbd+ha mount /dev/md0 on / type ext3 (rw,errors=remount-ro) /dev/drbd0 on /data type ext3 (rw) /data/var/lib/postgresql on /var/lib/postgresql type none (rw,bind) /data/var/lib/mysql on /var/lib/mysql type none (rw,bind) /data/var/www/virtual on /var/www/virtual type none (rw,bind) /data/var/spool/mail/virtual on /var/spool/mail/virtual type none (rw,bind) La conf peut alors être stockée sur ta partition drbd de la même maniere. Bin soit je suis pas réveillé, soit cette config ne règle pas le problème des fichiers de configs. Il faut encore faire des liens de /etc/xxx/ vers les partitions drbd, pour qu'elles sachent que leurs fichiers de config sont sur les partoches drbd. -- Nicolas Schmitz Centre de Ressources Informatiques Ecole Centrale de Nantes -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Nicolas Schmitz wrote: Mike a écrit : Heu je ne pensais pas du tout avoir un /etc vide. /etc est laissé telle qu'elle sauf pour le service en question. Par exemple pour samba, je copie /etc/samba sur la partition DRBD et je fais un lien. Vu que c'est heartbeat qui controle le lancement du service, par de pb au boot. J'ai déjà monter un projet avec un PDC-BDC mais il fallait une meilleure HA des données de la société. De plus, la réplication LDAP est une bonne chose mais elle ne se fait que di maitre vers l'esclave. Si l'esclave prend le relais, aucune modif ne peut etre autorisé vu qu'elle ne sera pas automatiquement répercutée sur le maitre lors de son retour sur le réseau. Pour ce qui est de BIND, c'est que là aussi le tout est géré correctement sauf pour les mises à jour de DHCP auto. Dans le cas du projet, tous les services utilisent Heartbeat et DRBD (et bientot MON). Mais je voulais si je pouvais avoir des problèmes en travaillant avec des liens symboliques. pourquoi ne pas faire des mount avec l'option bind? ci joint la sortie de mount sur une de mes machines sous drbd+ha mount /dev/md0 on / type ext3 (rw,errors=remount-ro) /dev/drbd0 on /data type ext3 (rw) /data/var/lib/postgresql on /var/lib/postgresql type none (rw,bind) /data/var/lib/mysql on /var/lib/mysql type none (rw,bind) /data/var/www/virtual on /var/www/virtual type none (rw,bind) /data/var/spool/mail/virtual on /var/spool/mail/virtual type none (rw,bind) La conf peut alors être stockée sur ta partition drbd de la même maniere. -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Nicolas Schmitz wrote: Heu je ne pensais pas du tout avoir un /etc vide. /etc est laissé telle qu'elle sauf pour le service en question. Par exemple pour samba, je copie /etc/samba sur la partition DRBD et je fais un lien. Vu que c'est heartbeat qui controle le lancement du service, par de pb au boot. J'ai déjà monter un projet avec un PDC-BDC mais il fallait une meilleure HA des données de la société. De plus, la réplication LDAP est une bonne chose mais elle ne se fait que di maitre vers l'esclave. Si l'esclave prend le relais, aucune modif ne peut etre autorisé vu qu'elle ne sera pas automatiquement répercutée sur le maitre lors de son retour sur le réseau. Pour ce qui est de BIND, c'est que là aussi le tout est géré correctement sauf pour les mises à jour de DHCP auto. Dans le cas du projet, tous les services utilisent Heartbeat et DRBD (et bientot MON). Mais je voulais si je pouvais avoir des problèmes en travaillant avec des liens symboliques. pourquoi ne pas faire des mount avec l'option bind? ci joint la sortie de mount sur une de mes machines sous drbd+ha mount /dev/md0 on / type ext3 (rw,errors=remount-ro) /dev/drbd0 on /data type ext3 (rw) /data/var/lib/postgresql on /var/lib/postgresql type none (rw,bind) /data/var/lib/mysql on /var/lib/mysql type none (rw,bind) /data/var/www/virtual on /var/www/virtual type none (rw,bind) /data/var/spool/mail/virtual on /var/spool/mail/virtual type none (rw,bind) La conf peut alors être stockée sur ta partition drbd de la même maniere. Bin soit je suis pas réveillé, soit cette config ne règle pas le problème des fichiers de configs. Il faut encore faire des liens de /etc/xxx/ vers les partitions drbd, pour qu'elles sachent que leurs fichiers de config sont sur les partoches drbd. c'était un exemple tu peux monter /data/etc/xxx/ sur /etc/xxx ... ? -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
pourquoi ne pas faire des mount avec l'option bind? ci joint la sortie de mount sur une de mes machines sous drbd+ha mount /dev/md0 on / type ext3 (rw,errors=remount-ro) /dev/drbd0 on /data type ext3 (rw) /data/var/lib/postgresql on /var/lib/postgresql type none (rw,bind) /data/var/lib/mysql on /var/lib/mysql type none (rw,bind) /data/var/www/virtual on /var/www/virtual type none (rw,bind) /data/var/spool/mail/virtual on /var/spool/mail/virtual type none (rw,bind) La conf peut alors être stockée sur ta partition drbd de la même maniere. Bin soit je suis pas réveillé, soit cette config ne règle pas le problème des fichiers de configs. Il faut encore faire des liens de /etc/xxx/ vers les partitions drbd, pour qu'elles sachent que leurs fichiers de config sont sur les partoches drbd. c'était un exemple tu peux monter /data/etc/xxx/ sur /etc/xxx ... ? c'est vrai :-) et voilà donc une quatrième solution, assez élégante il est vrai :-) -- Nicolas Schmitz Centre de Ressources Informatiques Ecole Centrale de Nantes -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
En tout cas, merci pour vos réponses! Mon tuto sera bientot pret ; je tacherai de le faire profiter le plus rapidement possible ... meme si je ne suis pas convaincu que tout le monde soit vraiment interessé par un tel projet.. ;-) Bonne journée à tous, Mike - Original Message - From: Nicolas Schmitz [EMAIL PROTECTED] To: debian-user-french@lists.debian.org Sent: lundi, 27. mars 2006 10:57:56 Subject: Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD pourquoi ne pas faire des mount avec l'option bind? ci joint la sortie de mount sur une de mes machines sous drbd+ha mount /dev/md0 on / type ext3 (rw,errors=remount-ro) /dev/drbd0 on /data type ext3 (rw) /data/var/lib/postgresql on /var/lib/postgresql type none (rw,bind) /data/var/lib/mysql on /var/lib/mysql type none (rw,bind) /data/var/www/virtual on /var/www/virtual type none (rw,bind) /data/var/spool/mail/virtual on /var/spool/mail/virtual type none (rw,bind) La conf peut alors être stockée sur ta partition drbd de la même maniere. Bin soit je suis pas réveillé, soit cette config ne règle pas le problème des fichiers de configs. Il faut encore faire des liens de /etc/xxx/ vers les partitions drbd, pour qu'elles sachent que leurs fichiers de config sont sur les partoches drbd. c'était un exemple tu peux monter /data/etc/xxx/ sur /etc/xxx ... ? c'est vrai :-) et voilà donc une quatrième solution, assez élégante il est vrai :-) -- Nicolas Schmitz Centre de Ressources Informatiques Ecole Centrale de Nantes -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Le Lundi 27 Mars 2006 10:57, Nicolas Schmitz a écrit : [...] c'est vrai :-) et voilà donc une quatrième solution, assez élégante il est vrai :-) Moi, pour ce genre de config, je préfère avoir du /etc/truc différents (par sur la partie commune). Je les synchronise en crontab avec du rsync et un fichier de config listant ce qui doit être synchronisé. Ce qu'on a fait aussi au boulot, est notamment avec du HP-UX et ServiceGuard, c'est de tout isoler dans un répertoire : - dans un /packtruc on a tout ce qui démarre sur packtruc (packtruc ayant une adresse IP et pouvant être vu comme un serveur). - les applis démarrant dans packtruc ont leur config dans /packtruc/appli1/etc, leurs logs dans /packtruc/appli1/logs, seuls les binaires sont partagés entre les pack* dans /usr/bin ou autre. Cette dernière solution est plus propre je trouve. On se raproche de chroot ou vservers, dans lesquels ont pourrait carrément installer les logiciels que l'on veut indépendament des autres (chroot ou vservers). Si on continu comme ça, après il y a les machines virtuelles avec Xen ou VMware gérées par heartbeat et contenant carrément un OS... pgpsAtBh3wLsE.pgp Description: PGP signature
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Mike wrote: Bonjour à tous, Je voulais avoir un petit conseil concernant la mise en place d'un cluster Heartbeat et DRBD: Deux machines vont faire gérer les services suivants: - DNS avec maj par DHCP. - SAMBA+CUPS - LDAP Pour ce qui est de la configuration de chaque service, je pensais copier le répertoire /etc du service en question sur la partiton miroir DRBD et de faire un lien via ln. Et la machine boot comment avec un /etc/vide ? Exemple pour BIND: node1 - # mv /etc/bind /share/drbdX/etcbind node1 - # ln -s /share/drbdX/etcbind /etc/bind Le gros avantage pour moi: je n'ai à configurer qu'une seule machine le maitre et ensuite, une fois que le second à pris le controle du noeud, je n'ai qu'à faire des liens sur celui-ci: node2 - # mv /etc/bind /share/drbdX/bkpNode2 node2 - # ln -s /share/drbdX/etcbind /etc/bind LDAP gère nativement la réplication BIND gère nativement la réplication DHCP sait parler avec bind Pour samba et cups tu peux utiliser DRBD pour les données. Si c'est juste pour une authentification sur un domaine il est préférable d'utiliser une conf PDC/BDC. -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD
Heu je ne pensais pas du tout avoir un /etc vide. /etc est laissé telle qu'elle sauf pour le service en question. Par exemple pour samba, je copie /etc/samba sur la partition DRBD et je fais un lien. Vu que c'est heartbeat qui controle le lancement du service, par de pb au boot. J'ai déjà monter un projet avec un PDC-BDC mais il fallait une meilleure HA des données de la société. De plus, la réplication LDAP est une bonne chose mais elle ne se fait que di maitre vers l'esclave. Si l'esclave prend le relais, aucune modif ne peut etre autorisé vu qu'elle ne sera pas automatiquement répercutée sur le maitre lors de son retour sur le réseau. Pour ce qui est de BIND, c'est que là aussi le tout est géré correctement sauf pour les mises à jour de DHCP auto. Dans le cas du projet, tous les services utilisent Heartbeat et DRBD (et bientot MON). Mais je voulais si je pouvais avoir des problèmes en travaillant avec des liens symboliques. - Original Message - From: Laurent CARON [EMAIL PROTECTED] To: [EMAIL PROTECTED] Cc: debian-user-french debian-user-french@lists.debian.org Sent: dimanche, 26. mars 2006 20:28:22 Subject: Re: [debian] Question sur une configuration de Cluster HeartbeatDRBD Mike wrote: Bonjour à tous, Je voulais avoir un petit conseil concernant la mise en place d'un cluster Heartbeat et DRBD: Deux machines vont faire gérer les services suivants: - DNS avec maj par DHCP. - SAMBA+CUPS - LDAP Pour ce qui est de la configuration de chaque service, je pensais copier le répertoire /etc du service en question sur la partiton miroir DRBD et de faire un lien via ln. Et la machine boot comment avec un /etc/vide ? Exemple pour BIND: node1 - # mv /etc/bind /share/drbdX/etcbind node1 - # ln -s /share/drbdX/etcbind /etc/bind Le gros avantage pour moi: je n'ai à configurer qu'une seule machine le maitre et ensuite, une fois que le second à pris le controle du noeud, je n'ai qu'à faire des liens sur celui-ci: node2 - # mv /etc/bind /share/drbdX/bkpNode2 node2 - # ln -s /share/drbdX/etcbind /etc/bind LDAP gère nativement la réplication BIND gère nativement la réplication DHCP sait parler avec bind Pour samba et cups tu peux utiliser DRBD pour les données. Si c'est juste pour une authentification sur un domaine il est préférable d'utiliser une conf PDC/BDC. -- Pensez � lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez � rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
[debian] Question sur une configuration de Cluster HeartbeatDRBD
Bonjour à tous, Je voulais avoir un petit conseil concernant la mise en place d'un cluster Heartbeat et DRBD: Deux machines vont faire gérer les services suivants: - DNS avec maj par DHCP. - SAMBA+CUPS - LDAP Pour ce qui est de la configuration de chaque service, je pensais copier le répertoire /etc du service en question sur la partiton miroir DRBD et de faire un lien via ln. Exemple pour BIND: node1 - # mv /etc/bind /share/drbdX/etcbind node1 - # ln -s /share/drbdX/etcbind /etc/bind Le gros avantage pour moi: je n'ai à configurer qu'une seule machine le maitre et ensuite, une fois que le second à pris le controle du noeud, je n'ai qu'à faire des liens sur celui-ci: node2 - # mv /etc/bind /share/drbdX/bkpNode2 node2 - # ln -s /share/drbdX/etcbind /etc/bind Pensez-vous que ca pourrais poser des problèmes? D'avance merci pour vos réponses, Mike
Fwd: Suite installation du cluster PARHtage
J'avais mis un message à Jérôme Blanchet lui disant de vous contacter au sujet de la suite de l'installation du cluster. Vous a-t'il contacté? En ce qui me concerne, je n'ai pas eu de réponse Pourriez vous le relancer à ce sujet s'il vous plait car nous avons eu un ennui sur le cluster ePMSI mardi soir : il semble que la granularité des blocs ressources du cluster ne soit pas assez fine. Lors de cet incident, Glennie a constaté que les serveurs du cluster n'étaient pas enregistrées dans notre contrat EK 00097681 Glennie a réussi à passer outre et il a pu ouvrir l'incident. Le support a réussi à débloquer la situation mais nous avons eu une d'arrêt sur l'application. Ci-dessous, les références de toutes les nouvelles machines installées: Garantie pour les nouveaux SUN : V240 GOLD : Dével PARHtage Décision S/N TN5203 0188 Cluster-Epmsi: V440 HA(cluster): S/N 0516AL4445 V240 GOLD : S/N TN5214 1119 Baie Storedge 3120 GOLD: S/N 051 600 8B84 Baie Storedge 3120 GOLD: S/N 051 900 8D55 Cluster PARHtage : V490 bipro HA(cluster) Information : S/N 0548AN0030 V490 quadripro GOLDDécision: S/N 0548AN0013 Baie Storedge 3120 GOLD: S/N 054 909 3751 Baie Storedge 3120 GOLD: S/N 054 909 3837 Station d'admin clusters: SUNBLADE 150 : S/N TT5255 1289 En vous remerciant d'avance pour votre intervention sur ces deux fronts Cordialement -- Marie-José Ben Naceur Resp.du pôle systèmes/réseaux ATIH - Agence Technique de l'Information sur l'Hospitalisation 65, Bd Vivier Merle 69482 LYON Cedex 03 --- Tél : 04.37.69.71.30 Fax : 04.37.69.76.66 Mobile: 06.15.55.03.17 Web : www.atih.sante.fr [EMAIL PROTECTED] -- Glennie La vie offre toujours deux pentes. On grimpe ou on se laisse glisser. pgpQE144RbJPp.pgp Description: PGP signature
Cluster MySQL
Hello la liste, je suis à la recherche de docs/URL/retours d'expérience sur une solution de cluster MySQL. Mes besoins : = J'ai 2 serveurs Linux avec MySQL. Je souhaite que les 2 serveurs répondent en lecture mais que 1 seulement réponde en écriture/update et que, bien sur, les données soient répliquées sur le serveur qui ne fait que de la lecture. Mes explications sont-elles claires ? Est ce faisable ? Merci d'avance Franck -- http://www.linuxpourtous.com -- Pensez à lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez à rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Cluster MySQL
Hello la liste, Salut, je suis à la recherche de docs/URL/retours d'expérience sur une solution de cluster MySQL. Mes besoins : = J'ai 2 serveurs Linux avec MySQL. Je souhaite que les 2 serveurs répondent en lecture mais que 1 seulement réponde en écriture/update et que, bien sur, les données soient répliquées sur le serveur qui ne fait que de la lecture. Mes explications sont-elles claires ? Est ce faisable ? Bien sur. Il suffit de mettre en place une réplication MySQL entre tes deux machines. Ensuite, tu fais les lectures sur les deux (fait ta répartition au niveau logiciel) et tes écritures sur l'une des machines uniquement. Pour la mise en place de la réplication, http://www.nexen.net/mysql/replication.php Ce type de solution fonctionne très bien. Ghislain. -- Pensez à lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez à rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Cluster MySQL
Hello la liste, Salut, je suis à la recherche de docs/URL/retours d'expérience sur une solution de cluster MySQL. Mes besoins : = J'ai 2 serveurs Linux avec MySQL. Je souhaite que les 2 serveurs répondent en lecture mais que 1 seulement réponde en écriture/update et que, bien sur, les données soient répliquées sur le serveur qui ne fait que de la lecture. Mes explications sont-elles claires ? Est ce faisable ? Bien sur. Il suffit de mettre en place une réplication MySQL entre tes deux machines. Ensuite, tu fais les lectures sur les deux (fait ta répartition au niveau logiciel) et tes écritures sur l'une des machines uniquement. Pour la mise en place de la réplication, http://www.nexen.net/mysql/replication.php Ce type de solution fonctionne très bien. Merci j'ai lu attentivement ce lien. J'utilise déjà cette méthode pour répliquer un master sur un slave mais j'utilise heartbeat pour démarrer le slave si le master tombe. Or, dans ton URL, je n'ai pas vu d'explication quant à l'écriture sur 1 seul serveur et la lecture sur plusieurs ? Mais peut-etre que le Master lit et écrit tandis que le slave ne fait que lire et renvoit les requetes vers le master ? Mais j'en doute car on parle de réplication unidirectionnelle dans cette doc :( Merci pour cette doc, ça m'a rapellé 2-3 trucs que j'avais oublié. PS : je pense utiliser keepalived pour définir une IP virtuelle qui sera attaquable depuis un apache mais qui déservira 2 IP physique (master et slave MySQL). Franck -- http://www.linuxpourtous.com -- Pensez à lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez à rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Cluster MySQL
Franck a écrit : Hello la liste, Salut, je suis à la recherche de docs/URL/retours d'expérience sur une solution de cluster MySQL. Mes besoins : = J'ai 2 serveurs Linux avec MySQL. Je souhaite que les 2 serveurs répondent en lecture mais que 1 seulement réponde en écriture/update et que, bien sur, les données soient répliquées sur le serveur qui ne fait que de la lecture. Mes explications sont-elles claires ? Est ce faisable ? Bien sur. Il suffit de mettre en place une réplication MySQL entre tes deux machines. Ensuite, tu fais les lectures sur les deux (fait ta répartition au niveau logiciel) et tes écritures sur l'une des machines uniquement. Pour la mise en place de la réplication, http://www.nexen.net/mysql/replication.php Ce type de solution fonctionne très bien. Merci j'ai lu attentivement ce lien. J'utilise déjà cette méthode pour répliquer un master sur un slave mais j'utilise heartbeat pour démarrer le slave si le master tombe. Or, dans ton URL, je n'ai pas vu d'explication quant à l'écriture sur 1 seul serveur et la lecture sur plusieurs ? Mais peut-etre que le Master lit et écrit tandis que le slave ne fait que lire et renvoit les requetes vers le master ? Mais j'en doute car on parle de réplication unidirectionnelle dans cette doc :( Dans la FAQ, il y a les grandes lignes d'une solution. Ca passe par un recodage des applications pour distinguer le serveur qui effectue les requetes en ecriture (le maitre) et les serveurs qui repondent aux requetes en lecture (le maitre et les esclaves ou seulement les esclaves). Une fois le recodage effectué, le plus simple pour repartir la charge de lecture, c'est d'utiliser le DNS: tu definis une adresse serveur-maitre qui pointe uniquement vers le serveur maitre et une adresse serveur-esclave qui pointe vers tous les esclaves (et le maitre si la charge en ecriture le permet), le système DNS se charge alors de faire pointé l'adresse serveur-esclave sur les clients vers les differents serveurs esclaves. A+ Merci pour cette doc, ça m'a rapellé 2-3 trucs que j'avais oublié. PS : je pense utiliser keepalived pour définir une IP virtuelle qui sera attaquable depuis un apache mais qui déservira 2 IP physique (master et slave MySQL). Franck -- Pensez à lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez à rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Cluster MySQL
Bonjour, Dans la FAQ, il y a les grandes lignes d'une solution. Ca passe par un recodage des applications pour distinguer le serveur qui effectue les requetes en ecriture (le maitre) et les serveurs qui repondent aux requetes en lecture (le maitre et les esclaves ou seulement les esclaves). Une fois le recodage effectué, le plus simple pour repartir la charge de lecture, c'est d'utiliser le DNS: tu definis une adresse serveur-maitre qui pointe uniquement vers le serveur maitre et une adresse serveur-esclave qui pointe vers tous les esclaves (et le maitre si la charge en ecriture le permet), le système DNS se charge alors de faire pointé l'adresse serveur-esclave sur les clients vers les differents serveurs esclaves. ARF, ça ne m'arrange pas ça :( S'il faut que je modifie l'appli pour trouver les select et update, j'ai pas fini :( Quant aux IP, cela ne me pose pas de soucis, je connais bien keepalived pour le load balancing ... Merci Franck -- http://www.linuxpourtous.com -- Pensez à lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez à rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
cluster defectueux
Bonjour , A la suite de coupureS de courant rptitives et rapproches j'ai un disque dur qui a des clusters dfectueux, quand je le reboot je fais un fsck manuellement, nanmoins je ne suis pas convaincu que cel ait pu rgler le problme (rparer le disque). Existe - il un utilitaire pour rparer un disque prsentant des problmes de clusters ? Salutations, JJ -- Pensez lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: cluster defectueux
Jean Jacques a crit : [...] http://www.ultimatebootcd.com/ nb : il y a pleins d'adresses qui renvoient gentillement un mesage quand on se trompe sur le rpondre . On les trouvent o ? -- Amicalement vOOotre Troumad Alias Bernard SIAUD mon site : http://troumad.free.fr : ADD maths WEB sectes Pour la libert http://www.mandrakelinux.com/fr/ http://www.eurolinux.org/index.fr.html N'envoyez que des documents avec des formats ouverts, comme http://fr.openoffice.org -- Pensez lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: cluster defectueux
Jean Jacques a crit : Bonjour , A la suite de coupureS de courant rptitives et rapproches j'ai un disque dur qui a des clusters dfectueux, quand je le reboot je fais un fsck manuellement, nanmoins je ne suis pas convaincu que cel ait pu rgler le problme (rparer le disque). Existe - il un utilitaire pour rparer un disque prsentant des problmes de clusters ? Salutations, JJ Tu as le programme badblocks, mais il vaut mieux l'utiliser avec fsck.ext2 (ou 3), il y a une option -cc pour tester les blocks defectueux. Aprs, si certains sont defecteux, fsck ne peut que les mettre dans la liste des blocks defecteux. -- Pensez lire la FAQ de la liste avant de poser une question : http://wiki.debian.net/?DebianFrench Pensez rajouter le mot ``spam'' dans vos champs From et Reply-To: To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
[CLUSTER-HA] linux debian
Bonjour, Est ce que quelqu'un à une experience avec les Cluster Linux transtec haute disponibilité ? à bientot - Sylvain Blanc http://www.cc-pays-de-gex.fr http://www.cri01.org http://www.ade01.org [EMAIL PROTECTED] Centre de Ressources Informatiques Pays de Gex Bassin Bellegardien 50 rue Gustave Eiffel 01630 Saint Genis Pouilly Tel : 0450426500 Fax : 0450426501
update-cluster :
Salut à tous, J'ai une cinquantaine de machines debian à mettre à jour régulièrement et je me suis dit qu'un soft pourrait très bien le faire pour moi. J'ai donc testé fai, systemimager mais ça n'a pas l'air terrible Je suis en train de me faire mal à la tete sur update-cluster, je ne trouve pas de doc. Quelqu'un pourrait-il me dire ou la trouver? Ou si quelqu'un utilise déjà un autre soft qui correspondrait à mes attentes, il serait bien sympa de me le recommander. Merci d'avance pour vos nombreuses réponse. @+ -- -- Sebastien PICARD IUT Belfort-Montbeliard Technicien de Recherche et Formation Tel : (+33) 3 84 58 77 79 --
Re: update-cluster :
Salut, On Thu, 27 Feb 2003 14:11:42 +0100 Sébastien PICARD [EMAIL PROTECTED] wrote: Ou si quelqu'un utilise déjà un autre soft qui correspondrait à mes attentes, il serait bien sympa de me le recommander. cfengine ? a+ Julien
Re: update-cluster :
replicator - automate new computer installations in a networked site ca a l air d etre pour installer mais peut etre que ca permet de gerer la maintenance des machines aussi, je sais pas... m en suis jamais servi On Thu, Feb 27, 2003 at 02:51:25PM +0100, COMBES Julien wrote: Salut, On Thu, 27 Feb 2003 14:11:42 +0100 Sébastien PICARD [EMAIL PROTECTED] wrote: Ou si quelqu'un utilise déjà un autre soft qui correspondrait à mes attentes, il serait bien sympa de me le recommander. cfengine ? a+ Julien -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: update-cluster :
* Sébastien PICARD [EMAIL PROTECTED] [2003-02-27 14:11] : Salut à tous, J'ai une cinquantaine de machines debian à mettre à jour régulièrement et je me suis dit qu'un soft pourrait très bien le faire pour moi. J'ai donc testé fai, systemimager mais ça n'a pas l'air terrible Je suis en train de me faire mal à la tete sur update-cluster, je ne trouve pas de doc. Quelqu'un pourrait-il me dire ou la trouver? Ou si quelqu'un utilise déjà un autre soft qui correspondrait à mes attentes, il serait bien sympa de me le recommander. Ça compte si on n'utilise pas un logiciel, mais qu'il paraît intéressant ? Bref, dsh semble prévu pour cela (mais tu as peut-être déjà trouvé le paquet si tu as fait un apt-cache search cluster). Par exemple (avec une configuration ssh non-interactive), cela peut donner cela pour afficher la vitesse des processeurs des machines : $ dsh -m hermes,athena cat /proc/cpuinfo | grep MHz athena: cpu MHz : 300.691 hermes: cpu MHz : 946.744 $ Il suffit juste ensuite que sur chaque machine, l'utilisateur ait le droit d'exécuter apt-get avec les droits root sans demande de mot de passe. dsh peut également fonctionner avec update-cluster d'après la page de manuel (mais il renvoie vers la doc de update-cluster :-/) Fred
Noyau 2.2.x contre Noyau 2.4.x pour monter un cluster avec gestion de groupe de volumes
Bonjour, Je désire installer un cluster pour mon serveur WEB+TOMCAT+COCOON, et en plus j'aimerais utiliser les sytemes de fichier journaliser ext3 avec une gestion de groupe de volume (lvm? ou evms?). Pour faire marcher tout cela, quel version de noyau est la plus apropriée 2.2.x ou 2.4.x? Merci Philippe LEBRETON
Woody et les kernels 2.2.19 et 2.4.18, lequel pour faire un cluster performant?
Bonjour, J'ai deux questions : 1 - ) Je viens d'installer la DEBIAN 3.0 et j'aimerai connaitre les avantages et inconvenients entre les noyaux 2.2.19 et 2.4.18, sachant que j'aimerais pourvoir installer deux machines en cluster avec Hearbeat. De ces deux noyaux lequel sera le mieux adapter? 2 - ) Pour monter mon cluster, je dois avoir IPVS, et pour cela je dois patcher mon noyau. En quoi constiste l'operation? c'est bien une recompilation? Comment ca se passe dans le cas d'un PATCH? Merci Philippe LEBRETON
Re: des machine DEBIAN en cluster
Et bien, moi j'ai adopter la solution de LoadBalancing. Étant donné que j'ai des serveurs webs, je ne peux me permettre un plantage système. Je l'ai configurer avec LVS et ca fonctionne très bien. Un temps de réponce d'environ 5 secondes. LEBRETON Philippe wrote: existent-ils des solutions de mise en cluster de machine DEBIAN. Mon objectif est de monter deux serveurs Intranet identique au niveau matériel, de pourvoir synchroniser la base logicielle installée sur les deux machines aiinsi que les application developpée sous TOMCAT et COCOON. Et donc en cas de problème sur la machine maitre, basculer rapidement (en moins de 30 minutes) sur la machine de secours. Merci Philippe LEBRETON -- Dominique Arpin___[espace gestionnaire réseau courbe] http://www.espacecourbe.com/ téléphone514.933.9861 télécopieur 514.933.9546 -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
des machine DEBIAN en cluster
existent-ils des solutions de mise en cluster de machine DEBIAN. Mon objectif est de monter deux serveurs Intranet identique au niveau matériel, de pourvoir synchroniser la base logicielle installée sur les deux machines aiinsi que les application developpée sous TOMCAT et COCOON. Et donc en cas de problème sur la machine maitre, basculer rapidement (en moins de 30 minutes) sur la machine de secours. Merci Philippe LEBRETON -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: des machine DEBIAN en cluster
Oui je l'ai fait avec succès avec NAT ipvs : www.linuxvirtualserver.org Stéphane Quoting LEBRETON Philippe [EMAIL PROTECTED]: existent-ils des solutions de mise en cluster de machine DEBIAN. Mon objectif est de monter deux serveurs Intranet identique au niveau matériel, de pourvoir synchroniser la base logicielle installée sur les deux machines aiinsi que les application developpée sous TOMCAT et COCOON. Et donc en cas de problème sur la machine maitre, basculer rapidement (en moins de 30 minutes) sur la machine de secours. Merci Philippe LEBRETON -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED] -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Debian et Cluster.
Je travaille présentement sur un système loadbalancing avec 2 machines. J'utilise Linuxvirtualserver (heartbeat, Mon, Ext3 et Watchdog). Tu peux aller sur le site: http://www.linuxvirtualserver.org. Tony Schonfeld wrote: Bonsoir, J'aimerai bien monter deux machines serveurs ( Mail et Http ) en cluster, quelles sont les possibilites sous debian ? Le but etant d'avoir bien sur un systeme virtuel redondant presque parfait. Tony -- Dominique Arpin___[espace gestionnaire réseau courbe] http://www.espacecourbe.com/ téléphone514.933.9861 télécopieur 514.933.9546 -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Re: Debian et Cluster.
Merci a tous pour vos reponses, j'ai effectivement trouve cette apres midi Heartbeat qui est dans la testing. A present je vais essayer de digerer tout ca ... Cordialement , Tony -- Tony Schonfeld * F5GIT * Phone: +33 675 236 530 Email: [EMAIL PROTECTED] - WWW: http://www.schonfeld.eu.org -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
Debian et Cluster.
Bonsoir, J'aimerai bien monter deux machines serveurs ( Mail et Http ) en cluster, quelles sont les possibilites sous debian ? Le but etant d'avoir bien sur un systeme virtuel redondant presque parfait. Tony -- Tony Schonfeld * F5GIT * Phone: +33 675 236 530 Email: [EMAIL PROTECTED] - WWW: http://www.schonfeld.eu.org -- To UNSUBSCRIBE, email to [EMAIL PROTECTED] with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]
