Les deux : le SATA, qui plafonne vite en perf (et en nb de disques gérés). mdadm qui limite les raid softs à 27 dev. Et JFS en fs principal (qui force à gérér des tranches de 16To max).
J'ajoute qu'ici, on joue avec du multipath(d) et ça SATA, il sait pas faire.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
Disclaimer :
Je ne suis ni commercial, ni fabricant. Mais j'utilise du stockage "HPC" professionnellement tous les jours.
TL;DR : On choisit LSI, comme les autres.
Solution du "Pro riche" (platinuim overlazzyness) :
Panasas, ddn, isilon, netapp, etc…
hors des firmwares et de certaines cartes controleurs en plaqué platine, c'est trés souvent du LSI recarrossé.
Solution "Pro aveugle" (ou lazzy) :
Dell/Compellent, HP, Nexenta, … Le choix va dépendre de l'OS et de la confiance que tu t'autorise sur les controleurs RAID.
(et c'est aussi souvent du supermicro, ou du LSI recarrossé)
Solution "Pro intelligent" (nous tous) :
Bare metal (ldlc, dell, on s'en fout), mais controleurs SAS LSI, baies SAS LSI, SuperMicro, Xtore, dataon, whatever mais SAS et JBOD !.
Tout va dépendre des perfs attendues et de la soluce logicielle (btrfs, zfs, etc).
Recette du ~pro :
J'ai des machines avec des baies de disques 2"1/2 (24 slots, sur base supermicro), avec mix mecanique et SSD, pour de la perf, et j'ai aussi du bon gros dell r720xd, avec deux expander 240To au cul (controleurs SAS et expandeurs LSI recarrossés), pour du stockage massif (et étonnement performant).
Expérience :
On est passé de ZFS/Solaris à ZFS/Debian, en gardant un oeil sur btrfs. L'expérience nous a appris à éviter HP comme la peste (JBOD, connaissent pas, Debian? Caca!).
Elle nous a aussi appris que le SATA pour du multidisques > 3, faut oublier. En dehors de SAS, point de Port-Salut.
Perso, j'utilise une carte de mots de passe (oui, écrite, sur papier) et des mnémotechniques différentes pour retrouver les mots de passe en fonction du site.
Mon application courante est "serveur de /home NFS". J'ai 5~6 serveurs (sur base dell r720xd + MD1200) pour ~ 500 users, dans une configuration HPC.
Ma plus grosse machine est un r720xd 48T + 2x MD3060e : 528To bruts sur 132 disques. Avec le raidz je reviens à ~400To utilisable. Ça juste fonctionne trés bien.
Perso, on m'offrirai deux barils d'Omo-ext4, Dash-xfs ou Paic-lvm, je n'échangerais pas contre mon Bonux-zfs.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
A chaque fois qu'il y a des complications vaccinales, on rejette en bloc et surtout on ne l'étudie pas et surtout on explique qu'il n'y a pas d'étude qui le montre.
Heu… non. Il y a des études (confère les risques liés à la vaccination contre l'hépatite B), et il y a des choix (balance bénéfices/risques) liés aux résultats des-dites études.
Et parfois, on préfère stopper la propagation d'une éventuelle épidémie par une vaccination massive, et gérer (mal, ou pas du tout) les quelques (centaines, milliers) cas "d'effets secondaires" (mes plus sincères condoléances)…
Ça rejoint les légendaires 7% de pertes de l'Armée…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
Mais promis, la prochaine fois je vous embêterais plus avec mes trucs et les garderais pour moi.
Pour qu'il y ait une prochaine fois (Le langage ne m'interesse pas, mais la problématique et la démarche sont fun) : /usr/bin/time à la place du built-in time de ton shell.
C'est un chouill' plus verbeux, et c'est souvent plus intéressant.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
J'ai oublié de préciser un truc qui a son importance (à mes yeux, en tout cas) : "ZFS on Linux" est un projet sponsorisé par le Lawrence Livermore National Laboratory. Avec le Oak Ridge, c'est un peu la crème du dessus du panier du haut de la pyramide du top niveau des Tier0 US dans le monde HPC. Au-dessus, y'a rien.
Et quand ces gars-là te disent qu'une technologie vaut le coup, est intéressante, mérite qu'on se penche dessus, tu les écoutes. Avec attention. Mieux, quand ils annoncent qu'ils investissent du pognon dedans… Tu réfléchis pas longtemps et tu t'y intéresses pour de vrai… Voire, tu passes en prod :o)
Proverbe Alien : Sauvez la terre ? Mangez des humains !
Dans les bests practices, il est dit : (1Go ram + 1Ghz cpu pour 1To stockage). Et c'est vrai.
Si tu veux du stockage performant, faut mettre les moyens. Cela étant dit, une solution matérielle équivalente a une bonne configuration ZFS (sur base SuperMicro, Dell, etc), c'est souvent beaucoup plus cher. Et trés proprio (NetApp, Panasas, IBM).
Proverbe Alien : Sauvez la terre ? Mangez des humains !
De plus l'idéal serait d'avoir accès au connection RENATER de l'université, mais sans entraîner d'ennuis techniques ou potentiellement légaux pour les personnes en charge du réseau.
Si tu es sur un campus, tu as accès à la charte RENATER de ton établissement…
Relis-la.
Encore.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Si j'étais complotiste...
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Google News quitte l'Espagne. Évalué à 2.
Je m'en doutais ! Tu les as vu, toi aussi ?
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: On parle de Debian ?
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Une autre entité de la défense américaine fait confiance à une société Européenne !. Évalué à 2.
C'est du BULL dans les machines BULL récentes ? J'ai vu du SuperMicro dedans…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
# Si j'étais complotiste...
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Google News quitte l'Espagne. Évalué à 5.
…Je dirais que certains pays européens cherchent à se débarrasser de l'hégémonie Google par n'importe quels moyens, idiots ou pas…
Mais je suis seulement paranoïaque.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: OverlayFS intégré
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Sortie du noyau Linux 3.18. Évalué à 6.
J'avais cru comprendre qu'UnionFS et AuFS n'étaient plus maintenu…
On utilise AuFS pour nos clusters, et c'est bien pratique : 1 image système pour 500 noeuds de calcul…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: dactylographie
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Haiku se lâche enfin. Évalué à 3.
Ho ! Une forme poétique codifiée d'origine japonaise !
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Bleuffant !
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Pose toi Philae ! . Évalué à 10.
Parcequ'on pourrait bien être capable de trouver des solutions…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: L'EFF protège les prédateurs et les pédophiles.
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Un logiciel de contrôle parental, distribué par la police US, serait un keylogger.. Évalué à 3.
Tu ne comprends pas. C'est pour ton bien. Aye confiaaaaance…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: réponse simple :
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Happening de données exposées, fap fap fap, cloud et protection. Évalué à 3.
L'info qu'il y avait eu "une fuite" (fap) est sortie dans la "presse" généraliste…
Les photos "fuitées" (fap) ont-elles été imprimées ?
A part un tabloid anglais, je doute qu'un torchon (fap) à scandales ose prendre le risque de les publier…
Mon affirmation première reste valable, ça ne sortira pas du Grand Ternet :o)
(http://www.commitstrip.com/fr/2014/09/01/fappening-day-la-solution/)
Proverbe Alien : Sauvez la terre ? Mangez des humains !
# réponse simple :
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Happening de données exposées, fap fap fap, cloud et protection. Évalué à 10.
"T'inquiète pas, ça sortira pas d'Internet…"
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Ton besoin
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal stabilité du contrôleur SATA Marvell 88SE9230. Évalué à 2.
Les deux : le SATA, qui plafonne vite en perf (et en nb de disques gérés). mdadm qui limite les raid softs à 27 dev. Et JFS en fs principal (qui force à gérér des tranches de 16To max).
J'ajoute qu'ici, on joue avec du multipath(d) et ça SATA, il sait pas faire.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Ton besoin
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal stabilité du contrôleur SATA Marvell 88SE9230. Évalué à 10.
Disclaimer :
Je ne suis ni commercial, ni fabricant. Mais j'utilise du stockage "HPC" professionnellement tous les jours.
TL;DR : On choisit LSI, comme les autres.
Solution du "Pro riche" (platinuim overlazzyness) :
Panasas, ddn, isilon, netapp, etc…
hors des firmwares et de certaines cartes controleurs en plaqué platine, c'est trés souvent du LSI recarrossé.
Solution "Pro aveugle" (ou lazzy) :
Dell/Compellent, HP, Nexenta, … Le choix va dépendre de l'OS et de la confiance que tu t'autorise sur les controleurs RAID.
(et c'est aussi souvent du supermicro, ou du LSI recarrossé)
Solution "Pro intelligent" (nous tous) :
Bare metal (ldlc, dell, on s'en fout), mais controleurs SAS LSI, baies SAS LSI, SuperMicro, Xtore, dataon, whatever mais SAS et JBOD !.
Tout va dépendre des perfs attendues et de la soluce logicielle (btrfs, zfs, etc).
Recette du ~pro :
J'ai des machines avec des baies de disques 2"1/2 (24 slots, sur base supermicro), avec mix mecanique et SSD, pour de la perf, et j'ai aussi du bon gros dell r720xd, avec deux expander 240To au cul (controleurs SAS et expandeurs LSI recarrossés), pour du stockage massif (et étonnement performant).
Expérience :
On est passé de ZFS/Solaris à ZFS/Debian, en gardant un oeil sur btrfs. L'expérience nous a appris à éviter HP comme la peste (JBOD, connaissent pas, Debian? Caca!).
Elle nous a aussi appris que le SATA pour du multidisques > 3, faut oublier. En dehors de SAS, point de Port-Salut.
Backblaze avait écrit un excellent article sur leurs choix techno (même si je n'approuve pas tout) :
https://www.backblaze.com/blog/petabytes-on-a-budget-how-to-build-cheap-cloud-storage-2/
Nous nous en somme inspiré quand nous avons du remplacer nos Sun X4500 Thumper.
Je sais que ce n'est pas du tout dans le même budget :o) mais vous vouliez un avis de "pro".
(j'ai placé ZFS ?)
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: distribution linux
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Le Top 500 de juin 2014. Évalué à 1.
C'est surtout que ça scale pas…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
# Carte de mots de passe
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal La loose des mots de passe sur les sites webs. Évalué à 2.
Perso, j'utilise une carte de mots de passe (oui, écrite, sur papier) et des mnémotechniques différentes pour retrouver les mots de passe en fonction du site.
Une carte, ça ressemble à ça :
ou ça :
(générées pour l'ocaz, merci apg)
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: En prod
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Sortie de ZFS On Linux (ZOL) 0.6.3. Évalué à 2.
Ça marche. Et plutôt bien.
Mon application courante est "serveur de /home NFS". J'ai 5~6 serveurs (sur base dell r720xd + MD1200) pour ~ 500 users, dans une configuration HPC.
Ma plus grosse machine est un r720xd 48T + 2x MD3060e : 528To bruts sur 132 disques. Avec le raidz je reviens à ~400To utilisable. Ça juste fonctionne trés bien.
Perso, on m'offrirai deux barils d'Omo-ext4, Dash-xfs ou Paic-lvm, je n'échangerais pas contre mon Bonux-zfs.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Éponge
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Turing est battu. Évalué à 4.
C'est sans doute de la fluorescéine, un colorant trés courant en hydrographie et aux effets bénins à la dose utilisée (généralement, inférieur à 5%).
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: un autre sujet d'étude
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal [+]. Évalué à 2.
Heu… non. Il y a des études (confère les risques liés à la vaccination contre l'hépatite B), et il y a des choix (balance bénéfices/risques) liés aux résultats des-dites études.
Et parfois, on préfère stopper la propagation d'une éventuelle épidémie par une vaccination massive, et gérer (mal, ou pas du tout) les quelques (centaines, milliers) cas "d'effets secondaires" (mes plus sincères condoléances)…
Ça rejoint les légendaires 7% de pertes de l'Armée…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Format?
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal benchmark pour le fun. Évalué à 1.
Pour enfoncer un clou ?
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Mouais
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal benchmark pour le fun. Évalué à 7.
Pour qu'il y ait une prochaine fois (Le langage ne m'interesse pas, mais la problématique et la démarche sont fun) : /usr/bin/time à la place du built-in time de ton shell.
C'est un chouill' plus verbeux, et c'est souvent plus intéressant.
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Champagne
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Quelques nouveautés sur votre site web préféré. Évalué à -4.
Clairette, en brut, ou du Cidre, pour ma part
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Accessible en ligne et en PDF
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal FreeBSD Journal FAIL. Évalué à 1.
Faut rembourser le dev de l'appli. Ho wait…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Utilisation en production ?
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Et si la meilleure des cartes RAID était libre ?. Évalué à 10.
J'ai oublié de préciser un truc qui a son importance (à mes yeux, en tout cas) : "ZFS on Linux" est un projet sponsorisé par le Lawrence Livermore National Laboratory. Avec le Oak Ridge, c'est un peu la crème du dessus du panier du haut de la pyramide du top niveau des Tier0 US dans le monde HPC. Au-dessus, y'a rien.
Et quand ces gars-là te disent qu'une technologie vaut le coup, est intéressante, mérite qu'on se penche dessus, tu les écoutes. Avec attention. Mieux, quand ils annoncent qu'ils investissent du pognon dedans… Tu réfléchis pas longtemps et tu t'y intéresses pour de vrai… Voire, tu passes en prod :o)
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Et la config matériel nécessaire pour ZFS ?
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Et si la meilleure des cartes RAID était libre ?. Évalué à 3.
Dans les bests practices, il est dit : (1Go ram + 1Ghz cpu pour 1To stockage). Et c'est vrai.
Si tu veux du stockage performant, faut mettre les moyens. Cela étant dit, une solution matérielle équivalente a une bonne configuration ZFS (sur base SuperMicro, Dell, etc), c'est souvent beaucoup plus cher. Et trés proprio (NetApp, Panasas, IBM).
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Utilisation en production ?
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse à la dépêche Et si la meilleure des cartes RAID était libre ?. Évalué à 9.
Oui. 1 Po (réparti sur 4 serveurs) dans un centre HPC.
Oui. Mais comme plein de choses, pas sur n'importe quoi (faut du bon matos, bien dimensionné).
Les Bests practices sont de trés bonne qualitay (http://www.solarisinternals.com/wiki/index.php/ZFS_Best_Practices_Guide & http://www.solarisinternals.com/wiki/index.php/ZFS_Evil_Tuning_Guide).
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Et la plus grosse faille est ... AMAZON
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Mots de passe et ingénierie sociale. Évalué à 1.
Le mien aussi \o/. En me prévenant toutefois que, à priori, c'était la dernière fois. Au prochain renouvellement, j'y échapperais pas (comme Monéo…)…
Proverbe Alien : Sauvez la terre ? Mangez des humains !
[^] # Re: Une asso, un local, une connexion ADSL autonome
Posté par Loïs Taulelle ࿋ (site web personnel) . En réponse au journal Développer un laboratoire de système et réseaux géré par les étudiants. Évalué à 3.
Si tu es sur un campus, tu as accès à la charte RENATER de ton établissement…
Relis-la.
Encore.
Proverbe Alien : Sauvez la terre ? Mangez des humains !