Journal archive.org et PetaBox

Posté par (page perso) .
Tags : aucun
0
7
nov.
2004
Salut,

Je viens de redécouvrir l'archive du net [1]. Ce site propose de consulter des archives de sites Internet depuis 1996 (il y a environ une version par mois) ! C'est assez impressionant de pouvoir revenir dans le temps ! Je viens de voir qu'on aussi y trouver des vidéos dans différents formats, et puis de la musique.

Autre truc impressionnant : le matos qu'il y a derrière. La FAQ parle de 1 Po de donnée, et un accroissement de 20 To par mois ... Euh, j'ai vraiment beaucoup de mal à m'imaginer la quantité "un péta octet". Un DivX pèse 650 Mo (en gros). Dans 1 To (deux disques durs de 500 Go côte à côte, ça devient courant :-)), on peut stocker environ 1500 films. Donc 1 Po, ça fait *environ* 2 millions de DivX. Wow ! On met tout Hollywood là-dedans nan ?

Le projet intéressant est justement la construction de la petabox [2] qui traite (traitera ? j'ai pas tout suivi) 1 Po de donnée. Les réponses dans le forum sont sympas : "simple effective secure." -brewster. Apparament c'est un paquet de noeuds indépendents qui stoquent chacun une partie de archive.org. Un noeud est un PC équipe de 512 Mo de RAM avec un disque dur classique en ReiserFS. Le tout relié en ethernet 100. C'est fou, j'aurai imaginé du matos hors norme ... keep it simple qu'il disait l'autre ;-)

Ah oui, si je poste mon journal ici, c'est parce que l'OS qui est derrière est "bien sûr" notre très cher Linux ;-)

[1] http://www.archive.org/(...)
[2] http://www.archive.org/web/petabox.php(...)

Haypo
  • # Google

    Posté par . Évalué à 7.

    On disait un peu pareil du cluster de google, à ses débuts. Sauf que les quantités n'étaient pas les mêmes, mais c'était tout aussi impressionant.
    • [^] # Re: Google

      Posté par . Évalué à 4.

      ben google est toujours impressionnant pour gérer un index de 4 milliard d'entré sur plusieurs dizaine de milliers de machines avec des temps de réponse inférieur à la seconde.

      ps: moi, je viens de découvrire freecache.org de la même compagnie, cela a l'air pas mal.

      "La première sécurité est la liberté"

  • # Souvenir souvenir ....

    Posté par . Évalué à 3.

    • [^] # Re: Souvenir souvenir ....

      Posté par . Évalué à 1.

      Solaris Open source ? ))
      D'après un article du Wall Street Journal (repris par Journal Informatique), Solaris deviendrait bientôt gratuit, et avec le code source disponible.
      Cependant, l'article du Journal Informatique indique "une licence de type GNU", alors qu'il semblerait que le développement d'applications commerciales sous Solaris sera soumis à des royalties !
      Bref, la conclusion de l'article, c'est que SUN lance une grande offensive à la fois contre Linux et Windows 2000.
      Ca me rappelle un proverbe au sujet d'un chasseurs et de deux lièvres ;-)



      On en parlait déja à l'époque, et rien depuis :o
    • [^] # Re: Souvenir souvenir ....

      Posté par . Évalué à 1.

      "# kernel stable: 2.2.12 (2.2.13pre11)"

      :)
    • [^] # Re: Souvenir souvenir ....

      Posté par (page perso) . Évalué à 1.

      Ce qui est marrant c'est le nombre de commentaires de chaque news: le seul article à avoir déchaîné les foules (piou, carrément 4 commentaires), c'est la sortie de la "nouvelle" RedHat.

      Dommage que les stats des visites n'aient pas été indexées...

      Notez aussi la jolie faute (anglissisme ?) en bas de la page: « Clickez ici »

Suivre le flux des commentaires

Note : les commentaires appartiennent à ceux qui les ont postés. Nous n'en sommes pas responsables.