Au bout de 20mn j'ai arrêté le strace sur le pid 7067. J'ai l'impression qu'il bloc sur le fichier listener.log qui est le fichier log du processus oracle listener qui forcement n'est pas arrêté au moment de la sauvegarde. Par curiosité j'ai fais un rsync directement dessus
rsync -av listener.log /tmp
sending incremental file list
listener.log
sent 4905886 bytes received 31 bytes 9811834.00 bytes/sec
total size is 4905191 speedup is 1.00
Rassure moi tu n'est pas en train de faire un rsync sur un SGBD qui tourne ?
Les fichiers qui servent à la base sont stocké dans un autre répertoire. /home/oracle est le répertoire d'installation, il y a des répertoires nécessaire à l'appli oracle :
# ll
total 16
drwxr-x--- 3 oracle oinstall 4096 oct 25 2010 admin
drwxr-x--- 3 oracle oinstall 4096 oct 25 2010 oradata
drwxrwx--- 6 oracle oinstall 4096 oct 25 2010 oraInventory
drwxr-xr-x 3 oracle oinstall 4096 oct 25 2010 product
Disons que ma direction a des priorités et une fibre 100M, malgré tout le bien que je peux en dire, n'en fait pas partie. Encore heureux que les opérateurs proposent un choix mais il faut bien lire les petites lignes, dans le cas de l'offre orange à 79€ la limite de 2To peut être très vite atteinte même sans parler de faire de la sauvegarde.
car, à defaut de preciser ce qui fait exactement 120Go de backups, le probleme vient de là.
Y a un peu de tout dans ces backups : du fichiers utilisateurs type office, du dump de base de données, du fichiers à plat, des photos (jpg, tif, eps), de la vidéos, des fichiers pst… Ce qui bouge souvent c'est les dumps, les fichiers à plat et les pst. Après le reste représente de petits volumes.
Lors de l'étude de l'installation de la fibre la réponse d'orange a été sans appel "On fait pas dans votre rue"… Le tec de sfr qui est venu faire le raccordement a bien rit car il y avait tout ce qu'il faut au niveau installation d'orange.
Je suis étonné du montant que t'annonce pour du 100M assuré et symétrique à 79€ par mois… Ensuite juste le petit 1 est drôle
(1) Les débits annoncés sont des débits IP. Jusqu’à 200 Mégabit/s en réception et en émission (débit IP maximum). Fonctionne uniquement avec la Livebox pro.Orange pourra suspendre l’ensemble des services de l’offre (hors service mobile) au-delà de 2 téraoctets par mois (cycle de facturation). Cette suspension sera effective jusqu’à la date de facturation suivante.
200 c'est le débit max que potentiellement tu peux attendre mais ils assurent rien et la limite de 2To ça va faire juste pour faire du backup. Et 200M débit IP c'est pas très parlant, au final j'aurais combien pour de vrai ? La livebox elle est pas rackable en plus :D
Chez SFR j'ai certe que 6M pour le moment mais c'est de l'assuré… au moins sur leurs installations
Effectivement tu connais un peu le bouzin chez moi pour en avoir longuement parlé :)
Je pense que je vais pas avoir le choix mais ça n'élimine pas le problème de "je suis pas la pour mettre la cartouche… bah y a pas de backup qui se lance" Allez soyons fou un robot… Mais si personne ne prends la cassette le soir en partant c'est le même problème.
C'est pas tellement faire le backup qui me pose problème mais c'est sortir ces backups de nos locaux… C'est un vrai casse tête !
Je suis pour la simplicité c'est pour ça que j'ai mis backuppc en place, il va très bien. Quand à la restauration, à tester régulièrement, d'ailleurs tu risque d'en entendre parlé début 2014 mais avant nous avons une connaissance commune qui commence à raler que les serveurs prod et test sont désynchro… pfff ces dev qui triture la prod sans reporter les modifs sur le test (je sais normalement c'est dans l'autre sens… mais c'est un peu la 4ème dimension chez les dev ;) ).
Je ne l'ai pas dis tout simplement parce que ma question est "Est-ce que rsync transfert que la différence des fichiers correspond au mode bloc de certaine solution du marché".
Certes ma question en fin de post laisse penser que je cherche une solution pour contourner ce problème. C'est une erreur de l'avoir posé ainsi.
Le temps de compression + le temps de transfert serait surement bien plus long que sans compression. Déjà que la création d'une list de fichiers par rsync est longue.
Ca ne concerne pas que mes utilisateurs, il y a les dump oracles, des fichiers à plat très volumineux et c'est ici le plus gros volume et en plus ils bougent tout les jours. Quand à changer la méthode des fichiers à plat c'est tout simplement impossible pour différente raison qui ne relève plus de moi.
Et bien non, il y a un point à prendre en compte. Les rubans office sont sexy pour certain jeunes… forcement quand t'arrive avec ton interface Libre Office t'es bien moins sexy. J'ai déjà dû vendre des licences office juste parce que le gamin le trouvais plus jolie et que ces copains l'avaient… Un peu comme la mode du blackberry et maintenant d'iphone.
Il m'arrive sur une machine un peu près la même chose mais avec Excel et sans sharepoint. La personne ne peut pas enregistrer son taf que se soit un nouveau xls ou pas, en local ou pas et bien sûr le message d'erreur pourrait dire "prendre le balais à chiotte pour nettoyer les wc" que ça aiderait pas plus.
La solution qu'on a trouvé est de copier la totalité du tableau dans un nouveau fichier et de l'enregistrer sous un nouveau nom… Super pratique.
J'arrive à la conclusion que 42 n'est pas la solution à tout problème, le reboot sera telle la bonne ?
T'es mal barré pour faire évoluer tes utilisateurs et tes clients avec les choix fait par un certain éditeur que nous connaissons tout les deux ;)
Parfois je me demande tout de même si certain utilisateurs ne cherchent pas la merde. Au boulot je suis sur fedora avec en VM un seven, à la maison pareil et sur un portable en XP. Bon pour fedora pas de problèmes et étonnamment pour les windows non plus. Peut être parce que je ne bourrine pas mes machines ?! Quand je vois l'état dans lequel certain arrivent à mettre leur machine en me disant "j'ai rien fais de particulier" une petite voix intérieur me dit "Qu'est ce que tu me raconte là !" (version Arnold et Willy). Le problème ne serait pas entièrement la faute à microsoft…
Du coups j'ai fais un mixe des UUID et d'une règle udev. Dans mon script je vérifie si le disque est déjà monté et avant chaque vérification j'ai ajouté un sleep 10s pour être certain que deux montages se croisent pas, pour le moment je suis satisfais du résultat.
Je n'y avais pas pensé et je pense que ça sera bien plus simple pour fixer le point de montage mais ça ne règle pas mon problème de "multi" lancement de la commande RUN+=… de ma règle udev.
Je ne sais pas trop mais slapcat attaque directement les fichiers de l'annuaire sans passer par le serveur avec des risques de corruption… Enfin c'est ce que j'ai lu un peu de partout.
[^] # Re: select... timeout...sgbd ?
Posté par Philippe M (site web personnel) . En réponse au message Rsyncd et building file list. Évalué à 2.
Bingo j'ai exclu le fichier listener.log et ça marche… jusqu'au prochain blocage. Maintenant bug ou comportement normal je sais pas trop.
Born to Kill EndUser !
[^] # Re: select... timeout...sgbd ?
Posté par Philippe M (site web personnel) . En réponse au message Rsyncd et building file list. Évalué à 2. Dernière modification le 10 octobre 2013 à 11:15.
Un petit peu plus d'infos. J'ai essayé de lancer le strace tout de suite au lancement du processus
Au bout de 20mn j'ai arrêté le strace sur le pid 7067. J'ai l'impression qu'il bloc sur le fichier listener.log qui est le fichier log du processus oracle listener qui forcement n'est pas arrêté au moment de la sauvegarde. Par curiosité j'ai fais un rsync directement dessus
Pas d'erreur.
Born to Kill EndUser !
[^] # Re: select... timeout...sgbd ?
Posté par Philippe M (site web personnel) . En réponse au message Rsyncd et building file list. Évalué à 3.
Les fichiers qui servent à la base sont stocké dans un autre répertoire. /home/oracle est le répertoire d'installation, il y a des répertoires nécessaire à l'appli oracle :
Born to Kill EndUser !
[^] # Re: RDX vous connaissez ?
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 0.
Ca me rappel vaguement le VXA… dit-il en sifflant :)
Born to Kill EndUser !
[^] # Re: Attention Attention ...
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 1.
Disons que ma direction a des priorités et une fibre 100M, malgré tout le bien que je peux en dire, n'en fait pas partie. Encore heureux que les opérateurs proposent un choix mais il faut bien lire les petites lignes, dans le cas de l'offre orange à 79€ la limite de 2To peut être très vite atteinte même sans parler de faire de la sauvegarde.
Y a un peu de tout dans ces backups : du fichiers utilisateurs type office, du dump de base de données, du fichiers à plat, des photos (jpg, tif, eps), de la vidéos, des fichiers pst… Ce qui bouge souvent c'est les dumps, les fichiers à plat et les pst. Après le reste représente de petits volumes.
Born to Kill EndUser !
[^] # Re: Attention Attention ...
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 0.
Pendant l'échange d'idées, pour l'apéro t'a prévue des ptits dev en croute doré au four histoire d'en éliminer un ou deux ? :D
Born to Kill EndUser !
[^] # Re: Attention Attention ...
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 0.
Lors de l'étude de l'installation de la fibre la réponse d'orange a été sans appel "On fait pas dans votre rue"… Le tec de sfr qui est venu faire le raccordement a bien rit car il y avait tout ce qu'il faut au niveau installation d'orange.
Je suis étonné du montant que t'annonce pour du 100M assuré et symétrique à 79€ par mois… Ensuite juste le petit 1 est drôle
200 c'est le débit max que potentiellement tu peux attendre mais ils assurent rien et la limite de 2To ça va faire juste pour faire du backup. Et 200M débit IP c'est pas très parlant, au final j'aurais combien pour de vrai ? La livebox elle est pas rackable en plus :D
Chez SFR j'ai certe que 6M pour le moment mais c'est de l'assuré… au moins sur leurs installations
Born to Kill EndUser !
[^] # Re: Attention Attention ...
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 0.
Effectivement tu connais un peu le bouzin chez moi pour en avoir longuement parlé :)
Je pense que je vais pas avoir le choix mais ça n'élimine pas le problème de "je suis pas la pour mettre la cartouche… bah y a pas de backup qui se lance" Allez soyons fou un robot… Mais si personne ne prends la cassette le soir en partant c'est le même problème.
C'est pas tellement faire le backup qui me pose problème mais c'est sortir ces backups de nos locaux… C'est un vrai casse tête !
Je suis pour la simplicité c'est pour ça que j'ai mis backuppc en place, il va très bien. Quand à la restauration, à tester régulièrement, d'ailleurs tu risque d'en entendre parlé début 2014 mais avant nous avons une connaissance commune qui commence à raler que les serveurs prod et test sont désynchro… pfff ces dev qui triture la prod sans reporter les modifs sur le test (je sais normalement c'est dans l'autre sens… mais c'est un peu la 4ème dimension chez les dev ;) ).
Born to Kill EndUser !
[^] # Re: 120 Go, vraiment ?
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 0.
Moins de place en stockage, moins de temps de transfert mais est-ce que ça compense le temps de compression ? A tester…
Born to Kill EndUser !
[^] # Re: voir les solutions proposés dans ton precedent sujet
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 1. Dernière modification le 26 septembre 2013 à 10:11.
Je ne l'ai pas dis tout simplement parce que ma question est "Est-ce que rsync transfert que la différence des fichiers correspond au mode bloc de certaine solution du marché".
Certes ma question en fin de post laisse penser que je cherche une solution pour contourner ce problème. C'est une erreur de l'avoir posé ainsi.
Born to Kill EndUser !
[^] # Re: question con
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à -1.
Le temps de compression + le temps de transfert serait surement bien plus long que sans compression. Déjà que la création d'une list de fichiers par rsync est longue.
Born to Kill EndUser !
[^] # Re: 120 Go, vraiment ?
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 1.
Ca ne concerne pas que mes utilisateurs, il y a les dump oracles, des fichiers à plat très volumineux et c'est ici le plus gros volume et en plus ils bougent tout les jours. Quand à changer la méthode des fichiers à plat c'est tout simplement impossible pour différente raison qui ne relève plus de moi.
Born to Kill EndUser !
[^] # Re: Astuce
Posté par Philippe M (site web personnel) . En réponse au message rsync et mode bloc. Évalué à 0.
Au début j'utilisais cp -al mais j'ai découvert l'option --link-dest de rsync qui reproduit le même comportement, ça évite une étape.
Born to Kill EndUser !
[^] # Re: pop3
Posté par Philippe M (site web personnel) . En réponse à la dépêche Atelier serveur de messagerie Postfix. Évalué à 2.
Ceux qui ont des utilisateurs avec plusieurs Go de mail :(
Born to Kill EndUser !
[^] # Re: Ça fait envie
Posté par Philippe M (site web personnel) . En réponse au journal MS Office c'est vraiment de la merde. Évalué à 6.
Et bien non, il y a un point à prendre en compte. Les rubans office sont sexy pour certain jeunes… forcement quand t'arrive avec ton interface Libre Office t'es bien moins sexy. J'ai déjà dû vendre des licences office juste parce que le gamin le trouvais plus jolie et que ces copains l'avaient… Un peu comme la mode du blackberry et maintenant d'iphone.
Born to Kill EndUser !
[^] # Re: Tu es dur
Posté par Philippe M (site web personnel) . En réponse au journal MS Office c'est vraiment de la merde. Évalué à 3.
L'intégration est génial ! outlook, explorer, IE prévisualise les fichiers doc et xls sans avoir besoin de les ouvrir…
Born to Kill EndUser !
# Excel... même combat
Posté par Philippe M (site web personnel) . En réponse au journal MS Office c'est vraiment de la merde. Évalué à 7.
Il m'arrive sur une machine un peu près la même chose mais avec Excel et sans sharepoint. La personne ne peut pas enregistrer son taf que se soit un nouveau xls ou pas, en local ou pas et bien sûr le message d'erreur pourrait dire "prendre le balais à chiotte pour nettoyer les wc" que ça aiderait pas plus.
La solution qu'on a trouvé est de copier la totalité du tableau dans un nouveau fichier et de l'enregistrer sous un nouveau nom… Super pratique.
Born to Kill EndUser !
[^] # Re: Bienvenu en absurdie
Posté par Philippe M (site web personnel) . En réponse au journal MS Office c'est vraiment de la merde. Évalué à 4.
J'arrive à la conclusion que 42 n'est pas la solution à tout problème, le reboot sera telle la bonne ?
T'es mal barré pour faire évoluer tes utilisateurs et tes clients avec les choix fait par un certain éditeur que nous connaissons tout les deux ;)
Parfois je me demande tout de même si certain utilisateurs ne cherchent pas la merde. Au boulot je suis sur fedora avec en VM un seven, à la maison pareil et sur un portable en XP. Bon pour fedora pas de problèmes et étonnamment pour les windows non plus. Peut être parce que je ne bourrine pas mes machines ?! Quand je vois l'état dans lequel certain arrivent à mettre leur machine en me disant "j'ai rien fais de particulier" une petite voix intérieur me dit "Qu'est ce que tu me raconte là !" (version Arnold et Willy). Le problème ne serait pas entièrement la faute à microsoft…
Born to Kill EndUser !
[^] # Re: Incliné
Posté par Philippe M (site web personnel) . En réponse au journal Le tourbillon mystérieux des mondiaux de natation. Évalué à 3.
Va falloir trouver des sponsors chez les labo dentaires pour gérer le coût de pétage de dents des nageurs lors des départs.
Born to Kill EndUser !
[^] # Re: Incliné
Posté par Philippe M (site web personnel) . En réponse au journal Le tourbillon mystérieux des mondiaux de natation. Évalué à 7.
Si la piscine est dans l'hémisphère sud ça change quelque chose ?
Born to Kill EndUser !
# Incliné
Posté par Philippe M (site web personnel) . En réponse au journal Le tourbillon mystérieux des mondiaux de natation. Évalué à 10.
C'est peut être l'eau qui penche ? ;)
Born to Kill EndUser !
[^] # Re: fstab, uuid
Posté par Philippe M (site web personnel) . En réponse au message Règle udev. Évalué à 1.
Du coups j'ai fais un mixe des UUID et d'une règle udev. Dans mon script je vérifie si le disque est déjà monté et avant chaque vérification j'ai ajouté un sleep 10s pour être certain que deux montages se croisent pas, pour le moment je suis satisfais du résultat.
Merci à tous pour l'aide.
Born to Kill EndUser !
[^] # Re: fstab, uuid
Posté par Philippe M (site web personnel) . En réponse au message Règle udev. Évalué à 1.
Je n'y avais pas pensé et je pense que ça sera bien plus simple pour fixer le point de montage mais ça ne règle pas mon problème de "multi" lancement de la commande RUN+=… de ma règle udev.
Born to Kill EndUser !
[^] # Re: faudra bien choisir ta distrib
Posté par Philippe M (site web personnel) . En réponse au message Linux sur un serveur IBM 7029-6E3. Évalué à 1.
J'en étais arrivé à Debian aussi, maintenant est-ce que quelqu'un a des retours de mise en prod ?
Born to Kill EndUser !
[^] # Re: ben ... slapcat !
Posté par Philippe M (site web personnel) . En réponse au message Sauvegarde ldap à chaud. Évalué à 1.
Je ne sais pas trop mais slapcat attaque directement les fichiers de l'annuaire sans passer par le serveur avec des risques de corruption… Enfin c'est ce que j'ai lu un peu de partout.
Born to Kill EndUser !