Journal Hubic, 11ans et finalement pas de second souffle...

Posté par  . Licence CC By‑SA.
13
10
juin
2022

Il y a quelques mois j'avais écrit ce journal: https://linuxfr.org/users/polochon-2/journaux/hubic-10-ans-et-nouveau-souffle m’interrogeant sur une potentielle 2ème vie de ce service parfois décrié mais appréciés par certains (dont moi).

Hélas, j'ai reçu il y a un peu cet email:

Cher polochon

Les offres hubiC telles qu'elles existent actuellement s’arrêtent. Vous concernant, votre compte sera inaccessible à partir du 22 août 2022. Nous tenons à vous remercier de votre confiance et votre fidélité durant toutes ces années, et espérons qu'hubiC vous a donné satisfaction.

Un nouveau service, Shadow Drive, résolument enrichi et tourné vers l'avenir, vient d’être annoncé. Il s’agit d’une solution sécurisée et accessible à tous, construite en partenariat avec NextCloud, le leader mondial du stockage cloud open source. Shadow Drive sera accessible gratuitement jusqu'à 20 Go de stockage, tandis qu'une version premium du service sera disponible à partir de 8.99€ par mois, avec un stockage pouvant aller jusqu'à 2 To.

En tant que client hubiC fidèle, nous vous proposons d’être parmi les premiers à vivre l’expérience Shadow Drive et son lancement en accès anticipé. Si vous choisissez l’offre 2To, nous migrerons avec plaisir vos données hubiC vers Shadow Drive.

Donc le service passe de 10To/5€ par mois à 2To/9€… je ne pense pas donner suite!

Malheureusement il n'existe pas d'offres similaires avec un tarif inférieur ou égal à 5€. J'hésite à basculer sur https://www.infomaniak.com/fr/kdrive avec un compte solo (et une réduction si abonnement sur plusieurs années). Tarif raisonnable vu la concurrence, pas de GAFAM. Je dois pouvoir tout faire tenir dans 2To en faisant un gros tri (qui ne ferais pas de mal)
Petite réticence, il semble que par défaut l'excellent https://rclone.org/#providers ne supporte pas kdrive en natif et qu'il faille passer par un montage webdav intermédiaire. Je n'ai aucune idée de la fiabilité de ce système, le but étant de téléverser toutes mes sauvegardes borg.

Quelqu'un a t-il parmi vous une expérience avec le combo kdrive et rclone? En tout cas c'est reparti pour un tour de jus de cerveau…

Polochon

  • # Hetzner Storage-Share?

    Posté par  . Évalué à 6.

    C'est pas équivalent, mais… Hetzner propose un Nextcloud managé de 5To pour 15€/mois (formule "NX21"). Pour le moment, j'ai testé les NX11 (1To/5€) et j'en suis satisfait…

  • # Infomaniak Swiss Backup

    Posté par  (site web personnel, Mastodon) . Évalué à 5.

    Quelqu'un a t-il parmi vous une expérience avec le combo kdrive et rclone? En tout cas c'est reparti pour un tour de jus de cerveau…

    Non, je n'ai pas essayé kdrive avec rclone.

    Petite réticence, il semble que par défaut l'excellent https://rclone.org/#providers ne supporte pas kdrive en natif et qu'il faille passer par un montage webdav intermédiaire. Je n'ai aucune idée de la fiabilité de ce système, le but étant de téléverser toutes mes sauvegardes borg.

    Par contre, Infomaniak a une offre Swiss Backup que j'utilise justement pour envoyer les backups incrémentaux avec rclone.

    • [^] # Re: Infomaniak Swiss Backup

      Posté par  . Évalué à 3.

      Pareil, je suis sur swissbackup, chiffré côté client par rclone pour mes backups offsite. Si ton borg fait déjà le chiffrement, tu auras une configuration vraiment très simple.

      KDrive est un service de synchronisation automatique pour avoir ses données accessibles sur plusieurs appareils, ce n'est pas tellement adapté pour des sauvegardes.

      Voir ici pour la différence entre les deux : https://www.infomaniak.com/en/swiss-backup .

      Backblaze est à peu près au même tarif que InfoManiak, sinon (5€/To/mois en gros).

  • # Chez les Chatons

    Posté par  (site web personnel) . Évalué à 3.

    Il y a pas mal d'offres basées sur NextCloud, donc avec des prix et des conditions différentes :
    https://www.chatons.org/search/by-service?service_type_target_id=All&field_software_target_id=271

    Pourquoi bloquer la publicité et les traqueurs : https://greboca.com/Pourquoi-bloquer-la-publicite-et-les-traqueurs.html

    • [^] # Re: Chez les Chatons

      Posté par  . Évalué à 10.

      Il y a peut-être des chances pour que ledit chaton te regarde étrangement si tu lui demandes 10To de stockage…

      Matricule 23415

  • # Heal The World

    Posté par  . Évalué à 10.

    C'est peut être pas plus mal que ça coûte un peu… Sérieusement 2 To ça commence à faire pas mal je trouve ça bien d'avoir besoin de rationaliser🙂. Je me souviens d'un temps où le ménage se faisait tout seul quand ton disque lâchait et que ton cd gravé n'était plus lisible(et je parle pas des floppy, oui je suis vieux…) maintenant on a un nas à la maison plus un backup dans le cloud voir une synchro avec un autre nas chez un copain ou la famille… Mais est-ce que tout ce que l'on garde est vraiment utile/indispensable ? Je crois que j'ai une idée de la réponse quand je vois Flickr, YouTube, insta & co.

  • # Stockage objet

    Posté par  (site web personnel) . Évalué à 5.

    Nextcloud et les autres sont destinés à un usage "interactif", soit par l'interface web, soit via un montage webdav. Cela suppose l'infra suivante:
    - un stockage sur disques rapides, à plateau ou SSD, en RAID pour augmenter la disponibilité
    - des sauvegardes régulières de ces données pour augmenter la résilience
    - des serveurs web qui font le passe-plats

    Si on usage est non-interactif et à faible volume de lecture (ce qui est le cas de tes sauvegardes borg), tu devrais regarder du côté des offres stockage d'objet / blob storage, qui ont un coût opérationnel bien plus faible pour le fournisseur. La tarification est souvent différente: le stockage coûte peu, mais le plus gros de la facture est le nombre d'écritures / lectures (car c'est cela qui revient cher). Borg est capable de directement écrire sur S3, et rclone supporte aussi le protocole. En dehors des GAFAM, tu as plusieurs alternatives européennes à ta disposition.

    • [^] # Re: Stockage objet

      Posté par  (site web personnel) . Évalué à 5.

      Tu connais un tuto avec borg qui accéde a un S3 ?

      "La première sécurité est la liberté"

      • [^] # Re: Stockage objet

        Posté par  (site web personnel) . Évalué à 3.

        Mes excuses: le café n'était pas encore arrivé au cerveau et j'ai écrit cette affirmation sans la vérifier. Borg ne supporte pas nativement S3 comme destination. Certains utilisateurs proposent de monter le bucket S3 comme une partition, via rclone ou fuse, mais il y a des risques quand à la cohérence des données: les blob storage ne sont pas tous "strongly consistent", S3 ne l'est que depuis peu.

        Puisque polochon utilise actuellement un repo borg local et rclone, il peut conserver ce flow et simplement changer la destination du transfert rclone.

        Pour une utilisation native de S3, je suggérerai d'essayer duplicity[1] et son frontend duply[2]

        [1] https://duplicity.gitlab.io/
        [2] https://duply.net/Duply_(simple_duplicity)

        • [^] # Re: Stockage objet

          Posté par  . Évalué à 2.

          Yes, comme je suis derrière un ADSL de campagne, je ne peux pas me permettre de directement backuper sur un stockage distant avec borg.
          Du coup je sauvegarde tout sur un raspberrypi en local, qui se charge ensuite de synchroniser la copie locale avec la distante (donc actuellement hubic) via rclone. C'est assez basique mais c'est simple, pas prise de tête et à part le 1ère upload qui prend des semaines les synchronisations se font en quelques heures.
          Et ma foi, à chaque fois que j'ai un test de récup c'était lent mais ça marchait!

          • [^] # Re: Stockage objet

            Posté par  (Mastodon) . Évalué à 7.

            Et du coup plutôt que de chercher une solution cloud, pourquoi ne pas investir dans un disque attaché à une autre pi, nuc ou synology et hébergé chez des amis ou la famille et synchroniser à base de simple rsync (si tu tiens au S3 tu peux toujours faire tourner minio)? Je conseille toute de même de mettre en place une solution qui fait des snapshots automatique pour ne pas synchroniser de la merde si tu as de la corruption sur ton pi local.

            Sur 5 à 10 ans, en partant du principe que tu achètes un disque dur de qualité que tu remplace à minima tous les 5 ans par sécurité ça reste relativement rentable comparé à du cloud. Et tu peux assurer plus de redondance en multipliant facilement ce genre de setups.

            Et le jour où ta maison brûle et que tu as un réel besoin de disaster recovery, tu peux demander à tes proches d'envoyer le disque par la poste (ou aller le chercher si c'est tout près). Bien plus rapide que de restaurer des Terabytes par le réseau et t'as pas le risque d'avoir perdu l'accès à ton espace cloud parce que t'as perdu le mot de passe ou la clé API.

    • [^] # Re: Stockage objet

      Posté par  . Évalué à 5. Dernière modification le 11 juin 2022 à 17:39.

      En S3 pas "prise de tête" (i.e. pas de facturation des E/S), il y a wasabi. Intéressant seulement à partir de 1 To (minimum facturé), environ 5 US$/mois/1To. Il y a des sites en Europe (Amsterdam et Paris). Rapide. Je l'utilise depuis plus de 2 ans sans problème. L'avantage de l'absence de facturation des E/S est qu'on hésite moins à faire des vérifications sur les backups.

      PS. Un compte peut avoir plusieurs sockets différents (un par utilisateur, avec chacun ses propres droits, par exemple) et les mutualiser pour atteindre ou dépasser 1 To.

      • [^] # Re: Stockage objet

        Posté par  . Évalué à 0.

        Je confirme, Wasabi c'est du solide.
        Pour encore moins cher du To, regarder du côté de Scaleway Glacier.
        Après, si on est prêt à faire de la "bidouille", il y a potentiellement encore moins cher avec une offre Microsoft 365 Family : 1 To par personne jusqu'à 6 personnes en tout.
        Il suffit de créer des comptes Microsoft indépendants et de les associer au compte principal.
        On peut éventuellement ensuite utiliser rclone qui permet d'offrir un espace de stockage de 6 To unifié en WebDAV par exemple.

        • [^] # Re: Stockage objet

          Posté par  . Évalué à 3.

          Pour encore moins cher du To, regarder du côté de Scaleway Glacier.

          Comme aws glacier ce n'est pas pour n'importe quelle sauvegarde. C'est pour des données immuables que tu veux garder longtemps. Pour les photos et vidéos de famille ça peux être très bien, mais pour la sauvegarde faite pour survivre à un crash disque avec ton /home que tu sauvegarde complètement hebdomadairement et incrémentallement quotidiennement ça va pas le faire.

          https://linuxfr.org/users/barmic/journaux/y-en-a-marre-de-ce-gros-troll

          • [^] # Re: Stockage objet

            Posté par  . Évalué à 0.

            Par rapport à quelles caractéristiques serait une telle sauvegarde non adaptée pour Scaleway Glacier ?

            • [^] # Re: Stockage objet

              Posté par  . Évalué à 2.

              Je suis peut être allé un peu vite quand j'avais regardé aws glacier la suppression était coûteuse. Là tu peux t'en tirer avec des politiques de rétentions. Par contre c'est vraiment lent de restaurer depuis scalway glacier, ils disent eux-même la restauration peut être très très longue https://www.scaleway.com/en/docs/faq/coldstorage/#i-have-started-the-restoration-of-an-object-why-is-it-not-available-instantaneously faut accepter d'avoir plusieurs jours d'indispo quand on se base dessus.

              https://linuxfr.org/users/barmic/journaux/y-en-a-marre-de-ce-gros-troll

            • [^] # Re: Stockage objet

              Posté par  . Évalué à 3.

              Alors, ça dépend des cas, mais souvent, ça demande un accès assez rapide pour restorer. Scaleway Glacier demande jusqu'à 24h pour les premiers bytes et ne fournit aucune limite pour le reste https://www.scaleway.com/en/docs/faq/coldstorage/#i-have-started-the-restoration-of-an-object-why-is-it-not-available-instantaneously

              « Rappelez-vous toujours que si la Gestapo avait les moyens de vous faire parler, les politiciens ont, eux, les moyens de vous faire taire. » Coluche

            • [^] # Re: Stockage objet

              Posté par  . Évalué à 1.

              À part quelques "micro essais", je n'ai pas encore fait grand chose avec Scaleway Glacier, mais les temps de restauration (pour des petits fichiers) étaient plus ou moins imperceptibles.
              En tout cas pas du tout 24h. Qui, même dans le pire des cas donc, me semble tout à faire raisonnable pour un usage perso.
              Ou alors c'est l'époque actuelle qui veut que tout soit disponible instantanément :)
              Quand ils écrivent dans la FAQ:

              We recommend that you use Glacier to archive data that you may need only once or twice within a decade.

              Je trouve leur critère top strict.

              • [^] # Re: Stockage objet

                Posté par  . Évalué à 3.

                On parle de temps garanti. Évidemment, ça peut aller plus vite. Et 24h, c'est pour les premiers octets, pas pour toutes les données, ce qui peut être bien plus long. Donc tu peux tester, mais si le jour de la restauration en condition réel, il te faut une semaine, tu ne pourras pas te plaindre.

                « Rappelez-vous toujours que si la Gestapo avait les moyens de vous faire parler, les politiciens ont, eux, les moyens de vous faire taire. » Coluche

              • [^] # Re: Stockage objet

                Posté par  . Évalué à 2.

                Je trouve leur critère top strict.

                Fais attention parce que c'est ce que eux vendent. Ils font mieux aujourd'hui ? Cool, mais si demain ils te disent que ta restauration mettra 6 mois à finir, tu ne pourra pas leur dire qu'ils n'ont pas prévenu.

                https://linuxfr.org/users/barmic/journaux/y-en-a-marre-de-ce-gros-troll

  • # storage box hetzner supporte borg

    Posté par  (site web personnel, Mastodon) . Évalué à 2.

    salut
    y a ceci:
    https://www.hetzner.com/de/storage/storage-box?country=fr

    ça supporte borgbackup, également plein d'autre protocole.
    J'utilise ceci pour sauvegarder mon synology et d'autre serveur linux.
    Pour le synology il ne faut pas prendre rsync mais plutôt webdav (j'ai galérer un moment).
    Pour borgbackup j'ai pas testé je l'utilise pas.
    Sur mon pc principal (ubuntu) je sauvegarde ce que je ne synchronise pas avec mon synology (mon rush vidéo) avec duplicity et ça marche très bien.

    Après tu peux programmer des snapshots automatique sur ton storage box, ça permet si ton infra est piraté et qu'on t'efface toutes des sauvegarder de faire un rollback avant.

    ça repose sur du zfs

    • [^] # Re: storage box hetzner supporte borg

      Posté par  . Évalué à 1.

      Que ce soit pour Storage Box et Storage Share, je ne vois aucun engagement de la part de Hetzner en terme d'accessibilité et durabilité des données.
      Genre S3 qui s'engage sur 99,999999999 % de durabilité et 99,99 % de disponibilité des objets sur une année donnée.
      Scaleway par exemple mentionne des nombres équivalent.
      Mais pour Hetzner, c'est un peu flou. Seul l'offre Storage Share mentionne quelque chose comme:

      How do we keep your data secure with Storage Share?
      The Storage Share file system can tolerate several simultaneous drive failures. As soon as we detect any irregularies with our drives, we will exchange them immediately, thereby further decreasing the chance of failure to a very low level.

      In addition, our Storage Share file system checks the integrity of the data using checksums and automatically corrects errors. We've created high-availability cluster for the instance databases, making the chances of a complete failure very minimal. A backup is also performed automatically several times a day. Finally, if you choose to synchronize your Storage Share data with your own computer or device using client software, you will have an additional copy of your data.

  • # Thanks!

    Posté par  . Évalué à 2.

    Merci pour toutes ces réponses, c'est vrai qu'en tant qu'utilisateur d'hubic je regardais du côté des solutions équivalentes mais qui effectivement ne correspondent pas à mon cas d'usage principal (je me servais parfois d'hubic aussi pour accéder à quelques fichiers mais c'était anecdotique comme usage).
    J'ai bien fait de poser la question!

    • [^] # Re: Thanks!

      Posté par  (site web personnel, Mastodon) . Évalué à 2.

      Il y a aussi borgbase qui est bien et pas très cher : https://www.borgbase.com/

      et tu peux faire un don à borgbackup avec ta souscription :)

      « Je vois bien à quels excès peut conduire une démocratie d'opinion débridée, je le vis tous les jours. » (Nicolas Sarkozy)

      • [^] # Re: Thanks!

        Posté par  . Évalué à 1.

        $12.5/month pour 2To! C'est 2X plus cher que chez Infomaniak (mais c'est peut être très bien techniquement parlant pour autant)

        • [^] # Re: Thanks!

          Posté par  (site web personnel, Mastodon) . Évalué à 2.

          kDrive n'est pas chiffré :)

          « Je vois bien à quels excès peut conduire une démocratie d'opinion débridée, je le vis tous les jours. » (Nicolas Sarkozy)

  • # OpenDrive

    Posté par  . Évalué à 2.

    je suis tombé dessus par hasard ; Opendrive dispose d'une offre illimité pour l'usage particulier. Je ne sais pas ce que ca vaut. J'ai trouvé le lien sur l'appli de synchro DavSync.

    Je suis tenté pour expérimenter l'offre Free. Ca peut donner une idée du service. A voir si à l'instar de certains clés USB, dès qu'on dépasse un certain seuil, le service converge vers le zéro absolu.

Suivre le flux des commentaires

Note : les commentaires appartiennent à celles et ceux qui les ont postés. Nous n’en sommes pas responsables.