Auteur Sujet: Sauvegarde incrémentielle et différentielle d'un serveur  (Lu 6691 fois)

0 Membres et 1 Invité sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 43 044
    • Twitter LaFibre.info
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #12 le: 08 novembre 2021 à 17:41:46 »
Merci, je pense que ncat cela sera mieux que tcptraceroute. Ce dernier est assez lent pour voir si un port est ouvert.

Mon pré-requis était qu'il tourne sans avoir besoin des droits root, ce qui semble bien le cas de ncat.

Quand j'ai un peu de temps, je modifie le script.

flying38

  • Abonné Orange Fibre
  • *
  • Messages: 21
  • Briord - 01
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #13 le: 10 novembre 2021 à 16:29:55 »
Bonjour,

Sinon, il y'a le très bon Veeam Agent for Linux qui est gratuit: https://www.veeam.com/fr/linux-backup-free.html

Kedare

  • Expert Scaleway
  • Expert
  • *
  • Messages: 144
  • Nantes (44)
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #14 le: 16 novembre 2021 à 11:59:03 »
Pour les backups j'ai tendance a préférer les object storage ou autre (ca coute moins cher au final et rien a gérer), j'utilisais pendant pas mal de temps rclone avec du bucket backblaze et du lifecycle policy (pour garder les X anciennes version pendant plusieurs jours), puis je suis passé récemment sur https://kopia.io/ qui gère ca lui même et j'ai mis ca sur de l'object storage chez nous (Scaleway) a Amsterdam.

Ça juste marche et c'est relativement simple a configurer (avec chiffrage et compression)

M@yeulC

  • Abonné Bouygues Telecom 4G/5G
  • *
  • Messages: 42
  • Cambrousse Ardéchoise ou Lyon
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #15 le: 25 novembre 2021 à 17:08:36 »
Personnellement je recommande borg-backup. C'est super, et gère la dé-duplication et le chiffrement.

En interne, ça se passe un peu comme git: il y a des dépots distants et locaux, et des rolling hash pour la déduplication.

Je n'ai pas testé voir comment il se comportait avec les fichiers sparse ("troués" là où ils n'ont pas été écrits), les reflinks (copy on write) et les hard links (fichiers partageant l'inode). Mais pour le reste, nickel!

J'ai récemment mis en place borgmatic: https://torsion.org/borgmatic/

Pour ce qui est du serveur, rsync.net propose de l'espace de stockage à un prix raisonable. Assez facile de donner de l'espace à des amis via SSH sécurisé (accès uniquement à la commande `borg`).

kazyor

  • Expert SFR
  • Expert
  • *
  • Messages: 1 257
  • Lyon 7ème (69)
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #16 le: 25 novembre 2021 à 17:12:36 »
Question bête, qqn a déjà regardé comment backup des fichiers CSV ?

Avec un tri du fichier, et un git / diff, on peut éviter la duplication d'une ligne si elle est identique.
En revanche, dans le cas où nous avons qu'une colonne qui change, la ligne étant complètement différente, on duplique tous les champs.

En bref, vous connaissez un outil à la diff qui sait gérer les CSV ?

Kedare

  • Expert Scaleway
  • Expert
  • *
  • Messages: 144
  • Nantes (44)
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #17 le: 30 novembre 2021 à 14:52:18 »
Question bête, qqn a déjà regardé comment backup des fichiers CSV ?

Avec un tri du fichier, et un git / diff, on peut éviter la duplication d'une ligne si elle est identique.
En revanche, dans le cas où nous avons qu'une colonne qui change, la ligne étant complètement différente, on duplique tous les champs.

En bref, vous connaissez un outil à la diff qui sait gérer les CSV ?

Quand tu commence à avoir des besoins comme ca c'est peut être temps de passer a autre chose que du CSV :)

Ce genre de diff est en général géré sans soucis via les binlogs des bases de données.

kazyor

  • Expert SFR
  • Expert
  • *
  • Messages: 1 257
  • Lyon 7ème (69)
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #18 le: 30 novembre 2021 à 15:19:08 »
Ce n'est pas moi qui choisi le format d'échange :)
En l’occurrence, export quotidien de données peu volatiles.
Si je pouvais ne pas archiver bêtement, ça serait top ...

JeannotPlanche

  • Expert Scaleway
  • Abonné Free fibre
  • *
  • Messages: 109
  • 93
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #19 le: 30 novembre 2021 à 20:13:42 »
puis je suis passé récemment sur https://kopia.io/ qui gère ca lui même et j'ai mis ca sur de l'object storage chez nous (Scaleway) a Amsterdam.

Je ne connaissais pas Kopia ! Comment le comparerais-tu à Restic ?


Kedare

  • Expert Scaleway
  • Expert
  • *
  • Messages: 144
  • Nantes (44)
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #20 le: 03 décembre 2021 à 14:20:21 »
Je ne connaissais pas Kopia ! Comment le comparerais-tu à Restic ?

Je connais pas du tout Restic donc je pourrais pas comparer,
Mais Kopia est vraiment simple a config en tout cas, et ca gère la compression et le chiffrage automatiquement (avec des algos configurable pour les deux selon le besoin)

M@yeulC

  • Abonné Bouygues Telecom 4G/5G
  • *
  • Messages: 42
  • Cambrousse Ardéchoise ou Lyon
Sauvegarde incrémentielle et différentielle d'un serveur
« Réponse #21 le: 11 décembre 2021 à 18:31:07 »
Question bête, qqn a déjà regardé comment backup des fichiers CSV ?

Avec un tri du fichier, et un git / diff, on peut éviter la duplication d'une ligne si elle est identique.
En revanche, dans le cas où nous avons qu'une colonne qui change, la ligne étant complètement différente, on duplique tous les champs.

En bref, vous connaissez un outil à la diff qui sait gérer les CSV ?

De la simple compression devrait gérer cela très efficacement. Pour stocker de multiples copies sauvegardées ? Des snapshots de système de fichier, ou quelque chose avec des rolling hashes, peut-être ostree, ou la plupart des outils avec dé-duplication (borg inclus).