[Bacula-users-fr] Re : Re : Comment reduire le temps de backup avec Bacula 5.2.6

[claude b. <cl...@ya...>]

Merci Stéphane.

> - compression activé :  GZIP

Je ne connais pas exactement les types de fichiers qui seront backuper. C'est le cadre de test qu'on m'a communiquer un ensemble des répertoires à sauvegarder sur des différent servers. C'est pourquoi, j'ai opté pour une compression GZIP.

> - débit observé sur le disque : je ne dispose pas d'outil pour pouvoir
> le mesurer (si qlq en dispose, je suis preneur)


J'ai installé le package "atop" pour pouvoir auditer les performences des disk, reseau, mémoire, et cpu... j'aurais les résultats lundi (après le test de bckp full)

En fin, je suis d'accord, que la VM n'est pas adapter pour la prod ... il est prévu d'investir dans le cadre d'une implémentation finale en production (nous sommes une très petite stucture. Nous avons des moyens très limités)... Mais il faut convaincre  la DSI avant ...

cordialement




________________________________
 De : Stephane Dupuis <ho...@fr...>
À : claude baryo <cl...@ya...> 
Cc : Buschini Edouard <mo...@ij...>; "bac...@li..." <bac...@li...> 
Envoyé le : Mercredi 14 mars 2012 11h49
Objet : Re: Re : [Bacula-users-fr] Comment reduire le temps de backup avec Bacula 5.2.6
 

Bonjour,

> - compression activé :  GZIP


Cette compression est elle vraiment nécessaire ? Quels seront les
types de fichiers sauvegardés ? Si ce sont des fichiers textes,
des binaires, des fichiers de configurations, alors pourquoi pas.
Mais si ce sont des données déjà compressés (vidéos, archives...)
alors il faut absolument désactiver la compression.

> - débit observé sur le disque : je ne dispose pas d'outil pour pouvoir
> le mesurer (si qlq en dispose, je suis prenneur)

Ce n'est pas ce qui manque sous unix ! (et linux donc).
La commande : iostat -m 2  vous donnera un apercu du débit
sur les disques (exprimé en MB/s) toutes les 2 secondes.

> # hdparm -tT /dev/sdb1
> /dev/sda:
>  Timing buffer-cache reads:   4790 MB in  2.00 seconds =2396.65 MB/sec
>  Timing buffered disk reads:  254 MB in  3.01 seconds = 84.44 MB/sec

Cela ne signifie rien du tout. Ce genre de commande ne peut servir qu'a
mesurer la bande passante du bus (et encore). A oublier :)


> Si quelqu'un dispose d'une autre méthode d'analyse, je suis tjrs
> preneurs

Lancez une sauvegarde. Pendant qu'elle se déroule, observez le
comportement de votre machine (commande top et commande iostat)
Éventuellement, copiez ici le résultat.


- configuration de stockage au niveau de la VM : En fait depuis le
client Vsphere, j'ai tout simplement ajouter un second disque pour
pouvoir s'en servir comme storage Device de Bacula ...

D'accord, mais quel type de disque ? Si vous avez simplement créer un
"disque virtuel" (fichier vmdk ou ce genre de chose) alors vous
n'écrivez pas un fichier dans un système de fichier sur un disque. 
Vous écrivez un fichier dans un systeme de fichier qui se trouve dans un
fichier sur un système de fichier dans un disque. Ouf. Il est évident
qu'en terme de performance, c'est bien différent. Surtout si au final,
les données qui sont lues et celles qui sont écrites le sont sur le
même disque physique. Utilisez des VM, c'est bien pour des tests
fonctionnels. Pas pour des tests de performances.


> 
> 
> ______________________________________________________________________
> De : "ho...@fr..." <ho...@fr...>
> À : Buschini Edouard <mo...@ij...> 
> Cc : claude baryo <cl...@ya...>;
> bac...@li... 
> Envoyé le : Mardi 13 mars 2012 14h58
> Objet : Re: [Bacula-users-fr] Comment reduire le temps de backup avec
> Bacula 5.2.6
> 
> 
> 
> Bonjour,
> 
> 200 Go en 11 heures, normal !?
> D'après mes calculs, et avec un débit de 50 Mo/s
> (un débit tout à fait normal sur les disques actuels)
> ces 200 Go devraient être copiés en un peu plus d'une heure.
> Avec ma configuration de bacula, il doit me falloir à peu
> près deux heures pour sauvegarder cette quantité de données.
> 
> Il y a donc clairement un problème, reste à trouver à quel niveau.
> Mais il nous manque bien trop d'informations pour faire un
> diagnostique.
> 
> (compression activé, oui ou non, quel est le débit observé sur le
> disque
> en écriture, est il stable, quel est la charge cpu, comment est
> configuré
> le stockage au niveau de la VM (disque virtuel ou réel) etc etc...
> 
> Cdlt,
> 
> ----- Buschini Edouard <mo...@ij...> a écrit :
> > Bonjour Claude !
> > 
> > Tu as plusieurs façons d'améliorer le temps :
> >  - Vérifie le débit entre ton Storage Daemon et ton File Daemon, si
> tes
> > sauvegardes se font sur un deuxième disque, il se peut que
> l'écriture soit
> > un peut lente.
> >  - Si tu n'y tiens pas, enlève la compression au niveau du fileset
> dans la
> > configuration de ton Director
> >  - Evite de mettre une taille maximal dans ton spool car si le spool
> est
> > plein il va devoir déspooler pour insérer les données dans les bons
> volumes
> > 
> > Mais je ne te conseil pas d'enlever la compression, bien qu'elle se
> fasse
> > au niveau client et que ça prends beaucoup de ton proc, c'est une
> option
> > bien utile.
> > Sinon 200go pour 11 heures je trouve ça largement raisonnable et je
> ne
> > pense pas que même de la copie toute bête soit beaucoup plus rapide.
> > 
> > Le 13 mars 2012 12:34, claude baryo <cl...@ya...> a écrit :
> > 
> > > Bonjour à tous,
> > >
> > > J'ai installé et configurer Bacula 5.2.6 sur un Debian Squeeze
> d'une
> > > VMWare.
> > > Les sauvegardes se font sur un deuxième disque dure...
> > >
> > > Problème : Je trouve que le backup de 200 g prend trop de temp
> (environ 11
> > > heures )
> > >
> > > comment faire pour reduire sensiblement le temps de sauvegarde ?
> > >
> > > cordialement
> > >
> > >
> > >
> > >
> > >
> > >
> ------------------------------------------------------------------------------
> > > Keep Your Developer Skills Current with LearnDevNow!
> > > The most comprehensive online learning library for Microsoft
> developers
> > > is just $99.99! Visual Studio, SharePoint, SQL - plus HTML5, CSS3,
> MVC3,
> > > Metro Style Apps, more. Free future releases when you subscribe
> now!
> > > http://p.sf.net/sfu/learndevnow-d2d
> > > _______________________________________________
> > > Bacula-users-fr mailing list
> > > Bac...@li...
> > > https://lists.sourceforge.net/lists/listinfo/bacula-users-fr
> > >
> > >
> > --
> > Edouard Buschini - Rentabiliweb Telecom
> 
> 
> 
>