From: Nicolas S. <nso...@hi...> - 2012-03-14 09:53:29
|
<html> <head> <meta content="text/html; charset=ISO-8859-1" http-equiv="Content-Type"> </head> <body bgcolor="#FFFFFF" text="#000000"> <font size="-1"><font face="Bitstream Vera Sans">Bonjour,<br> <br> Plusieurs choses pour votre install.<br> <br> Dans l'idéal, il est préférable d'installer les différents éléments de bacula sur des machines séparées (bien que le director puisse lui être installé sur la même machine que celle qui héberge la bdd (ou Catalog)). PostgreSQL est un bon choix et pour une architecture simple, vous pouvez commencer avec une configuration simple de PostgreSQL.<br> <br> Pour ce qui est des perfs maintenant, il est vrai que bacula mettra plus de temps pour backuper une multitude de petit fichiers. Si vous compressez par dessus, LE TOUT sur une VM, il est "normal" que les performances ne soient pas au rendez vous.<br> <br> Vous pouvez également regarder (via la commande top par exemple) les iowaits (%wa). Si ceux si sont élevés, alors cela peut expliquer (en tout cas en partit) votre problème.<br> <br> Pour votre installation en prod, je vous conseillerai : <br> - 1 machine (physique de préférence) pour bacula-dir + Catalog (bdd postgresql)<br> - 1 machine *physique* pour bacula-sd (Storage Daemon)<br> <br> Cordialement,<br> <br> -Nicolas SOULEMAN<br> <br> </font></font><br> On 3/14/12 10:02 AM, claude baryo wrote: <blockquote cite="mid:133...@we..." type="cite"> <div style="color:#000; background-color:#fff; font-family:times new roman, new york, times, serif;font-size:12pt"> <div>J'avoue que j'ai pris en charge le projet que depuis la semaine dernière et je ne connaissais rien de Bacula.</div> <div><br> </div> <div>Pour repondre à votre question, la Db utilisée est postgresql 9.1.2 installé sur la même VM que le director Bacula...</div> <div>Quel est à votre avis, le paramétrage correct ou efficient de postgresql ?</div> <div><br> </div> <div>Pour votre info, cette config est dans le cadre de test avant de prendre la décision d'implémenter bacula en prod.</div> <div><br> </div> <div>cordialement</div> <div><br> </div> <div><br> </div> <div style="font-size: 12pt; font-family: 'times new roman', 'new york', times, serif; "> <div style="font-size: 12pt; font-family: 'times new roman', 'new york', times, serif; "> <div dir="ltr"> <font face="Arial" size="2"> <hr size="1"> <b><span style="font-weight:bold;">De :</span></b> Bruno Friedmann <a class="moz-txt-link-rfc2396E" href="mailto:br...@io..."><br...@io...></a><br> <b><span style="font-weight: bold;">À :</span></b> claude baryo <a class="moz-txt-link-rfc2396E" href="mailto:cl...@ya..."><cl...@ya...></a> <br> <b><span style="font-weight: bold;">Envoyé le :</span></b> Mardi 13 mars 2012 17h48<br> <b><span style="font-weight: bold;">Objet :</span></b> Re: [Bacula-users-fr] Re : Comment reduire le temps de backup avec Bacula 5.2.6<br> </font> </div> <br> On Tuesday 13 March 2012 14.57:56 claude baryo wrote:<br> > Merci à tous pour vos reponses.<br> > <br> > trouvez ci-dessous les elements de reponse à vos interrogations :<br> > <br> > - compression activé : GZIP<br> > - débit observé sur le disque : je ne dispose pas d'outil pour pouvoir le mesurer (si qlq en dispose, je suis prenneur)<br> > Néanmoins j'avais effectué une test de temps de lecture du disque via la commande <br> > # hdparm -tT /dev/sdb1<br> > /dev/sda: Timing buffer-cache reads: 4790 MB in 2.00 seconds =2396.65 MB/sec<br> > Timing buffered disk reads: 254 MB in 3.01 seconds = 84.44 MB/sec<br> > - charge cpu : j'ai installé le package "atop" sur mon serveur.<br> > j'ai constaté que bacula consommait moins de 2% de CPU et de Mémoire<br> > <br> > Si quelqu'un dispose d'une autre méthode d'analyse, je suis tjrs preneurs<br> > <br> > - configuration de stockage au niveau de la VM : En fait depuis le client Vsphere, j'ai tout simplement ajouter un second disque pour pouvoir s'en servir comme storage Device de Bacula ...<br> > <br> > voilà. à votre disposition pour des précisions complémentaires...<br> > <br> > <br> > Claude B<br> > <br> > <br> > <br> > <br> > <br> > <br> > ________________________________<br> > De : "<a moz-do-not-send="true" ymailto="mailto:ho...@fr..." href="mailto:ho...@fr...">ho...@fr...</a>" <<a moz-do-not-send="true" ymailto="mailto:ho...@fr..." href="mailto:ho...@fr...">ho...@fr...</a>><br> > À : Buschini Edouard <<a moz-do-not-send="true" ymailto="mailto:mo...@ij..." href="mailto:mo...@ij...">mo...@ij...</a>> <br> > Cc : claude baryo <<a moz-do-not-send="true" ymailto="mailto:cl...@ya..." href="mailto:cl...@ya...">cl...@ya...</a>>; <a moz-do-not-send="true" ymailto="mailto:bac...@li..." href="mailto:bac...@li...">bac...@li...</a> <br> > Envoyé le : Mardi 13 mars 2012 14h58<br> > Objet : Re: [Bacula-users-fr] Comment reduire le temps de backup avec Bacula 5.2.6<br> > <br> > <br> > Bonjour,<br> > <br> > 200 Go en 11 heures, normal !?<br> > D'après mes calculs, et avec un débit de 50 Mo/s<br> > (un débit tout à fait normal sur les disques actuels)<br> > ces 200 Go devraient être copiés en un peu plus d'une heure.<br> > Avec ma configuration de bacula, il doit me falloir à peu<br> > près deux heures pour sauvegarder cette quantité de données.<br> > <br> > Il y a donc clairement un problème, reste à trouver à quel niveau.<br> > Mais il nous manque bien trop d'informations pour faire un diagnostique.<br> > <br> > (compression activé, oui ou non, quel est le débit observé sur le disque<br> > en écriture, est il stable, quel est la charge cpu, comment est configuré<br> > le stockage au niveau de la VM (disque virtuel ou réel) etc etc...<br> > <br> > Cdlt,<br> > <br> > ----- Buschini Edouard <<a moz-do-not-send="true" ymailto="mailto:mo...@ij..." href="mailto:mo...@ij...">mo...@ij...</a>> a écrit :<br> > > Bonjour Claude !<br> > > <br> > > Tu as plusieurs façons d'améliorer le temps :<br> > > - Vérifie le débit entre ton Storage Daemon et ton File Daemon, si tes<br> > > sauvegardes se font sur un deuxième disque, il se peut que l'écriture soit<br> > > un peut lente.<br> > > - Si tu n'y tiens pas, enlève la compression au niveau du fileset dans la<br> > > configuration de ton Director<br> > > - Evite de mettre une taille maximal dans ton spool car si le spool est<br> > > plein il va devoir déspooler pour insérer les données dans les bons volumes<br> > > <br> > > Mais je ne te conseil pas d'enlever la compression, bien qu'elle se fasse<br> > > au niveau client et que ça prends beaucoup de ton proc, c'est une option<br> > > bien utile.<br> > > Sinon 200go pour 11 heures je trouve ça largement raisonnable et je ne<br> > > pense pas que même de la copie toute bête soit beaucoup plus rapide.<br> > > <br> > > Le 13 mars 2012 12:34, claude baryo <<a moz-do-not-send="true" ymailto="mailto:cl...@ya..." href="mailto:cl...@ya...">cl...@ya...</a>> a écrit :<br> > > <br> > > > Bonjour à tous,<br> > > ><br> > > > J'ai installé et configurer Bacula 5.2.6 sur un Debian Squeeze d'une<br> > > > VMWare.<br> > > > Les sauvegardes se font sur un deuxième disque dure...<br> > > ><br> > > > Problème : Je trouve que le backup de 200 g prend trop de temp (environ 11<br> > > > heures )<br> > > ><br> > > > comment faire pour reduire sensiblement le temps de sauvegarde ?<br> > > ><br> > > > cordialement<br> > > ><br> <br> > > --<br> > > Edouard Buschini - Rentabiliweb Telecom<br> <br> C'est quoi la base de donnée utilisée<br> <br> Le backup sous VM n'est et ne sera jamais la meilleure performance. Dans un cas d'utilisation pro et intensive<br> le Director la db et le storage ont tout intérêt à être sur du bare métal. <br> <br> Ensuite un test hdparm ne donne absolument aucune indication. Si des disques peuvent sortir linéairement du 130Mo<br> c'est pas le cas si ils ont des millions de petits fichiers à sauver/lire/copier comme des emails par exemple.<br> <br> Ici on sauve 1.2To + 145Go en ~9 heures sur du sata-e mais c'est partout du bare-metal. et la db c'est du postgresql correctement paramétrée.<br> <br> Donc premier test, copie brute cp entre source et destination calcul du temps = estimation de ce que la vm est capable de faire en natif.<br> Pas s'étonner que les résultats soit mauvais.<br> :-)<br> <br> -- <br> Bruno Friedmann <br> Ioda-Net Sàrl <a class="moz-txt-link-abbreviated" href="http://www.ioda-net.ch">www.ioda-net.ch</a><br> <br> openSUSE Member & Ambassador<br> GPG KEY : D5C9B751C4653227<br> irc: tigerfoot<br> </div> </div> </div> </blockquote> </body> </html> |