Qnap HBS 3 Hybrid Backup Sync syncronisé beaucoup de volumétrie sur beaucoup de nas

dmapdm

Nouveau membre
28 Mai 2020
6
0
1
Salut !
Voici actuellement ma stratégie qui porte ces limites :
J'ai un nas maitre avec cette volumétrie :
- partie 1 : 7000 Go
- partie 2 : 400 Go
- partie 3 : 80 Go
- partie 4 : 120 Go
biensur cette volumétrie pourrait légèrement augmenter à l'avenir.
je dois copié toutes les nuits le différentielle sur 5 mais à l'avenir peut-être sur 20 nas les mêmes données.
actuellement, je procède pas à pas les dossiers partagés un par un et par nas ensuite je passe au nas suivant. tout fonctionne bien en générale.
mais soucis arrivent quand :
- un nas n'est pas dispo (perte du net d'un coté comme de l'autre) ou (le nas n'est pas accessible car éteint par sécurité plus de courant)
- la volumétrie à beaucoup changé par exemple 2x 20 go en une journée que je dois envoyé sur X nas.

Donc, je me demandé comment font les très gros groupes à part claquer énormément d'argent sur du cloud avec du débit et des envoies simultanés vers tous les nas ?

alors je me suis demandé si il était possible et est-ce le bon moyen à appliquer ? :
je pensais d'abord au premier nas maitre qui a lui les données mises à jours en priorité on l'appellera donc MAITRE.
je me disais que je pourrais créer un partage nommé SYNCHROTREEL non visible des utilisateurs qui serait donc synchronisé en temps réel avec 3 autres nas qui eux aussi aurait ce dossier de partage caché.
Ensuite dans je pourrais donc utiliser une copie local dans les dossiers partie 1 à 4 des 3 NAS.
à partir de là je considère que j'ai donc le MAITRE et aussi les 3 autres NAS avec les dossiers prêts et stabilisés.
je pourrais alors commencer mon transfert vers les autres nas dossier par dossier de partage et donc utiliser le maximum de bande passante non ?

là ou çà ne me va pas c'est au niveau des logiciels de synchro comment peuvent-ils savoir si les synchros sont prêtes à démarrer. Et ai-je la bonne stratégie ?
j'ai la fibre partout.

Merci à tous.
 
.
actuellement, je procède pas à pas les dossiers partagés un par un et par nas ensuite je passe au nas suivant. tout fonctionne bien en générale.
mais soucis arrivent quand :
- un nas n'est pas dispo (perte du net d'un coté comme de l'autre) ou (le nas n'est pas accessible car éteint par sécurité plus de courant)
- la volumétrie à beaucoup changé par exemple 2x 20 go en une journée que je dois envoyé sur X nas.

Donc, je me demandé comment font les très gros groupes à part claquer énormément d'argent sur du cloud avec du débit et des envoies simultanés vers tous les nas ?

Bonjour,
Pour commencer les grands groupes ont des onduleurs et des systèmes de groupes électrogène qui fait que le cas ou un NAS est inaccessible n'arrive quasiment jamais.

Ensuite il ne copie pas les données d'un NAS vers 10 autres NAS distant. ( plutôt l'inverse, avec ensuite des sauvegarde sur bande)

Ils ont des abonnements fibres spéciaux avec de très gros débit. ( agrégation de 3 abonnements voir plus par site )


Ils utilisent des logiciels de sauvegarde professionnel et payant.

.
actuellement, je procède pas à pas les dossiers partagés un par un et par nas ensuite je passe au nas suivant. tout fonctionne bien en générale.

Alors bien évidemment tu t'en doutes faire manuellement ça marche mais c'est pas optimum.
là ou çà ne me va pas c'est au niveau des logiciels de synchro comment peuvent-ils savoir si les synchros sont prêtes à démarrer. Et ai-je la bonne stratégie ?
j'ai la fibre partout.

Merci à tous.

Ton besoin est ultra spécifique et clairement pas un usage personnel.
Je ne connais pas les outils sur Qnap, ni si le matériel correspondant à ton besoin est déjà acheté.

Tu as un matériel sous système synology, est-ce que synology CMS ne pourrait pas t'aider ( dans l'hypothèse que le choix du matériel n'est pas encore fait) ?

De plus si tu dois acheter 10 ou 20 NAS, je te conseillerais de passer par un représentant de la marque que tu souhaites acheter plutôt qu'un simple revendeur.

Tu peux même établir un cahier des charges et demander à différentes marques une démonstration de leurs outils et une quotation pour le matériel.
Message automatiquement fusionné :

En général pour les données qui doivent être multiples sites les grands groupes prefere passer par les offres cloud qui au vu du prix au to par rapport au débit et la facilité de gestion est rentable.

Et bien entendu il existe une équipe data management qui gère tout cela.
 
Dernière édition:
  • J'aime
Réactions: dmapdm
Merci pour tes réponses.
Nous sommes en faites un ensemble de magasin de revendeurs.
Nos techniciens doivent tous les jours accéder à leur propre nas avec les mêmes outils (drivers, isos, softwares, batchs,...) et donc un tech d'un magasin peut être dans un autre magasin il aura les même outils. que l'IP qui change.

Ensuite nous n'utilisons que du QNAP. et le logiciel 'HBS 3 Hybrid Backup Sync' marche très bien lorsqu'il est configuré avec le NAS MAITRE.
Il permet par exemple de lié des taches l'une après l'autre, il se parle à lui même :) et quand l'une est terminé l'autre démarre.
Par contre là où cela ne va plus c'est par rapport aux autres nas qui eux ne communique pas de façon intelligente pour savoir si une ou les taches de réplications du NAS MAITRE sont terminés ou pas. donc je ne sais pas comment démarrer à quel moment les autres nas. à répliquer sur les autres magasins.

Nous ne sommes pas encore assez gros pour nous permettre des déploiements de contrats dans le cloud (stockage) avec des lignes spécialisés(bande passante).
Nous avons de temps en temps des pannes du net comme tout le monde et un magasin serait à l'arrêt. et donc nous avons les nas en local pour accéder à nos outils pour faire le plus gros du travail.

Maintenant je devrais peut-être voir vers un logiciel payant prof en remplacement de 'HBS 3 Hybrid Backup Sync'.

Merci encore
Si je trouve une solution ...un jour, je viendrais participer ici pour la faire découvrir sous forme de tuto. mais j'en suis loin.
 
Merci pour tes réponses.
Nous sommes en faites un ensemble de magasin de revendeurs.
Nos techniciens doivent tous les jours accéder à leur propre nas avec les mêmes outils (drivers, isos, softwares, batchs,...) et donc un tech d'un magasin peut être dans un autre magasin il aura les même outils. que l'IP qui change.
Un ensemble de revendeur en informatique je presume ? ?

Ensuite nous n'utilisons que du QNAP. et le logiciel 'HBS 3 Hybrid Backup Sync' marche très bien lorsqu'il est configuré avec le NAS MAITRE.
Il permet par exemple de lié des taches l'une après l'autre, il se parle à lui même :) et quand l'une est terminé l'autre démarre.
Par contre là où cela ne va plus c'est par rapport aux autres nas qui eux ne communique pas de façon intelligente pour savoir si une ou les taches de réplications du NAS MAITRE sont terminés ou pas. donc je ne sais pas comment démarrer à quel moment les autres nas. à répliquer sur les autres magasins.

Il suffirait de "changer de raisonnement" en calculant par exemple ce que devrait être la quantité maximale a transférer ( dans le pire des cas) et le temps que cela prendrais + une marge de sécurité. et se dire que si ca on a calculer 3 heures et que le transfert vers les 3 NAS commence a 21h, a 1h du matin, les 3 NAS sont prêt a servir de base pour les autres réplications.

En général dans les petites entreprises multi sites et qui on un besoin de réplications, c'est comme cela que ca se passe, mais a une fréquence moindre.

Par exemple le week end afin de ne pas impactés la bande passante pendant les heures de fonctionnement de l'entreprise et pour avoir assez de temps pour que les transferts se font entièrement.

( genre le NAS maitre vers les 3 NAS le vendredi soir et des 3 NAS aux autres dans le week end entre samedi et dimanche)
Nous sommes en faites un ensemble de magasin de revendeurs.


Ensuite nous n'utilisons que du QNAP.

Seriez vous revendeurs de NAS aussi par hasard ?
 
  • J'aime
Réactions: CHAP
merci de ces réponses.
oui plusieurs magasins mais le même groupe. :)
Oui, nous vendons du qnap et du syno.
Je pense effectivement déployer sur 3 nas et ensuite sur les autres magasins. il est assez rare d'avoir une grosse volumétrie de plus de 50 Go par jour.
mais je dois le faire chaque nuit, cela est certain.

Merci encore, mais je reste ouvert à toute autres propositions.
 
bsoir
de mon coté, j'ai tous en local donc pas trop de soucis. mais cela tu t'en fou je me doute bien...
dans HBS3, il y a les serveur rsync. et les serveur rtrr.
est-ce que par ce biais, tu as essayer de connecter les qnaps.

de mon coté, j'ai créer des "serveurs distant CIFS/SMB Distant".

cela permet de faire des synchros, et le NAS maitre pousse les données vers "l'exterieur"
je te rassure QNAP m'a dit que cela n’était pas possible!!
ben domage QNAP, ben si!!
les datas de mon NAS maitre est poussé sur un pc.
 
Bonjour @armitage-59 je trouve ça bien que tu veuilles aider, mais depuis tout a l'heure tu déterre des sujets qui ont quelques années.
 
ben oui mais je cherche des trucs.
apparemment, je ne sais pas s'ils ont trouvé la solutions...
pour info, je suis rester plus 1 ans sur un FTP avec isolation d'utilisateur. je cherche aussi le moyen de mettre os qnap ur un vieux pac depuis 2 ans.
alors....

je crois que dmapdm serait content d'avoir la solution.... même tardivement, sans compter les gens plus tard qui pourront aussi avoir la solution.
 
Bonsoir @armitage-59

Je rejoins Néo, merci de ne pas répondre à des sujets anciens qui ne sont plus d'actualité.


ben oui mais je cherche des trucs.
Tu peux lire sans commenter chaque sujet

apparemment, je ne sais pas s'ils ont trouvé la solutions...
C'est leur problème, ils peuvent revenir s'ils le souhaitent remonter leur sujet et compléter

pour info, je suis rester plus 1 ans sur un FTP avec isolation d'utilisateur. je cherche aussi le moyen de mettre os qnap ur un vieux pac depuis 2 ans.
alors....
Ouvre un sujet pour expliquer ton problème, tu peux commencer par te présenter dans la section approprié.
 
désolé, mais il n'y a aucun rapport avec le problème.
je suis désolé de te dire que l'on peux installer un OSQNAP sur une clef USB avec un lanceur.

j'ai réussit à le faire sur un I5-6700.
le soucis c'est que cette machine n'est pas vielle contrairement à celle ou je veux l'installer : optiplex-380.
tous fonctionne, jusqu'a l'affectation de l'ip. il ne trouve pas la carte reseau.
je n'y connais rien en linux! d'ou le soucis.
 
je suis désolé de te dire que l'on peux installer un OSQNAP sur une clef USB avec un lanceur.
Bien sur mais cela n'est pas légal, et donc hors de sujet ici.

Il me semble que le 1er endroit ou j'ai vu cela c'etait chez https://xpenology.com/forum/ , Si tu perd le reseau apres l'installation c'est qu'il te faut surement des drivers réseau qui ne sont pas inclu dans QTS.
 
a la je ne suis pas d'accord. c'est de l'open source. donc ce qui est limite c'est de tous bloqué. on est sur du linux de base.
oui je connais xpenology. eux c'est plus de base synologie.
j'ai essayer. au vue de tous les problème. => le risque est trop important !

c'est exactement ce que je pense. optiplex380 (de mémoire) doit avoir une carte reseaux realtek.
par contre je sais aussi que l'install via promobox, il faut changer le intel 1000 en intel 1000e. (de memoire)
cela provient encore de la volonté de qnap de bloquer un max!!
ce qui est un peu limite vis a vis de la philo open source. mais bon.
 
Attention tout ce qui est basé sur Linux n'est pas forcement open source deux exemples;

Les OS d'Apple (MacOS et IOS) sont basé sur linux et ne sont pourtant pas open source officiellement tu n'a pas le droit de l'installer sur autre chose que du materiel acheter chez Apple, pire pour pouvoir y développer des applications, tu doit payer une licence dev chez apple.

Android aussi est basé sur Linux, mais pour les installer sur les smartphone, les fabricants doivent payer une licence auprès de google, pour les dev, il me semble qu'il n'y a pas de licence a payer.



Je sais que Synology s'est exprimés plusieurs fois de manière publique afin de déclarer qu'installer DSM sur autre chose qu'un NAS Synology est illégal.
Du coté de Qnap, il propose effectivement cette possibilité via un abonnement, donc installer leur OS sans payer cet abonnement, c'est comme installer Office sans y payer l'abonnement.


De même pas tous les projets / apps open source n'est gratuit.
(souvent ils le sont au debut, puis devient payant quand il a du succès)