Conseils généraux sur une solution d'archivage. ~ 15 To et en croissance.

J'ai besoin d'un meilleur système de stockage et d'archivage pour les fichiers de ma petite entreprise. Plus précisément, les fichiers sont des projets vidéo terminés. Au-delà des limites de temps et de coûts, ce qui me retient, c'est que je ne crois en aucune des solutions que j'ai envisagées. C'est pourquoi j'expose le problème et mes pensées. J'apprécierais toute opinion.

Budget: je crois qu'il faut dépenser ce qu'il faut. Cela étant dit, nous sommes une petite entreprise. J'espère pouvoir en sortir pour moins de 5k et plus autour de 1-3k. Cela pourrait être un rêve de pipe. Dites-le moi.

Le problème:

• Les fichiers vidéo bruts sont énormes en taille de fichier. Nous avons accumulé probablement 10 + tb jusqu'à présent et cela augmente rapidement.
• Le montage vidéo nécessite un accès rapide en lecture / écriture aux fichiers, de sorte qu'un serveur de fichiers central ou basé sur le cloud ne sera pas assez rapide. Par conséquent, nous avons probablement besoin d'une solution efficace pour les anciens projets et les projets actuels devront rester locaux.
• Nous voulons une sorte de solution de redondance et hors site.

Ce que nous faisons actuellement:

• Nous utilisons de gros disques durs externes de haute qualité.
• Nous achetons toujours par paires et dupliquons manuellement le contenu. En d'autres termes, nous travaillons à partir de l'un et dupliquons les fichiers sur l'autre qui sert de sauvegarde / repli.
• Ces disques durs sont assez rapides avec firewire800 ou USB3 pour fonctionner directement.
• Une fois remplis, nous avons mis la paire de côté.

Quel est le problème avec la solution actuelle:

• Bien que les données soient dupliquées sur deux disques, ces disques ne sont ni "sauvegardés" ni stockés hors site.
• L'organisation sur ces nombreux disques durs externes est difficile. Quel projet est sur quel lecteur? etc.
• Finalement, nous allons avoir une quantité ridicule de disques durs.
• La duplication n'est pas RAID.

Options:

Un serveur local

• Achetez un serveur monté en rack et un boîtier de baie de disques durs monté en rack, comme un Norco, (SAS) (20 baies).
• Tous les fichiers vidéo seraient stockés sur ce serveur. Nous pourrions installer et payer un service cloud pour sauvegarder cet ordinateur / serveur. CrashPlan fonctionne sur Linux et n'a pas de limites sur la quantité de données. Les disques durs seraient des disques physiques connectés au serveur, donc nous contournerons les règles «pas de NAS» que les entreprises comme CrashPlan ont. Ce n'est pas un ordinateur personnel, la synchronisation peut donc fonctionner 24/7/365. Cela résoudrait le problème hors site.
• Au lieu d'utiliser un service de sauvegarde en ligne comme CrashPlan, nous pourrions écrire un script pour synchroniser ces fichiers avec un compte Amazon Glacier.
• Une stratégie selon laquelle la lecture vidéo fonctionne sur des disques durs externes pour les projets en cours, mais doit placer le projet sur ce nouvel ordinateur une fois terminé. En d'autres termes, continuez d'utiliser des disques durs externes pour les projets en cours et stockez les projets archivés sur ce serveur.

Services de sauvegarde basés sur le cloud (CrashPlan.com, BackBlaze.com, Carbonite.com)

• En règle générale, vous ne pouvez sauvegarder qu'un disque dur externe physiquement connecté à un ordinateur. (pas de NAS ou de lecteurs réseau).
• En règle générale, ils s'attendent à ce qu'un disque externe sauvegardé reste connecté à votre ordinateur et que toutes les données restent sur le disque. Si vous ne connectez pas un disque dur externe pendant des mois, qu'advient-il des sauvegardes? Si vous nettoyez de l'espace en supprimant d'anciens projets, ils seront également supprimés du service en ligne.
• Exige que nos utilisateurs laissent les disques durs externes connectés à leur ordinateur jusqu'à ce que toutes les données soient dans le cloud. Cela peut prendre des semaines pour un gros projet.
• La restauration d'un projet serait très lente en raison des vitesses de transfert Internet.
• Ces comptes de sauvegarde cloud sont généralement spécifiques à un utilisateur / un ordinateur. Donc, si un disque dur est sauvegardé par un utilisateur. Ensuite, un deuxième utilisateur travaille sur le projet, qu'est-ce que cela signifie?

Un gros NAS

• Un NAS est "Network Area Storage". Vous insérez autant de disques durs que possible. Il va les attaquer. Vous pouvez y accéder via la connexion réseau ou peut-être USB3 / Firewire.
• La plupart ont un système d'exploitation intégré. Vous ne pouvez donc pas exécuter d'autres logiciels comme les services de sauvegarde basés sur le cloud. Vous ne pouvez pas non plus faire de personnalisation ni exécuter votre propre logiciel. Vous obtenez ce que vous achetez.
• Les gros NAS sont assez chers et pas vraiment si gros. Vous n'en trouvez pas beaucoup avec plus de 4 baies. Actuellement, un grand disque dur est de 3 To. Ainsi, 4 baies peuvent se situer autour de <12 To de stockage. Pas super confortable pour l'avenir.

D'autres idées sont:

• Sauvegardes sur bande.
• Archivez simplement les anciens projets directement sur Amazon Glacier, évitez de créer un serveur local pour les stocker.

Merci pour tout conseil !!! Jed

Ruban. Aussi simple que ça. Quantum a un système SuperSTore qui peut gérer bien plus que cela et je les ai vus pour moins que votre prix 5000 - nouveau. La bonne chose est que vous pouvez extraire les bandes pour le stockage, donc la mise à l'échelle va être assez rentable et les bandes durent.

Tout d'abord, je conseillerais d'éviter Glacier. Cela semble bon, jusqu'à ce que vous réduisiez les coûts de restauration d'une grande quantité de données. Il s'agit d'une calculatrice non officielle que vous pouvez utiliser pour calculer les coûts de stockage et de récupération de Glacier, et juger par vous-même . La restauration de téraoctets de données à partir de Glacier est une perspective assez peu attrayante.

Deuxièmement, je conseillerais qu'à des fins de sauvegarde simples, vous puissiez vous en sortir avec un seul serveur NAS avec beaucoup de disques. Il me semble que vous n'avez examiné que les options de NAS pour la maison et les petits bureaux, et vous devriez envisager une offre de NAS appropriée. Préférant Dell, je voudrais souligner les serveurs NAS PowerVault de Dell , mais HP, IBM, SuperMicro et à peu près tout le monde ont des offres similaires. J'ai un ancien Dell PowerVault NX à la maison qui sert de bibliothèque multimédia et contient douze disques SAS de proximité de 2 To. De plus, des disques SAS 4 To Nearline sont disponibles de nos jours, vous pouvez donc toujours remplir un bon serveur NAS avec ceux-ci. (Ou achetez quelques serveurs NAS.)

Vous pouvez facilement en utiliser un sur votre réseau local, installer le logiciel de sauvegarde de votre choix ( comme Bacula, si vous le souhaitez gratuitement , ou l'une des douze offres commerciales si vous souhaitez bénéficier de l'assistance d'un fournisseur) et utiliser un grand volume RAID comme cible de sauvegarde. Vous pouvez ensuite utiliser un service de sauvegarde dans le cloud pour sauvegarder ce serveur NAS et bénéficier des avantages des sauvegardes locales et distantes. Encore une fois, c'est ce que je fais à la maison. Serveur NAS approprié, téraoctets de données sauvegardés sur un service cloud.

Et bien sûr, vous pouvez également utiliser la bande ... achetez un lecteur de bande LTO ou une bibliothèque - personnellement, je ferai de grands efforts pour éviter les supports de bande ou de disque optique, mais ce sont des options légitimes, et peuvent être moins chers qu'un disque sur disque.

Enfin, je dirais que vous devez considérer le principal inconvénient des services de sauvegarde dans le cloud, qui est la taille de votre canal Internet. Cela peut prendre des semaines ou des mois pour télécharger des téraoctets de données sur votre connexion Internet et / ou engager des frais supplémentaires auprès de votre FAI. Ainsi, bien qu'ils constituent une option viable pour la sauvegarde des données, même des données d'entreprise, c'est une contrainte que la plupart des gens ne considèrent pas jusqu'à ce qu'ils l'aient déjà atteinte.

Je pense que cela dépend de votre budget. Si vous ne pouvez dépenser que ~ 6 000 $, vous devrez probablement créer votre propre NAS. Je regarderais nas4free et ce qu'un serveur vous coûte. Si vous pouvez dépenser 20 000 $, vous pouvez probablement remplir un serveur avec un tas de disque et une carte RAID décente ou un RAID logiciel sous Linux ou autre.

Pour environ 40k $, vous pouvez avoir un 1U haut de gamme (IBM x3550 M4, 2 ports Emulex 10GBit nic, 4 Gbit NIC, 128GB RAM, 2 disques SAS locaux 10k) avec iSCSI 10Gbit vers une boîte SAN Infortrend avec 24 disques SAS 4TB que vous pouvez tranche et dés comme vous le souhaitez. RAID6 est une configuration raisonnable.

La bande est également une bonne idée, mais je ne sais pas à quel point c'est vraiment bon marché. Cela dépend de la taille d'une bibliothèque que vous obtenez. Si une bibliothèque de 48 bandes est bonne, vous pouvez à nouveau le faire avec une carte SAS 1U et externe pour peut-être 30k $ et 2 lecteurs LTO6 ... Mais alors vous avez besoin de licences logicielles pour gérer les sauvegardes sur bande ou quelque chose. Je n'ai utilisé que NetBackup, ce qui ne vous convient probablement pas ici. N'oubliez pas que vous voudrez probablement piloter la bibliothèque de bandes d'une manière ou d'une autre dans le logiciel. Mais une fois sorti de la bibliothèque, n'oubliez pas d'aller chercher la bande et de la charger, plus une zone de transit pour l'accès ...