Comment puis-je obtenir un To de données sur un nouveau serveur Web?

31

J'ai une To de fichiers multimédias compressés dont j'ai besoin pour accéder à un serveur Web distant avec un peu d'urgence. (depuis mon bureau)

Notre taux de téléchargement n'est que de 500 Ko / s, ce qui suggère environ 23 jours pour le téléchargement.

La nouvelle société d'hébergement n'accepte pas les lecteurs par courrier.

Y a-t-il un bon endroit où aller dans les principales régions métropolitaines pour emprunter une pipe plus grosse?

transfer data

— Brian Webster
source

10

Je sais que ce n'est pas une réponse, ni même particulièrement utile, mais si votre nouvelle société d'hébergement n'est pas disposée à travailler avec vous sur ce point, vous devez trouver une nouvelle société d'hébergement. Ne pas accepter un lecteur d'un client (moyennant des frais bien sûr) est assez idiot.

— voretaq7

Vérifiez ma réponse, c'est une entreprise de stockage de données à Tulsa

— Anagio

Il y a de bonnes réponses ici, mais cela n'aurait-il pas dû être transféré à ServerFault?

— Mark Hurd

1

Peut-être, mais je considère le défaut de serveur comme un endroit pour discuter de la configuration du matériel et des logiciels, alors que c'est l'utilisation de tout ce que les webmasters ont à leur disposition pour réaliser une tâche plus composite

— Brian Webster

16

Je contacterais certains de vos centres de données locaux (hébergement en rack, fournisseurs de services gérés, etc.) et je verrais comment louer un vps ou une machine virtuelle pour un jour ou deux. Assurez-vous simplement qu'ils vous permettent d'apporter un disque pour le transfert initial et qu'ils sont conscients de vos besoins en bande passante.

Vous pourriez aussi simplement demander s'ils pourraient simplement vous aider avec le téléchargement. Ils ont souvent tendance à être opportunistes, inventifs et peuvent être disposés à vous accueillir pour avoir la chance d'obtenir une partie de votre entreprise.

— InChargeOfIT
source

3

Il existe également une option de centre de données distant: Amazon AWS! Expédiez-les disques durs, et ils facturent (à ce jour) 80 $ par appareil, plus 2,50 $ par heure de chargement des données, plus ce qu'il en coûte pour stocker les données tant qu'elles sont dans AWS plus le transfert de données. Ce n'est peut-être pas l'option la plus attrayante, mais simplement la jeter là-bas.

C'est super à savoir. Nous utilisons beaucoup AWS! Savez-vous où je peux lire ce service? C'est difficile à trouver sur Google (au moins les mots clés que j'utilise)

— Brian Webster

1

aws.amazon.com/importexport

— Rich

11

Vous pouvez si vous avez des amis ou des employés prêts à vous aider avec leur connexion à domicile, créer un torrent pour le gros fichier et configurer vos employés / amis comme graines. Bien sûr, vous devez placer le panier dans le panier et le copier pour tout le monde. Même alors, vous pouvez diviser le fichier en .rars et demander à des "équipes" d'envoyer des portions (en prenant soin de vous assurer qu'elles ne téléchargent pas les fichiers qu'elles n'ont pas). Foule sourcing ftw!

— luke
source

3

Ce serait particulièrement efficace si vous avez des amis qui sont au collège. Non seulement ils ont accès à de belles connexions universitaires à haut débit, mais il ne leur serait pas difficile de demander à quelques amis dans des dortoirs différents de l'aider à télécharger.

— Lèse majesté

7

Trouvez un FAI régional qui appartient localement et apportez un joli disque dur externe qui peut contenir tout cela. Entrez dans leur bureau avec 300 $ en espèces, des informations d'identification pour votre serveur et un pack de 12 bières. Priez pour qu'ils aient une liaison montante gigabit car un maximum de 100 Mbits vous prendra plus de 24 heures.

À défaut, recherchez le point d'échange Internet Internet local et trouvez tout AS qui y est connecté. Faites-vous de très bons amis avec quelqu'un de la région de NANOG. Il y a de fortes chances que vous deviez être créatif. Essayez de rechercher une colocation près de chez vous.

— Jeff Ferland
source

2

C'est le chemin que je prendrais. La bière a tendance à lubrifier les interactions commerciales.

— Evik James

1

Je pense que c'est probablement la meilleure solution de chemin de moindre résistance ici.

— jeremiahd

5

Si les fichiers sont des fichiers texte ou bien compressent, vous pouvez les compresser avant de les télécharger, ce qui pourrait réduire la taille du fichier jusqu'à 90%. Vous pouvez ensuite les décompresser sur le serveur.

Vous pouvez également essayer de diviser le téléchargement entre plusieurs emplacements. Chacun peut alors vous donner sa vitesse maximale.

— John Conde
source

4

Obtenez une société d'hébergement temporaire à laquelle vous pouvez envoyer votre disque, puis transférez de l'hôte temporaire à l'hôte permanent à un rythme plus rapide.

— xpda
source

3

Ou passez simplement à un hôte Web qui accepte les lecteurs par courrier. La plupart des hébergeurs web avec un service client décent le permettront.

— Lèse majesté

Je suppose que la société d'hébergement actuelle a été sélectionnée en raison du prix ou d'autres critères à long terme, et il serait plus coûteux de changer de façon permanente.

— xpda

4

Ces gars sont à Tulsa, que vous avez dans votre profil, donc si vous êtes dans la région, appelez-les ou arrêtez-vous et faites-leur savoir votre situation.

http://www.datastorageinc.com/

— Anagio
source

3

Je veux juste ajouter aux réponses existantes quelque chose qui pourrait améliorer votre transfert une fois que votre disque dur est connecté à un serveur avec une bonne bande passante.

J'avais besoin de transférer plusieurs fois de grandes quantités de données entre deux serveurs Web et au lieu d'utiliser des commandes FTP ou WGET communes pour charger ou télécharger les données, j'ai utilisé la commande Linux SCP. Vous pouvez trouver plus d'informations ici: http://www.go2linux.org/scp-linux-command-line-copy-files-over-ssh

Vous aurez besoin d'un accès SSH aux deux serveurs et vous pourrez ensuite copier un ou plusieurs fichiers de manière récursive.

Donc, si vous ne disposez que de gros fichiers au lieu de nombreux petits, je pense que cela copiera assez rapidement.

À un taux de transfert de 11 Mo / seconde entre les serveurs, le transfert durerait environ 25 heures.

Bonne chance! ;)

— Alexandru Trandafir Catalin2
source

1

Mieux encore, utilisez rsync si l'hôte cible le prend en charge. (Beaucoup le font.)

— Ilmari Karonen

3

http://aws.amazon.com/importexport/

Envoyez votre appareil à AWS et ils s'occuperont du reste.

— subiet
source

"... et ils s'occuperont du reste" - non , ils ne le feront pas, sauf si votre destination est AWS. Si ce n'est pas le cas, ils transfèrent uniquement les données vers un compartiment S3. Et c'est vous qui devez le récupérer du compartiment S3 à votre destination de stockage, auquel cas c'est la même chose que la réponse de xpda.

— Lèse majesté

2

Oh absolument, j'aurais dû commenter comme Rich l'a fait (n'était pas là au moment où j'ai posté) sur la réponse InChargeOfIt. Puisque Hamlin11 a montré un intérêt particulier pour la solution AWS et recherchait le lien pour ce service, je l'ai posté. Un commentaire là-bas aurait été plus approprié, je suis d'accord.

— subiet

Eh bien, je pense que si vous pouvez modifier la réponse pour lier ce commentaire, et notez que pour les destinations non AWS, il vous suffit d'initier un transfert de serveur à serveur par la suite en utilisant le très gros pipe d'Amazon, il serait toujours être une bonne réponse.

— Lèse majesté

1

Si les données sont dans votre bureau sur la connexion lente, vous êtes dans un cornichon. Si les données sont sur ou sur votre ancien hôte, vous pouvez essayer un transfert de serveur à serveur. Utiliser les tuyaux ISP au lieu de votre tuyau de bureau étanche.

Si vous l'avez fait en morceaux via un wget de ssh, ce serait beaucoup plus rapide que d'expédier un disque pour l'installation. Cela dit, je n'ai jamais eu à déplacer plus de 250 Go.

— Brian
source

La partie urgente de la question provenait d'un événement d'arrêt catastrophique sur le "vieil hôte". Nous n'avions pas d'hôte de sauvegarde à chaud, mais nous avions des sauvegardes récentes localement.

— Brian Webster du

0

Comme les autres questions le suggèrent, il se résume principalement à trouver quelqu'un autour de vous avec une bonne connexion.

Un groupe auquel vous pourriez parler est celui des administrateurs universitaires ou collégiaux. Assurez-vous simplement que le gars à qui vous parlez est autorisé à vous laisser filer de la tuberculose dans leur fil, et je suis sûr que vous pouvez vous mettre d'accord.

De nombreuses facultés dans les universités, par exemple la physique des particules, affichent des pétaoctets de données, donc cela pourrait être une autre option possible.

— Boldewyn
source