Comment pourrais-je résoudre un gros lot d'URL de redirection?

J'ai un fichier .csv sera 1000s de liens aliasés / raccourcis (tels que bit.ly etc.). Je dois savoir où ils redirigent. Existe-t-il un programme simple qui pourrait compléter cette tâche?

Vous n'avez pas spécifié votre système d'exploitation.

Mais sous Linux (avec Curl et awk installés), vous pouvez faire quelque chose comme ceci:

#!/bin/bash
while read LINE ; do
  NEWURL=$(curl -sIL $LINE 2>&1 | awk '/^Location/ {print $2}' | tail -n1;)
  echo "$LINE ; $NEWURL"
done < urls.txt

Notez que les sites qui ne redirigent pas n'auront pas de résultat après l'ancien.

Si vous parvenez à enregistrer le fichier sous forme de texte en clair avec une seule URL par ligne, vous pouvez utiliser le script suivant sur une machine Linux / MacOS / * nix ou Cygwin sous Windows pour créer un fichier texte contenant les URL.

#!/bin/bash
rm resolved_urls.txt
for url in $(cat url.txt); do
        wget -S "$url" 2>&1 | grep ^Location >> resolved_urls.txt
done

Copiez le texte ci-dessus dans un fichier appelé resol.sh, en utilisant le nanocas échéant, rendez-le exécutable chmod +x resolve.sh, nommez-le avec les URL bit.ly, etc. en url.txt, en veillant à ce qu'il se trouve dans le même dossier que le fichier resol.sh. et l'exécuter avec ./resolve.sh. Il créera un fichier appelé "résolu_urls.txt" avec l'URL d'origine et son équivalent résolu.

La sortie avec

http://bit.ly/1auRnQ9
http://bit.ly/19ZkTAI

dans url.txt est

http://bit.ly/1auRnQ9 --> Location: http://www.google.com/ [following]
http://bit.ly/19ZkTAI --> Location: http://superuser.com/ [following]

Ce script est loin d’être parfait et peut susciter les foudres de divers greybeards Unix , mais il fonctionne au moins pour bit.ly. Faites-moi savoir si vous avez des questions relatives à * nix.

http://linkpeelr.appspot.com/ le fait à l'écran, mais il existe une API que vous pouvez utiliser à l' adresse http://longurl.org/