cURL: comment supprimer les sorties étranges lors d'une redirection?

J'essaie d'imprimer uniquement les sections verbeuses d'une demande cURL (qui sont envoyées à stderr) depuis le shell bash.

Mais quand je redirige stdoutcomme ça:

curl -v http://somehost/somepage > /dev/null

Une sorte de tableau de résultats apparaît au milieu de la sortie pour stderr:

  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0

Suivi par ceci vers la fin:

{ [data not shown]
118   592    0   592    0     0  15714      0 --:--:-- --:--:-- --:--:-- 25739

Ce qui rend les en-têtes de réponse moins lisibles.

Je ne vois pas ce texte quand je ne le redirige pas.

Une autre façon de voir les effets:

Le tableau n'apparaît pas:

curl -v http://somehost/somepage 2>&1

Le tableau apparaît:

curl -v http://somehost/somepage 2>&1 | cat

1) Comment cela se produit-il uniquement avec certains types de redirections?

2) Quel est le meilleur moyen de le supprimer?

Je vous remercie

Essaye ça:

curl -vs -o /dev/null http://somehost/somepage 2>&1

Cela supprimera le compteur de progression, enverra stdoutà /dev/nullet redirigera stderr(la -vsortie) à stdout.

curl --fail --silent --show-error http://www.example.com/ > /dev/null

Cela supprimera la boîte de dialogue d'état, mais sinon, les erreurs seront envoyées à STDERR.

user@host:~# curl http://www.yahoo.com > /dev/null
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100  254k    0  254k    0     0   403k      0 --:--:-- --:--:-- --:--:--  424k

Ce qui précède affiche la table d’état lors d’une redirection.

user@host:~# curl --fail --silent --show-error http://www.yahoo.com > /dev/null

Ce qui précède supprime la table d’état lors de la redirection, mais les erreurs iront quand même à STDERR.

user@host:~# curl --fail --silent --show-error http://www.errorexample.com > /dev/null
curl: (6) Couldn't resolve host 'www.errorexample.com'

Ce qui précède est un exemple d'erreur dans STDERR.

user@host:~# curl -v --fail --silent --show-error http://www.errorexample.com > ~/output.txt 2>&1
user@host:~# cat ~/output.txt 
* getaddrinfo(3) failed for www.errorexample.com:80
* Couldn't resolve host 'www.errorexample.com'
* Closing connection #0
curl: (6) Couldn't resolve host 'www.errorexample.com'

Ajoutez simplement 2> & 1 à la fin pour rediriger STDERR vers STDOUT (dans ce cas, vers un fichier).

Selon man curl:

-s, --silent : Silent or quiet mode. Don't show progress meter or error messages. Makes Curl mute.

Exemple d'utilisation:

curl -s 'http://www.google.com'

ou si vous voulez capturer le HTTP-BODY dans une variable en bash

BODY=$( curl -s 'http://www.google.com' )
echo $BODY

Vous pouvez utiliser -sou --silentinterchangeable.

En ce qui concerne la question 1 ( comment cURL sait-il n’afficher la table que lorsque la sortie est redirigée), je n’avais pas réalisé qu’un programme pouvait indiquer ses sorties, mais il semble que sur les systèmes POSIX, il existe une fonction isattyqui indique si oui ou non un descripteur de fichier fait référence à un terminal.

1) Comment cela se produit-il uniquement avec certains types de redirections?

depuis la page de manuel curl

Si vous souhaitez un indicateur de progression pour les demandes HTTP POST ou PUT, vous devez rediriger la sortie de la réponse vers un fichier, à l'aide de la redirection du shell (>), -o [fichier] ou similaire.

curl doit utiliser isatty pour déterminer la redirection et imprime l' indicateur de progression lorsqu'il est redirigé vers un fichier ou un canal shell.

2) Quel est le meilleur moyen de le supprimer?

depuis la page de manuel curl

-s, --silent

Mode silencieux ou silencieux. Ne pas afficher les indicateurs de progression ou les messages d'erreur. Rend Curl muet. Il transmettra toujours les données que vous demandez, potentiellement même au terminal / stdout, à moins que vous ne les redirigiez.

Pour mettre des messages d'erreur réels quelque part, vous devez écrire strerr dans un fichier journal. Quelque chose comme ca:

curl  "http://domain.name/process" --stderr /var/log/curl_err.log > /dev/null

Étant derrière un proxy, j'utilise une commande comme celle-ci.

date -s "$ (curl --proxy http: // PROXY: 8080  -s http://google.com --head -s | grep Date | sed 's / Date: // g')"