Dans cet article
cURL est largement utilisé, notamment pour tester les réponses d’API avant la mise en production ou vérifier la disponibilité d’un site web. Découvrez ce qu’est cet outil et comment l’utiliser avec des serveurs proxy. Pour comprendre le potentiel de cURL, poursuivez la lecture de ce bref tutoriel destiné aux débutants.
Points clés
- cURL est un outil gratuit permettant d’importer et de télécharger des fichiers
- Sur macOS et certaines distributions Linux, cURL est installé par défaut
- Pour les anciennes versions de Windows (antérieures à Windows 10), téléchargez cURL depuis le site officiel
- Pour utiliser cURL avec le proxy, enregistrez les identifiants tels que le port, l’hôte, le login et le mot de passe depuis votre dashboard DataImpulse
- -x, –proxy-type et –proxy-user sont les paramètres de proxy les plus courants
Qu’est-ce que cURL ?
Lancé par un développeur suédois en 1996, cURL, ou Client URL, est un outil en ligne de commande utilisé pour effectuer des requêtes HTTP ou, plus simplement, envoyer et récupérer des données via une URL. C’est un projet open source qui prend en charge divers autres protocoles réseau, tels que FDP ou POP3. cURL prend également en charge HTTPS et vérifie automatiquement les certificats SSL et TLS.
cURL peut être utilisé avec des proxies résidentiels, mobiles, or de datacenter tant qu’ils prennent en charge les protocoles HTTP(S) ou SOCKS5.
Comment installer cURL
Ouvrez votre terminal et exécutez la commande suivante :
curl --version
Le résultat indiquera si cURL est installé sur votre ordinateur. Si c’est le cas, vous verrez la version et la date de publication de cURL.
Si cURL n’est pas installé, vous pouvez l’installer vous-même.
macOS
Sur macOS, cURL est généralement préinstallé. Toutefois, s’il est absent, installez-le avec un outil appelé Homebrew à l’aide de cette commande :
brew install curl
Windows
Windows 10+ l’inclut généralement. Pour les versions antérieures, consultez le site officiel de cURL, choisissez la version adaptée à l’architecture de votre système et téléchargez-la. Ensuite, extrayez l’archive téléchargée et ajoutez le dossier bin au chemin de votre système.
Linux
Ubuntu et Fedora l’incluent souvent par défaut ; il est donc immédiatement disponible dans le terminal. Pour les distributions où il n’est pas préinstallé, cURL peut être ajouté via le gestionnaire de paquets. Pour les systèmes basés sur Debian, la commande d’installation est :
sudo apt install curl
Pour les systèmes basés sur Fedora, elle est :
sudo dnf install curl
Connecter un proxy DataImpulse avec cURL
Après avoir installé cURL, vous pouvez commencer à acheminer les requêtes via des proxies. Accédez à votre dashboard DataImpulse, copiez vos identifiants de proxy, tels que login/mot de passe/port/hôte, puis collez-les dans le code :
curl -x http://username:[email protected]:823 https://example.com
Paramètres de proxy cURL utiles
Les paramètres les plus utilisés sont :
1. -x or –proxy définit le serveur proxy via lequel cURL acheminera la requête.
Exemple de code :
curl -x http://gw.dataimpulse.com:823 https://example.com
2. –proxy-user ajoute les identifiants d’authentification du serveur proxy si un login est requis.
Exemple de code :
curl -x http://gw.dataimpulse.com:823 --proxy-user username:password http://example.com
3. –proxy-type indique le protocole proxy qui sera utilisé. Les valeurs courantes sont http pour un proxy HTTP, ou socks5 pour un proxy SOCKS v5.
Exemple de code :
curl --socks5 gw.dataimpulse.com:823 https://example.com
DataImpulse est un fournisseur fiable de solutions de proxies résidentiels, mobiles et de datacenter, avec un trafic sans expiration et une tarification à l’usage. Si vous souhaitez découvrir d’autres informations utiles sur les techniques de web scraping, lisez nos articles sur Comment faire du web scraping sur TripAdvisor avec Python, Web scraping de GitHub avec Python, Comment faire du web scraping sur eBay, Web scraping de contenu YouTube. Vous trouverez bien plus encore sur notre blog.
FAQ
Pourquoi mon proxy ne fonctionne-t-il pas avec cURL ?
Cela peut avoir plusieurs causes. Vérifiez que les informations de votre proxy DataImpulse ont été correctement collées et contrôlez le type de proxy que vous utilisez. Le serveur proxy peut également être temporairement indisponible.
Quelle est la différence entre HTTP et SOCKS5 ?
Les proxies HTTP gèrent le trafic web et peuvent comprendre les requêtes au niveau de la couche applicative. À l’inverse, SOCKS5 fonctionne à un niveau inférieur et transmet tous les types de trafic sans les modifier. Il est plus polyvalent, mais un peu moins spécialisé. DataImpulse propose des proxies HTTP et SOCKS5.
Quel est le format correct pour utiliser un proxy dans cURL ?
Le format correct habituel est curl -x http://gw.dataimpulse.com:823 https://example.com
cURL peut-il gérer des requêtes HTTPS via un proxy ?
Oui. Le proxy utilise la méthode HTTP CONNECT pour créer un tunnel. Une connexion SSL ou TLS est ensuite établie entre cURL et le site web cible. Les proxies DataImpulse assurent une navigation sûre et anonyme dans plus de 195 emplacements.


