In questo articolo
cURL è molto usato, sia per testare le risposte API prima della messa in produzione sia per verificare se un sito web è disponibile. Qui spieghiamo cos’è e come usare questo strumento con i server proxy. Per scoprire le potenzialità di cURL, continua a leggere il nostro breve tutorial per principianti.
Punti chiave
- cURL è uno strumento gratuito per caricare e scaricare file
- Su macOS e su alcune distribuzioni Linux, cURL è installato per impostazione predefinita
- Per le versioni meno recenti di Windows (precedenti a Windows 10), scarica cURL dal sito ufficiale
- Per usare cURL con il proxy, salva dal tuo dashboard DataImpulse credenziali quali porta, host, login e password
- -x, –proxy-type, –proxy-user sono i parametri proxy più comuni
Cos’è cURL
Rilasciato da uno sviluppatore svedese nel 1996, cURL, ovvero Client URL, è uno strumento da riga di comando usato per effettuare richieste HTTP o semplicemente per inviare e recuperare dati tramite URL. È un progetto open-source e supporta vari altri protocolli di rete, come FDP o POP3. cURL supporta anche HTTPS e verifica automaticamente i certificati SSL e TLS.
cURL può essere usato con proxy residential, mobile, or datacenter purché supportino i protocolli HTTP(S) o SOCKS5.
Come installare cURL
Apri il terminale ed esegui il comando seguente:
curl --version
L’output indicherà se cURL è installato sul tuo computer. In caso affermativo, vedrai la versione e la data di rilascio di cURL.
Se cURL non è installato, puoi installarlo tu stesso.
macOS
Su macOS, cURL è generalmente preinstallato. Tuttavia, se non lo trovi, installalo con uno strumento chiamato Homebrew usando questo comando:
brew install curl
Windows
Windows 10+ in genere lo include. Per le versioni precedenti, visita il sito ufficiale di cURL, scegli la versione adatta all’architettura del tuo sistema e scaricala. Il passaggio successivo è estrarre l’archivio scaricato e aggiungere la cartella bin al percorso di sistema.
Linux
Ubuntu e Fedora lo includono spesso per impostazione predefinita, quindi è subito disponibile nel terminale. Nelle distribuzioni in cui non è preinstallato, cURL può essere aggiunto tramite il gestore di pacchetti. Per i sistemi basati su Debian, il comando di installazione è:
sudo apt install curl
Per i sistemi basati su Fedora, è:
sudo dnf install curl
Connettiti al proxy DataImpulse con cURL
Dopo aver installato cURL, puoi iniziare a instradare le richieste tramite proxy. Vai al tuo dashboard DataImpulse, copia le credenziali del proxy, come login/password/porta/host, e incollale nel codice:
curl -x http://username:[email protected]:823 https://example.com
Parametri proxy cURL utili
I parametri più usati sono:
1. -x or –proxy definisce il server proxy tramite cui cURL instraderà la richiesta.
Esempio di codice:
curl -x http://gw.dataimpulse.com:823 https://example.com
2. –proxy-user aggiunge le credenziali di autenticazione per il server proxy se è richiesto il login.
Esempio di codice:
curl -x http://gw.dataimpulse.com:823 --proxy-user username:password http://example.com
3. –proxy-type specifica il protocollo proxy che verrà usato. I valori comuni sono http per il proxy HTTP, oppure socks5 per il proxy SOCKS v5.
Esempio di codice:
curl --socks5 gw.dataimpulse.com:823 https://example.com
DataImpulse è un fornitore affidabile di soluzioni proxy residential, mobile e datacenter, con traffico senza scadenza e un modello tariffario a consumo. Se vuoi scoprire altri dati utili sulle tecniche di web scraping, leggi i nostri articoli su Come fare web scraping di TripAdvisor con Python, Web scraping di GitHub con Python, Come fare web scraping di eBay, Web scraping di contenuti YouTube. Puoi trovare molto altro nel nostro blog.
FAQ
Perché il mio proxy non funziona con cURL?
Le ragioni possono essere diverse. Verifica di aver incollato correttamente i dettagli del tuo proxy DataImpulse e il tipo di proxy che stai usando. Un'altra causa può essere un server proxy temporaneamente non disponibile.
Qual è la differenza tra HTTP e SOCKS5?
I proxy HTTP gestiscono il traffico web e possono comprendere le richieste a livello applicativo. SOCKS5, invece, opera a un livello inferiore e trasmette ogni tipo di traffico senza modifiche. È più versatile, ma in parte meno specializzato. DataImpulse offre proxy HTTP e SOCKS5.
Qual è il formato corretto per usare un proxy in cURL?
Il formato corretto tipico è curl -x http://gw.dataimpulse.com:823 https://example.com
cURL può gestire richieste HTTPS tramite un proxy?
Sì. Il proxy usa il metodo HTTP CONNECT per creare un tunnel. Quindi viene stabilita una connessione SSL o TLS tra cURL e il sito web di destinazione. I proxy DataImpulse garantiscono una navigazione sicura e anonima in oltre 195 località.


