How to use curl for beginners cover

cURL é muito usado, seja para testar respostas de API antes da produção ou verificar se um site está disponível. Aqui explicamos o que ele é e como usar essa ferramenta com servidores proxy. Para entender o potencial do cURL, continue lendo nosso breve tutorial para iniciantes.

Pontos principais

  • cURL é uma ferramenta gratuita para enviar e baixar arquivos
  • No macOS e em algumas distribuições Linux, o cURL vem instalado por padrão
  • Para versões mais antigas do Windows (anteriores ao Windows 10), baixe o cURL no site oficial 
  • Para usar cURL com o proxy, salve as credenciais, como porta, host, login e senha, no seu dashboard da DataImpulse
  • -x, –proxy-type e –proxy-user são os parâmetros de proxy mais comuns 

O que é cURL

Lançado por um desenvolvedor sueco em 1996, o cURL, ou Client URL, é uma ferramenta de linha de comando usada para fazer solicitações HTTP ou simplesmente enviar e obter dados por meio da URL. É um projeto de código aberto e oferece suporte a vários outros protocolos de rede, como FDP ou POP3. O cURL também oferece suporte a HTTPS e verifica automaticamente os certificados SSL e TLS. 

O cURL pode ser usado com residenciais, móveis, or datacenter proxies, desde que ofereçam suporte aos protocolos HTTP(S) ou SOCKS5. 

Como instalar o cURL

Abra o terminal e execute o seguinte comando:


curl --version
      
        
      

A saída mostrará se o seu computador tem o cURL instalado. Se tiver, você verá a versão e a data de lançamento do cURL. 

Caso você não tenha o cURL instalado, pode instalá-lo por conta própria.

macOS

No macOS, o cURL geralmente vem pré-instalado. No entanto, se ele não estiver disponível, instale-o com uma ferramenta chamada Homebrew usando este comando:


brew install curl
      
        
      

Windows

O Windows 10+ normalmente já o inclui. Em versões anteriores, acesse o site oficial do cURL, escolha a versão correta para a arquitetura do seu sistema e faça o download. Em seguida, extraia o arquivo baixado e adicione a pasta bin ao caminho do sistema. 

Linux

Ubuntu e Fedora geralmente o incluem por padrão, portanto ele fica disponível no terminal imediatamente. Em distribuições em que não vem pré-instalado, o cURL pode ser adicionado pelo gerenciador de pacotes. Para sistemas baseados em Debian, o comando de instalação é:


sudo apt install curl
      
        
      

Para sistemas baseados em Fedora, é:


sudo dnf install curl
      
        
      

Conecte-se ao proxy DataImpulse usando cURL

Depois de instalar o cURL, você pode começar a encaminhar solicitações pelos proxies. Acesse seu dashboard da DataImpulse, copie as credenciais do proxy, como login/senha/porta/host, e cole-as no código:


curl -x http://username:[email protected]:823 https://example.com

      
        
      

Parâmetros úteis de proxy no cURL

Os parâmetros mais usados são:

1. -x or  –proxy define o servidor proxy pelo qual o cURL encaminhará a solicitação. 

Exemplo de código:


curl -x http://gw.dataimpulse.com:823 https://example.com
      
        
      

2. –proxy-user adiciona credenciais de autenticação ao servidor proxy caso seja necessário fazer login. 

Exemplo de código:


curl -x http://gw.dataimpulse.com:823  --proxy-user username:password http://example.com
      
        
      

3. –proxy-type especifica o protocolo de proxy que será usado. Os valores comuns são http para proxy HTTP, ou socks5 para proxy SOCKS v5. 

Exemplo de código:


curl --socks5 gw.dataimpulse.com:823 https://example.com
      
        
      

DataImpulse is a reliable provider of residenciais, móveis, and datacenter proxy solutions with non-expiring traffic and a pay-as-you-go pricing model. If you want to find out more useful data about web scraping techniques, read our articles about Como fazer scraping do TripAdvisor com Python, Fazendo scraping do GitHub com Python, Como fazer scraping do eBay, Fazendo scraping de conteúdo do YouTube. Você encontra muito mais no nosso blog.

FAQ

Por que meu proxy não funciona com cURL?

Há vários motivos pelos quais isso pode acontecer. Verifique se os dados do seu proxy DataImpulse foram colados corretamente e qual tipo de proxy você está usando. Outro motivo pode ser um servidor proxy temporariamente indisponível.

Qual é a diferença entre HTTP e SOCKS5?

Os proxies HTTP gerenciam o tráfego da web e podem entender solicitações na camada de aplicação. Já o SOCKS5 funciona em uma camada inferior e transmite todos os tipos de tráfego sem alterações. É mais versátil, mas um pouco menos especializado. A DataImpulse oferece proxies HTTP e SOCKS5.

Qual é o formato correto para usar um proxy no cURL?

O formato correto típico é curl -x http://gw.dataimpulse.com:823 https://example.com

O cURL consegue lidar com solicitações HTTPS por meio de um proxy?

Sim. O proxy usa o método HTTP CONNECT para criar um túnel. Em seguida, uma conexão SSL ou TLS é estabelecida entre o cURL e o site de destino. Os proxies DataImpulse garantem uma navegação segura e anônima em mais de 195 locais.

Share article: