How to use curl for beginners cover

cURL 用途广泛,无论是在上线前测试 API 响应,还是检查网站是否可用。本文将介绍它是什么,以及如何将其与代理服务器搭配使用。继续阅读这篇简明易懂的入门教程,了解 cURL 的潜力。

关键要点

  • cURL 是一款免费的文件上传和下载工具
  • 在 macOS 和部分 Linux 发行版中,默认已安装 cURL
  • 对于较旧的 Windows 版本(Windows 10 之前),请从官方网站下载 cURL 
  • 要让 cURL 使用代理,请从您的 DataImpulse 用户面板保存端口、主机、登录名和密码等凭据
  • -x、–proxy-type、–proxy-user 是最常用的代理参数 

什么是 cURL

cURL,即 Client URL,由一位瑞典开发者于 1996 年发布,是一款用于发起 HTTP 请求,或通过 URL 发送和获取数据的命令行工具。它是一个开源项目,并支持 FDP、POP3 等多种网络协议。cURL 还支持 HTTPS,并会自动检查 SSL 和 TLS 证书。 

cURL can be used with 住宅, 移动, or 数据中心代理,只要它们支持 HTTP(S) 或 SOCKS5 协议即可。 

如何安装 cURL

打开终端并运行以下命令:


curl --version
      
        
      

输出会显示您的计算机是否已安装 cURL。如果已安装,您将看到 cURL 的版本和发布日期。 

如果您尚未安装 cURL,可以自行安装。

macOS

在 macOS 上,通常会预装 cURL。不过,如果您发现它缺失,可使用名为 Homebrew 的工具通过以下命令安装:


brew install curl
      
        
      

Windows

Windows 10+ 通常已自带 cURL。对于更早的版本,请访问 cURL 官方网站,选择适合您系统架构的版本并下载。接下来,解压下载的压缩包,并将 bin 文件夹添加到系统路径中。 

Linux

Ubuntu 和 Fedora 通常默认包含 cURL,因此可直接在终端中使用。对于未预装它的发行版,可通过软件包管理器添加 cURL。对于基于 Debian 的系统,安装命令为:


sudo apt install curl
      
        
      

对于基于 Fedora 的系统,命令为:


sudo dnf install curl
      
        
      

使用 cURL 连接到 DataImpulse 代理

安装 cURL 后,您就可以开始通过代理路由请求。前往您的 DataImpulse 用户面板,复制登录名、密码、端口和主机等代理凭据,然后将其粘贴到代码中:


curl -x http://username:[email protected]:823 https://example.com

      
        
      

实用的 cURL 代理参数

最常用的参数包括:

1. -x 或  –proxy 用于定义 cURL 将通过其路由请求的代理服务器。 

代码示例:


curl -x http://gw.dataimpulse.com:823 https://example.com
      
        
      

2. –proxy-user 在必须登录时,为代理服务器添加身份验证凭据。 

代码示例:


curl -x http://gw.dataimpulse.com:823  --proxy-user username:password http://example.com
      
        
      

3. –proxy-type 用于指定要使用的代理协议。常见值包括:http,用于 HTTP 代理,or socks5,用于 SOCKS v5 代理。 

代码示例:


curl --socks5 gw.dataimpulse.com:823 https://example.com
      
        
      

DataImpulse 是可靠的住宅、移动和数据中心代理解决方案提供商,提供永不过期的流量和按量付费的定价模式。如果您想了解更多有关网络爬取技术的实用信息,请阅读我们的文章:如何使用 Python 爬取 TripAdvisor, 使用 Python 爬取 GitHub, 如何爬取 eBay, 爬取 YouTube 内容。您还可以在我们的博客中找到更多内容。

常见问题

为什么我的代理无法与 cURL 配合使用?

造成这种情况的原因可能有多种。请检查您是否正确粘贴了 DataImpulse 代理详细信息,以及您使用的是哪种代理类型。另一个原因可能是代理服务器暂时不可用。

HTTP 和 SOCKS5 有什么区别?

HTTP 代理管理网络流量,并且能够理解应用层的请求。相比之下,SOCKS5 在较低层级运行,可不经任何修改地传输各种流量。它更加通用,但专业性略低。DataImpulse 同时提供 HTTP 和 SOCKS5 代理。

在 cURL 中使用代理的正确格式是什么?

典型的正确格式是 curl -x http://gw.dataimpulse.com:823 https://example.com

cURL 可以通过代理处理 HTTPS 请求吗?

可以。代理使用 HTTP CONNECT 方法创建隧道。随后,在 cURL 与目标网站之间建立 SSL 或 TLS 连接。DataImpulse 代理可在超过 195 个地点确保安全匿名浏览。

Share article: