Dalam artikel ini
cURL banyak digunakan, baik untuk menguji respons API sebelum produksi maupun memeriksa apakah suatu situs web tersedia. Di sini, kami membahas apa itu cURL dan cara menggunakan produk ini dengan server proxy. Untuk memahami potensi cURL, lanjutkan membaca tutorial singkat kami yang ramah bagi pemula.
Fakta Utama
- cURL adalah alat gratis untuk mengunggah dan mengunduh file
- Pada macOS dan beberapa distribusi Linux, cURL terpasang secara default
- Untuk versi Windows yang lebih lama (sebelum Windows 10), unduh cURL dari situs web resmi
- Untuk menggunakan cURL dengan proxy, simpan kredensial seperti port, host, login, dan kata sandi dari dashboard DataImpulse Anda
- -x, –proxy-type, –proxy-user adalah parameter proxy yang paling umum
Apa itu cURL
Dirilis oleh seorang pengembang asal Swedia pada 1996, cURL, atau Client URL, adalah alat command-line yang digunakan untuk membuat request HTTP atau sekadar mengirim dan mengambil data melalui URL. Ini merupakan proyek open-source dan mendukung beragam protokol jaringan lain, seperti FDP atau POP3. cURL juga mendukung HTTPS serta memeriksa sertifikat SSL dan TLS secara otomatis.
cURL dapat digunakan dengan residential, mobile, atau datacenter proxy selama mendukung protokol HTTP(S) atau SOCKS5.
Cara menginstal cURL
Buka terminal Anda dan jalankan perintah berikut:
curl --version
Output akan menunjukkan apakah cURL sudah terpasang di komputer Anda atau belum. Jika sudah, Anda akan melihat versi dan tanggal rilis cURL.
Jika cURL belum terpasang, Anda dapat menginstalnya sendiri.
macOS
Pada macOS, cURL biasanya sudah terpasang. Namun, jika tidak tersedia, instal dengan alat bernama Homebrew menggunakan perintah ini:
brew install curl
Windows
Windows 10+ biasanya sudah menyertakannya. Untuk versi sebelumnya, kunjungi situs web resmi cURL, pilih versi yang tepat untuk arsitektur sistem Anda, lalu unduh. Langkah berikutnya adalah mengekstrak arsip yang telah diunduh dan menambahkan folder bin ke path sistem Anda.
Linux
Ubuntu dan Fedora sering kali menyertakannya secara default, sehingga langsung tersedia di terminal. Untuk distribusi yang belum memasangnya, cURL dapat ditambahkan melalui package manager. Untuk sistem berbasis Debian, perintah instalasinya adalah:
sudo apt install curl
Untuk sistem berbasis Fedora, perintahnya adalah:
sudo dnf install curl
Hubungkan ke proxy DataImpulse menggunakan cURL
Setelah menginstal cURL, Anda dapat mulai mengarahkan request melalui proxy. Buka dashboard DataImpulse Anda, salin kredensial proxy seperti login/kata sandi/port/host, lalu tempelkan ke dalam kode:
curl -x http://username:[email protected]:823 https://example.com
Parameter proxy cURL yang berguna
Parameter yang paling banyak digunakan adalah:
1. -x or –proxy menentukan server proxy yang akan dilalui cURL untuk mengarahkan request.
Contoh kode:
curl -x http://gw.dataimpulse.com:823 https://example.com
2. –proxy-user menambahkan kredensial autentikasi untuk server proxy jika login diperlukan.
Contoh kode:
curl -x http://gw.dataimpulse.com:823 --proxy-user username:password http://example.com
3. –proxy-type menentukan protokol proxy yang akan digunakan. Nilai yang umum adalah http untuk proxy HTTP, atau socks5 untuk proxy SOCKS v5.
Contoh kode:
curl --socks5 gw.dataimpulse.com:823 https://example.com
DataImpulse adalah penyedia tepercaya untuk solusi proxy residential, mobile, dan datacenter dengan lalu lintas yang tidak kedaluwarsa serta model harga pay-as-you-go. Jika Anda ingin mengetahui lebih banyak informasi berguna tentang teknik web scraping, baca artikel kami tentang Cara melakukan web scraping TripAdvisor dengan Python, Web scraping GitHub dengan Python, Cara melakukan web scraping eBay, Web scraping konten YouTube. Lebih banyak informasi dapat ditemukan di blog kami.
Pertanyaan Umum
Mengapa proxy saya tidak berfungsi dengan cURL?
Ada beberapa alasan mengapa hal ini dapat terjadi. Periksa apakah detail proxy DataImpulse Anda sudah ditempelkan dengan benar dan jenis proxy yang Anda gunakan. Penyebab lainnya mungkin server proxy yang sementara tidak tersedia.
Apa perbedaan antara HTTP dan SOCKS5?
Proxy HTTP mengelola lalu lintas web dan dapat memahami request pada lapisan aplikasi. Sebaliknya, SOCKS5 berfungsi pada lapisan yang lebih rendah dan meneruskan semua jenis lalu lintas tanpa perubahan. SOCKS5 lebih serbaguna, tetapi agak kurang terspesialisasi. DataImpulse menawarkan proxy HTTP dan SOCKS5.
Apa format yang benar untuk menggunakan proxy di cURL?
Format yang umumnya benar adalah curl -x http://gw.dataimpulse.com:823 https://example.com
Dapatkah cURL menangani request HTTPS melalui proxy?
Ya. Proxy menggunakan metode HTTP CONNECT untuk membuat tunnel. Selanjutnya, koneksi SSL atau TLS dibuat antara cURL dan situs web tujuan. Proxy DataImpulse memastikan browsing yang aman dan anonim di lebih dari 195 lokasi.


