In this Article
LinkedIn adalah tambang emas data berharga bagi para profesional HR, sales, marketing, dan bidang lainnya. Platform ini memungkinkan Anda memperoleh wawasan berharga tentang tren pasar secara real time serta mendapatkan banyak kontak yang mungkin Anda perlukan. Namun, informasinya sangat banyak, dan menanganinya secara manual bukanlah pilihan. Di sinilah scraping berperan untuk membantu Anda menghemat waktu dan sumber daya, sambil tetap memperoleh data. Artikel ini mengulas LinkedIn scraping, lengkap dengan hal-hal yang boleh dan tidak boleh dilakukan.
Tantangan LinkedIn scraping
LinkedIn bertujuan menciptakan lingkungan yang aman bagi penggunanya, dan bagian dari strateginya adalah melindungi data pengguna dengan menetapkan batasan ketat mengenai apa yang diizinkan. Karena itu, Ketentuan Layanan LinkedIn dengan jelas menyatakan bahwa scraping dilarang. Oleh karena itu, DataImpulse tidak menganjurkan Anda mencoba melakukan LinkedIn scraping. Informasi selanjutnya dalam artikel ini hanya ditujukan untuk tujuan edukasi. DataImpulse tidak bertanggung jawab atas kemungkinan akibat apa pun.
Kembali ke scraping. LinkedIn melakukan banyak hal untuk memastikan penggunanya adalah manusia sungguhan, bukan robot. Jadi, scraping platform ini memiliki sejumlah tantangan, seperti:
- Batas request
- Mekanisme anti-bot
- CAPTCHA
- Pembatasan login
- Kompleksitas struktur data
- Pemblokiran IP dan akun
- Pertimbangan hukum
Dengan kata lain, jika LinkedIn menilai ada terlalu banyak request yang berasal dari IP atau akun yang sama, atau aktivitas terjadi pada waktu yang tidak lazim, misalnya Natal ketika orang kecil kemungkinannya menjalankan bisnis, kemungkinan besar Anda akan mendapat pemblokiran sementara dan seluruh upaya scraping Anda sia-sia. Ditambah lagi, mekanisme LinkedIn bersifat rahasia dan berubah t̶a̶n̶p̶a̶ ̶p̶e̶r̶i̶n̶g̶a̶t̶a̶n̶̶ secara berkala, sehingga apa yang berjalan baik kemarin mungkin tidak menghasilkan apa pun hari ini. Karena itu, Anda harus selalu waspada, menyesuaikan strategi, atau bahkan menghentikan seluruh aktivitas scraping hingga memahami aturan baru dan menentukan pendekatan baru. Namun, banyak kasus scraping yang berhasil, jadi mari lihat apa yang membantu.
Tips agar LinkedIn scraping menguntungkan
Ada beberapa aturan penting yang perlu dipatuhi.
- LinkedIn scraping berada di area abu-abu, jadi penting untuk meninjau Ketentuan Layanan platform secara berkala. Jika ada perubahan, seperti pembatasan, spesifikasi, atau izin baru, Anda harus menyesuaikan rutinitas scraping. Ini juga membantu Anda menghindari penolakan akses.
- Kepatuhan terhadap undang-undang regulasi data seperti GDPR atau CCPA adalah keharusan. Anda perlu bertanggung jawab atas data yang diperoleh, tidak pernah menjualnya, atau menggunakannya untuk aktivitas ilegal.
- Lakukan scraping hanya pada data yang tersedia untuk umum, seperti nama perusahaan, jabatan, atau informasi kontak, dan jangan mencoba memperoleh informasi pribadi.
- Pantau metrik engagement Anda. Penurunan mendadak dapat menandakan bahwa LinkedIn menganggap perilaku Anda mencurigakan dan membatasi jangkauan Anda.
- Jika Anda menerima peringatan atau pemblokiran sementara, hentikan aktivitas scraping dan tinggalkan alat otomatisasi. Anda dapat membaca lebih lanjut tentang tindakan yang perlu dilakukan dalam kasus tersebut di artikel blog kami.
- Terkadang, Anda mungkin mendengar bahwa lebih baik menggunakan akun berbeda untuk tujuan scraping yang berbeda. Namun, memiliki beberapa akun bertentangan dengan ToS LinkedIn. Sebelum mempertimbangkan gagasan itu, Anda dapat membaca artikel khusus kami untuk mempelajari lebih lanjut dan membuat keputusan yang bijak.
Alat terbaik untuk LinkedIn scraping
Bagian terpenting dari LinkedIn scraping adalah membuat keseluruhan proses terlihat seolah tidak ada bot yang terlibat dan semua tindakan dilakukan oleh manusia sungguhan. Menetapkan interval waktu di antara request, berinteraksi dengan berbagai jenis konten, berhenti secara acak untuk waktu yang lama, dan melakukan beragam tindakan, semuanya Anda perlukan. Intinya adalah menghindari pengulangan pola tindakan yang sama dan mudah diprediksi, karena hal itu tampak seperti robot dan langsung mengungkap diri Anda. Itulah sebabnya memilih alat yang tepat, yang mempertimbangkan semua detail di atas dan dioptimalkan untuk bekerja dengan LinkedIn, merupakan salah satu tugas paling penting. Ada beberapa pilihan yang dapat Anda pertimbangkan.
Alat no-code ini merupakan pilihan yang layak bagi spesialis nonteknis karena antarmuka drag-and-drop-nya mudah digunakan. Alat ini memiliki template siap pakai untuk tugas scraping dan memanfaatkan scraping berbasis cloud, sehingga proses scraping tetap berlanjut bahkan saat komputer Anda mati.
Pada dasarnya Scrapy adalah library Python, sehingga memerlukan kemampuan coding yang kuat atau tim developer. Namun, Anda dapat membangun alat untuk kebutuhan khusus Anda dan menyesuaikannya sebanyak yang diperlukan. Penggunaannya juga sepenuhnya gratis dan mampu menangani proyek berskala besar.
Jika informasi kontak dan lead generation adalah minat utama Anda, alat ini pasti patut diperhatikan. Alat ini mengekstrak alamat email dan nomor telepon yang dapat Anda simpan langsung ke CRM. Anda tidak perlu menjadi ahli coding untuk menggunakannya, karena tersedia ekstensi Chrome demi kenyamanan Anda.
Alat ini dioptimalkan untuk bekerja dengan LinkedIn dan menawarkan template siap pakai serta pilihan untuk membuat script kustom. Alat ini juga berbasis cloud dan dapat diintegrasikan dengan alat lain dengan bantuan API. Ini cocok untuk bisnis menengah hingga besar yang menginginkan skalabilitas.
Alat yang berfokus pada LinkedIn ini tidak hanya baik untuk scraping, tetapi juga untuk mengotomatiskan proses lain, seperti mengirim undangan. Alat ini juga mudah digunakan dan Anda dapat membuat skenario sendiri. Namun, alat ini berbayar, tidak ada paket gratis. Hanya tersedia uji coba 14 hari untuk mencoba alat tersebut.
Alat tambahan untuk LinkedIn scraping
Untuk menciptakan kesan seperti manusia, Anda dapat menggunakan alat lain.
- Browser anti-detect
Browser semacam ini membuat profil terpisah dengan karakteristik unik seperti cookie, alamat IP, dan string user agent. Hal ini menyulitkan LinkedIn untuk menelusuri kembali semua aktivitas dan mengaitkannya dengan pengguna atau perangkat tertentu. Karena browser fingerprinting merupakan salah satu teknik utama yang digunakan platform untuk mendeteksi bot, browser anti-detection adalah andalan Anda. Dalam artikel khusus ini, Anda dapat membaca lebih lanjut tentang pilihan yang patut diperhatikan.
- VPN
VPN membantu Anda menyamarkan geolokasi asli saat mencoba melakukan scraping data di berbagai lokasi. VPN juga menyediakan lapisan keamanan tambahan yang melindungi data pribadi Anda. Pilihan andal seperti ZoogVPN tidak akan menguras dompet Anda, tetapi akan menyelamatkan Anda dari pemblokiran dan mengurangi beban pikiran.
- Browser headless
Jika Anda memutuskan untuk membangun scraper sendiri dan melanjutkan dengan Scrapy atau alat serupa, browser headless wajib digunakan. Browser ini menghemat sumber daya sistem Anda, memungkinkan pemrosesan volume data besar dengan cepat, sekaligus membantu memperkuat perlindungan identitas. Ada beberapa pilihan yang layak, lihat artikel ini untuk memilih yang paling sesuai bagi Anda.
- Alat manajemen session
Pengambilan data satu kali terlihat mencurigakan; alat yang memungkinkan Anda menyimpan dan melanjutkan session juga membantu Anda tampak sebagai pengguna biasa. Ketika tugas scraping Anda tampak seperti session browser yang berkelanjutan, Anda dapat tetap tidak terdeteksi.
- Proxy
Sebagai perantara antara Anda dan server target, proxy menjalankan beberapa tugas sekaligus. Proxy berkomunikasi dengan server atas nama Anda, menyembunyikan IP dan lokasi asli Anda, sehingga lebih sulit menelusuri lalu lintas kembali kepada Anda dan mengaitkan semua aktivitas scraping dengan perangkat Anda. Proxy juga mempercepat proses karena Anda dapat mendistribusikan tugas ke beberapa thread koneksi, yang penting untuk proyek besar. Proxy residential adalah pilihan yang baik karena merupakan IP rumah tangga sungguhan yang terkait dengan penyedia asli. Proxy mobile juga merupakan pilihan, bahkan lebih kecil kemungkinannya terdeteksi, tetapi mungkin sedikit mahal.
Di sisi lain, Anda perlu memilihnya dengan cermat. Proxy gratis kemungkinan besar tidak andal karena sudah dikenal dan platform memblokirnya terlebih dahulu. Pilih penyedia yang menawarkan IP milik sendiri yang diperoleh secara etis. Dengan begitu, Anda tidak akan membayar berlebihan, dan proxy unik sungguhan akan meningkatkan peluang Anda untuk berhasil melakukan LinkedIn scraping secara drastis. Misalnya, DataImpulse menawarkan lebih dari 90 juta IP yang diperoleh secara legal dari 195 lokasi, sehingga scraping Anda berjalan lancar. Kami tidak terlibat dalam use case ilegal, jadi alamat kami bersih dan tidak terkait dengan aktivitas ilegal. Kami juga menawarkan fitur seperti geo-targeting dan pengaturan interval rotasi, sehingga Anda dapat membuat lalu lintas tampak lebih alami. Jika Anda memiliki pertanyaan lain, hubungi tim dukungan kami di [email protected], mereka tersedia 24/7 dan menjawab dalam hitungan menit. Atau tekan tombol “Coba sekarang” untuk memulai bersama kami dan menghilangkan kerumitan scraping Anda.