In this Article
Indeed ist die größte Jobseite der Welt und eines der am stärksten geschützten Scraping-Ziele im offenen Web. Hinter jeder öffentlichen Stellenanzeige stehen Cloudflare-Bot-Management, CAPTCHA-Herausforderungen, Ratenlimits und IP-Reputationsprüfungen, die Rechenzentrumsbereiche in Millisekunden markieren. Indeed hat seine öffentliche API für die Jobsuche zudem schon vor Jahren eingestellt. Um Anzeigen, Gehälter und Einstellungssignale im großen Maßstab zu erfassen, bleibt daher nur das Scrapen der öffentlichen Website. Dafür brauchen Sie Residential-Proxys, die wie gewöhnliche Jobsuchende wirken und nicht wie eine Serverfarm.
Dieser Leitfaden bewertet die 8 besten Proxys zum Scrapen von Indeed 2026 für Arbeitsmarktanalysen, Gehalts- und Lohnmonitoring, Stellenaggregation und Recruiting Intelligence. Er erläutert, warum Indeed so schwer zu scrapen ist, welcher Proxy-Typ sich eignet, wie sich die Anbieter bei Preis und Erfolgsquote unterscheiden und wo die rechtliche Grenze zwischen dem Sammeln öffentlicher Stellendaten und einem Verstoß gegen die Indeed-Nutzungsbedingungen liegt. Zur Schnellübersicht gelangen Sie direkt zur Kurzliste.
Wichtige Fakten
Das Scrapen von Indeed folgt eigenen Regeln, denn die Plattform ist darauf ausgelegt, automatisierte Datensammler fernzuhalten. Diese fünf Punkte sollten Sie vorab kennen:
- Die weltweit führende Jobseite. Indeed liegt weltweit in der Kategorie Jobs & Beschäftigung vorn und verzeichnet Hunderte Millionen Besuche pro Monat. Genau deshalb sind seine Stellen-, Gehalts- und Unternehmensdaten für Aggregatoren, HR-Tech und Arbeitsmarktanalysten so wertvoll.
- Im Besitz von Recruit Holdings (Japan). Indeed ist eine Tochtergesellschaft von Recruit Holdings Co., Ltd. und betreibt lokalisierte Websites in Dutzenden Ländern. Stellendaten, Gehälter und Verfügbarkeiten unterscheiden sich daher je nach Land und lassen sich nur mit lokalen IPs korrekt anzeigen.
- Die öffentliche API für die Jobsuche gibt es nicht mehr. Indeed hat seine öffentliche Publisher / Job Search API schon vor Jahren eingestellt. Die heutigen APIs decken das Veröffentlichen, Apply, gesponserte Stellen und aggregierte Hiring-Lab-Daten ab, nicht jedoch den Massenabruf von Anzeigen. Das Scrapen der öffentlichen Website ist der praktikable Weg zu Daten auf Anzeigenebene.
- Strenger Bot-Schutz. Indeed nutzt Cloudflare WAF und Bot-Management mit CAPTCHA- und Identitätsprüfungen; Rechenzentrums-IP-Adressen werden schnell blockiert. Residential-IP-Adressen, gelegentlich auch Mobilfunk-IP-Adressen, kommen durch.
- DataImpulse bietet das beste Preis-Leistungs-Verhältnis mit Residential ab $1/GB, Pay-as-you-go, nie ablaufendem Traffic und 90M+ IPs in 195 Ländern. Länder-Targeting ist enthalten, Stadt/ASN gibt es als Zusatzoption. Damit erhalten Sie die geografische Abdeckung, die die lokalisierten Indeed-Websites benötigen, zu einem Bruchteil der Enterprise-Preise.
So haben wir diese Indeed-Proxys ausgewählt
Wir haben diese 8 Anbieter ausgewählt, weil sie die Residential- und Mobilfunkabdeckung bieten, die Indeed-Scraping tatsächlich verlangt, ihre Preise mit Stand Juni 2026 öffentlich machen und die bei einem Cloudflare-geschützten Ziel entscheidenden Funktionen bereitstellen: große rotierende Residential-Pools gegen Ratenlimits, Sticky Sessions für mehrstufige Abläufe von der Suche zur Anzeige, Geo-Targeting für die lokalisierten Länder-Websites von Indeed und, für Teams mit Vorliebe für verwaltete Endpunkte, Scraping-APIs, die die Bot-Schutzschicht übernehmen. Bewertet wurden der aktuelle PAYG-Preis für Residential pro GB, die Erfolgsquote bei Cloudflare-Zielen, die Geo-Granularität und Optionen für verwaltete APIs. Anbieter ohne glaubwürdige Residential-Abdeckung haben wir ausgeschlossen, denn reine Rechenzentrums-Proxys überwinden die Indeed-Sperre nicht.
Warum Sie Proxys für Indeed benötigen
Drei Faktoren machen Indeed zu einer Proxy-Aufgabe statt zu einem einfachen HTTP-Abruf. Die Bot-Schutzschicht ist streng. Indeed nutzt Cloudflare-Bot-Management, CAPTCHAs und IP-Reputationsbewertungen. Schon wenige Anfragen von einer Rechenzentrums-IP werden überprüft oder blockiert, sodass naives Scraping binnen Minuten scheitert. Echte Residential-IP-Adressen erscheinen als gewöhnliche Jobsuchende und kommen durch, wo eine Server-IP nicht weiterkommt. Die Daten sind lokalisiert. Indeed betreibt separate Länder-Websites (indeed.com, indeed.co.uk, ca.indeed.com, de.indeed.com und Dutzende weitere) mit unterschiedlichen Anzeigen, Gehältern und Währungen. Um einen bestimmten Markt korrekt zu erfassen, benötigen Sie daher IPs in diesem Land. Menge erfordert Verteilung. Arbeitsmarktdatensätze umfassen Tausende bis Millionen Anzeigen. Ein rotierender Pool verteilt diese Anfragen auf viele IPs, sodass keine einzelne Adresse die Ratenlimits von Indeed auslöst. Proxys sind bei Indeed keine Optimierung, sondern die Voraussetzung dafür, dass die Erfassung überhaupt funktioniert.
Schnellübersicht: Die besten Proxys für Indeed auf einen Blick
| Anbieter | Am besten geeignet für | Residential-Preis | Indeed-Eignung | Besonderheit |
|---|---|---|---|---|
| DataImpulse | Bestes Preis-Leistungs-Verhältnis, eigene Pipelines | $1/GB PAYG | Rotierend + sticky, 195 Länder | 90M+ Pool, Mobilfunk $2/GB, kein Ablauf |
| Bright Data | Enterprise + verwaltetes Scraping | ca. $4/GB Aktion; 8 $ regulär | Web Unlocker überwindet Cloudflare | 400M+ Pool, Unlocker $1.50/1K, SERP API |
| Oxylabs | Enterprise + Web Scraper API | ab $6/GB | Verwaltete API, JS-Rendering | 175M+ Pool, SLA, Compliance |
| Decodo | Mittelstand, vollständiges Geo-Raster | $3.75/GB Starter; ca. 2 $ ab 1 TB+ | Web Scraping API, sticky 24h | 115M+ Pool, Land/Stadt/ASN |
| IPRoyal | Lange Sticky Sessions | ab $7.35/GB | Sticky bis zu 7 Tage | Mehrstufige Abläufe, günstiger PAYG-Einstieg |
| SOAX | Residential- und Mobilfunk-Mix | $3.60/GB Starter | Mobilfunk-IPs für härteste Sperren | 155M+ Residential, 33M+ Mobilfunk |
| Webshare | Budget / geringes Volumen | Residential ab $3.50/mo | Einfache Indeed-Prüfungen | Kostenloser Tarif, Selbstbedienung |
| NetNut | ISP-Residential-Stabilität | ab $3.53/GB | Stabile IPs für gleichmäßige Durchläufe | Statische Verbraucher-ISP-IPs |

Welchen Proxy-Typ sollten Sie für Indeed verwenden?
Die Arbeit mit Indeed gliedert sich in umfassende Anzeigendurchläufe, die am stärksten blockierten Endpunkte, lokalisierte Länderdaten und lange mehrstufige Abläufe. Jeder Bereich passt zu einem bestimmten Proxy-Typ.
Residential-Proxys: Der Standard für Indeed
Residential-Proxys sind der richtige Standard für nahezu jedes Indeed-Scraping: Suchergebnisseiten, einzelne Stellenanzeigen, Unternehmensseiten und Gehaltsdaten. Echte ISP-IPs wirken wie gewöhnliche Jobsuchende und passieren das Cloudflare-Bot-Management, während Rechenzentrums-IPs sofort blockiert werden. Nutzen Sie rotierende Residential-Proxys für umfassende Durchläufe über viele Abfragen und Anzeigen und wählen Sie für lokalisierte Indeed-Websites das richtige Land.
Mobilfunk-Proxys: Die am stärksten blockierten Endpunkte
Mobilfunk-Proxys leiten den Verkehr über echte IPs von Mobilfunkanbietern und sind am schwersten zu blockieren, weil sich viele echte Nutzer über CGNAT dieselben Carrier-IPs teilen. Cloudflare kann sie nicht ohne Kollateralschäden sperren. Setzen Sie Mobilfunk-Proxys, die teurer sind (2-15 $/GB), für die am stärksten geschützten Indeed-Bereiche oder Daten aus Mobil-Apps ein und erledigen Sie den Großteil der Erfassung über Residential.
ISP / statisches Residential: Stabile, gleichmäßige Durchläufe
ISP-Proxys (statisches Residential) verbinden die Glaubwürdigkeit von Verbraucher-ISPs mit einer stabilen, langlebigen IP. Das ist nützlich für gleichmäßige, langfristige Indeed-Erfassungen mit einer konsistenten Adresse sowie für jede sitzungsgebundene Abfolge. NetNut, IPRoyal, Decodo, SOAX und Bright Data bieten alle ISP-Angebote.
Rechenzentrums-Proxys: Nicht für die öffentliche Indeed-Website
Rechenzentrums-Proxys werden von der Cloudflare-Schicht von Indeed fast sofort markiert. Sie eignen sich daher nicht zum Scrapen der öffentlichen Jobseite. Für ungeschützte Nebenaufgaben wie die Verarbeitung bereits erfasster Daten oder die eigene Infrastruktur sind sie gut und günstig. Für Live-Seiten von Indeed sollten Sie jedoch Residential oder Mobilfunk einsetzen.
Verwaltete Scraping-APIs: Den Kampf gegen Botschutz auslagern
Wenn Sie keinen Scraper warten möchten, der Cloudflare überwindet, übernehmen verwaltete Scraping-APIs (Bright Data Web Unlocker, Oxylabs Web Scraper API, Decodos Web Scraping API) beim Abruf die Proxy-Rotation, das Browser-Rendering und das Lösen von Herausforderungen und geben die Seite oder verarbeitete Daten zurück. Sie zahlen pro 1,000 Ergebnisse statt pro GB, also mehr pro Datensatz, aber mit deutlich weniger Wartung.
Beste Proxys für Indeed: Ausführliche Bewertungen
Die folgenden Empfehlungen sind nach ihrem Nutzen für die Arbeit mit Indeed geordnet: dem Verhältnis aus Residential-Authentizität gegenüber Cloudflare, Geo-Abdeckung für lokalisierte Websites, verwalteten API-Optionen und Preis pro erfolgreichem Scrape. DataImpulse führt bei eigenen Pipelines beim Preis-Leistungs-Verhältnis, Bright Data und Oxylabs bei der Route über verwaltete APIs, Webshare ist die Budgetoption.
1. DataImpulse
DataImpulse ist die beste Wahl für das Preis-Leistungs-Verhältnis für interne Teams, die Indeed scrapen, etwa für Arbeitsmarktanalysen, Gehaltsmonitoring, Stellenaggregation und Recruiting Intelligence. Residential beginnt bei $1/GB, Pay-as-you-go, mit nie ablaufendem Traffic, also zu einem Bruchteil der Enterprise-Preise. Der Pool umfasst 90M+ ethisch bezogene IPs in 195 Ländern. Länder-Targeting ist enthalten, Stadt/ASN gibt es kostenpflichtig dazu. Das ist relevant, weil Indeed lokalisierte Websites mit je Land unterschiedlichen Anzeigen und Gehältern betreibt. Unterstützt werden HTTP, HTTPS und SOCKS5, rotierende und Sticky Sessions, vollständiger API-Zugang sowie gängige Stacks (Scrapy, Selenium, Playwright). Kanadische Mobilfunk-Proxys und Mobilfunk-Proxys in anderen Märkten sind für die am stärksten blockierten Endpunkte für $2/GB verfügbar; Rechenzentrum für $0.50/GB für die Verarbeitungsschicht.
Entscheidend für die Wahl bei ernsthafter Indeed-Erfassung ist das Verhältnis von Preis zu Abdeckung. Mit $1/GB können Sie länderübergreifend kontinuierliche Durchläufe für Stellenanzeigen und Gehälter ohne Kosten pro Datensatz betreiben. PAYG bedeutet zudem, dass ein Test in einem neuen Markt Sie nicht an ein Abonnement bindet. Kombinieren Sie rotierendes Residential mit einer menschlichen Abrufgeschwindigkeit und einem echten Browser-Fingerabdruck, um unter den Cloudflare-Schwellen von Indeed zu bleiben. Der Support erfolgt rund um die Uhr durch Menschen, die veröffentlichte Erfolgsquote beträgt 99.51%, G2 liegt bei 4.8/5.
Kurzdaten — Typen: Residential, Mobilfunk, Rechenzentrum · Pool: 90M+ Residential, 195 Länder · Rotation: rotierend + sticky · Geo: Land (Stadt/ASN-Zusatzoption) · Preis: $1/GB Residential, $0.50/GB DC, $2/GB Mobilfunk · Veröffentlichtes Ergebnis: 99.51% · Bewertung: G2 4,8.
2. Bright Data
Bright Data ist die Enterprise-Wahl, wenn Sie Indeed-Daten als verwaltetes Produkt wünschen. Zusätzlich zu reinem Residential für $8/GB per Pay-as-you-go, aktuell im Rahmen einer Aktion auf etwa $4/GB reduziert, mit einem monatlichen Pool von 400M+ IPs und Länder-/Stadt-/ASN-Targeting bietet Bright Data einen Web Unlocker für 1,50 $ pro 1,000 Ergebnisse, der Cloudflare, CAPTCHAs und Rendering beim Abruf verarbeitet. Er ist speziell für Ziele wie Indeed konzipiert. Außerdem gibt es eine SERP API und vorab erfasste Datensätze. Das ist die richtige Wahl, wenn Sie lieber einen verwalteten Endpunkt ansprechen als einen Indeed-Scraper zu pflegen, der Cloudflare überwindet, und Enterprise-Preise akzeptieren.
Kurzdaten — Typen: Residential, DC, ISP, Mobilfunk + Web Unlocker + Datensätze · Pool: 400M+ monatliches Residential · Rotation: rotierend, sticky, dediziert · Geo: Land/Stadt/ASN · Preis: ca. $4/GB Residential (Aktion), $8/GB regulär; Web Unlocker $1.50/1K.
3. Oxylabs
Oxylabs steht neben Bright Data an der Spitze des Enterprise-Markts und legt großen Wert auf verwaltete Scraping-APIs sowie eine auditfähige Compliance-Ausrichtung. Residential beginnt im Einstiegstarif bei etwa $6/GB mit einem Pool von 175M+ IPs in 195 Ländern. Die Web Scraper API übernimmt serverseitig JavaScript-Rendering und Bot-Schutz für Ziele wie Indeed und liefert verarbeitete Daten zurück. Sitzungen sind flexibel, parallele Verbindungen unbegrenzt. Wählen Sie Oxylabs, wenn SLA-taugliche Zuverlässigkeit und Compliance-Dokumentation wichtiger sind als der Einstiegspreis. Das passt typischerweise zu größeren HR-Tech-Anbietern und Datenunternehmen mit Beschaffungsanforderungen.
Kurzdaten — Typen: Residential, DC, ISP, Mobilfunk + Web Scraper API · Pool: 175M+ Residential, 195 Länder · Rotation: flexibel, sticky, unbegrenzte Parallelität · Geo: Land/Stadt · Preis: Residential ab $6/GB; API nach 1K Ergebnissen berechnet.
4. Decodo
Decodo, früher Smartproxy, ist die ausgewogene Wahl für den Mittelstand bei Indeed-Aufgaben, die ein vollständiges Geo-Raster ohne Enterprise-Preise erfordern. Residential beginnt im 3GB-Einstiegstarif bei $3.75/GB, Pay-as-you-go liegt bei etwa $4/GB und sinkt im 1,000-GB-Tarif auf ungefähr $2/GB. Die Web Scraping API übernimmt Rendering und Bot-Schutz für Ziele wie Indeed. Sticky Sessions lassen sich bis zu 24 Stunden konfigurieren, lang genug für mehrstufige Abläufe von der Suche zur Anzeige, und Länder-, Stadt- und ASN-Targeting sind für die lokalisierten Indeed-Websites jeweils enthalten.
Kurzdaten — Typen: Residential, DC, ISP, Mobilfunk + Web Scraping API · Pool: 115M+ Residential · Rotation: pro Anfrage, sticky bis 24h · Geo: Land/Stadt/ASN · Preis: $3.75/GB (3GB-Starter), ca. $4/GB PAYG, ca. $2/GB ab 1 TB.
Am besten geeignet für: Mittelstandsteams, die ein vollständiges Geo-Raster und eine verwaltete Scraping API zu einem Preis pro GB wünschen.
5. IPRoyal
IPRoyal verdient seinen Platz bei Indeed-Teams mit langen, sitzungsstabilen Abläufen. Residential PAYG kostet zum Einstieg $7.35/GB und wird bei höherem Volumen günstiger. Hinzu kommen ein Pool von 32M+ IPs in 195+ Ländern, Länder-/Region-/Stadt-/ISP-Targeting und als echtes Alleinstellungsmerkmal Sticky Sessions von bis zu 7 Tagen, die längsten in dieser Liste. Für langfristige Indeed-Erfassung in bestimmten Märkten oder jeden Ablauf, bei dem Sitzungskontinuität entscheidend ist, ist die Sticky-Funktion von IPRoyal einzigartig.
Kurzdaten — Typen: Residential, ISP, Mobilfunk, DC · Pool: 32M+ Residential, 195+ Länder · Rotation: rotierend, sticky bis zu 7 Tage · Geo: Land/Region/Stadt/ISP · Preis: Residential PAYG ab $7.35/GB.
Am besten geeignet für: Teams mit langer, sitzungsstabiler Indeed-Erfassung.
6. SOAX
SOAX ist die Wahl, wenn Indeed Sie immer wieder blockiert und Sie Mobilfunk-IPs benötigen. Residential beginnt im Starter-Tarif bei $3.60/GB, inklusive 25 GB. Das einheitliche Guthabenmodell ermöglicht es, ein Budget für Residential, Mobilfunk, ISP oder Rechenzentrum zu verwenden. Der Pool ist für das mittlere Segment groß: 155M+ Residential, 33M+ Mobilfunk und 2.6M+ ISP, jeweils mit Länder-, Regionen-, Stadt-, ISP- und ASN-Targeting. Dieser Mobilfunk-Pool macht bei Indeed den Unterschied: Wenn Residential auf den am stärksten geschützten Seiten überprüft wird, sind echte Carrier-IPs für Cloudflare am schwersten zu blockieren.
Kurzdaten — Typen: Residential, Mobilfunk, ISP, DC + Web Data API · Pool: 155M+ Residential, 33M+ Mobilfunk, 2.6M+ ISP · Rotation: pro Anfrage oder Intervall, sticky unterstützt · Geo: Land/Region/Stadt/ISP/ASN · Preis: $3.60/GB Starter.
7. Webshare
Webshare ist die günstige Selbstbedienungsoption für leichte Indeed-Aufgaben. Residential-Tarife beginnen bei etwa $3.50/mo und umfassen einen kostenlosen Tarif zum Testen; Länder-Targeting ist verfügbar, Stadt-Targeting in höheren Tarifen. Webshare eignet sich für Indeed-Prüfungen mit geringem Volumen, leichtes Monitoring oder einen Scraper-Prototyp vor der Skalierung. Für eine intensive, kontinuierliche Erfassung gegen Cloudflare ist es nicht das richtige Werkzeug, dort funktionieren Premium-Residential oder eine verwaltete API besser. Zum Einstieg ist es jedoch die günstigste Möglichkeit.
Kurzdaten — Typen: Residential, Rechenzentrum, statisches Residential · Geo: Land (Stadt in höheren Tarifen) · Rotation: tarifabhängig · Preis: Residential ab $3.50/mo, Rechenzentrum ab $2.99/mo · Kostenloser Tarif verfügbar.
Am besten geeignet für: preisbewusstes Indeed-Scraping mit geringem Volumen und Prototyping.
8. NetNut
NetNut rundet die Liste für Indeed-Teams ab, die ISP-Residential-Stabilität wünschen. Die Stärke sind statische Verbraucher-ISP-IPs, die direkt von Internetanbietern stammen, rotierendes Residential ab etwa $3.53/GB, wobei statisches/ISP-Residential mit rund $7.99/GB höher liegt, Länder- und Stadt-Targeting sowie schnelle Rotation dank eines großen ISP-Residential-Pools. Das ISP-Residential-Modell kombiniert die Authentizität von Verbraucher-IPs mit der Stabilität von statischem Hosting. Es eignet sich gut für gleichmäßiges, langfristiges Indeed-Monitoring, das von konsistenten Adressen profitiert.
Kurzdaten — Typen: ISP-Residential, Residential, Mobilfunk · Geo: Land/Stadt · Rotation: rotierend + statisch · Preis: ab $3.53/GB.
Was kostet das Scrapen von Indeed?
Die Proxy-Kosten für Indeed teilen sich in zwei Preismodelle, die sich nicht auf einer einzigen Achse vergleichen lassen. Reine Residential-Proxys werden pro GB berechnet: DataImpulse mit $1/GB bildet die Untergrenze beim Preis-Leistungs-Verhältnis, NetNut beginnt bei 3,53 $, SOAX bei 3,60 $, Decodo bei 3,75 $ (PAYG ca. 4 $, bei Volumen bis ca. 2 $), Oxylabs bei 6 $, IPRoyal bei 7,35 $ und Bright Data bei 8 $ (4 $ Aktion). Das abonnementbasierte Residential von Webshare ab $3.50/mo ist die Budgetoption. Mit reinen Proxys bauen und pflegen Sie Ihren eigenen Indeed-Parser, der Cloudflare überwindet, doch im großen Maßstab ist das Modell pro GB erheblich günstiger als pro Datensatz. Verwaltete Scraping-APIs werden pro 1,000 Ergebnisse berechnet (Bright Data Web Unlocker $1.50/1K; APIs von Oxylabs und Decodo pro 1K) und bündeln den Kampf gegen den Bot-Schutz im Preis. Das kostet mehr pro Datensatz, reduziert aber den Wartungsaufwand.
Als Faustregel gilt: Bei kontinuierlicher Indeed-Erfassung mit hohem Volumen und eigener Kontrolle über den Parser gewinnt reines Residential für $1/GB klar bei den Kosten, denn eine Stellenanzeige oder Suchseite ist nur ein kleiner Bruchteil eines GB. Für gelegentliche Abrufe, kleinere Teams oder wenn Sie Cloudflare einfach nicht selbst bekämpfen möchten, lohnt sich der Aufpreis für eine verwaltete API. Viele Teams nutzen beides: reines Residential für die täglichen Durchläufe sowie eine verwaltete API oder einen Mobilfunk-Pool für Endpunkte, die immer wieder blockiert werden.
Ist das Scrapen von Indeed legal?
Scraping öffentlich verfügbarer Stellenanzeigen ist in den USA grundsätzlich gut vertretbar, doch Indeed ist vertraglich ein Minenfeld. Deshalb ist die Unterscheidung wichtig. In hiQ Labs v. LinkedIn entschied der Ninth Circuit, dass das Scrapen öffentlich zugänglicher Daten wahrscheinlich nicht gegen den Computer Fraud and Abuse Act (CFAA) verstößt. Das ist jedoch keine pauschale Erlaubnis. Der Fall ist eine Warnung, kein Freifahrtschein: Dasselbe Verfahren endete letztlich zu Ungunsten des Scrapers aus Vertragsgründen; bei hiQ wurde vor dem Vergleich ein Verstoß gegen die LinkedIn-Nutzungsvereinbarung festgestellt. Die Nutzungsbedingungen von Indeed verbieten Bots, Scraper und Data Mining ohne schriftliche Genehmigung ausdrücklich. Ansprüche wegen Vertragsverletzung, Besitzstörung und Verletzung geistigen Eigentums bleiben daher reale Risiken, besonders nach einer Abmahnung.
Die praktische Grenze, innerhalb derer die meisten Arbeitsmarkt- und HR-Tech-Teams arbeiten: Erfassen Sie öffentliche, nicht personenbezogene Stellendaten wie Titel, Unternehmen, Orte, Gehaltsspannen, Beschreibungen und Veröffentlichungsdaten in angemessenem Tempo, scrapen Sie nicht hinter Logins und sammeln Sie keine personenbezogenen Daten von Bewerbenden oder Bewertenden. Nutzen Sie, wo möglich, lizenzierte Partner-APIs von Indeed oder aggregierte Hiring-Lab-Daten für einen autorisierten Zugang. Dies sind allgemeine Informationen und keine Rechtsberatung. Prüfen Sie die aktuellen Nutzungsbedingungen von Indeed und lassen Sie sich rechtlich beraten, bevor Sie eine kommerzielle Indeed-Pipeline skalieren.
So starten Sie mit dem Scrapen von Indeed und DataImpulse
Schritt 1. Erstellen Sie ein DataImpulse-Konto und rufen Sie Ihre Residential-Proxy-Zugangsdaten im Dashboard ab. Beginnen Sie mit dem Einstiegspaket für 5 $ / 5 GB. Der Traffic läuft nie ab, sodass es sich um ein echtes Testbudget handelt.
Schritt 2. Stellen Sie das Länder-Targeting auf den gewünschten Indeed-Markt ein, etwa indeed.com, indeed.co.uk oder de.indeed.com, und kombinieren Sie den Proxy mit Ihrem Stack, also Scrapy, Playwright oder Selenium mit einem echten Browser-Fingerabdruck. So werden Seiten gerendert und JavaScript so ausgeführt, wie Cloudflare es erwartet. Verwenden Sie rotierendes Residential für umfassende Such- und Anzeigendurchläufe und eine Sticky Session für mehrstufige Abläufe. Wechseln Sie für Endpunkte, die immer wieder geprüft werden, zu Mobilfunk für $2/GB.
Schritt 3. Führen Sie die Erfassung in menschlichem Tempo mit Wiederholungen und Backoff durch, erfassen Sie nur öffentliche, nicht personenbezogene Felder und speichern Sie bei Bedarf getrennt nach Ländern. Auf der Seite zu Residential-Proxys finden Sie Hinweise zur Einrichtung; der Leitfaden zu den besten Proxys für Recruiting erläutert den umfassenderen HR-Daten-Stack.
Häufige Fragen
Kann man Indeed scrapen?
Ja, technisch gesehen. Indeed nutzt jedoch Cloudflare-Bot-Management, CAPTCHAs und IP-Reputationsprüfungen. Deshalb können Sie die Seite nicht über eine Rechenzentrums-IP oder ohne echten Browser-Fingerabdruck scrapen. Der funktionierende Ansatz sind Residential-Proxys, gegebenenfalls Mobilfunk-Proxys, die wie gewöhnliche Jobsuchende wirken, kombiniert mit einem Headless-Browser (Playwright/Selenium), Anfragen in menschlichem Tempo und Wiederholungen. Indeed hat seine öffentliche API für die Jobsuche zudem eingestellt. Das Scrapen der öffentlichen Website ist daher der praktikable Weg zu Daten auf Anzeigenebene.
Welcher Proxy eignet sich am besten zum Scrapen von Indeed?
Residential-Proxys sind der Standard, denn Indeed blockiert Rechenzentrums-IP-Adressen schnell. DataImpulse mit $1/GB bietet das beste Preis-Leistungs-Verhältnis; Decodo, SOAX und NetNut sind solide Optionen im mittleren Segment. Der Web Unlocker von Bright Data und die Web Scraper API von Oxylabs sind die verwalteten Lösungen, die Cloudflare für Sie übernehmen. Für die am stärksten blockierten Endpunkte ergänzen Sie IPs von Mobilfunkanbietern, etwa DataImpulse für $2/GB oder den Mobilfunk-Pool von SOAX mit 33M+ IPs.
Gibt es von Indeed stattdessen eine API?
Nicht für den Massenabruf von Anzeigen. Indeed hat seine öffentliche Publisher / Job Search API schon vor Jahren eingestellt. Die aktuellen Partner-APIs decken das Veröffentlichen von Stellen, Apply-/Kandidatensynchronisierung, gesponserte Stellen und aggregierte Arbeitsmarktdaten von Hiring Lab ab, nicht jedoch den Abruf einzelner öffentlicher Anzeigen im großen Maßstab. Für Daten auf Anzeigenebene ist das Scrapen der öffentlichen Website mit Residential-Proxys die praktikable Option; für autorisierte aggregierte Erkenntnisse nutzen Sie Hiring Lab oder eine lizenzierte Partnervereinbarung.
Warum blockiert Indeed Rechenzentrums-Proxys?
Die Cloudflare-Schicht von Indeed prüft die IP jedes Besuchers gegen bekannte Rechenzentrumsbereiche und ASNs, etwa AWS, Google Cloud oder OVH. Eine Anfrage von dort ist sofort als Server und nicht als Jobsuchender erkennbar und erhält innerhalb weniger Anfragen ein CAPTCHA oder eine Sperre. Residential- und Mobilfunk-IPs umgehen dies, weil sie zu echten ISP- und Carrier-Kunden gehören und nicht auf diesen Sperrlisten stehen.
Ist das Scrapen von Indeed legal?
Das Scrapen öffentlicher, nicht personenbezogener Stellendaten ist in den USA grundsätzlich gut vertretbar. hiQ v. LinkedIn entschied, dass das Scrapen öffentlich zugänglicher Daten wahrscheinlich nicht gegen den CFAA verstößt. Das ist jedoch keine pauschale Erlaubnis. Die Nutzungsbedingungen von Indeed verbieten Scraping ohne schriftliche Genehmigung, sodass Ansprüche wegen Vertragsverletzung und verwandte Ansprüche reale Risiken sind, besonders nach einer Abmahnung. Erfassen Sie nur öffentliche Stellenfelder, vermeiden Sie Logins und personenbezogene Daten, bevorzugen Sie nach Möglichkeit lizenzierte APIs und lassen Sie sich rechtlich beraten. Dies ist keine Rechtsberatung.
Was kostet das Scrapen von Indeed?
Es hängt vom Modell ab. Reine Residential-Proxys werden pro GB abgerechnet, von DataImpulse mit $1/GB als Preis-Leistungs-Untergrenze bis zu Bright Data mit $8/GB. Eine einzelne Indeed-Seite ist nur ein kleiner Bruchteil eines GB, daher sind Durchläufe mit hohem Volumen günstig, wenn Sie den Parser kontrollieren. Verwaltete Scraping-APIs kosten pro 1,000 Ergebnisse, Bright Data Web Unlocker etwa $1.50/1K, und bündeln den Kampf gegen Cloudflare. Für kontinuierliche Erfassung gewinnt reines Residential bei den Kosten; für gelegentliche Abrufe oder ohne Wartungsaufwand lohnt sich eine verwaltete API trotz Aufpreis.
Kann ich Indeed-Anzeigen aus anderen Ländern scrapen?
Ja, und dafür benötigen Sie lokale IPs, um es korrekt zu tun. Indeed betreibt lokalisierte Länder-Websites, etwa indeed.co.uk, ca.indeed.com und de.indeed.com, sowie Dutzende weitere mit unterschiedlichen Anzeigen, Gehältern und Währungen. Stellen Sie das Länder-Targeting Ihres Proxys auf jeden Markt ein, damit Sie dieselben Anzeigen sehen wie lokale Jobsuchende. DataImpulse deckt 195 Länder ab; Decodo, Oxylabs und Bright Data bieten ebenfalls umfassende Geo-Raster für die Indeed-Erfassung in mehreren Märkten.
