Typische Datenquellen
- Sortimente und Preise im Handel
- Stellenanzeigen nach Region und Branche
- Immobilien- und Mietangebote
- Öffentliche Bewertungen und Rezensionen
Datenschutz beachten
Sobald Daten Personen betreffen (z. B. Namen in Bewertungen), gilt die DSGVO. Erheben Sie nur, was Sie wirklich brauchen, pseudonymisieren Sie früh und dokumentieren Sie die Rechtsgrundlage. Einen Überblick gibt Ist Web Scraping legal?.
Technik
Für einfache Abrufe genügt die Abruf-API. Für große Projekte mit Crawlern wie Scrapy nutzen Sie einen Proxy-Zugang mit Rotation – siehe Proxy in Python.