Haben Sie jemals daran gedacht, dass Sie Geld verdienen können, wenn Sie wissen, wie viele Restaurants in der Nähe gibt? Sie können die GPS-Daten der Restaurants extrahieren, sammeln und in Ihrer eigenen Datenbank speichern. Mit diesen Informationen und einigen mathematischen Berechnungen können Sie einen Onlinedienst erstellen.
In diesem Artikel zeige ich Ihnen, wie Sie Google Maps-Koordinaten mit einer einfachen Methode schnell extrahieren können.Die Koordinaten sind tatsächlich in den URLs versteckt, deswegen müssen wir die URL extrahieren und einen RegEx Ausdruck verwenden, um die versteckten Informationen zu finden. In diesem Beitrag nehmen wir die Suche nach “Restaurants” in Berlin als Beispiel.
Ist es Legal, GPS Daten aus Google Maps zu scrapen?
Es hängt von den Umständen ab. Wenn die GPS-Daten öffentlich zugänglich und frei verfügbar sind, dann ist es wahrscheinlich legal, sie zu scrapen. Beispielsweise sind GPS-Daten von Satelliten wie GPS, GLONASS, Galileo oder Google Maps in der Regel öffentlich zugänglich und können legal gesammelt und genutzt werden.
Wenn es sich jedoch um private GPS-Daten handelt, die von einer Person oder einer Organisation erfasst und nicht öffentlich zugänglich gemacht wurden, kann das Scrapen dieser Daten gegen Datenschutz- und andere Gesetze verstoßen. In vielen Ländern gibt es Datenschutzgesetze, die den Schutz personenbezogener Daten regeln und das Sammeln und Nutzen dieser Daten ohne Zustimmung der betroffenen Person oder Organisation einschränken oder verbieten.
Es ist daher wichtig, die Gesetze und Vorschriften in Ihrer Region zu kennen und sicherzustellen, dass das Scrapen von GPS-Daten im Einklang mit den geltenden Gesetzen steht. Es ist auch empfehlenswert, sich von einem Anwalt beraten zu lassen, bevor Sie mit einem Web-Scraping-Projekt beginnen, um sicherzustellen, dass es legal und ethisch vertretbar ist.
Wie greift man GPS Daten aus Google Maps zu?
Google Maps API
Es gibt Tools und Technologien, die auf legale Weise auf Daten von Google Maps zugreifen können, indem sie die Google Maps API nutzen. Die Google Maps API bietet eine Vielzahl von Funktionen, die es Entwicklern ermöglichen, Karten, Standorte und andere Daten abzurufen.
Um auf die Google Maps API zuzugreifen, benötigen Sie einen API-Schlüssel, den Sie erstellen können, indem Sie ein Konto bei Google Cloud Platform erstellen und die Google Maps API aktivieren. Sobald Sie einen API-Schlüssel haben, können Sie Anfragen an die API senden, um Daten abzurufen.
Octoparse
Octoparse ist ein Web-Scraping-Tool, das es Benutzern ermöglicht, Daten von verschiedenen Websites zu sammeln. Mit einem benutzerfreundlichen Interface ist die Software speziell für Nicht-Codierer eingerichtet worden.
Wenn Sie Octoparse für das Scrapen von Daten aus Google Maps zu nutzen, ist es wichtig, die Besonderheiten von Octoparse klar zu machen.
- Point & Click Interface
Einfache Einstellung des Workflows zu Extraktion der Daten von Tausend Infoseiten von Google Suche
- Auto-Detection Funktion
Automatische Erkennung der HTML Code von Google Suche und Generierung des Task-Workflows
- Verschiedene Formaten
Daten Downloaden in Excel, CSV and JSON Format.
- API Intergration
Die API ist verfügbar, um Daten für Ihrer Datenbank einzubinden.
- Scraping-Zeitplan
Um die neuesten Daten zu erhalten, sind alle Tasks nach Planer auf monatliche, wöchentliche, stündliche oder tägliche Basis einzustellen.
Beispiel: GPS Datensammlung mithilfe von Octoparse
Schritt 1: Bestimmen Sie die Stelle der Koordinaten-Daten
- Öffnen Sie zunächst Google Maps in Ihrem Browser und geben Sie “Restaurants” in den Suchkasten ein. Und alle verwanten Restaurants werden auf der linken Seite angezeigt.
- Der Link von jedem Ergebnis verändert sich. Man soll es bemerken, dass die Koordinaten-Daten von jedem Restaurant eben sich hinter dem Zeichen “@” befindet.
Als Nächstes können wir damit beginnen, die URL zu extrahieren. Das Tool, das wir verwenden, ist Octoparse. Es ist ein Web-Scraping-Tool, deren Benutzeroberfläche sehr einfach zu bedienen ist, besonders für die Anfänger. Bevor wir mit dem Web-Scraping anfangen, installieren Sie bitte das Web-Scraping-Tool auf Ihrem Gerät.
Schritt 2:Öffnen Sie Octoparse, um eine Aufgabe zu beginnen
- Geben Sie die URL in den Suchkasten ein. Dann klicken Sie auf “Start”, um die Aufgabe zu beginnen.
(Die URL vom Beispiel: https://www.google.de/maps/place/Haus+Vogtei/@51.1807102,10.3558494,13z/data=!4m16!1m9!2m8!1sRestaurants!3m6!1sRestaurants!2sDeutschland!3s0x479a721ec2b1be6b:0x75e85d6b8e91e55b!4m2!1d10.451526!2d51.165691!3m5!1s0x47a493c4b1c3679f:0xb755b1d253ee8f8!8m2!3d51.1644599!4d10.4196434!15sCgtSZXN0YXVyYW50c1oNIgtyZXN0YXVyYW50c5IBCnJlc3RhdXJhbnTgAQA )
Schritt 3: Konfigurieren Sie die Aufgabe ein
- Klicken Sie auf “Auto-detect webpage data”, dann wird die Daten von Octoparse automatisch erkennen.
- Klicken Sie auf “Creat workflow” und ein Workflow der Aufgabe wird auf der rechten Seite dargestellt.
- Und die von Octoparse ausgelesenen Daten können Sie im unten stehenden Vorschaufenster überprüfen und die Daten löschen, die Sie nicht brauchen.
- Aber die Koordinaten-Daten sind nur in der Seite-URL zu finden. Deshalb mussten Sie einen neuen Datenfeld hinzufügen.
- Jetzt wurde die URL der Webseite erfolgreich in das Datenfeld eingefügt. Bearbeiten wir jetzt die URL und behalten die genauen Koordinaten.
Schritt 4: Bereinigen Sie die Daten mit RegEx
- Klicken Sie auf “Clean data” >> “Match with Regular Expression”
- Klicken Sie dann auf “Not sure about RegEx? Try the RegEx Tool!”. Dann werden Sie den Hinweis über RegEx erhalten.
- Fügen Sie die Zeichen “@” in den “Start with” Kasten und “/data” in den “End with” Kasten.
- Dann klicken Sie auf “Generate” >>“Match”>>“Apply”.
- Dann klicken Sie auf “Match all” >>“Confirm”.
- Wenn Sie die Aufgabe gut eingestellt haben, können Sie die Aufgabe ausführen.
Hier bekommen Sie Octoparse! 🤩
Preis: $0~$249 pro Monat
Packet & Preise:Octoparse Premium-Preise & Verpackung
Kostenlose Testversion: 14-tägige kostenlose Testversion
Herunterladen:Octoparse für Windows und MacOs
Wenn Sie Probleme bei der Datenextraktion haben, oder uns etwas Vorschlägen geben möchten, kontaktieren Sie bitte uns per E-Mail (support@octoparse.com). 💬
Autor*in: Das Octoparse Team ❤️
