undefined

Was soll ich tun, wenn meine Aufgabe langsam läuft? (Version 8)  

Wednesday, August 11, 2021 5:41 PM

Es kann eine große Herausforderung für Benutzer sein, ihre Aufgaben zu beschleunigen, besonders wenn es sich um komplizierte Aufgaben handelt. Dieser Artikel soll Ihnen bei der Fehlersuche in einer sehr langsamen Aufgabe helfen. Er geht insbesondere auf alle möglichen Faktoren ein, um festzustellen, ob das Problem eher durch die lokale Umgebung, die Struktur der Website oder einfach durch die Einstellungen Ihrer Aufgabe verursacht wird.

 

 

Situation 1: Es gibt zu viele Schritte im Arbeitsablauf.

Lösung:

• Vereinfachen Sie Ihre Aufgabe

Der Arbeitsablauf kann manchmal zu kompliziert sein und viele Schritte enthalten, um zur Zielseite zu gelangen. Daher ist es wichtig, dass Sie Ihren Arbeitsablauf vereinfachen, indem Sie einige unnötige Schritte wie Klick-Aktionen löschen. Sie sollen die URL der nächstgelegenen Ebene verwenden, um Ihre Aufgabe zu vereinfachen.

 

Wenn Sie zum Beispiel die Produktinformation von 3D-Brillen in Amazon extrahieren möchten, sollen Sie in der Situation vermeiden, Ebene für Ebene auf Elemente zu klicken, um die Produktseite für 3D-Brillen zu erreichen.

 mceclip1.png

 

Stattdessen wäre es besser, dass Sie direkt die URL der 3D-Glas-Produktseite verwenden, um Ihre Aufgabe zu starten.

 mceclip2.png

 

• Teilen Sie Ihre Aufgabe

Wenn Ihre Aufgabe eine Liste von Elementen anklicken muss, um Daten zu erhalten, können Sie versuchen, die Aufgabe in zwei Teile aufzuteilen.

 

Aufgabe 1: Holen Sie die URL-Liste für jeden Eintrag von der Listenseite

 

Aufgabe 2: Verwenden Sie die im ersten Schritt erhaltene URL-Liste, um eine neue Aufgabe zum Extrahieren von Daten aus der Detailseite einzurichten.

 

Wenn Sie mehr darüber erfahren möchten, können Sie das Tutorial lesen: Scraping Produktinformationen von Target.com

 

 

Situation 2: Die Website verwendet AJAX, aber Sie haben es nicht eingerichtet.

Lösung:

 

• Legen Sie eine geeignete AJAX-Zeit fest

Viele Websites verwenden die AJAX-Technik, um Informationen zu aktualisieren, ohne die gesamte Webseite immer wieder neu zu laden. Wenn eine Seite mit AJAX geladen wird, Sie aber vergessen haben, es einzurichten, kann die Aufgabe stecken bleiben und sehr langsam arbeiten. Eine angemessene AJAX-Zeit sorgt dafür, dass der Extraktionsprozess reibungslos vonstattengeht.

 mceclip3.png

 

Tipps!

Weitere Einzelheiten zu AJAX-Zeiteinstellungen finden Sie unter Umgang mit AJAX

 

 

Situation 3: Die lokale Umgebung ist nicht gut (lokale Läufe).

Lösung:

 

• Verbessern Sie die lokale Umgebung

Wenn die lokale Extraktion sehr langsam läuft, liegt das wahrscheinlich an der lokalen Umgebung, wie Betriebssystem, Hardware-Kapazität, IP-Adresse, Netzwerk-Bandbreite, CPU-Leistung und so weiter. Sie müssen den aktuellen Status aller oben aufgeführten Faktoren manuell überprüfen.

 

• Ausführung der Aufgaben in der Cloud (nur für Premium-Nutzer)

Es ist jedoch verständlich, dass solche Problemen nicht einfach zu lösen oder beheben sind. Die Ausführung von Aufgaben in der Cloud ist effektiver und ermöglicht Ihnen eine schnellere Datenextraktion mit Octoparse.

 

Wie Sie die Aufgaben beschleunigen können, erfahren Sie in diesem Tutorial: Wie kann ich Daten in Cloud schneller scrapen?(Version 8)

 

Tipps!

Lesen Sie bitte das Tutorial "Was ist Cloud-Extraktion? " für weitere Details über Cloud-Extraktion.

 

 

Situation 4: Es kann länger dauern, bis der Inhalt einer Website vollständig geladen ist

Wenn eine Website zu viele Elemente wie Bilder oder Videos enthält, wird die Ladegeschwindigkeit der Webseiten insgesamt verlangsamt. Dies ist auch ein weiterer wichtiger Faktor, der die Gesamtlaufgeschwindigkeit bestimmter Aufgaben verlangsamt.

 

Lösung: Deaktivieren Sie das Laden von Bildern

Um die Ladezeit der Seiten zu verkürzen, können wir das Laden von Bildern auf den Webseiten deaktivieren.

 

• Öffnen Sie die Einstellung der Aufgabe

 1.png

 

• Kreuzen Sie "Disable images loading" an und klicken Sie auf "Save".

 2.png

 

*Beachten Sie, dass die Option "Disable image loading" manchmal zu Fehlern beim Laden vonseiten führen kann. Wenn Sie bemerken, dass die Aufgabe nicht richtig funktioniert, nachdem Sie diese Option ausgewählt haben, deaktivieren Sie sie bitte.

 

 

btnImg
Diese Website verwendet Cookies um Ihnen ein besseres Internet-Erlebnis zu ermöglichen. Lesen Sie wie wir Cookies verwenden und Sie können sie kontrollieren, indem Sie auf Cookie-Einstellungen klicken. Wenn Sie die Website weiter nutzen, akzeptieren Sie unsere Verwendung von Cookies.
Akzeptieren Ablehnen