Scrapen Trending-Video-Informationen von YouTube
Monday, June 07, 2021 5:12 PMDie zweitbeliebteste Suchmaschine in der Welt ist YouTube, nur hinter Google. Eine große Anzahl von Videos sind die auf YouTube verfügbar. Die dazugehörigen Daten und Kommentare sind auch wirklich wertvoll.
Octoparse kann Daten von Youtube mit integrierten Vorlagen einfach scrapen. Schauen Sie sich das hier an: Aufgabenvorlagen. Geben Sie einfach ein Keyword/URL ein, und erhalten Sie Daten in wenigen Minuten!
In diesem Tutorial zeigen wir Ihnen, wie Sie mit der automatischen Detektion von Octoparse in 3 Schritten die Trending-Video-Informationen von Youtube scrapen können.
Hier ist der Youtube-Trending-Video-Link, den wir als Beispiel verwenden.
https://www.youtube.com/feed/trending?gl=US
Hier sind die wichtigsten Schritte in diesem Tutorial: [Aufgabendatei hier herunterladen]
1. "Go To Web Page" - Öffnen Sie die Ziel-Webseite
2. Automatisch die Daten der Webseite detektieren- Einen Workflow erstellen
3. Führen Sie Ihre Aufgabe aus - Erhalten Sie die gewünschten Daten
1. "Go To Web Page" - Öffnen Sie die Ziel-Webseite
• Geben Sie die URL auf der Startseite ein und klicken Sie auf „Start“
2. Automatisch die Daten der Webseite detektieren - Einen Workflow erstellen
• Klicken Sie auf "Auto-detect web page data" und warten Sie, bis der Vorgang abgeschlossen ist
Wir müssen die mit der automatischen Detektion ausgewählten Daten überprüfen.
• Überprüfen Sie die Datenfelder in der Datenvorschau, und Sie können auch die unerwünschten Felder löschen oder Felder umbenennen, falls erforderlich
• Überprüfen Sie auch die Optionen in "Tipps". Wenn "Paginate to scrape more pages" gewählt wird, werden Sie finden, dass Octoparse einen falschen Button zur Paginierung lokalisiert. Deswegen wählen Sie hier bitte diese Option nicht.
• Klicken Sie auf "Edit" unter "Add a page scroll", und stellen „Scroll“ als „for one screen“, „Repeats“ als 20 und “Wait“ als 1s ein
• Klicken Sie auf "Create workflow"
3. Führen Sie Ihre Aufgabe aus - Erhalten Sie die gewünschten Daten
• Klicken auf "Save"
• Klicken auf "Run"
• Wählen "Run on your device", um die Aufgabe mit Ihrem lokalen Gerät auszuführen, oder Wählen "Run in the Cloud", um die Aufgabe auf unseren Cloud-Servern auszuführen (nur für Premium-Benutzer)
Hier sind die Beispieldaten.