undefined
Blog > Datenerfassung > Post

Eigene Sportdatenbank erstellen: Web Scraping für Sportnachrichten

Monday, November 29, 2021

Big Data hat die Sportindustrie verändert. Forbes schätzt, dass die Sportbranche bis 2019 einen Wert von 73,5 Milliarden Dollar erreichen wird. Wenn Sie schon einmal an Sportwetten teilgenommen haben, kennen Sie wahrscheinlich die Anwendung des Web-Scrapings dafür. Viele denken an R, Python oder die API der Websites, wenn wir über Web Scraping sprechen. Aber alle diese Methoden sind für Menschen ohne Programmierkenntnisse schwierig. 

 

Deshalb möchte ich hier vorstellen, wie man mit Octoparse, einem einsteigerfreundlichen Web-Scraping-Tool, Sportdaten von Websites extrahieren können. Die Methode hat die folgenden Vorteile:

  • Einfacher - Point & Click sichtbare Operationen, keine Programmierung erforderlich.
  • Sie müssen nicht Python lernen oder Ihren Code testen.
  • Octoparse unterstützt verschiedene Datenformate - Excel, CSV, JSON, HTML. Sie können auch direkt Daten in Ihre Datenbank exportieren, wie SQL Server, MySQL und Oracle.

 

Inhaltsübersicht

Wo können Sie die Sportdaten extrahieren?

Wie können Sie die Sportdaten extrahieren?

Fazit

 

Wo können Sie die Sportdaten extrahieren?

Um diese Frage zu beantworten, müssen wir wissen, welche Sportdaten wir brauchen. Die Sportdaten lassen sich in zwei Teile unterteilen: Leistungsanalyse und Marktwertanalyse. Die letztere wird in gewisser Weise von der ersteren beeinflusst.

Für die Analyse der Sportleistung werden Informationen wie Tabellen, Ergebnisse, Spielpläne und Tabellenstände benötigt. Diese Informationen können hauptsächlich auf den entsprechenden offiziellen Websites wie NBA.com, FIFA.com, NFL.com oder auf Websites von Drittanbietern wie sportstats.com gefunden werden, die die gesammelten Informationen bereitstellen. Für die Marktwertanalyse sind neben den oben genannten Informationen auch Informationen aus den sozialen Medien oder von Portalseiten erforderlich, um deren sozialen Einfluss zu bewerten.

 

Wie können Sie die Sportdaten extrahieren?

Anstelle einer Schritt-für-Schritt-Anleitung für eine bestimmte Website zeige ich Ihnen lieber eine Roadmap zum Web-Scraping der Sportdaten von verschiedenen Plattformen, die Ihnen hilft, den richtigen Weg für das Web-Scraping von Sportdaten zu finden.

 

Scrapen die Daten in den Tabellen

Die meisten Sportdaten werden in einer Tabelle angezeigt. Um den Scraping-Crawler zum Extrahieren der Tabelleninformationen zu erstellen, können Sie diesen beiden Artikeln folgen:

3 Steps to Scrape Men’s Ranking from FIFA.com

Scraping Betting Odds for Sports Analytics

 

Scraping von Daten aus sozialen Medien

Um Bewertungen oder Tweets aus den sozialen Medien für die Marktwertanalyse zu scrapen, können Sie die Seite mit den Suchergebnissen im integrierten Browser von Octoparse öffnen und einen Web-Crawler erstellen. Die Anweisungen finden Sie in diesen Artikeln/Videos:

YouTube: Scraping Video Information and Reviews of 2018 World Cup

Twitter: Scraping tweets from Twitter

Scraping with Key-words inputted

 

Erstellen Sie Ihre aktuelle Sportdatenbank

 

- Die Scraping-Aufgabe kann so geplant werden, dass sie zu einem beliebigen Zeitpunkt und mit einer beliebigen Häufigkeit in der Cloud ausgeführt wird.

- Extrahierte Daten können programmatisch in die Datenbank eingegeben werden

- 6-20fach schnellere Geschwindigkeit bei der Datenerfassung 

- Verbunden mit Octoparse API, mit der Sie die Daten in Ihre eigenen Systeme importieren können

 

Fazit

Sie brauchen nicht alle obigen Scraping-Tutorials zu lesen, sondern nur eines davon, die Ihnen helfen könnte. Versuchen Sie, die Arbeitslogik von Scraping-Aufgaben zu verstehen, die Sie dann auf andere ähnliche Websites auch anwenden können.

 

Autor: Octoparse Team

 

Relative Artikel

 

Laden Sie Octoparse herunter, um mit Web-Scraping zu beginnen, oder kontaktieren Sie uns
für die Fragen über Web Scraping!

Kontaktieren Sie uns Herunterladen
Diese Website verwendet Cookies um Ihnen ein besseres Internet-Erlebnis zu ermöglichen. Lesen Sie wie wir Cookies verwenden und Sie können sie kontrollieren, indem Sie auf Cookie-Einstellungen klicken. Wenn Sie die Website weiter nutzen, akzeptieren Sie unsere Verwendung von Cookies.
Akzeptieren Ablehnen