Extrahieren von Daten aus einer Webseite mit Excel

Sie kennen wahrscheinlich, wie die grundlegenden Funktionen von Excel zu verwenden sind, ob Sie eine digitale Einheimische oder einer digitalen Einwanderer sind. Es ist einfach, mit Excel Daten zu sortieren, filtern, gliedern, und Diagrammen zu erstellen. Voraussichtlich können Sie noch erweiterte Datenanalysen mit Pivot- und Regressionsmodellen bekommen.

Das ist eine mühelose Aufgabe, solange die Daten in ein strukturiertes Format umgewandelt werden. Das Problem ist, wie man skalierbare Daten extrahieren und sie in Excel einfügen kann. Dies könnte eine mühsame Aufgabe werden, wenn man es manuell durch wiederholtes Tippen, Suchen, Kopieren und Einfügen macht. So fragen Sie vielleicht danach, wie wir denn automatisch Daten extrahieren und sie aus Weseite zu Excel scrapen können?

In diesem Artikel würde ich fünf Methoden vorstellen, damit Sie Daten von Website auslesen und Ihre Zeit sparen können.

Methode 1: Codierungsfreier Crawler zum Scrapen von Websites in Excel

Web Scraping ist der flexibelste Weg, um alle Arten von Daten von Webseiten in Excel zu übertragen. Viele Nutzer fühlen sich vielleicht überfordert, weil sie keine Ahnung von Programmierung haben, aber ein einfaches Web-Scraping-Tool wie Octoparse kann Ihnen helfen, Daten von Webseiten in Excel zu scrapen, ohne dass Sie programmieren müssen.

Als einfacher Web Scraper bietet Octoparse automatische Erkennungsfunktionen, die auf KI basieren, um Daten automatisch zu extrahieren. Was Sie tun müssen, ist einfach zu überprüfen und einige Änderungen vorzunehmen. Sie können auch die voreingestellten Daten-Scraping-Vorlagen für beliebte Websites wie Amazon, eBay, LinkedIn, Google Maps usw. verwenden, um die Webseitendaten mit wenigen Klicks zu erhalten. Probieren Sie die untenstehende Online-Scraping-Vorlage aus, ohne eine Software auf Ihre Geräte herunterzuladen.

Darüber hinaus verfügt Octoparse über fortschrittliche Funktionen wie API-Zugang, IP-Rotation, Cloud-Service und zeitgesteuertes Scraping usw., damit Sie mehr Daten erhalten. Sehen wir uns die einfachen Schritte unten an, um mit Octoparse Daten von beliebigen Websites in Excel zu extrahieren.

3 Schritte zum Scrapen von Daten aus einer Website in Excel 👉

✅ Schritt 1: Fügen Sie die URL der Ziel-Website ein, um die automatische Erkennung zu starten.
Sie können Octoparse verwenden, nachdem Sie registriert und sich angemeldet haben. Oder können Sie Octoparse heruntergeladen, dann fügen Sie den Link der Website ein, die Sie auslesen möchten. Dann starten Sie die automatische Erkennung.

✅ Schritt 2: Erstellen und ändern Sie den Workflow
Nach der automatischen Erkennung wird ein Workflow erstellt. Sie können das Datenfeld einfach nach Ihren Bedürfnissen ändern. Es wird ein Tipps-Panel eingeblendet, und Sie können die darin enthaltenen Hinweise befolgen.

✅ Schritt 3: Herunterladen der gescrapten Website-Daten in Excel
Führen Sie die Aufgabe aus, nachdem Sie alle Datenfelder überprüft haben. Sie können die gescrapten Daten schnell im Excel/CSV-Format auf Ihr lokales Gerät herunterladen oder in einer Datenbank speichern.

Methode 2: Extraktion mit Aufgabenvorlagen

https://www.octoparse.de/template/email-social-media-scraper

✅ Schritt 1: Wählen Sie eine Vorlage für Web Scraping

✅ Schritt 2: Verwenden Sie die Vorlage

✅ Schritt 3: Klicken Sie auf “Versuchen” und beginnen Sie mit der Extraktion

Nachdem Sie mit Octoparse Daten gesammelt haben, müssen Sie diese möglicherweise in Excel verarbeiten. Damit Sie die neuen Funktionen von Excel optimal nutzen können, finden Sie hier eine ausführliche Anleitung mit einigen nützlichen Hinweisen und Tipps.

Methode 3: Mithilfe von Excel Web Queries, Daten aus Website auszulesen

Im Vergleich zu der durch Kopieren und Einfügen manuell umwandelnden Transformation von Webdaten kann man mit Excel Web Queries (Englisch) schnell Daten einer Webseite in ein Excel-Arbeitsblatt umwandeln. Es kann automatisch Tabellen erkennen, die in den HTML-Code der Webseite eingebettet sind. Excel Web Queries können auch verwendet werden, wenn eine Standard-ODBC (Open Database Connectivity) Verbindung schwer zu erstellen oder zu pflegen ist. Mit Excel Web Queries können Sie direkt Tabellen von beliebigen Webseiten scrapen.

Den Prozess kann man in einigen einfachen Schritten zusammenfassen:

✅ Schritt 1: Gehen zu Daten > Externe Daten erhalten> Aus dem Web

✅ Schritt 2: Ein Browser-Fenster mit dem Namen “Neue Web Query” wird angezeigt

✅ Schritt 3: Geben Sie in die Adressleiste die Webadresse ein.

✅ Schritt 4: Die Webseite wird geladen und zeigt gelbe Symbole von Daten/Tabellen an.

✅ Schritt 5: Wählen Sie das entsprechende Symbol aus.

✅ Schritt 6: Drücken Sie den Button „Importieren“.

Jetzt haben Sie die Webdaten zum Excel-Arbeitsblatt gescrapt, die perfekt in Zeilen und Spalten wie gewünscht angeordnet werden.

Methode 4: Mithilfe von Excel VBA, Daten aus Website zu extrahieren

Man verwendet Formeln in Excel (z.B. =avg(…), =sum(…), =if(…), usw.) oft , aber die meisten sind weniger vertraut mit der eingebauten Sprache – Visual Basic for Application (VBA). Es ist allgemein als „Makros“ bekannt und solche Excel-Dateien werden als **.xlsm gespeichert. Bevor Sie die Sprache verwenden, müssen Sie zuerst den Tab „Developer“ in der Multifunktionsleiste aktivieren (Rechtsklick auf Datei -> Multifunktionsleiste anpassen -> Tab „Developer“ aktivieren). Richten Sie dann Ihr Layout ein. In diesem Entwickler-Interface können Sie VBA-Code schreiben, der verschiedene Ereignisse befestigen kann. Klicken Sie HIER, um mit VBA eine Aufgabe in excel 2010 zu beginnen.

Die Verwendung von Excel VBA wird ein bisschen komplizierter – das ist nicht so benutzerfreundlich für die Nicht-Programmierer. VBA funktioniert durch die Ausführung von Makros und Schritt-für-Schritt-Prozeduren, die in Excel Visual Basic geschrieben sind. Um mit VBA Daten von Webseiten zu scrapen, müssen wir manche VBA-Skripts vorbereiten, um Anfragen an Webseiten zu senden und die zurückgegebenen Daten von diesen Webseiten zu erhalten. Es ist üblich, VBA mit XMLHTTP und regulären Ausdrücken zu verwenden, um die Webseiten zu parsen. Mit Windows-Betriebssystem können Sie VBA mit WinHTTP oder InternetExplorer zusammmen verwenden, um Daten von Webseiten zu Excel zu scrapen.

Mit Geduld und Übungen können Sie Excel-VBA-Code und HTML-Kenntnisse beherrschen. Und es lohnt sich, die Sprache zu erlernen, weil sie das Web-Scraping zu Excel viel einfacher und effizienter machen kann und die wiederholende Arbeit automatisieren lässt. Es gibt viele Materialien und Foren, in denen Sie lernen können, wie man VBA-Code schreiben sollte.

Methode 5: Mithilfe von Web Scraping Services, Daten aus Website abzurufen

Wenn Zeit für Sie am wichtigsten ist und Sie sich auf Ihr Kerngeschäft konzentrieren möchten, wäre es die beste Wahl, dem professionellen und erfahrenden Web-Scraping-Team solch komplizierte Web-Scraping-Arbeiten auszulagern. Es ist schwierig, Daten von Webseiten zu scrapen, weil Anti-Scraping-Bots von manchen Webseiten das Web-Scraping einschränkt. Ein kompetentes Web-Scraping-Team können Ihnen dabei helfen, Daten von Webseiten auf korrekte Art und Weise zu extrahieren und Ihnen strukturierte Daten in einer Excel-Tabelle oder in einem beliebigen Format zu senden. Octoparse bietet maßgeschneiderte Crawler-Anpassungsdienste an, bei denen ein individueller Crawler gemäß Ihren spezifischen Anforderungen eingerichtet wird. Wenn Sie Probleme bei der Datenextraktion haben, oder uns etwas Vorschlägen geben möchten, kontaktieren Sie bitte uns per E-Mail (support@octoparse.com). 💬

Methode 6: Daten von einer Webseite mit Python

Um Daten von einer Webseite mithilfe von Microsoft Excel und Python zu scrapen, können Sie das requests-Modul (zum Abrufen der Webseite), BeautifulSoup (zum Parsen der HTML-Inhalte) und pandas (zum Erstellen und Speichern der Daten in einer Excel-Datei) verwenden. Stellen Sie sicher, dass Sie die Bibliotheken zuerst installiert haben:

pip install requests beautifulsoup4 pandas openpyxl

Hier ist ein Beispielskript, das zeigt, wie das Scraping und die Speicherung in Excel funktioniert:

import requests
from bs4 import BeautifulSoup
import pandas as pd

# Schritt 1: Webseite abrufen
url = 'URL_IHRE_WEBSEITE'  # URL der Webseite, die Sie scrapen möchten
response = requests.get(url)
response.raise_for_status()  # Bei Fehlern eine Ausnahme werfen

# Schritt 2: HTML-Inhalt parsen
soup = BeautifulSoup(response.text, 'html.parser')

# Schritt 3: Daten extrahieren
# Beispiel: Extrahiere alle Überschriften und Links
data = []
for item in soup.find_all('h2'):  # Beispielhafter Tag, hier h2-Überschriften
    title = item.get_text(strip=True)
    link = item.find('a')['href'] if item.find('a') else None
    data.append({'Title': title, 'Link': link})

# Schritt 4: Daten in DataFrame konvertieren
df = pd.DataFrame(data)

# Schritt 5: Daten in Excel speichern
excel_filename = 'scraped_data.xlsx'
df.to_excel(excel_filename, index=False)
print(f'Daten wurden in {excel_filename} gespeichert.')

Zusammenfassung

Es gibt 6 Möglichkeiten, wie sich die Extraktion von Daten aus Websites und der Import in Excel automatisieren lassen, um Zeit zu sparen und die Effizienz zu steigern. Durch die Verwendung von Excel-Webabfragen, VBA-Programmierung, automatisierten Web-Crawling-Tools oder professionellen Web-Crawling-Diensten können Benutzer Webdaten leicht in strukturierte Informationen umwandeln, um Datenanalyse- und Verarbeitungsprozesse zu optimieren.

👍👍 Wenn Sie Interesse an Octoparse und Web Scraping haben, können Sie es zunächst 14 Tage lang kostenlos ausprobieren.