Logfile Analyse: Besucherstatistiken aus Serverdaten gewinnen

Jeder Webserver protokolliert Zugriffe in sogenannten Logfiles. Diese Dateien enthalten wertvolle Informationen über Ihre Besucher, technische Probleme und die Nutzung Ihrer Website. In diesem Ratgeber erfahren Sie, wie Sie Logfiles lesen, analysieren und daraus nützliche Erkenntnisse für Ihr Webprojekt gewinnen.

Was sind Logfiles und warum sind sie wichtig?

Logfiles sind Textdateien, in denen Ihr Webserver jeden Zugriff dokumentiert. Wenn ein Besucher Ihre Website aufruft, schreibt der Server automatisch eine Zeile in die Logdatei. Darin stehen Informationen wie die IP Adresse des Besuchers, der aufgerufene Pfad, der Zeitpunkt und ob der Aufruf erfolgreich war.

Diese Aufzeichnungen sind aus mehreren Gründen wertvoll. Sie helfen bei der Fehlersuche, wenn etwas auf Ihrer Website nicht funktioniert. Sie zeigen, welche Inhalte beliebt sind und woher Ihre Besucher kommen. Und sie können Hinweise auf Sicherheitsprobleme geben, etwa wenn jemand versucht, in Ihre Website einzubrechen.

Vorteile gegenüber externen Analysetools

Externe Analysetools wie JavaScript basierte Tracker haben einige Nachteile. Sie funktionieren nicht, wenn der Besucher JavaScript deaktiviert hat oder einen Werbeblocker nutzt. Sie erheben Daten auf fremden Servern, was datenschutzrechtliche Fragen aufwirft. Und sie erfordern oft eine Einwilligung des Besuchers.

Logfiles hingegen werden automatisch auf Ihrem eigenen Server erstellt. Sie erfassen jeden Zugriff, unabhängig von Browsereinstellungen. Die Daten bleiben auf Ihrem Webspace und verlassen nicht Ihren Einflussbereich. Das macht die Logfile Analyse zu einer datenschutzfreundlichen Alternative, die Sie in Ihrer Datenschutzerklärung entsprechend dokumentieren sollten.

Arten von Logfiles

Ein Webserver führt in der Regel mehrere verschiedene Logdateien. Jede davon hat einen bestimmten Zweck und enthält unterschiedliche Informationen.

Access Log

Das Access Log ist die wichtigste Protokolldatei für Besucherstatistiken. Hier wird jeder erfolgreiche und fehlgeschlagene Zugriff auf Ihre Website dokumentiert. Eine typische Zeile enthält:

• Die IP Adresse des Besuchers
• Datum und Uhrzeit des Zugriffs
• Die angeforderte Datei oder Seite
• Den HTTP Statuscode der Antwort
• Die Größe der übertragenen Daten
• Den Referrer, also die vorherige Seite
• Den User Agent, der Informationen zum Browser enthält

Error Log

Das Error Log sammelt Fehlermeldungen des Webservers. Wenn ein Skript abstürzt, eine Datei fehlt oder die Konfiguration Probleme macht, finden Sie hier die Details. Für die Fehlersuche ist dieses Log unverzichtbar.

Weitere Logdateien

Je nach Serverkonfiguration gibt es weitere Logs. FTP Zugriffe werden separat protokolliert. Datenbanken führen eigene Logs. Und wenn Sie E Mail Dienste nutzen, entstehen auch dort Aufzeichnungen. Die folgende Tabelle gibt einen Überblick:

Logfiles finden und auf sie zugreifen

Der Zugang zu den Logfiles hängt von Ihrem Webhoster und dem gebuchten Paket ab. Nicht alle Hoster geben direkten Zugriff auf die Rohdaten.

Zugriff über das Hosting Kontrollpanel

Viele Hosting Pakete bieten ein Kontrollpanel mit einer grafischen Oberfläche. Dort finden Sie oft einen Bereich für Logs oder Statistiken. Die Rohdaten können Sie dort herunterladen oder direkt im Browser betrachten. Manchmal werden auch bereits aufbereitete Statistiken angezeigt.

Zugriff per FTP oder SSH

Bei FTP Zugang finden Sie die Logs oft in einem Verzeichnis namens logs oder statistics außerhalb des öffentlichen Webverzeichnisses. Per SSH haben Sie noch mehr Möglichkeiten und können die Dateien direkt auf dem Server analysieren.

Aufbewahrungsfristen beachten

Logfiles wachsen schnell und benötigen Speicherplatz. Die meisten Hoster rotieren die Logs automatisch: Alte Einträge werden nach einer bestimmten Zeit gelöscht oder archiviert. Wenn Sie längere Zeiträume analysieren möchten, sollten Sie die Logs regelmäßig herunterladen und selbst archivieren.

Das Access Log Format verstehen

Um Logfiles auswerten zu können, müssen Sie deren Format verstehen. Das am weitesten verbreitete Format heißt Combined Log Format und wird von Apache und den meisten anderen Webservern verwendet.

Aufbau einer Logzeile

Eine typische Zeile im Combined Log Format sieht etwa so aus:

192.168.1.1 - - [15/Oct/2024:10:30:45 +0200] "GET /artikel.html HTTP/1.1" 200 4523 "https://suchmaschine.de/" "Mozilla/5.0..."

Diese Zeile enthält mehrere Informationsblöcke:

• 192.168.1.1 ist die IP Adresse des Besuchers
• - - steht für zwei optionale Felder, die meist leer sind
• [15/Oct/2024:10:30:45 +0200] ist der Zeitstempel
• "GET /artikel.html HTTP/1.1" ist die Anfrage selbst
• 200 ist der HTTP Statuscode, hier bedeutet er Erfolg
• 4523 ist die Größe der Antwort in Bytes
• "https://suchmaschine.de/" ist der Referrer
• "Mozilla/5.0..." ist der User Agent des Browsers

Wichtige HTTP Statuscodes

Die Statuscodes verraten, ob ein Zugriff erfolgreich war oder nicht:

Werkzeuge zur Logfile Analyse

Rohe Logfiles von Hand durchzuarbeiten ist bei größeren Websites nicht praktikabel. Zum Glück gibt es zahlreiche Werkzeuge, die die Analyse automatisieren und übersichtliche Berichte erstellen.

Kommandozeilen Werkzeuge

Auf Linux Servern stehen mächtige Werkzeuge zur Verfügung, die Sie per SSH nutzen können. Mit grep filtern Sie Zeilen nach bestimmten Mustern. Mit awk extrahieren Sie einzelne Felder. Und mit sort und uniq erstellen Sie Ranglisten. Diese Werkzeuge sind schnell und verarbeiten auch sehr große Dateien problemlos.

Grafische Analyseprogramme

Für detaillierte Auswertungen gibt es spezialisierte Programme. Diese lesen die Logdateien ein und erstellen übersichtliche Berichte mit Diagrammen und Tabellen. Viele Hoster bieten solche Statistiken bereits fertig aufbereitet an. Die bekanntesten Programme lassen sich auch selbst installieren, wenn Sie einen eigenen Server oder mehr Kontrolle wünschen.

Wichtige Kennzahlen

Bei der Analyse sollten Sie auf folgende Metriken achten:

• Seitenaufrufe: Wie oft wurden Ihre Seiten insgesamt aufgerufen?
• Eindeutige Besucher: Wie viele verschiedene Personen haben Ihre Seite besucht?
• Beliebte Seiten: Welche Inhalte werden am häufigsten aufgerufen?
• Einstiegsseiten: Über welche Seiten betreten Besucher Ihre Website?
• Referrer: Von welchen anderen Seiten kommen Ihre Besucher?
• Fehlerquote: Wie viele Anfragen enden mit einem Fehler?
• Traffic: Wie viele Daten werden übertragen?

Praktische Anwendungsfälle

Die Logfile Analyse hilft in vielen konkreten Situationen. Hier einige Beispiele aus der Praxis.

Tote Links finden und reparieren

Durch Filtern nach dem Statuscode 404 finden Sie alle Anfragen, die ins Leere laufen. Das können Links von anderen Websites sein, die auf eine nicht mehr existierende Seite verweisen. Oder interne Links, die nach einer Umstrukturierung nicht angepasst wurden. Mit Weiterleitungen können Sie diese Probleme beheben.

Angriffe erkennen

Ungewöhnliche Muster in den Logs können auf Angriffe hindeuten. Viele Zugriffe von einer IP Adresse in kurzer Zeit könnten ein Brute Force Angriff sein. Anfragen an typische Schwachstellen deuten auf automatisierte Scans hin. Mit diesem Wissen können Sie Ihre Sicherheitsmaßnahmen gezielt verstärken.

Performance Probleme aufspüren

Manche Server protokollieren auch die Antwortzeit für jede Anfrage. So erkennen Sie, welche Seiten besonders langsam sind und Optimierungsbedarf haben. Auch die Größe der übertragenen Daten gibt Hinweise, etwa wenn Bilder nicht optimal komprimiert sind.

Bots und Crawler identifizieren

Nicht jeder Zugriff kommt von menschlichen Besuchern. Suchmaschinen, Social Media Dienste und andere Bots durchsuchen regelmäßig Websites. Am User Agent können Sie erkennen, wer oder was Ihre Seite besucht. Das hilft bei der Einschätzung, wie viel echten Traffic Sie haben.

Datenschutz bei der Logfile Analyse

Logfiles enthalten mit der IP Adresse ein personenbezogenes Datum. Das hat Auswirkungen auf den Umgang mit diesen Daten.

Speicherdauer begrenzen

Die DSGVO verlangt, dass personenbezogene Daten nur so lange gespeichert werden, wie sie benötigt werden. Für die technische Fehlersuche und Sicherheit ist eine Speicherung von einigen Wochen in der Regel vertretbar. Längere Aufbewahrung sollte gut begründet werden können.

IP Adressen anonymisieren

Für statistische Auswertungen benötigen Sie nicht die vollständige IP Adresse. Durch Kürzung des letzten Blocks wird die Adresse anonymisiert und der Personenbezug entfällt. Viele Analyse Werkzeuge bieten diese Option direkt an.

In der Datenschutzerklärung dokumentieren

Informieren Sie in Ihrer Datenschutzerklärung darüber, dass Sie Logfiles auswerten. Nennen Sie den Zweck, die Art der erhobenen Daten und die Speicherdauer. So erfüllen Sie Ihre Informationspflichten.

Automatisierung und Überwachung

Einmalige Analysen sind gut, kontinuierliche Überwachung ist besser. Mit der richtigen Einrichtung werden Sie automatisch über wichtige Ereignisse informiert. Professionelle Lösungen bieten auch Tools für Website Monitoring, die Ihre Server und Dienste rund um die Uhr überwachen.

Regelmäßige Berichte erstellen

Richten Sie Cronjobs ein, die täglich oder wöchentlich Statistiken aus den Logs generieren. So haben Sie immer einen aktuellen Überblick, ohne manuell analysieren zu müssen. Die Berichte können per E Mail zugestellt oder auf dem Server abgelegt werden.

Alarme bei Auffälligkeiten

Konfigurieren Sie Benachrichtigungen für ungewöhnliche Muster. Ein plötzlicher Anstieg von 404 Fehlern könnte auf ein Problem hinweisen. Viele fehlgeschlagene Login Versuche deuten auf einen Angriff hin. Automatische Warnungen ermöglichen schnelle Reaktionen.

Tipps für aussagekräftige Analysen

Mit diesen Hinweisen holen Sie mehr aus Ihren Logdaten heraus:

• Filtern Sie Zugriffe auf Ressourcen wie Bilder und CSS Dateien heraus, wenn Sie sich für Seitenaufrufe interessieren
• Berücksichtigen Sie, dass Bots einen großen Teil des Traffics ausmachen können
• Vergleichen Sie Zeiträume miteinander, um Trends zu erkennen
• Kombinieren Sie Access Log und Error Log für ein vollständiges Bild
• Dokumentieren Sie Ihre Erkenntnisse, um später darauf aufbauen zu können
• Beginnen Sie mit einfachen Fragen und verfeinern Sie Ihre Analysen schrittweise

Fazit: Logfiles als unterschätzte Datenquelle

Die Analyse von Logfiles ist eine der ursprünglichsten Methoden, um Website Statistiken zu erheben. Sie wurde von externen Tracking Diensten in den Hintergrund gedrängt, hat aber nach wie vor große Stärken. Die Daten liegen bereits vor, sie sind vollständig und sie bleiben unter Ihrer Kontrolle.

Gerade im Zeitalter strenger Datenschutzanforderungen gewinnt die Logfile Analyse wieder an Bedeutung. Sie ermöglicht aussagekräftige Statistiken ohne externe Dienste und ohne komplizierte Cookie Banner. Wer seine Logs regelmäßig auswertet, gewinnt wertvolle Einblicke in die Nutzung seiner Website.

Der Einstieg ist nicht schwer. Beginnen Sie damit, die Logs Ihres Hosters zu finden und einen Blick hineinzuwerfen. Mit der Zeit werden Sie immer vertrauter mit dem Format und können immer gezieltere Fragen an Ihre Daten stellen.

Weitere Informationen zu verwandten Themen finden Sie in unseren Artikeln zu HTTP Statuscodes, zur Server Sicherheit und zum Datenschutz im Webhosting. Erfahren Sie außerdem, wie Sie mit SSH Zugang noch mehr Möglichkeiten zur Serveranalyse erhalten.