Zum Inhalt springen
SEO Uptr
SEO UptrRegistrieren

Rezept

Monitor für verlorene Backlinks: Snapshot, Diff, Benachrichtigung

Die Frage, wie man tote Links erkennt, bevor die Rankings betroffen sind, ist einfach und zuverlässig: Speichern Sie die Liste wöchentlich und vergleichen Sie sie mit der vorherigen.

Stone bridge with a missing wooden plank showing a gap in the structure

Was Sie aufbauen

Ein Cron-Job, der einmal wöchentlich ausgeführt wird. Er speichert die Liste Ihrer verweisenden Domains als datierte Datei, vergleicht sie mit der vorherigen Datei und sendet die Differenz an eine Stelle, die ein Mensch sieht. Das ist das gesamte System.

Wir erfassen Domains, keine URLs. Das hat einen Grund. Eine Liste auf Domain-Ebene ist klein, stabil und günstig, sodass ein Diff zweier Dateien lesbar bleibt, während Listen auf URL-Ebene bei jedem Redesign schwanken und die echten Verluste im Rauschen begraben. Wenn Sie Seitendetails für eine verlorene Domain benötigen, fordern Sie backlinks bedarfsgerecht an und zahlen 2 Credits für diese einzelne Abfrage.

Führen Sie es zweimal manuell aus. Der erste Lauf hat keine vorherige Datei, und der zweite beweist, dass der Diff funktioniert. Prüfen Sie die Ausgabe anhand eines Links, den Sie entfernt haben.

Das Rezept

01

Wählen Sie die Häufigkeit

Wöchentlich. Unser Index aktualisiert sich etwa monatlich, daher liefern tägliche Läufe an den meisten Tagen dieselbe Datei. Der wöchentliche Lauf erfasst die Aktualisierung innerhalb von sieben Tagen, unabhängig davon, wann sie stattfindet.

02

Snapshot erstellen

Rufen Sie refdomains mit per=1000 auf und speichern Sie das sortierte JSON in einer datierten Datei. Ein Aufruf, 2 Credits, unabhängig von der Zeilenanzahl bis zu 1.000 Zeilen.

03

Diff mit der Vorwoche

Vergleichen Sie die beiden Dateien mit diff oder jq. Zeilen, die nur in der alten Datei existieren, sind Ihre verlorenen Domains.

04

Benachrichtigung filtern

Zählen Sie die verlorenen Zeilen. Unterhalb Ihrer SEV2-Grenze schreiben Sie einen Log-Eintrag. Darüber senden Sie die Nachricht. Die Schweregradtabelle enthält Startwerte.

05

Antwortstatus prüfen

Wenn der Status 402 ist, sind die Credits aufgebraucht. Bei 401 ist der Schlüssel falsch. Benachrichtigen Sie in beiden Fällen, sonst schlägt Ihr Monitor stillschweigend fehl.

Das Skript

Bash, curl, jq. Ersetzen Sie den Webhook durch Ihren eigenen.

bash
#!/usr/bin/env bash
set -euo pipefail
KEY="sk_live_..."
DOM="yourdomain.com"
DIR="$HOME/linkwatch/$DOM"; mkdir -p "$DIR"
NEW="$DIR/$(date +%F).json"

code=$(curl -s -o "$NEW.raw" -w '%{http_code}' \
  "https://seouptr.com/api.php?action=refdomains&q=$DOM&per=1000&key=$KEY")
[ "$code" = 200 ] || { echo "api returned $code" >&2; exit 1; }
jq -e '.ok' "$NEW.raw" >/dev/null
jq -S . "$NEW.raw" > "$NEW" && rm "$NEW.raw"

PREV=$(ls "$DIR"/*.json | grep -v "$NEW" | tail -1 || true)
[ -n "$PREV" ] && diff <(cat "$PREV") <(cat "$NEW") > "$DIR/last.diff" || true
Abwesenheit ist keine Benachrichtigung

Eine Domain, die im aktuellen Index fehlt, wurde möglicherweise aus unserem Crawl entfernt, nicht von der verlinkenden Website. Bestätigen Sie die wichtigen Domains manuell, bevor Sie jemanden anschreiben. Wir behaupten nicht, dass ein Diff beweist, dass ein Link weg ist.

Was es kostet (hypothetisches Portfolio)

Beispiel: 20 Client-Websites, ein Lauf pro Woche, 4 Läufe im Monat. Preise basierend auf den Aufrufpreisen.
SchrittCredits pro LaufLäufe pro MonatCredits pro Monat
refdomains für 20 Sites404160
bulk_dr für alle 20 zusammen144
backlinks-Abfrage für 3 markierte Domains6424
Gesamt188 Credits, ca. $0.019
Fern frond with one wilted leaf emerging from damp soil

Einen verlorenen Link von einem Flackern unterscheiden

Die meisten Fehlalarme bei der Überwachung verlorener Backlinks sind Flackern. Ein Link verschwindet in einem Snapshot und erscheint im nächsten wieder, war also wahrscheinlich nie weg. Crawler übersehen Seiten. Aktualisierungen hinken hinterher. Ein einfacher Diff kann diese Fälle nicht von echten Verlusten unterscheiden, daher sollte die Benachrichtigung eine verpasste Woche tolerieren, bevor sie auslöst.

Domain zurückhalten, bevor Sie sie als verloren markieren

Setzen Sie eine Domain in der ersten Woche ihres Verschwindens auf eine Warteliste. Wenn sie eine Woche später immer noch fehlt, befördern Sie sie in die Liste der verlorenen Domains. Das kostet eine Woche Latenz und eliminiert die meisten Fehlalarme, die von einem einzelnen fehlerhaften Crawl stammen.

Halten Sie die Warteliste als einfache Datei neben den Snapshots. Löschen Sie einen Eintrag manuell, wenn die Domain zurückkehrt, damit die Liste kurz und lesbar bleibt.

Erwarten Sie, dass Labels für verloren und neu tauschen

Einige Tools markieren denselben Link über mehrere Aktualisierungszyklen hinweg als verloren, dann als neu, dann wieder als verloren. Jeder, der Links manuell prüft, hat das gesehen. Behandeln Sie einen Tausch als Rauschen, es sei denn, die Domain bleibt während der gesamten Wartephase weg.

Unser Index aktualisiert sich grob einmal im Monat. Ein Diff zwischen zwei aufeinanderfolgenden wöchentlichen Dateien kann daher Bewegungen zeigen, die eigentlich eine Aktualisierung sind. Vergleichen Sie Mediane, wie die Schweregradseite vorschlägt, bevor Sie etwas als Trend bezeichnen.

Warum ein Search-Console-Bericht nicht ausreicht

Der Search-Console-Link-Bericht ist kostenlos und lesenswert. Er listet jedoch nicht jeden Link zu Ihrer Seite auf und teilt Ihnen nicht mit, wenn ein Link, den Sie letzten Monat noch hatten, verschwunden ist. Nutzen Sie ihn als zweite Quelle neben dem Snapshot.

Führen Sie beide aus. Dort, wo sie abweichen, ist die Abweichung selbst ein Lead, der einer manuellen Prüfung wert ist.

Old stone pathway with shifted bricks creating uneven steps

Migrationen und Links, die auf verschobene Seiten zeigen

Migrationen sind eine häufige Quelle für verlorene Links. Eine Migration kann dazu führen, dass Links auf Adressen zeigen, die nicht mehr antworten. Der Schaden entsteht meist durch defekte Weiterleitungen und verlorene On-Page-Signale, nicht durch die Verschiebung selbst. Prüfen Sie Links vor dem Cutover. Wissen Sie, welche externen Seiten auf welche Ihrer URLs zeigen.

Erstellen Sie zuerst eine Karte der Landing-URLs

Ziehen Sie die Liste Ihrer Seiten, die Links erhalten, und behandeln Sie jede als Verpflichtung. Jede, die sich verschiebt, benötigt eine 301-Weiterleitung zu ihrer nächsten neuen Entsprechung. Ein Link, der auf eine inaktive Produktseite zeigt, sollte nicht auf der Startseite landen, da dies das Signal auf die falsche Seite verschwendet.

Angenommen, Sie haben 40 verlinkte URLs und eine neue Struktur. Halten Sie eine Tabelle mit der alten Adresse, der neuen Adresse und den von Ihnen erfassten verweisenden Domains. Eine Zeile ohne neue Adresse ist ein verlorengegangener Link, der auf Probleme wartet.

Beobachten Sie die Wochen nach der Verschiebung

Die Anzahl der Verluste steigt oft einige Wochen nach einer Migration, während der Index nachzieht. Eine steigende Liste in diesem Zeitraum ist nur dann erwartet, wenn die Weiterleitungen eingerichtet sind. Prüfen Sie eine Stichprobe der verlorenen Domains manuell, Adresse für Adresse.

Überprüfen Sie die 301-Weiterleitungen mit einer Statusprüfung der alten Adressen. Ein einfacher 200-Status auf einer alten URL oder eine Kette mehrerer Weiterleitungen ist einen Ticket-Eintrag am selben Tag wert.

Wenn das Ziel das Problem ist

Wenn dieselben Domains verschwinden, während ihre Seiten im Browser weiterhin auf Sie verlinken, ist das Ziel das wahrscheinliche Problem. Bestätigen Sie, dass Ihre Adresse antwortet, nicht blockiert ist und denselben Inhalt wie zuvor zurückgibt.

Wenn jede verlorene Domain zu einem Anbieter oder einem Netzwerk gehört, liegt die Ursache eher auf deren Seite. Notieren Sie es und fahren Sie fort, anstatt es zu verfolgen.

Den Diff lesen, ohne darüber zu stolpern

Ein Diff ist nur so klar wie die Dateien dahinter. Zwei Exporte können sich in der Reihenfolge, Whitespaces und Feldlayout unterscheiden. Rauschen ist keine Bewegung. Normalisieren Sie beide Dateien vor dem Vergleich, damit die angezeigten Zeilen genau die sind, die sich geändert haben.

Das Rezept sortiert bereits Schlüssel mit jq -S, was die meisten Rauschfaktoren entfernt. Der Rest stammt aus der Zeilenreihenfolge, und eine stabile Sortierung behebt dies.

Beweisen Sie, dass der Diff bei identischer Eingabe ruhig bleibt

Führen Sie den Vergleich zweimal mit derselben Datei aus. Ein leeres Ergebnis ist die Basis, die Sie wollen. Wenn dieser Lauf nicht leer ist, beheben Sie die Normalisierung, bevor Sie einer Benachrichtigung vertrauen, da jedes spätere Ergebnis davon abhängt.

Führen Sie dieselbe Prüfung nach jeder Änderung am Skript durch, z. B. einem neuen per-Wert. Eine neue Seitengröße kann Zeilen neu anordnen und einen Diff ohne echten Inhalt erzeugen.

Verluste und Gewinne getrennt zählen

Berichten Sie die Anzahl der Verluste und die Anzahl der Gewinne als zwei Zahlen. Eine Nettoänderung von null kann dreißig Verluste und dreißig Gewinne verbergen, die sehr unterschiedliche Wochen bedeuten. Angenommen, Sie haben in einer Woche 30 verloren und 30 gewonnen. Das Nettoergebnis ist null, doch die Verlustliste verdient dennoch eine Prüfung.

Halten Sie die Gewinne aus der Benachrichtigung heraus. Sie sind für Outreach nützlich, entscheiden aber nicht, ob etwas falsch läuft.

Bewahren Sie die Diff-Datei zusammen mit dem Snapshot auf

Das Skript schreibt last.diff bei jedem Lauf. Bewahren Sie es neben dem datierten Snapshot auf. Wenn jemand fragt, warum eine Benachrichtigung ausgelöst hat, beantwortet die Datei die Frage ohne einen neuen Lauf, und ein neuer Lauf liefert möglicherweise nicht dasselbe Ergebnis, da sich der Index seitdem verschoben hat.

Speichern Sie die Diff-Dateien so lange wie die Snapshots. Das Löschen einer davon bricht die Beweiskette für diese Woche.

Randfälle

Brauche ich auch einen Search-Console-Export?
Search Console zeigt Links, die Google Ihnen meldet – eine andere Liste als unsere. Nutzen Sie beide, wenn möglich. Unsere funktioniert auf jeder Domain, die Sie angeben, sodass ein Skript Ihre eigene Seite, einen Client, einen Anbieter oder einen Wettbewerber überwachen kann.
Was, wenn meine Domain mehr als 1.000 verweisende Domains hat?
Navigieren Sie mit page und per. Jeder Aufruf wird einmal für bis zu 1.000 Zeilen abgerechnet, und die tiefe Paginierung ist auf 50.000 Zeilen begrenzt. Eine Site mit 5.000 verweisenden Domains benötigt fünf Aufrufe, zehn Credits oder $0.001.
Kann ich alte Backlinks prüfen, die deindexiert wurden?
Wir können nur zeigen, was im letzten Refresh in unserem Index war. Wenn ein Link im Snapshot des letzten Monats war und in diesem nicht mehr erscheint, behandeln Sie ihn als Lead zur Überprüfung, nicht als Urteil. Siehe das Traffic-Runbook.

Bevor Sie dem ersten Diff vertrauen

  • Es existieren zwei Snapshots, beide mit derselben Sortierung und Reihenfolge sortiert.
  • Die Wartephase ist dokumentiert, z. B. zwei verpasste Wochen.
  • Die 401- und 402-Zweige senden eine Benachrichtigung an eine Person.
  • Fünf Domains aus der Verlustliste wurden manuell geprüft.
  • Jede Migration oder Neueröffnung ist im Diagramm vor dem Lauf markiert.