Przejdź do treści
SEO Uptr
SEO UptrZarejestruj się

Przepis

Monitor utraconych backlinków: uchwycenie, porównanie, powiadomienie

Ludzie pytają, jak zauważyć martwe linki zanim zauważą to algorytmy. Odpowiedź jest nudna, ale niezawodna: zapisuj listę co tydzień i porównuj ją z poprzednią.

Kamienny most z brakującą deską pokazujący lukę w strukturze

Co budujesz

Zadanie cron, które uruchamia się raz w tygodniu. Zapisuje listę Twoich domen odsyłających jako plik z datą, porównuje go z poprzednim plikiem i publikuje różnice w miejscu, które będzie widoczne dla człowieka. To cały system.

Pobieramy domeny, a nie URL-e. Jest ku temu powód. Lista na poziomie domeny jest mała, stabilna i tania, więc różnica między dwoma plikami pozostaje czytelna, podczas gdy listy na poziomie URL zmieniają się przy każdej przebudowie strony i zacierają prawdziwe straty w hałasie. Gdy potrzebujesz szczegółów dotyczących konkretnej utraconej domeny, zapytaj o backlinks na żądanie i zapłać 2 kredyty za to jedno zapytanie.

Uruchom go dwukrotnie ręcznie. Pierwsze uruchomienie nie ma poprzedniego pliku, a drugie potwierdza działanie porównania. Sprawdź wynik na podstawie linku, o którym wiesz, że został usunięty.

Przepis

01

Wybierz częstotliwość

Co tydzień. Nasz indeks odświeża się około raz w miesiącu, więc dzienne uruchomienia zwracają ten sam plik w większości dni. Cotygodniowe uruchomienie wychwyci odświeżenie w ciągu siedmiu dni, niezależnie od tego, kiedy nastąpi.

02

Wykonaj uchwycenie

Wywołaj refdomains z parametrem per=1000 i zapisz posortowany JSON do pliku z datą. Jedno wywołanie, 2 kredyty, niezależnie od liczby wierszy do 1000.

03

Porównaj z poprzednim tygodniem

Porównaj dwa pliki za pomocą diff lub jq. Wiersze, które istnieją tylko w starym pliku, to Twoje utracone domeny.

04

Zabezpiecz powiadomienie

Policz utracone wiersze. Poniżej progu SEV2 zapisz wpis w logu. Powyżej go wyślij wiadomość. Tabela poziomów ważności zawiera wartości początkowe.

05

Sprawdź status odpowiedzi

Jeśli status to 402, zabrakło kredytów. Jeśli 401, klucz jest nieprawidłowy. Powiadom o obu, w przeciwnym razie monitor będzie działać cicho i bez ostrzeżenia.

Skrypt

Bash, curl, jq. Zastąp webhook własnym.

bash
#!/usr/bin/env bash
set -euo pipefail
KEY="sk_live_..."
DOM="yourdomain.com"
DIR="$HOME/linkwatch/$DOM"; mkdir -p "$DIR"
NEW="$DIR/$(date +%F).json"

code=$(curl -s -o "$NEW.raw" -w '%{http_code}' \
  "https://seouptr.com/api.php?action=refdomains&q=$DOM&per=1000&key=$KEY")
[ "$code" = 200 ] || { echo "api returned $code" >&2; exit 1; }
jq -e '.ok' "$NEW.raw" >/dev/null
jq -S . "$NEW.raw" > "$NEW" && rm "$NEW.raw"

PREV=$(ls "$DIR"/*.json | grep -v "$NEW" | tail -1 || true)
[ -n "$PREV" ] && diff <(cat "$PREV") <(cat "$NEW") > "$DIR/last.diff" || true
Brak to nie jest alert

Brak domeny w indeksie z tego miesiąca może oznaczać, że została usunięta z naszego crawlowania, a nie usunięta przez witrynę odsyłającą. Potwierdź ważne domeny ręcznie przed napisaniem do kogoś. Nie twierdzimy, że różnica dowodzi, że link zniknął.

Koszt (przykładowy portfel)

Przykład: 20 witryn klientów, jedno uruchomienie w tygodniu, 4 uruchomienia w miesiącu. Ceny wynikają z stawek za pojedyncze wywołanie.
KrokKredyty za uruchomienieUruchomienia w miesiącuKredyty w miesiącu
refdomains dla 20 witryn404160
bulk_dr dla wszystkich 20 razem144
wyszukiwanie backlinks dla 3 oznaczonych domen6424
Razem188 kredytów, około $0.019
Kłącze paproci z jednym zwiędłym liściem wyrastającym z wilgotnej ziemi

Rozróżnianie utraconych linków od migotania

Większość fałszywych alarmów w monitorze utraconych backlinków to migotania. Link znika w jednym uchwyceniu i pojawia się w następnym i prawdopodobnie nigdy nie zniknął. Crawlerzy pomijają strony. Odświeżania mają opóźnienie. Zwykłe porównanie nie rozróżnia tych zjawisk od prawdziwej straty, więc skonfiguruj alert tak, aby tolerował jeden tydzień braku przed jego wyzwoleniem.

Zatrzymaj domenę, zanim uznasz ją za utraconą

Umieść domenę na liście oczekujących w pierwszym tygodniu jej zniknięcia. Jeśli nadal jej brakuje tydzień później, przenieś ją na listę utraconych. Kosztuje to jeden tydzień opóźnienia i eliminuje większość fałszywych alarmów wynikających z jednego błędnego crawlowania.

Przechowuj listę oczekujących jako zwykły plik obok uchwycenia. Usuń wpis ręcznie, gdy domena wróci, aby lista pozostała wystarczająco krótka do odczytania.

Spodziewaj się zamiany etykiet „utracony” i „nowy”

Niektóre narzędzia oznaczają ten sam link jako utracony, potem jako nowy, a następnie ponownie jako utracony w kilku cyklach odświeżania. Każdy, kto ręcznie sprawdza linki, widział to. Traktuj zamianę jako szum, chyba że domena pozostaje nieobecna przez cały okres oczekiwania.

Nasz indeks odświeża się mniej więcej raz w miesiącu. Różnica między dwoma sąsiadującymi plikami cotygodniowymi może więc pokazać ruch, który jest tak naprawdę jednym odświeżeniem. Porównaj mediany, jak sugeruje strona ważności, zanim uznasz coś za trend.

Dlaczego jedno raportu z Search Console nie wystarczy

Raport linków w Search Console jest darmowy i wart przeczytania. Nie wymienia jednak wszystkich linków do Twojej witryny i nie powie Ci, kiedy link, który miałeś w zeszłym miesiącu, zniknął. Używaj go jako drugiego źródła obok uchwycenia.

Uruchom oba. Tam, gdzie się różnią, sama rozbieżność jest wskazówką wartą ręcznego sprawdzenia.

Stara kamienna ścieżka z przesuniętymi cegłami tworzącymi nierówne schodki

Migracje i linki prowadzące do przeniesionych podstron

Migracje są częstym źródłem utraconych linków. Migracja może pozostawić linki wskazujące na adresy, które już nie odpowiadają. Szkoda zwykle wynika z uszkodzonych przekierowań i utraty sygnałów na stronie, a nie z samej migracji. Sprawdź linki przed przełączeniem. Wiedz, które zewnętrzne strony wskazują na które z Twoich adresów URL.

Najpierw zmapuj adresy docelowe

Pobierz listę swoich podstron, które otrzymują linki i traktuj każdą z nich jako obietnicę. Każda, która się zmienia, wymaga przekierowania 301 do najbliższego nowego odpowiednika. Link skierowany do wycofanej podstrony produktowej nie powinien prowadzić na stronę główną, ponieważ zużywa sygnał na złej stronie.

Załóżmy, że masz 40 linkowanych adresów URL i nową strukturę. Utrzymuj jedną tabelę ze starym adresem, nowym adresem i domenami odsyłającymi, które zarejestrowałeś. Wiersz bez nowego adresu to utracony link, który może się pojawić.

Obserwuj tygodnie po migracji

Liczba utraconych często rośnie przez kilka tygodni po migracji, zanim indeks się dostosuje. Rosnąca lista w tym oknie jest oczekiwana tylko wtedy, gdy przekierowania są poprawnie skonfigurowane. Sprawdź próbę utraconych domen ręcznie, jeden adres na raz.

Zweryfikuj przekierowania 301 sprawdzając status starych adresów. Zwykły kod 200 na starym URL lub łańcuch kilku przekierowań wart jest zgłoszenia tego samego dnia.

Gdy problemem jest cel

Jeśli te same domeny znikają, podczas gdy ich strony nadal linkują do Ciebie w przeglądarce, prawdopodobnym problemem jest Twój cel. Zweryfikuj, czy Twój adres odpowiada, nie jest zablokowany i zwraca tę samą treść co wcześniej.

Jeśli wszystkie utracone domeny należą do jednego dostawcy lub jednej sieci, przyczyna leży prawdopodobnie po ich stronie. Zapisz to i przejdź dalej, zamiast za tym gonić.

Czytanie różnicy bez wpadania w pułapkę

Różnica jest tak czytelna, jak pliki, które za nią stoją. Dwa eksporty mogą różnić się kolejnością, spacjami i układem pól. Szum to nie ruch. Znormalizuj oba pliki przed porównaniem, aby widzieć tylko linie, które się zmieniły.

Przepis już sortuje klucze za pomocą jq -S, co usuwa większość tego szumu. Reszta wynika z kolejności wierszy, a stabilne sortowanie to naprawia.

Udowodnij, że różnica jest cicha przy identycznym wejściu

Uruchom porównanie dwa razy na tym samym pliku. Pusty wynik to baza, której chcesz. Jeśli to uruchomienie nie jest puste, napraw normalizację, zanim zaufasz któremukolwiek alertowi, ponieważ każdy kolejny wynik od tego zależy.

Wykonaj to samo sprawdzenie po każdej zmianie skryptu, np. nowej wartości per. Nowy rozmiar strony może zmienić kolejność wierszy i wygenerować różnicę bez rzeczywistej treści.

Policz straty i zyski osobno

Raportuj liczbę utraconych i liczbę nowych jako dwie liczby. Zmiana netto równa zero może ukryć trzydzieści strat i trzydzieści zysków, co są bardzo różnymi tygodniami. Załóżmy, że utraciłeś 30 i zyskałeś 30 w jednym tygodniu. Netto to nic, jednak lista utraconych nadal zasługuje na uwagę.

Trzymaj zyski z dala od wiadomości alertu. Są przydatne w outreach, ale nie decydują o tym, czy coś jest nie tak.

Przechowuj plik różnicy wraz z uchwyceniem

Przepis zapisuje last.diff przy każdym uruchomieniu. Przechowuj go obok datowanego uchwycenia. Kiedy ktoś zapyta, dlaczego zadziałał alert, plik odpowie bez ponownego uruchomienia, a ponowne uruchomienie może nie odtworzyć wyniku, ponieważ indeks zmienił się od tamtego czasu.

Przechowuj pliki różnicy tak długo, jak przechowujesz uchwycenia. Usunięcie jednego z nich przerywa łańcuch dowodów dla tego tygodnia.

Przypadki brzegowe

Czy potrzebuję też eksportu z Search Console?
Search Console pokazuje linki, które Google raportuje do Ciebie, inną listę niż nasza. Używaj obu, jeśli możesz. Nasza działa na dowolnej domenie, którą podasz, więc jeden skrypt może obserwować Twoją witrynę, klienta, dostawcę lub konkurencję.
Co jeśli moja domena ma więcej niż 1000 domen odsyłających?
Przechodź z użyciem page i per. Każde wywołanie jest rozliczane raz za do 1000 wierszy, a głęboka paginacja jest ograniczona do 50 000 wierszy. Witryna z 5000 domenami odsyłającymi wymaga pięciu wywołań, dziesięciu kredytów lub $0.001.
Czy mogę sprawdzić stare backlinki, które zostały zindeksowane?
Możemy pokazać tylko to, co jest w naszym indeksie przy ostatnim odświeżeniu. Jeśli link był w uchwyceniu z zeszłego miesiąca, a nie ma go w tym, traktuj go jako wskazówkę do weryfikacji, a nie werdykt. Zobacz przewodnik po spadku ruchu.

Zanim zaufasz pierwszej różnicy

  • Istnieją dwa uchwycenia, oba posortowane tym samym sortowaniem i kolejnością.
  • Okno oczekiwania jest zapisane, na przykład dwa przeoczone tygodnie.
  • Gałęzie 401 i 402 wysyłają alert do człowieka.
  • Pięć domen z listy utraconych zostało sprawdzonych ręcznie.
  • Każda migracja lub ponowne uruchomienie jest oznaczona na wykresie przed uruchomieniem.