Přejít na obsah
SEO Uptr
SEO UptrRegistrovat se

Recept

Monitor ztracených backlinků: snímek, diff, notifikace

Lidé se ptají, jak si všimnout mrtvých odkazů dříve, než to udělají rankings. Odpověď je nudná a spolehlivá: uložte seznam každý týden a porovnejte ho s tím předchozím.

Kamenný most s chybějící dřevěnou deskou ukazující mezeru ve struktuře

Co stavíte

Cron job, který běží jednou týdně. Ukládá seznam vašich referenčních domén jako soubor s datem, porovná ho s předchozím souborem a pošle rozdíl někam, kde ho člověk uvidí. To je celý systém.

Stahujeme domény, ne URL. Má to důvod. Seznam na úrovni domény je malý, stabilní a levný, takže diff dvou souborů zůstává čitelný, zatímco seznamy na úrovni URL se mění při každé redesignu a skutečné ztráty se ztratí v šumu. Když potřebujete detail stránky pro jednu ztracenou doménu, požádejte o backlinks na vyžádání a zaplaťte 2 kredity za toto jedno vyhledání.

Spusťte to dvakrát ručně. První spuštění nemá předchozí soubor a druhé prokáže, že diff funguje. Zkontrolujte výstup proti odkazu, o kterém víte, že jste ho odstranili.

Recept

01

Vyberte frekvenci

Týdně. Naše indexace se obnovuje přibližně měsíčně, takže denní spuštění vrací většinou stejný soubor. Týdenní spuštění zachytí obnovu do sedmi dnů, ať už nastane kdykoliv.

02

Pořiďte snímek

Zavolejte refdomains s per=1000 a uložte seřazený JSON do souboru s datem. Jedno volání, 2 kredity, bez ohledu na počet řádků až do 1 000.

03

Diff proti minulému týdnu

Porovnejte dva soubory pomocí diff nebo jq. Řádky, které existují pouze ve starém souboru, jsou vaše ztracené domény.

04

Omezte upozornění

Spočítejte ztracené řádky. Pod vaší hranicí SEV2 zapište záznam do logu. Nad ní odešlte zprávu. Tabulka závažnosti obsahuje počáteční hodnoty.

05

Zkontrolujte stav odpovědi

Pokud je status 402, došly kredity. Pokud 401, je klíč špatný. Upozorněte na oba případy, jinak monitor selže tiše.

Skript

Bash, curl, jq. Nahraďte webhook svým vlastním.

bash
#!/usr/bin/env bash
set -euo pipefail
KEY="sk_live_..."
DOM="yourdomain.com"
DIR="$HOME/linkwatch/$DOM"; mkdir -p "$DIR"
NEW="$DIR/$(date +%F).json"

code=$(curl -s -o "$NEW.raw" -w '%{http_code}' \
  "https://seouptr.com/api.php?action=refdomains&q=$DOM&per=1000&key=$KEY")
[ "$code" = 200 ] || { echo "api returned $code" >&2; exit 1; }
jq -e '.ok' "$NEW.raw" >/dev/null
jq -S . "$NEW.raw" > "$NEW" && rm "$NEW.raw"

PREV=$(ls "$DIR"/*.json | grep -v "$NEW" | tail -1 || true)
[ -n "$PREV" ] && diff <(cat "$PREV") <(cat "$NEW") > "$DIR/last.diff" || true
Absence není upozornění

Doména chybějící v aktuálním indexu mohla být vyřazena z našeho crawlu, nikoliv odstraněna propojujícím webem. Potvrďte ty důležité ručně, než začnete komukoliv psát. Netvrdíme, že diff dokazuje, že odkaz je pryč.

Kolik to stojí (hypotetické portfolio)

Příklad: 20 klientských webů, jedno spuštění týdně, 4 spuštění měsíčně. Ceny z sazeb za jednotlivé volání.
KrokKredity za spuštěníSpuštění měsíčněKredity měsíčně
refdomains pro 20 webů404160
bulk_dr pro všech 20 dohromady144
Vyhledání backlinků na 3 označených doménách6424
Celkem188 kreditů, asi $0,019
Výhonek kapradiny s jedním uvadlým listem vyrůstajícím z vlhké půdy

Rozlišení ztraceného odkazu od záblesku

Většina falešných poplachů v monitoru ztracených backlinků jsou záblesky. Odkaz zmizí z jednoho snímku a objeví se v dalším a pravděpodobně nikdy nebyl pryč. Crawleři vynechají stránky. Obnovy se zpožďují. Běžný diff nedokáže rozlišit tyto případy od skutečné ztráty, takže nastavte upozornění tak, aby tolerovalo jeden chybějící týden, než se spustí.

Udržte doménu v čekání, než ji označíte za ztracenou

Umístěte doménu do seznamu čekajících při prvném týdnu jejího zmizení. Pokud chybí i o týden později, přesuňte ji do seznamu ztracených. To stojí jeden týden latence a odstraní většinu falešných poplachů způsobených jedním špatným crawlem.

Udržujte seznam čekajících jako obyčejný soubor vedle snímků. Odstraňte položku ručně, když se doména vrátí, aby seznam zůstal dostatečně krátký pro čitelnost.

Počítejte s výměnou štítků ztracených a nových

Některé nástroje označují stejný odkaz jako ztracený, pak nový, pak znovu ztracený napříč několika cykly obnovy. Každý, kdo kontroluje odkazy ručně, to viděl. Považujte výměnu za šum, pokud doména nechybí po celou dobu čekacího okna.

Naše indexace se obnovuje přibližně jednou měsíčně. Diff mezi dvěma sousedními týdenními soubory tedy může ukázat pohyb, který je ve skutečnosti jednou obnovou. Porovnávejte mediány, jak navrhuje stránka závažnosti, než cokoli označíte za trend.

Proč jeden report ze Search Console nestačí

Report odkazů ve Search Console je zdarma a stojí za přečtení. Neuvádí však každý odkaz na vás a neřekne vám, kdy odkaz, který jste měli minulý měsíc, zmizel. Použijte jej jako druhý zdroj vedle snímku.

Spusťte oba. Tam, kde se liší, je samotný nesouhlas vedením, za který stojí ruční kontrola.

Stará kamenná stezka se posunutými cihlami vytvářejícími nerovné schody

Migrace a odkazy, které míří na přesunuté stránky

Migrace jsou častým zdrojem ztracených odkazů. Migrace může ponechat odkazy směřující na adresy, které již neodpovídají. Škoda obvykle pramení z rozbitých přesměrování a ztrátových on-page signálů, nikoliv z samotného přesunu. Zkontrolujte odkazy před přepnutím. Vězte, které externí stránky odkazují na které z vašich URL.

Nejprve mapujte cílové URL

Stáhněte seznam vašich stránek, které přijímají odkazy, a treatujte každou jako slib. Jakákoliv, která se přesune, potřebuje 301 přesměrování na svůj nejbližší nový ekvivalent. Odkaz mířící na vyřazenou produktovou stránku by neměl končit na homepage, protože tím se signál utratí na špatné stránce.

Řekněme, že máte 40 propojených URL a novou strukturu. Udržujte jednu tabulku se starou adresou, novou adresou a doménami, které odkazují, jak jste zaznamenali. Řádek bez nové adresy je ztracený odkaz, který čeká na to, aby se stal skutečností.

Sledujte týdny po přesunu

Počty ztrát často vzrostou několik týdnů po migraci, zatímco se index dohání. Rostoucí seznam v tomto okně je očekávaný pouze pokud jsou přesměrování v pořádku. Zkontrolujte vzorek ztracených domén ručně, jednu adresu po druhé.

Ověřte 301 pomocí kontroly stavu na starých adresách. Čisté 200 na staré URL nebo řetězec několika skoků stojí lístek tentýž den.

Když je problémem cíl

Pokud stejné domény mizí, zatímco jejich stránky vás v prohlížeči stále odkazují, cíl je pravděpodobným problémem. Potvrďte, že vaše adresa odpovídá, není blokována a vrací stejný obsah jako předtím.

Pokud každá ztracená doména patří jednomu dodavateli nebo jedné síti, příčina je pravděpodobně na jejich straně. Poznamenejte si to a pokračujte dále, místo abyste to honili.

Čtení diffu bez toho, abyste na něj šlápli

Diff je jen tak jasný, jako soubory, které za ním stojí. Dvě exporty se mohou lišit v pořadí, bílých znacích a rozložení polí. Šum není pohyb. Normalizujte oba soubory před porovnáním, aby řádky, které vidíte, byly ty, které se skutečně změnily.

Recept již řadí klíče pomocí jq -S, což odstraní většinu tohoto šumu. Zbytek pochází z pořadí řádků a stabilní řazení to opraví.

Prokážte, že diff je tichý při identickém vstupu

Spusťte porovnání dvakrát na stejném souboru. Prázdný výsledek je základ, který chcete. Pokud tento běh není prázdný, opravte normalizaci, než začnete důvěřovat jakémukoli upozornění, protože každý další výsledek na tom závisí.

Proveďte stejnou kontrolu po jakékoliv změně skriptu, například nové hodnotě per. Nová velikost stránky může přeuspořádat řádky a vytvořit diff bez skutečného obsahu.

Počítejte ztráty a zisky odděleně

Nahlaste počet ztracených a počet nových jako dvě čísla. Čistá změna nula může skrývat třicet ztrát a třicet zisků, což jsou velmi odlišné týdny. Řekněme, že jste ztratili 30 a získali 30 v jednom týdnu. Čistá hodnota je nic, ale seznam ztracených si stále zaslouží pohled.

Udržujte zisky mimo zprávu o upozornění. Jsou užitečné pro outreach, ale nerozhodují o tom, zda je něco špatně.

Udržte diff soubor se snímkem

Recept píše last.diff při každém spuštění. Udržujte ho vedle datovaného snímku. Když se někdo zeptá, proč se upozornění spustilo, soubor odpoví bez nového běhu a nový běh nemusí výsledek reprodukovat, protože index se od té doby posunul.

Ukládejte diff soubory po dobu, po kterou ukládáte snímky. Smazání jednoho z nich přeruší řetězec důkazů pro daný týden.

Okrajové případy

Potřebuji také export ze Search Console?
Search Console ukazuje odkazy, které Google hlásí vám, jiný seznam než náš. Použijte oba, pokud můžete. Náš funguje na jakékoliv doméně, kterou uvedete, takže jeden skript může sledovat váš vlastní web, klienta, dodavatele nebo konkurenci.
Co když má moje doména více než 1 000 referenčních domén?
Procházejte stránkováním s page a per. Každé volání je účtováno jednou až do 1 000 řádků a hluboké stránkování je omezeno na 50 000 řádků. Web s 5 000 referenčními doménami potřebuje pět volání, deset kreditů nebo $0,001.
Mohu zkontrolovat staré backlinky, které byly de-indexovány?
Můžeme zobrazit pouze to, co je v našem vlastním indexu při poslední obnově. Pokud byl odkaz v minulém snímku a v tomto není, považujte ho za vedení k ověření, nikoliv za verdikt. Viz trafikový runbook.

Než začnete důvěřovat prvnímu diffu

  • Existují dva snímky, oba seřazené stejným řazením a pořadím.
  • Čekací okno je zapsáno, například dva minulé týdny.
  • Větvě 401 a 402 posílají upozornění člověku.
  • Pět domén ze seznamu ztracených bylo zkontrolováno ručně.
  • Jakákoliv migrace nebo relaunch je vyznačena na grafu před spuštěním.