Odstranění penalizace – 2 návody krok za krokem

Po úvodním souhrnném článku o penalizacích se společně podíváme na dva konkrétní případy penalizace. Seznámím vás se zjišťováním jejich příčin a s postupy při odstraňování.

Studie č. 1: Částečná manuální penalizace za odkazy

Příkladem řešení částečné manuální penalizace za nekvalitní a nepřirozené příchozí odkazy je nejmenovaný web, sloužící jako online katalog produktů. O uvalení penalizace jsme byli informováni zprávou v Google Webmaster Tools (GWT).

Obrázek č. 1 – Zpráva z GWT o uvalení penalizace

Klient obdržel částečnou manuální penalizaci za nepřirozené odkazy (viz obrázek č. 1). Při analýze vývoje pozic klíčových slov jsme zjistili, že se penalizace týká zejména hlavní stránky webu, jejíž pozice, měřená nástrojem Collabim na hlavní klíčové slovo oboru, byla 60+ (Collabim měří pouze do hodnoty 60, dále zobrazuje jen 60+). Jelikož byl postih uvalen na slovo s hledaností bez mála 40 000 za měsíc, stalo se odstraňování pochopitelně velmi prioritní záležitostí.

Doporučení: Pro analýzu pozic klíčových slov lze využít nástroje Google Webmaster Tools, Semor.cz nebo Rank Tracker.

Pátrání po příčině a první opatření

Při pátrání po původu postihu jsme se společně s klientem zjistili, že si před lety koupil balíček registrací do několika stovek spamových katalogů. Bylo tedy jasné, odkud vítr vane, a začali jsme s pracemi.

V první řadě jsme přistoupili k podrobné analýze referenčních domén pomocí nástroje Ahrefs, protože už samotné domény hodně napoví o kvalitě jednotlivých odkazů. Další důvod zkoumání odkazového profilu na úrovni domén je ten, že se jednalo o velký web se stovkami tisíců odkazů. Zvolili jsme tedy variantu vhodnou z pohledu cena vs. výkon.

A tady je náš konkrétní postup řešení takové penalizace v šesti základních krocích:

1. Dolování dat z Ahrefs

Jako první jsme provedli export referenčních domén z Ahrefs do Excelu s následným seřazením vzestupně podle hodnoty Domain Rank tak, abychom měli nahoře ty „papírově“ nejhorší. Tato hodnota totiž udává kvalitu referenční domény podle interních metrik Ahrefs.

Mezi další možnosti, které můžete pro získání dat využít, patří zejména nástroj Majestic SEO a Google Webmaster Tools. Ideální je kombinace dat ze všech tří zdrojů, protože každý má svůj index odkazů, který se může lišit.

2. Analýza referenčních domén

Následovalo hledání schémat, která se vyskytují v odkazovém profilu, pomocí ruční kontroly všech referenčních domén. Zdá se vám to jako zbytečně časově náročná práce? Může to tak být, ovšem pro důkladné prozkoumání potenciálních hrozeb v odkazovém portfoliu je tento postup jediný správný.

V našem případě jsme se přesvědčili, že problém tkvěl skutečně v mnoha katalogových registracích, které bylo zapotřebí odstranit v první řadě. Druhým problematickým schématem se ukázaly být pochybné agregátory produktových nabídek s duplicitním obsahem i strukturou webu.

Pro identifikaci nebezpečných odkazů v rámci zkoumaného odkazového profilu existuje řada nástrojů. Vy je poté jen odstraníte. Sami jsme se ale při testování analytických robotů Link Detox a Cognitive SEO přesvědčili, že pro český trh a pro evaluaci kvality domén nejsou tyto nástroje vhodné.

Každou doménu jsme analyzovali z pohledu několika základních a zcela subjektivních metrik, které napověděly, zda se jedná o jednu ze závadných. Sledovali jsme tyto ukazatele:

• Domain rank – Interní metrika Ahrefs udává hodnotu referenční domény na základě kvality a počtu odkazů. Weby s hodnotou nižší než 20 automaticky považuji za nebezpečné, zatímco ty, které mají Domain rank 40 a více, jsou už poměrně kvalitní. Vždy je ale žádoucí všechny domény ověřit ručně.
• Page rank – O relevanci této metriky by se dalo polemizovat, ale nulový rank (případně N/A) značí podezřelý web. Pozor si ovšem musíte dát na nově vytvořené weby, které mají také nulový rank. Pokud máte pochybnosti o věrohodnosti ranku, tak je dobré podívat se na stáří domény. Může se jednat o nový web, který ještě neprošel přepočítáním ranku.
• Duplicitnost webu – Zkoumejte ji například přes Copyscape.com případně přes Siteliner.
• MFA (made for ads) – Ukáže vám, zda se nejedná o web, určený pouze pro reklamní účely?

Hodnotu Page ranku jsme následně zanesli v tabulce Excel do dalšího sloupce hned vedle názvu domény a Domain ranku. V tabulce jsme dále vytvořili dva nové sloupce pro zaznamenání subjektivního hodnocení domény (může vypadat například takto Smrtelná – Nebezpečná – Dobrá – Silná) a stavu řešení.

Doporučení SEO konzultanta a linkbuildera Filipa Podstavce:

„Většina spam webů se dá na základě jednoduchých identifikací vyfiltrovat. V praxi většinou používám nástroj OpenRefine a v exportu z Ahrefs separuji katalogy dle regulárního výrazu na doméně a získaném titulku hlavní stránky domény (přes OpenRefine) „info-|katalo|regis­tr|seo|link“. V těch poté hledám domény, které nejsou spamové a ty z filtru vyřadím. Nakonec se snažím najít vzory použitých anchor textů, které mi často vyselektují velkou část „spam“ odkazů, na které bych jinak nepřišel.

K problémovým odkazům se poté snažím nalézt odpovídající kontaktní email. To lze zjednodušit buď získáváním kontaktů z WHOIS (často chybové) nebo pro to využívám vlastního nástroje, který se snaží určit primárně používanou kontaktní emailovou adresu.“

3. Shánění kontaktů na vybrané weby

Dopředu upozorňuji, že šlo o nezáživnou, ale důležitou fázi procesu. Zaznamenali jsme, které referenční domény jsou nejnebezpečnější, při hledání kontaktů jsme tedy začali právě u nich. Jednoduchým filtrováním jsme identifikovali Smrtelné a Nebezpečné domény a k nim jsme obstarali kontaktní údaje ve formě e-mailu nebo telefonního čísla.

Doporučení: Pokud se na webu žádný kontakt nenachází, tak doporučujeme využít databázi WHOIS, kde najdete informace o vlastníkovi domény i s kontaktní­mi údaji.

4. Odstraňování domén

Sebrali jsme nebezpečné domény a k nim příslušné kontakty, potom přišlo na řadu oslovování jednotlivých webmasterů s žádostí o odstranění odkazu. Chtěli mít jistotu, že z každé domény budou odstraněny všechny odkazy, proto jsme pomocí nástroje Ahrefs vyhledali všechny URL, na kterých se odkazy nacházejí, a společně se žádostí jsme je zaslali adresátům. Zabránili jsme tím potenciální situaci, kdy webmaster odstraní pouze část odkazů ze svého webu, protože nedokáže všechny najít.

Tip: Pro větší přehled o e-mailových komunikací je možné použít rozšíření pro Gmail, které se jmenuje Boomerang. Případně nástroj Signals od HubSpotu, který vás upozorní kdykoliv adresát otevře váš e-mail.

5. Využití Disavow tool

V případech, kdy zůstala naše žádost bez odezvy, případně když si webmaster řekl o finanční kompenzaci za odstranění odkazů (ano, toto se také děje a v poslední době je to stále oblíbenější kratochvíle mnoha majitelů pochybných webů), rozhodli jsme se využít nástroj Disavow tool. Jedná se o nástroj od Google, který je součástí GWT, a slouží k distancování se od vybraných odkazů či domén.

Naše doporučení pro práci s tímto nástrojem zní: Distancujte se vždy od celých domén. Jen velmi zřídka se totiž stane, že na web míří odkaz z nekvalitní URL, patřící pod kvalitní doménu. Pokud využijete Disavow tool na úrovni jednotlivých domén, tak si ušetříte čas i práci s hledáním všech nepřirozených odkazů.

Jak by například měl vypadat textový soubor k vložení do Disavow tool vidíte na obrázku č. 2.

Obrázek č. 2 – Textový soubor s názvy domén v Disavow tool

Nezapomeňte, že před každým blokem domén (odkazů) musíte uvést důvod, vedoucí k rozhodnutí distancovat se. Druhou důležitou věcí je kódování souboru ve formátech UTF-8 nebo 7-bit ASCII Pokud nedodržíte některou z náležitostí, tak se vám nepodaří do Disavow tool soubor nahrát.

Postup pro distancování se od odkazů:

1. Přejděte na stránku s nástroje Disavow Tools v GWT.
2. Vyberte web www.example.cz a přejděte dále přes tlačítko Distancování se od odkazů (2×).
3. Vložte textový soubor se seznamem domén k distancování se od nich.
4. Kliknutím na příkaz Odeslat potvrdíte použití Disavow Tool.

6. Odeslání žádosti o přehodnocení

Zhruba týden po aplikaci Disavow tool jsme vytvořili žádost o přehodnocení webu, do níž jsme vložili odkaz na sdílený Google Dokument, který mapoval naši snahu a úspěšnost při manuálním odstraňování škodlivých domén (doporučujeme takový dokument přikládat vždy k manuálnímu přehodnocení pro zvýšení důvěryhodnosti vaší práce). Textový dokument s naší žádostí jsme nahráli do GWT a čekali na odpověď.

Náležitosti žádosti o přehodnocení

1. Stručné informace o tom, co se stalo, kdy jsme to zjistili a čím mohl být zásah způsoben.
2. Uznejte své pochybení a slibte, že jste se z penalizace poučili.
3. Ukažte Googlu seznam aktivit, které jste pro odstranění zásahu udělali + odkaz na sdílený Google Dokument s výpisem odstraněných odkazů jako důkaz proaktivity (nezapomeňte dokument sdílet veřejně, aby byl viditelný i pro druhou stranu).
4. Můžete připojit i omluvu za komplikace.
5. Na závěr samozřejmě přiložte rozloučení a podpis.

Podání žádosti o přehodnocení webu

1. Ujistěte se, že jste se distancovali od vybraných odkazů pomocí nástroje Disavow Tool (pokud jste to měli v plánu).
2. Přejděte na stránku s informací o manuální zásahu v GWT. Cesta je: Google Webmaster Tools (www.example.cz) → Návštěvnost z vyhledávání → Ruční zásahy → Částečné shody.
3. Ujistěte se, že jste provedli všechny kroky k odstranění závadných odkazů a klikněte na Požádat o kontrolu.
4. Do zobrazeného formuláře vložte připravený text žádosti o přehodnocení webu a zaškrtněte prohlášení, že web již neporušuje pokyny Googlu.
5. Žádost odešlete kliknutím na Požádat o kontrolu.

Odpověď od Googlu

Odpověď přišla přesně po 4 dnech se sdělením, že postih byl odstraněn. Jak taková zpráva vypadá, vidíte na následujícím obrázku č. 3.

Obrázek č. 3: Kladná odpověď na žádost o odstranění penalizace

Fakt, že se podaří penalizaci odstranit ihned po prvním odeslání žádosti je poměrně vzácná. Ve většině případů přijde odpověď hlásající, že vyčištění odkazového profilu není dostatečné a Google vám zašle pár příkladů odkazů, které považuje za nepřirozené.

Obrázek č. 4: Záporná odpověď na žádost o odstranění penalizace

V tomto případě nezbývá nic jiného, než projít všechny fáze ve zrychleném procesu a zaměřit se na odstraňování i těch domén, které nejsou označeny jako Smrtelné nebo Nebezpečné a začít hledat další nepřirozená odkazová schémata.

A jak vypadala čísla po odstranění penalizace?

Výsledkem úspěšného odstranění byl okamžitý posun v pozicích u penalizovaných klíčových slov o několik desítek vzhůru.

Obrázek č. 5: Zmiňované oborové klíčové slovo a vývoj jeho pozice v čase před a po penalizaci

Podobných výsledků bylo dosaženo i u dalších frází. Kromě posunu pozic jsme zaznamenali i zvyšující se návštěvnost webu jak přes tato klíčová slova, tak na postižené vstupní stránky webu. V GWT byl zjevný posun v počtu impresí daných frází až o 1000 % a také v počtu prokliků o vyšší stovky procent oproti situaci při penalizaci.

Obrázek č. 6: Nárůst návštěvnosti webu po odstranění penalizace

Co když mám algoritmickou penalizaci za odkazy?

V tomto případě můžete směle přeskočit kroky 3 a 4 a na vybrané domény tak rovnou použít Disavow Tool. Je to z důvodu, že váš web bude posouzen nikoliv manuálním způsobem, ale pomocí automatického přepočítání algoritmu. Bylo dokázáno, že takové penalizace je možné se zbavit pouze v momentě, kdy Google vydá aktualizaci svého algoritmu Penguin, což se v posledních letech stalo vždy zhruba dvakrát do roka.

Studie č. 2: Celková algoritmická penalizace za duplicity a cloacking

Druhým figurantem pro případovou studii je web, sloužící jako katalog produktů s možností nákupu online. Zásah proti tomuto klientovi byl obzvlášť nepříjemný, protože šlo o algoritmickou penalizaci uvalenou na celý web. Propad výkonu webu byl z Google Analytics na první pohled značný. Při pohledu na klíčová slova zobrazoval Collabim u všech sledovaných pozici 60+.

Poučení zní: Neberte Penguina na lehkou váhu!. Byl to právě tento update, který web popravil.

Pustili jsme se tedy do identifikace příčin zásahu krok za krokem.

1. Identifikace: Algoritmická, nebo manuální?

Náhled do GWT prozradil, že když už by se mělo jednat o penalizaci, tak jedině o algoritmickou. Nebyly zde žádné záznamy o ručním zásahu.

2. Můžou za to odkazy…

Z pravděpodob­nostního hlediska jsme doufali, že se bude jednat o problémy v odkazovém profilu, což je vždy ta lépe identifikovatelná varianta penalizace. Po analýze odkazového portfolia jsme ale došli k závěru, že potíže budou jinde.

Jelikož jsou nepřirozené odkazy nejčastějším důvodem penalizace pro české weby, tak doporučujeme vždy začít rychlou analýzou odkazového profilu.

3. … nemůžou. Vyhrnout rukávy a jde se zkoumat web

Důvodů pro uvalení penalizace za technickou a obsahovou část webu může být celá řada, proto jsme začali od těch nejfrekventova­nějších a nejzávažnějších:

Zakázané techniky

Jedním ze zjištěných porušení předpisů Google byl tzv. cloaking. Web obsahoval skryté odkazy v textu, tvořené na základě content-based targetingu (obvykle se jedná o automatizovanou tvorbu mnoha interních odkazů napříč webem podle tématické relevance cílové stránky a klíčového slova).

Při hledání skrytých odkazů nám velmi pomohlo rozšíření pro Chrome a Firefox Linkparser, které dokáže zvýrazňovat odkazy na stránce.

Jako nápravu situace jsme nejprve zajistili zviditelnění všech odkazů na webu i pro uživatele. Ve druhé fázi jsme odstranili přebytečné odkazy, aby texty nebyly přesyceny odkazy.

Duplicitní domény

V dalším kroku jsme zkoumali web z pohledu duplicit za pomoci nástrojů Copyscape, Siteliner a Moz. Zjistili jsme tak, že klient měl nasazené 3 vývojové verze webu, které byly indexované na Googlu. To je obrovská porce duplicit, které jsme ošetřili nasazením meta tagu robots=noindex, nofollow u přebytečných we­bů.

Chybějící kanonizace

Z pohledu stejného obsahu na více stránkách to nebylo všechno. Pomocí Mozu a nástroje Xenu jsme objevili, že klient nepracoval s kanonizací obsahu, což vyústilo ve zhruba 50 variant stejného obsahu na různých URL. Náprava je i v tomto případě mnohem jednodušší, než samotná identifikace problému. Pro každou z duplicitních stránek jsme zvolili tu, kterou mají vyhledávače považovat za hlavní a ostatní jsme na ni kanonizovali vložením atributu rel=canonical do hlavičky kódu.

Tím naše úpravy neskončily…

Tři zásadní pochybení na straně technické a obsahové optimalizace webu jsme napravili za krátkou dobu, ale abychom měli jistotu, že při následujícím updatu algoritmu nám Google penalizaci odstraní, dívali jsme se i na další problematické záležitosti na webu.

Práce s filtry – Z indexu Googlu jsme odstranili nepotřebné URL vzniklé při filtrování nabídky. Provedli jsme to nasazením atributu noindex a nofollow u vícenásobných parametrů při filtrování, protože nedávalo příliš smysl držet v indexu takové množství stránek a zpomalovalo to indexaci webu.

Stránkování webu – Tam, kde bylo potřeba rozdělit nabídku na více stránek, jsme nasadili atribut rel=next a rel=prev. Tahle úprava zaručí odstranění případných duplicit, vznikajících při nesprávně řešeném stránkování.

Penalizace odstraněna!       

Penalizace byla úspěšně odstraněna při vydání aktualizace algoritmu Penguin na verzi 2.1. Mnohé testy dokázaly, že jindy, než při vydání updatu algoritmu, není možné penalizaci odstranit.

Z následujícího grafu je vidět posun pozic sledovaných klíčových slov zpět na zajímavější pozice. Bohužel při odstranění algoritmické penalizace za nepovolené techniky nedojde k návratu na pozice, kterých web dosahoval před uvalením postihu. To nastalo i v tomto případě, jelikož před uvalením zásahu se klíčová slova nacházela na první stránce výsledků vyhledávání. Odstraněním této penalizace tedy práce zdaleka nekončí a bude zapotřebí pokračovat v důkladné práci s webem a s odkazovým profilem, aby byla šance na návrat na bývalé pozice.

Obrázek č. 7: Posun pozic sledovaných klíčových slov po odstranění penalizace

 

Tématem penalizací se budeme zabývat i v navazujícím hangoutu 15. 7. v 17:00. Kdo bude na toto téma diskutovat? Zkušení SEO odborníci Ondřej Novotný z H1.cz, Zdeněk Dvořák a Filip Podstavec.

Penalizace si našly své místo i na červencové Poslední středě 30. 7. Hlavním panelistou bude Tomáš Vyskočil, SEO Director H1.cz, který už odstranil nejednu záludnou penalizaci, a večerem nás provede SEO Strategist Michal Krutiš. Kdo jim bude oponovat? Necháme vás ještě chvíli napjaté.

Pořádali jsme i společný hangout o penalizacích s odborníky. Hangout je k vidění ze záznamu a report si můžete přečíst na našem blogu.

Pokud se vám nedaří penalizaci odstranit, podívejte se na naši nabídku služeb a konzultujte s námi na: info@h1.cz.