Na vašich webových stránkách jsou pavouci.

Neděste se! Nemluvím o skutečných osminohých pavoucích. Mám na mysli pavouky pro optimalizaci pro vyhledávače. Jsou to roboti, kteří zajišťují SEO. Každý velký vyhledávač používá ke katalogizaci vnímatelného internetu pavouky.

Právě díky práci těchto pavouků, někdy označovaných jako crawl spiders nebo crawlers, se vaše webové stránky umisťují v oblíbených vyhledávačích, jako jsou Google, Bing, Yahoo a další.

Svět vyhledávačů samozřejmě ovládá Google, takže při optimalizaci webu je nejlepší mít na paměti především jeho pavouky.

Ale co jsou to crawl spidery vyhledávačů?

Jádro věci je jednoduché: Abyste se umístili na vysokých pozicích na stránkách s výsledky vyhledávání, musíte svůj web napsat, navrhnout a nakódovat tak, aby se jim líbil.

To znamená, že musíte vědět, co jsou zač, co hledají a jak pracují.

Vyzbrojeni těmito informacemi budete moci lépe optimalizovat své stránky, protože budete vědět, co nejvýznamnější vyhledávače na světě hledají.

Pustíme se do toho.

Co jsou to pavouci vyhledávačů?“

Než pochopíte, jak funguje webový crawler a jak na něj můžete zapůsobit, musíte nejprve vědět, co jsou zač.

Pavouci vyhledávačů jsou pěšáci světa vyhledávačů. Vyhledávač, jako je Google, má určité věci, které chce od vysoce hodnoceného webu vidět. Crawler se pohybuje po webu a plní vůli vyhledávače.

Crawler je jednoduše kus softwaru, který se řídí určitým účelem. U pavouků je tímto účelem katalogizace informací o webových stránkách.

(Zdroj obrázku)

Pavouci společnosti Google procházejí webové stránky, shromažďují a ukládají data. Musí zjistit nejen to, co je stránka zač, ale i kvalitu jejího obsahu a tématu, které je na ní obsaženo.

Toto dělají pro každý web na webu. Pro představu, v roce 2019 bylo aktivních 1,94 miliardy webových stránek a toto číslo každý den stoupá. Každý nový web, který se objeví, musí být procházen, analyzován a katalogizován pavoučími roboty.

Prohledávače pak shromážděná data předávají vyhledávači k indexaci. Tyto informace se ukládají, dokud nejsou potřeba. Když je iniciován dotaz ve vyhledávači Google, výsledky a pořadí jsou generovány z tohoto indexu.

Jak funguje crawler?

Crawler je složitý software. Musí být, pokud se chystáte katalogizovat celý web. Jak ale tento robot funguje?“

Nejprve crawler navštíví webovou stránku a hledá nová data, která by mohl zařadit do indexu vyhledávače. To je jeho konečný cíl a důvod jeho existence. Za úkolem tohoto bota vyhledávače však stojí spousta práce.

Krok 1: Pavouci zkontrolují váš soubor robots.txt

Když pavouci společnosti Google dorazí na nový web, okamžitě stáhnou soubor robots.txt webu. Soubor robots.txt udává pavoukům pravidla, které stránky mohou a mají být na webu procházeny. Umožňuje jim také procházet mapy stránek a určovat celkové rozložení stránek a způsob jejich katalogizace.

(Zdroj obrázku)

Soubor robots.txt je cennou součástí skládačky SEO, přesto je to něco, nad čím vám mnoho tvůrců webových stránek nedává přímou kontrolu. Na vašem webu jsou jednotlivé stránky, které možná budete chtít před pavouky Googlu uchránit.

Můžete zablokovat procházení vašeho webu?

Naprosto můžete, a to pomocí souboru robots.txt.

Ale proč byste to měli dělat?

Řekněme, že máte dvě velmi podobné stránky se spoustou duplicitního obsahu. Google duplicitní obsah nesnáší a je to něco, co může negativně ovlivnit vaše hodnocení. Proto je dobré mít možnost upravit soubor robots.txt a zaslepit tak Google před konkrétními stránkami, které by mohly mít neblahý vliv na vaše skóre SEO.

Google si na věci, jako je duplicitní obsah, dává mimořádný pozor, protože jeho obchodní model je zaměřen na poskytování přesných a kvalitních výsledků vyhledávání. Proto je jejich vyhledávací algoritmus tak pokročilý. Pokud bude poskytovat ty nejlepší možné informace, budou zákazníci i nadále přicházet na jeho platformu, aby našli to, co hledají.

(Zdroj obrázku)

Poskytováním kvalitních výsledků vyhledávání Google přitahuje zákazníky na svou platformu, kde jim může zobrazovat reklamy (které tvoří 70,9 % příjmů společnosti Google).

Pokud si tedy myslíte, že pavouci jsou příliš kritičtí k věcem, jako je duplicitní obsah, nezapomeňte, že pro Google je hlavním zájmem kvalita:

• Kvalitní návrhy vedou k většímu počtu uživatelů.
• Více uživatelů vede ke zvýšení prodeje reklamy.
• Zvýšený prodej reklamy vede k ziskovosti.

Krok 2: Pavouci kontrolují vaše odkazy

Jedním z hlavních faktorů, na které se pavouci zaměřují, jsou odkazy. Pavouci dokáží hypertextové odkazy nejen rozpoznat, ale také je sledovat. Pomocí interních odkazů vašeho webu se pohybují a pokračují v katalogizaci. Interní odkazy jsou nezbytné z mnoha důvodů, ale také vytvářejí snadnou cestu pro vyhledávací roboty, kterou mohou sledovat.

Pavouci si také pečlivě všímají, jaké jsou odchozí odkazy spolu s tím, jaké stránky třetích stran odkazují na ty vaše. Když říkáme, že budování odkazů je jedním z nejdůležitějších prvků plánu SEO, říkáme pravdu. Musíte vytvořit interní síť odkazů mezi svými stránkami a příspěvky na blogu. Musíte také zajistit, abyste odkazovali na externí zdroje.

Ale kromě toho všeho musíte zajistit, aby na vás odkazovaly externí stránky, které se těší velké přízni Googlu a jsou relevantní pro vaše stránky.

(Zdroj obrázku)

Jak jsme zmínili v minulé části, Google potřebuje vědět, že vyhledávačům poskytuje kvalitní a legitimní návrhy, aby si udržel svou dominanci a tím i ziskovost.

Když na vás odkazuje web, berte to jako doporučující dopis. Pokud se ucházíte o práci zdravotní sestry, přijdete připraveni s doporučujícími dopisy od předchozích vedoucích pracovníků nemocnic a zdravotníků, se kterými jste pracovali.

Pokud se dostavíte s krátkým dopisem od pošťáka a ošetřovatele psů, mohou o vás říct krásné věci, ale jejich slovo nebude mít ve zdravotnictví velkou váhu.

SEO je pracovní pohovor se společností Google.

Každou vteřinu, kdy jste online, vedete pohovor o přední místa ve svém oboru. Pavouci Googlu jsou zástupci personálního oddělení, kteří tento pohovor vedou a prověřují vaše zdroje, než podají zprávu svým nadřízeným a rozhodnou o vaší způsobilosti.

Krok 3: Pavouci kontrolují vaši kopii

Častou mylnou představou o pavoucích vyhledávačů je, že pouze přicházejí na stránku a počítají všechna vaše klíčová slova.

Když klíčová slova hrají roli ve vaší pozici, pavouci toho dělají mnohem víc.

SEO je především o úpravách vaší kopie. Tato vylepšení jsou prováděna ve snaze zapůsobit na pavouky Googlu a dát jim to, co hledají.

(Zdroj obrázku)

Ale co hledají pavouci vyhledávačů, když prohlížejí kopii vašeho webu?

Snaží se určit tři klíčové faktory.

1. Relevantnost vašeho obsahu. Pokud jste zubařský web, zaměřujete se na zubařské informace? Odbíháte od tématu náhodnými odbočkami nebo věnujete části webu jiným nesouvisejícím tématům? Pokud ano, budou roboti Googlu zmateni v tom, jak vás mají hodnotit.
2. Celková kvalita vašeho obsahu. Pavouci Googlu si potrpí na kvalitu psaní. Chtějí se ujistit, že váš text odpovídá vysokým standardům společnosti Google. Nezapomeňte, že doporučení Googlu má svou váhu, takže nejde jen o to, kolik klíčových slov dokážete nacpat do jednoho odstavce. Pavouci chtějí vidět kvalitu místo kvantity.
3. Autorita vašeho obsahu. Pokud jste zubařský web, Google se potřebuje ujistit, že jste autoritou ve svém oboru. Pokud chcete být na prvním místě ve vyhledávání pro určité klíčové slovo nebo frázi, musíte pavoukům Googlu dokázat, že jste autoritou v daném tématu.

Pokud do kódu svého webu zahrnete strukturovaná data, známá také jako značení schémat, získáte u pavouků Googlu body navíc. Tento kódovací jazyk poskytuje pavoukům více informací o vašem webu a pomáhá jim přesněji vás zařadit do seznamu.

Nikdy také není dobré snažit se pavouky Googlu oklamat. Nejsou tak hloupí, jak si mnozí SEO marketéři zřejmě myslí. Pavouci dokážou rychle rozpoznat taktiku black hat SEO.

Black hat SEO zahrnuje nemorální taktiky, které se používají ve snaze oklamat Google, aby webu přidělil vyšší hodnocení, aniž by byl vytvořen kvalitní obsah a odkazy.

Příkladem taktiky black hat SEO může být tzv. keyword stuffing, kdy nesmyslně hromadíte klíčová slova na stránce. Další taktikou, kterou používají firmy provádějící black hat SEO, je vytváření zpětných odkazů prostřednictvím fiktivních stránek, které obsahují odkaz zpět na váš web.

A před deseti lety tyto taktiky fungovaly. Od té doby však Google prošel mnoha aktualizacemi a jeho pavoučí boti jsou nyní schopni taktiku black hat rozpoznat a její pachatele potrestat.

Pavouci indexují informace o black hat SEO a pokud se prokáže, že váš obsah je problematický, mohou být uděleny sankce.

Tyto tresty mohou být něco malého, ale účinného, jako je snížení hodnocení webu, nebo něco tak závažného, jako je úplné vyřazení ze seznamu, kdy váš web zcela zmizí z Googlu.

Krok 4: Pavouci si prohlédnou vaše obrázky

Pavouci si při procházení webu udělají přehled o obrázcích vašeho webu. Jedná se však o oblast, kde boti Googlu potřebují další pomoc. Pavouci se nemohou jen tak podívat na obrázek a určit, co je to za obrázek. Chápou, že je tam obrázek, ale nejsou dostatečně vyspělí, aby zjistili skutečný kontext.

Proto je tak důležité, aby ke každému obrázku byly přiřazeny značky alt a názvy. Pokud jste úklidová firma, pravděpodobně máte obrázky, které ukazují výsledky různých technik úklidu kanceláří. Pokud v alt tagu nebo title neuvedete, že obrázek představuje techniku úklidu kanceláří, pavouci se to nedozvědí.

Krok 5: Pavouci to udělají znovu

Práce pavouka Google není nikdy hotová. Jakmile dokončí katalogizaci webu, přesune se dál a nakonec váš web znovu prohledá, aby Google aktualizoval váš obsah a optimalizační úsilí.

Tito roboti neustále procházejí a hledají nové stránky a nový obsah. Můžete nepřímo určit frekvenci, s jakou jsou vaše stránky znovu procházeny. Pokud své stránky pravidelně aktualizujete, dáváte Googlu důvod, aby vás znovu katalogizoval. Proto by důsledné aktualizace (a příspěvky na blogy) měly být součástí každého plánu SEO.

Jak optimalizovat web pro pavouky SEO?

Pro přehled existuje několik kroků, které můžete podniknout, abyste se ujistili, že je váš web připraven na procházení pavouky Google.

Krok 1: Mějte jasnou hierarchii webu

Struktura webu je pro dobré umístění ve vyhledávačích klíčová. Ujistěte se, že stránky jsou snadno přístupné na několik kliknutí, což umožní vyhledávačům co nejrychlejší přístup k potřebným informacím.

Krok 2: Proveďte průzkum klíčových slov

Poznejte, jaké vyhledávací výrazy vaše publikum používá, a najděte způsob, jak je zapracovat do obsahu.

Krok 3: Vytvořte kvalitní obsah

Pište srozumitelný obsah, který prokáže vaši autoritu v daném tématu. Nezapomínejte na to, že text nesmíte zaplnit klíčovými slovy. Držte se tématu a prokažte svou relevanci i odbornost.

Krok 4: Vytvářejte odkazy

Vytvořte řadu interních odkazů, které budou roboti Googlu používat při procházení vašich stránek. Budujte zpětné odkazy z externích zdrojů, které jsou relevantní pro váš obor, abyste zvýšili svou autoritu.

Krok 5: Optimalizujte meta popisky a značky Title

Předtím, než se webový vyhledávač dostane k obsahu vaší stránky, nejprve si přečte její název a metadata. Ujistěte se, že jsou optimalizovány pomocí klíčových slov. Potřeba kvalitního obsahu se vztahuje i na tuto oblast.

Krok 6: Přidejte značky Alt pro všechny obrázky

Pamatujte, že pavouci vaše obrázky nevidí. Musíte je Googlu popsat prostřednictvím optimalizované kopie. Využijte povolené znaky a vykreslete jasný obraz toho, co vaše obrázky ukazují.

Krok 7: Zajistěte konzistenci NAP

Jestliže jste místní firma, musíte zajistit, aby se vaše jméno, adresa a telefonní číslo objevovaly nejen na vašich stránkách a na různých platformách třetích stran, ale aby byly všude konzistentní. To znamená, že bez ohledu na to, kde uvádíte citaci NAP, by měly být informace totožné.

(Zdroj obrázku)

To platí i pro pravopis a zkratky. Pokud se nacházíte na Main Street, ale chcete zkracovat na Main St, ujistěte se, že tak činíte všude. Prohlížeč si všimne nesrovnalostí a poškodí to legitimitu vaší značky a skóre SEO.

Krok 8: Pravidelně aktualizujte své stránky

Neustálý přísun nového obsahu zajistí, že Google bude mít vždy důvod vaše stránky znovu procházet a aktualizovat skóre. Příspěvky na blogu jsou ideálním způsobem, jak na webu udržovat stálý proud čerstvého obsahu, který budou roboti vyhledávačů procházet.

Závěr

Dokonalé pochopení pavouků SEO a procházení vyhledávačů může mít pozitivní dopad na vaše úsilí o SEO. Musíte vědět, co jsou zač, jak fungují a jak můžete optimalizovat své stránky tak, aby odpovídaly tomu, co hledají.

Ignorování SEO pavouků může být nejrychlejší způsob, jak zajistit, aby se vaše stránky utápěly v neznámu. Každý dotaz je příležitost. Oslovte crawlery a budete moci pomocí svého plánu digitálního marketingu stoupat v žebříčcích vyhledávačů, dosáhnout nejvyššího místa ve svém oboru a udržet se tam po mnoho let.