V kontextu SEO se termín "spider" (také nazývaný "bot" nebo "crawler") používá k označení softwarového programu, který prochází webové stránky a shromažďuje informace o jejich obsahu. Tyto informace se pak používají k indexování stránek ve vyhledávačích, jako je Google, Bing a Seznam.
Co je Spider a jak funguje?
Spidery fungují tak, že sledují odkazy z jedné stránky na druhou.
Začínají na zadané URL adrese a poté procházejí všechny odkazy, které na dané stránce najdou.
Tento proces pokračuje, dokud spider nenavštíví všechny stránky na webu, které jsou dostupné prostřednictvím odkazů.
Informace, které spidery shromažďují, zahrnují:
- Obsah stránky: Text, obrázky, videa a další média na stránce.
- Meta data: Informace o stránce, které nejsou viditelné pro uživatele, jako je název stránky, popis a klíčová slova.
- Strukturu webu: Jak jsou stránky na webu propojeny.
Spidery používají tyto informace k vytvoření indexu webových stránek.
Index je databáze, která obsahuje informace o všech stránkách, které vyhledávač prohledal.
Používá se k tomu, aby se vyhledávače mohly rozhodnout, které stránky se zobrazí ve výsledcích vyhledávání pro dané dotazy uživatelů.
Jaké jsou typy?
Existuje několik typů spiderů, které se používají v SEO:
- Obecné spidery: Tyto spidery procházejí webové stránky bez ohledu na jejich obsah.
- Vertikální spidery: Tyto spidery se zaměřují na specifické typy webových stránek, jako jsou zpravodajské stránky, e-shopy nebo blogy.
- Spidery pro optimalizaci: Tyto spidery jsou navrženy tak, aby pomohly webmastrům identifikovat a opravit problémy se SEO na jejich webových stránkách.
Naše služby:
Zdroje článku:
SEO Spiders: What are Search Engine Crawl Spiders & How Do They Work? - HigherVisibility [online]. [cit. 30. 11. 2023]. Dostupné z: https://www.highervisibility.com/seo/learn/seo-spiders/
How Do Search Engine Spiders Work? | BrightEdge [online]. [cit. 30. 11. 2023]. Dostupné z: https://www.brightedge.com/glossary/search-engine-spiders