Štítek: Indexace webu

Standard robots.txt (protokol pro zakázání přístupu robotů) slouží autorům stránek k nastavení částí webu, které robot smí nebo nesmí navštěvovat. Používá se v případech, kdy je potřeba procházení určité stránky…

Podobně jako soubor robots.txt slouží ke komunikaci s roboty i soubor sitemap.xml. S jeho pomocí můžete určit, které stránky webu by se měly indexovat častěji (např. protože se jejich obsah…

Správná a úplná indexace stránek je jednou z prvotních podmínek pro optimalizaci. Jedná se o stav a počet stránek na konkrétním webu, které vyhledávač zahrnuje do svého indexu. Jen zaindexované…