Ordlista
Crawl Budget
Den mängd resurser en sökmotor är villig att lägga på att crawla en specifik webbplats under en given tid.
Crawl budget avgörs av en kombination av hur ofta sidan uppdateras, dess auktoritet och hur väl den tekniska strukturen fungerar. På stora webbplatser med många sidor är det viktigt att inte slösa crawl budget på lågvärdessidor, dubbletter eller trasiga länkar, eftersom det kan göra att viktiga sidor crawlas mer sällan eller inte alls. Robots.txt och sitemaps är viktiga verktyg för att styra crawl budget.
Skrivet av
Simon TernRelaterade termer
Pagerank
Googles ursprungliga algoritm för att bedöma en webbsidas auktoritet baserat på antalet och kvaliteten på länkar som pekar till den.
Robots.txt
En textfil på en webbplats som ger instruktioner till sökmotorers crawlers om vilka delar av sajten som får eller inte får crawlas.
Sitemap
En fil som listar en webbplats sidor, för att hjälpa sökmotorer att hitta och förstå strukturen på webbplatsen.
Fler frågor om crawl budget?
Jag hjälper er reda ut vad som faktiskt spelar roll för er verksamhet.
Prata med Simon →