Индексация домена

Индексация домена описывает, сколько страниц домена Googlebot проиндексировал и добавил в поисковый индекс. Здоровый домен имеет большинство важных страниц в индексе при минимуме низкокачественного или дублирующегося контента, конкурирующего за краулинговый бюджет. Краулинговый бюджет (число страниц, которые Google обходит в день) частично выделяется на уровне домена, поэтому крупный домен с множеством малозначимых страниц может приводить к редкому сканированию важных страниц. [[canonical-url|Canonical-теги]], [[robots-txt|robots.txt]] и [[sitemap-domain|XML-карты сайта]] — основные инструменты управления индексацией.

Пример

Running 'site:example.com' in Google and finding 50,000 indexed pages for a 10,000-page site suggests duplicate content is consuming crawl budget that should be allocated to canonical pages.