Direct antwoord

Crawling haalt bronnen op en ontdekt links; rendering verwerkt inhoud; indexering beoordeelt en bewaart signalen; vertoning kiest resultaten voor een concrete zoekopdracht.

Een crawlbare URL is niet automatisch geïndexeerd en een geïndexeerde URL wordt niet gegarandeerd vertoond.

Praktische aanpak

  1. Controleer HTTP-respons, robots.txt, robotsrichtlijnen en toegang tot noodzakelijke bronnen.
  2. Bekijk initiële en gerenderde HTML, links met href en de hoofdinhoud.
  3. Beoordeel canonicals, duplicaten, kwaliteit en taal vóór een conclusie over indexering.
  4. Toets aannames met Search Console, logs en URL-inspectie.

Voorbeeld

Een verdwenen productpagina met status 200 kan een soft 404 worden; een echte 404 en verwijdering uit de sitemap beschrijven de toestand beter.

Veelgemaakte fouten

  • Een bekende URL blokkeren in robots.txt en verwijdering uit de index verwachten.
  • Een geslaagde crawl als bewijs van indexering beschouwen.
  • Navigatie verbergen achter gebeurtenissen zonder a-element met href.

Beperkingen

  • Externe hulpmiddelen bootsen interne zoekmachinesystemen niet volledig na.
  • Crawl- en indexgegevens kunnen vertraagd zijn en vereisen context.

Primaire bronnen

Gerelateerde gidsen en hulpmiddelen