Kontroll 0.5 · Åtkomst för crawlers

Är en viktig sida märkt noindex?

Ingen sida är märkt noindex. noindex är oftast en kvarleva: en staging-flagga som följde med i releasen, en plugin-inställning, en SEO-plugins kryssruta för att avråda sökmotorer.

kontroll 0.5Åtkomst för crawlersen människa gör den

Vad kontrollen tittar på

Kontrollen läser varje prioriterad sidas HTML efter <meta name="robots" content="noindex"> och svarsheaderna efter X-Robots-Tag: noindex. Vilken som helst av dem utesluter sidan från sökindex — och från det material hämtningssystemen hämtar ur.

Varför det spelar roll

noindex är oftast en kvarleva: en staging-flagga som följde med i releasen, en plugin-inställning, en SEO-plugins kryssruta för att avråda sökmotorer. På en prioriterad sida tar den tyst bort sidan från Google och från de index AI-sökmotorer hämtar ur.

Så ser du det på din egen webbplats

Visa sidans källkod och sök efter "noindex"; kontrollera svarsheadern X-Robots-Tag. I WordPress sätts den för hela webbplatsen under Inställningar → Läsning → "Avråd sökmotorer".

Så åtgärdar du det

  • Ta bort metataggen eller headern från de sidor du vill ska hittas.
  • I WordPress: avmarkera "Avråd sökmotorer från att indexera denna webbplats" och kontrollera SEO-pluginens inställning per sida.
  • Behåll noindex bara där den hör hemma: tacksidor, interna sökresultat och dubbletter.

Det här gör agenten: agenten slår aldrig om noindex på eget initiativ — den namnger sidan och den exakta taggen eller inställningen, och du bestämmer.

Relaterade kontroller

Del av de 23 kontrollerna · grupp: Åtkomst för crawlers — robots.txt, CDN/bot-filter, inloggningsväggar, noindex, HTTP-status, sitemap, canonical.

Vanliga frågor

Är noindex samma sak som att blockera i robots.txt?

Nej. robots.txt stoppar hämtningen; noindex låter hämtningen ske och ber motorn att inte indexera resultatet. Båda tar bort sidan från det AI hämtar.

Varför tar agenten inte bort den själv?

Därför att noindex ibland är avsiktlig. En strömbrytare som kan exponera en sida du ville hålla dold är inte värd att ha; agenten föreslår, du bestämmer.

Börja med den kostnadsfria kontrollen. Säg sedan agenten vad du behöver.

Den kostnadsfria kontrollen kör de 23 kontrollerna på dina publika sidor. Inget installeras, inget ändras förrän du trycker på knappen.

Gratis kontroll utifrån på några minuter · rapporten via e-post · inget installeras ännu