Sådan forhindres søgemaskiner i at indeksere en side
jeg har for nylig hjulpet en klient med at slette en gammel YouTube-video fra deres kanal. De havde ikke til hensigt at gøre det offentligt tilgængeligt, og indså ikke, at det var, før de Google søgte sig selv.
selvom dette ikke straks deindekserer siden fra Google, fik det mig til at tænke på grunde til, at nogen måske vil forhindre søgemaskiner i at indeksere en side, før der sker skade.
3 Grunde til at blokere Google fra indeksering af en side
selvom der er meget få presserende grunde, kan du lære at forhindre Google i at indeksere en side, her er nogle af markedsføringsårsagerne til at gøre det.
forbedre din sporing og Målattribution
for mange internetmastere og marketingfolk spores mål for formularafslutninger ved besøg på en takside. For at forhindre, at din takside ved et uheld modtager organisk trafik, vil du lære, hvordan du forhindrer Google i at indeksere siden helt.
hvis du har organisk trafiklanding på din side ud over brugere, der har udfyldt dine formularer, vil dine mål og målkonverteringsfrekvens ikke være korrekte.
reducer sider uden brugerværdi
selvom det er en alt for forenklet model, kan du næsten forestille dig, at din side har en pulje af SEO-værdi.
for en side med 10 sider får hver side ca.1/10 af SEO-værdien. Hvis ejeren har lært at gøre søgeord forskning og optimeret deres alle siderne, vil alle disse sider være effektiv til at generere organisk trafik.
omvendt billede et sted med 100 sider. Der er fire sider, der rent faktisk taler om en virksomheds tjenester, og de andre 96 sider er “blogindlæg”, der egentlig bare er ejeren, der dumper oplysninger på deres side. Disse sider adresserer ikke kendte målgruppebehov og er ikke optimeret til relevante søgeordsgrupper.
i vores forenklede model er puljen af SEO-værdi spredt tynd. Hver af de fire tjenestesider modtager 1/100 af sidens samlede SEO-værdi, hvilket gør dem meget svage, selvom de er relativt optimerede. De andre 96 sider modtager en 96 / 100ths af værdien, men de er blindgyder, der fælder og spilder din hjemmesides rankingpotentiale.
at lære at forhindre søgemaskiner i at indeksere en side (eller 96) er en fantastisk måde at holde din sides SEO-værdi spredt for tynd. Du kan skjule det meste af din hjemmeside fra søgemaskiner, så Google kun kender de nyttige og relevante sider, der fortjener at blive fundet.
undgå problemer med duplikeret indhold
offentliggørelse af en side, der er identisk eller næsten identisk med en anden side på internettet, kan medføre unødvendig beslutningstagning for Google.
hvilken side er originalen? Selv hvis en af siderne blev offentliggjort først, er den duplikatside, der fulgte den mere autoritative kilde? Hvis begge sider er på din hjemmeside, hvilken har du tænkt dig at blive inkluderet i Googles søgeresultater? Du kan ikke altid lide resultatet.
for at undgå at forårsage problemer med duplikeret indhold, kan du prøve at forhindre bots i at gennemgå bestemte sider på din side.
Sådan forhindrer du Google i at indeksere en side
den nemmeste og mest almindelige metode til at forhindre søgemaskiner i at indeksere en side er at inkludere meta-koden.
Medtag tagget
metatagget bruges mellem<head></head > HTML-tags på en hjemmeside for at forhindre, at søgemaskinebots inkluderer denne side i deres indeks. Dette gør det stadig muligt for gennemsøgere at læse gennem dine sider, men det antyder, at de ikke inkluderer en kopi af den, der skal vises i deres søgeresultater.
tagget for at forhindre søgemaskiner i at indeksere en side ser sådan ud:
<meta name="robots" content="noindex">
hvis du kun er bekymret for at forhindre Google i at indeksere en side, kan du bruge følgende kode:
<meta name="googlebot" content="noindex">
hvis du bruger Yoast SEO plugin (som jeg også stærkt anbefaler), kan du bruge Yoast SEO plugin (som jeg også stærkt anbefaler). Med et par klik med musen kan du tilføje tagget til enhver side, du ønsker.
rul ned til din Yoast SEO-boks i backend på en hvilken som helst side. Klik derefter på tandhjulsikonet, og skift rullemenuen, der siger “Tillad søgemaskiner at vise dette indlæg i søgeresultaterne?”at sige” Nej.”
dette er ikke et direktiv, så søgemaskinen kan vælge at ignorere dit metatag. For en mere robust teknik kan du bruge dine robotter.tekstfil.
Tillad Bots i dine robotter.
hvis du vil være sikker på, at bots som Googlebot og Bingbot ikke kan gennemgå dine sider overhovedet, kan du tilføje direktiver til dine robotter.tekstfil.
robotter.tekst er den fil, der findes i roden af en Apache-server, der kan forbyde visse bots fra nogensinde at gøre det til dine sider i første omgang. Det er vigtigt at bemærke, at nogle bots kan instrueres i at ignorere dine robotter.så du virkelig kun kan blokere de” gode ” bots med denne teknik.
lad os bruge en side på din side, https://www.mysite.com/example-page/, som et eksempel. For at forhindre alle bots i at få adgang til denne side, bruger du følgende kode i dine robotter.TST:
User-agent: *Disallow: /example-page/
Bemærk, at du ikke behøver at bruge din fulde URL, bare den URI, der kommer efter dit domænenavn. Hvis du kun vil blokere Googlebot fra at gennemgå siden, kan du bruge følgende kode:
User-agent: GooglebotDisallow: /example-page/
Stop Bots fra at kravle dit Site med .htaccess
jeg kender personligt ikke nogen klienter, der nogensinde har brug for at bruge dette, men du kan bruge din .htaccess fil til at blokere enhver bruger-agent fra at kravle din hjemmeside.
dette er en måde at helt stoppe Google fra at kravle din hjemmeside, der ikke kan ignoreres, selv ved “dårlige” bots. Advarslen er, at dette er mere en fejende løsning og mindre målrettet mod en bestemt side. Håndtering af målrettet nægtelse af adgang til flere sider inde i din .htaccess-fil ville være et mareridt.
koden til at blokere Googlebot kun ville se sådan ud:
RewriteEngine OnRewriteCond %{HTTP_USER_AGENT} Googlebot RewriteRule .* -
hvis du vil blokere flere bots ad gangen, kan du indstille din kode sådan:
RewriteEngine OnRewriteCond %{HTTP_USER_AGENT} ^.*(Googlebot|Bingbot|Baiduspider).*$ RewriteRule .* -
at lære at forhindre søgemaskine i at indeksere en af dine sider er undertiden nødvendigt og ikke meget vanskeligt afhængigt af hvordan du vælger at gøre det.
For mere hjælp til din virksomheds hjemmeside SEO, tjek min virksomhed, Marions, hjemmeside lancering tjekliste.
Leave a Reply