Da biste spriječili pojavljivanje stranice u Google rezultatima pretraživanja, umetnite atribut noindex ili zaglavlje noindex u HTTP zahtjevu u HTML stranice. Tokom indeksiranja, Googlebot će ga otkriti i zanemariti stranicu, čak i ako druge web stranice povezuju na nju.
Pažnja! Pokretač neće otkriti noindex direktivu ako stranica zaključana u datoteci robots.txt. Takva stranica može se pojaviti u rezultatima pretraživanja (na primjer, ako je povezana na drugoj stranici).
Direktiva noindex vam omogućava da kontrolišete pristup pojedinačnim stranicama sajta, pa se preporučuje da je koristite ako nemate pristup osnovnom direktorijumu na serveru.
Kako dodati noindex atribut
Postoje dva načina za dodavanje noindex direktive. Njihovi rezultati su ekvivalentni, a izbor zavisi od toga u kojoj meri možete da kontrolišete server i kako objavljujete sadržaj.
Tag
Za blokiranje većina robota za pretraživanje, dodajte sljedeću meta oznaku u odjeljak
web stranice:
Ako želiš zatvorite pristup stranici samo Google robotima, koristite kod ovako:
Drugi tražilice mogu drugačije interpretirati atribut noindex na stranici i prikazati ga u rezultatima pretraživanja.
Pomozite nam da otkrijemo meta oznake
Da bismo otkrili metaoznake, moramo indeksirati vašu stranicu. Ako se stranica nastavi pojavljivati u rezultatima pretraživanja, vjerojatno još nismo indeksirali vašu web lokaciju nakon dodavanja oznake. Googlebot može ponovo zatražiti ponovno indeksiranje stranice pomoću alata. Drugi razlog je taj što datoteka robots.txt blokira ovaj URL od Google pretraživača i meta oznaka nije pronađena. Da deblokirate svoju stranicu za Google, trebate promijeniti svoj robots.txt fajl. To se može učiniti pomoću Robots.txt Inspection Tool .
Zaglavlje HTTP odgovora
Umjesto meta oznake, možete vratiti X-Robots-Tag zaglavlje. Odgovor mora biti neindeksan ili nikakav. Primjer HTTP odgovora gdje X-Robots-Tag sprječava robote da indeksiraju stranicu:
HTTP / 1.1 200 U redu (…) X-Robots-Tag: noindex(…)
Yandex robot za pretraživanje „šeta“ kroz stranice, skenira i analizira njihov sadržaj, a zatim sprema pokazivač na tekst i slike u bazi podataka Yandex pretraživanja. Ovaj proces se naziva indeksiranje. Dio web stranice može se zatvoriti od indeksiranja postavljanjem unutar elementa
Važno je shvatiti da je ovo nestandardni element i da ga je Yandex izmislio za svoje potrebe. Preglednici ni na koji način ne podržavaju
Ako želite zatvoriti cijelu stranicu za tražilice, koristite element dodavanjem u vaš HTML kod:
Ili dodajte sljedeći redak u datoteku robots.txt:
Zabrani: /private.html
Gdje je private.html adresa stranice.
Sintaksa
Kraj oznaka
Obavezno.
Atributi
Primjer
Preglednici
Preglednici
Sledeće konvencije se koriste u tabeli pregledača.
Nofollow- Ovo je atribut koji se dodjeljuje određenom linku ili svim linkovima na stranici u robotima kako bi se spriječilo da roboti za pretraživanje kliknu na njih.
Noindex Je atribut koji blokira tekst na stranici.
Odnosno, noindex je odgovoran za sadržaj u dokumentu i zabranu njegovog indeksiranja, dok je nofollow odgovoran za vezu.
Pravila primjene i zašto nije potrebno praćenje?
Da bismo razumjeli kada ovaj atribut uopće može biti koristan, pogledajmo kako se s njim odnose najpopularniji tražilice.
- Yandex. Kada vaša web stranica sadrži odjeljke posebno za raspravu o postovima, pisanje komentara na članke ili forum, važno je pripaziti koje izlazne veze posjetitelji ostavljaju. Svaki komentar je poželjan. Zahvaljujući tome, vlasnik web stranice moći će spriječiti postavljanje raznih zlonamjernih veza od pošiljatelja neželjene pošte. Iako ih tražilica ne uzima u obzir, neželjena pošta uvelike utječe na reputaciju web resursa i na nju se može primijeniti filter. S tim u vezi, trebali biste provjeriti sve komentare, a ako postoje sumnje u kvalitetu objavljene veze, napišite im atribut rel = "nofollow". Sada, u revidiranom Yandex vodiču, ovaj tekst je uklonjen i ostalo je samo pravilo primjene. Yandex vodič o nofollow
- Google. Ako vaša stranica ima odjeljak u kojem korisnici mogu komentirati postove, postoji veliki rizik od linkova na zlonamjerne stranice u komentarima. Spameri "vole" stranice sa komentarima bez moderiranja. Atribut nofollow za spam veze spasit će vašu web lokaciju i održati njenu reputaciju čistom u očima tražilice. Ako vjerujete stranici na koju posjetitelj povezuje ili se sami pozivate, onda nema potrebe da propisujete nofollow. Google -ov vodič za nofollow
Ove su poruke preuzete sa službenih web stranica tražilica. Kao što vidite, slične stvari su napisane u Yandexu i Googleu: vrijednost nofollow treba koristiti kada želite botove obavijestiti o nepovjerenju prema web stranici na koju vodi veza.
Razmotrimo konkretniji primjer, kada je za vezu potreban atribut zabrane:
Materijal sumnjivog kvaliteta. Ako vam se ne sviđa sadržaj stranice na koju posjetitelj ostavlja link u komentaru, a ne želite žrtvovati reputaciju vašeg sajta, u tagove ovog linka upišite rel = "nofollow". Pošiljatelji neželjene pošte, primijetivši trend na vašoj web lokaciji kada se atribut blokiranja doda neprovjerenim vezama, uskoro će prestati pokušavati nanijeti štetu web stranici. Ako vidite da korisnik ostavlja link do kvalitetnog materijala, možete ručno ili automatski ukloniti nofollow.
Kako pravilno napisati nofollow?
Ovaj sada nofollow omogućuje vam upravljanje svakom vezom zasebno, ali nekada se ova vrijednost mogla koristiti samo u meta oznaci, koja je zatvorila apsolutno sve veze na stranici s tražilice. A da bi zabranili klikanje na pojedinačne veze, webmasteri su morali blokirati njihov URL.
Roboti nofollow
Ove meta oznake ostaju do danas. Ako želite zatvoriti sve veze sadržane na određenoj stranici iz indeksiranja, tada na ovoj stranici morate napisati sljedeći kôd:
Važno je ne brkati ovu oznaku sa dva koda ispod, content = "none" i content = "noindex, nofollow" blokiraju botove da pristupe cijeloj stranici, a ne samo njenim vezama. Stoga, ako želite da se stranice indeksiraju, ni u kojem slučaju ne napišite za njih ove dvije oznake:
Iznad smo ispitali opcije za sprječavanje robota za pretraživanje da slijede sve linkove na stranicama. Ali možete odrediti i zabranu odlaska na određenu vezu.
Da biste zabranili robotu da bude indeksiran i slijedi vezu, mora mu se dodati atribut rel = "nofollow", u kodu to izgleda ovako:
Ima li nofollow težinu veze curenja?
Iako Google u svojim izjavama pozicionira upotrebu atributa nofollow kao klik. A to je potvrdio i apel bivšeg šefa kompanije za borbu protiv neželjene pošte, Matta Katsa. On je to izjavio "Google može uzeti u obzir veze sa društvenih mreža, iako to nije praćeno".
No, s Yandexom pitanje nije jasno. On jasno navodi u svojoj dokumentaciji da ovaj atribut zabranjuje indeksiranje takvih veza.
A ako prijeđemo na opis atributa robota nofollow, ovdje već vidimo zabranu prijelaza, a ni riječ o indeksiranju.
No, ranije je to bilo moguće provjeriti ako primijenite sljedeću konstrukciju URL -a u pretraživanju: vaš url<< inlink:(“анкор ссылки”), и Яндекс нам отображал только те страницы, где содержится наш искомый . Сейчас же этот метод не работает, поисковая система Яндекс запретила использовать такую конструкцию в поиске. Поэтому можно с большей долью вероятностью сказать, что Яндекс может учитывать такие ссылки, потому что они появляются в Яндекс Вебмастер.
Općenito, možemo reći da korištenje ovog atributa za robote za pretraživanje nije uvijek zabrana, ako je stranica posebno mjerodavna.
Trebate li zatvoriti interne veze u nofollow -u?
U prošlosti su se SEO optimizirali manipulirajući prenesenom težinom unutar web lokacije. Stoga je Google-ova tražilica izjavila da sve označene interne veze neće dati težinu https://www.mattcutts.com/blog/pagerank-sculpting/.
Bivši šef pretrage u Google-u govori o tome u videu. Videozapis je na engleskom, pa uključite ruske titlove.
Noindex atribut: šta je to i po čemu se razlikuje od nofollow?
Mnogi webmasteri početnici muče glavu, ne shvatajući po čemu se noindex razlikuje od nofollow-a. Jednostavno je:
- nofollow - primjenjuje se na veze
- noindex - Primjenjuje se na tekst
Ako želite zabraniti indeksiranje teksta na cijeloj stranici stranice, ali u isto vrijeme uzeti u obzir linkove, potrebno je da na stranici napišete sljedeći kod:
Ako želite zatvoriti dio teksta, tada Google nema takav atribut, ali u Yandexu je to moguće. Oznaku noindex uvela je Yandexova tražilica, budući da prije nije razumjela nofollow, a nepotrebne veze morale su se nekako zatvoriti od robota.
No, 2010. tražilica je počela raditi s atributom rel = "nofollow", dok noindex nije nestao, već je ostao odgovoran za skrivanje teksta. Sada, ako želite zatvoriti tekst ili usidriti veze iz indeksiranja, napišite naredbu:
Na primjer, bilo je zgodno kada je Yandex uveo novi algoritam koji je uveo sankcije za SEO tekstove. Bilo je potrebno zatvoriti podnožje teksta u noindexu, a mogli ste izaći iz ovog filtera, a ne izgubiti poziciju u Googleu, jer Google tražilica ne uzima u obzir oznaku .
zaključci
Nofollow je odgovoran za pretraživače koji prate ove linkove, kako na cijeloj stranici tako i za određeni link. Ranije je i noindex obavljao sličnu funkciju, ali samo u odnosu na Yandex, koji je vremenom počeo da razumije nofollow, zbog čega je vrijednost noindex počela blokirati indeksiranje sadržaja na stranici.
Vlasnik stranice mora ispravno koristiti atribut nofollow i razumjeti u kojim slučajevima to učiniti:
- Kada veza vodi do web izvora s nekvalitetnim sadržajem.
- Kada objavljujete komercijalni sadržaj na stranici.
Glavni cilj korištenja nofollow-a- pomažu u označavanju prioritetnih veza za skeniranje, odvajaju prodajne članke od informativnih, a također štite stranicu od neželjene pošte, što, ako se ne kontrolira, može dovesti do pada rangiranja ili, još gore, ispadanja resursa iz indeksa.
Za sve ostale situacije, možete se sigurno prijaviti open to robotima za pretraživanje. Reputacija stranice se neće nimalo pogoršati, već će se čak poboljšati ako ostavite linkove na stranice koje su korisne za vašu ciljnu publiku. I vaši dokumenti neće izgubiti na težini, već, naprotiv, čak se mogu nabaviti o trošku.
Počnimo definiranjem različitih načina korištenja noindex i nofollow:
- Tag
- Meta tagovi i
Tag
Tag
Zabluda # 1. Glavna greška ljudi koji koriste ovu oznaku je da vjeruju da ako se neki tekst postavi između početne i završne oznake
Jedino što ova oznaka zabranjuje je postavljanje sadržaja u bazu indeksa, ali će taj sadržaj robot svejedno pročitati i analizirati.
Primjer: Na stranici vaše web stranice postoji neki tekst koji koristi izravne pojavljivanja rečenica iz drugih izvora trećih strana. Stoga ovi prijedlozi smanjuju jedinstvenost vašeg teksta, a vi morate biti 100% jedinstveni. Odlučili ste zatvoriti ove ponude oznakom
Robot će pročitati i obraditi apsolutno sav tekst na vašoj stranici i on će znati da tekst na vašoj stranici nije jedinstven.
Sama suština oznake
Recimo da pretraživač tražilica posjeti vašu stranicu i počne pretraživati vaš sadržaj. U nekom trenutku, robot pronalazi otvor oznake
Čemu onda služi oznaka
To je potrebno izravno kako bi se robotu zabranilo davanje bilo kakvih podataka u rezultatima svoje tražilice. To mogu biti, na primjer, kontakti koji se iz nekog razloga ne bi trebali prikazivati u rezultatima pretraživanja.
Zabluda # 2. Još jedna zabluda koja se često javlja među vlasnicima web stranica je mišljenje da je veza postavljena u oznaku
U pomoć webmasterima kojima je potreban robot da zanemari veze sa stranica dolazi atribut koji radi i za Yandex i za Google. Prilikom korištenja ovog atributa, robot će i dalje proučavati vezu i na nju će kliknuti, ali bez zaostajanja slijedi, težina će se prenijeti na primatelja, a s nepratnjom će se težina spaliti.
Primjer 1:
Yandex ne indeksira sidreni tekst, već uzima u obzir vezu na web lokaciju i prenosi težinu uz nju
Primjer 2:
Yandex ne indeksira sidreni tekst i ne prenosi težinu s veze na web lokaciju
Postoje dva načina za pisanje oznake
1.
2. Indeksirani tekst
Druga opcija je ispravnija. Od oznake
Meta tagovi i
Korišćenje noindex meta oznake u kodu stranice zabranjuje Yandexu (Google, opet, u ovom slučaju ne učestvuje) da indeksira sav tekstualni sadržaj stranice, dok će linkovi biti u potpunosti analizirani. Odnosno, prisutnost ove meta oznake u kodu stranice nije isto što i zatvaranje stranice iz indeksa u robots.txt.
Prisustvo meta oznake nofollow u kodu stranice sprečava pretraživače da indeksiraju veze na stranicama. Ako je prisutna ova meta oznaka, ni roboti neće slijediti veze sa stranice. Ali evo šta piše u pomoći Yandexa:
"Robot neće posjećivati dokumente ako su povezani sa stranice koja sadrži meta oznaku s vrijednošću nofollow, međutim, mogu se indeksirati ako se drugi izvori pozivaju na njih bez nofollow."
Hajde da rezimiramo
Tag
Ako želimo da se težina veze ne prenese primatelju, tada koristimo atribut nofollow. Istovremeno, ne zaboravite da robot i dalje može pratiti link (ako su informacije o njemu dobivene iz drugih izvora: mapa web-lokacije, linkovi) i analizirati stranicu na koju vodi. Metoda radi i za Yandex i za Google.
"Noindex".
Svrha oznake je mogućnost zatvaranja neželjenih linkova od indeksiranja od strane robota za pretraživanje. U datoteci robots.txt možete blokirati indeksiranje samo cijelih stranica ili blokova, ali što ako trebate "sakriti" samo jednu ili dvije veze sa stranice, a ostatak ostavite otvorenim za robote za pretraživanje. U ovom slučaju oni priskaču u pomoć. tag .
Koja je razlika između oznaka
Tag
Rel = 'nofollow' atribut oznake je uvela Google tražilica mnogo prije Yandexa. Za razliku od oznake
Kako dodati oznaku
usidrite svoju vezu
Za razliku od atributa rel = 'nofollow' tag tag može sakriti od budnih očiju Yandex robota za pretragu ne samo vezu, već i cijeli dio koda, štoviše: bez obzira na veličinu. Sve što stoji između će biti skriven od Yandexa. Ova razlika u oznakama
Ako želite isključiti prijenos težine veze za apsolutno sve tražilice, bez propisivanja zabrana u datoteci robots.txt, tada ćete morati koristiti kao oznaku
