Vydali jsme novou knihu „Content Marketing in v sociálních sítích: Jak se dostat do hlavy předplatitelů a zamilovat si svou značku.

Duplicitní stránky jsou stránky, které jsou navzájem totožné na různých adresách URL. Kopie stránek ztěžují indexování stránek ve vyhledávačích.

Co jsou duplicitní stránky na webu

Při použití se mohou objevit duplikáty různé systémy plnění obsahu. Pro uživatele je v pořádku, pokud jsou duplikáty na stejném webu. Ale vyhledávače, po nalezení duplicitních stránek mohou použít filtr / nižší pozice atd. Proto je třeba duplikáty rychle odstranit a pokusit se zabránit jejich zobrazení.

Jaké jsou typy duplikátů

Duplicitní stránky na webu jsou úplné i neúplné.

• Neúplné záběry- když jsou ve zdroji duplikovány fragmenty obsahu. Takže například umístěním částí textu do jednoho článku z druhého získáme částečnou duplikaci. Někdy se takové duplikáty nazývají neúplné.
• Plné záběry jsou stránky, které mají plné kopie. Zhoršují hodnocení webu.

Mnoho blogů například obsahuje duplicitní stránky. Duplikáty ovlivňují hodnocení a snižují hodnotu obsahu na nic. Proto se musíte zbavit duplicitních stránek.

Příčiny duplicitních stránek

1. Používání redakčního systému(CMS) je nejčastější příčinou duplicitních stránek. Například, když jeden záznam na zdroji patří do několika kategorií najednou, jejichž domény jsou zahrnuty v adrese webu samotného záznamu. Výsledkem jsou duplicitní stránky: například:
   wiki.site.ru/blog1/info/
   wiki.site.ru/blog2/info/
2. Technická sekce s. Zde nejvíce hřeší Bitrix a Joomla. Například jedna z funkcí webu (vyhledávání, filtrování, registrace atd.) generuje parametrické adresy se stejnými informacemi ve vztahu ke zdroji bez parametrů v URL. Například:
   site.ru/rarticles.php
   site.ru/rarticles.php?ajax=Y
3. Lidský faktor. Zde to za prvé znamená, že člověk může kvůli své nepozornosti duplikovat stejný článek v několika sekcích webu.
4. Technické chyby. Při nesprávném generování a nastavení odkazů v různých systémech správy informací dochází k chybám, které vedou k duplikaci stránek. Pokud je například odkaz v systému Opencart křivý, může dojít ke smyčce:
   site.ru/tools/tools/tools/…/…/…

Proč jsou duplicitní stránky nebezpečné?

1. Je mnohem obtížnější optimalizovat stránky ve vyhledávačích. V indexu vyhledávače může být mnoho duplikátů jedné stránky. Zasahují do indexování jiných stránek.
2. jsou ztraceny externí odkazy na webovou stránku. Kopie ztěžují identifikaci relevantních stránek.
3. Ve výstupu jsou duplikáty. Pokud je duplicitní zdroj dodáván s metrikami chování a dobrou návštěvností, může při aktualizaci dat ve výsledcích vyhledávače nahradit hlavní zdroj.
4. Ztracené pozice ve vydávání vyhledávačů. Pokud jsou v hlavním textu nejasné duplikáty, pak se článek nemusí dostat do SERP kvůli nízké jedinečnosti. Takže například část zpráv, blog, příspěvek atd. si jednoduše nevšimnete, protože vyhledávací algoritmus je považuje za duplikáty.
5. Zvyšuje se pravděpodobnost, že se hlavní stránka dostane pod filtr vyhledávačů. Vyhledávače Google a Yandex bojují s nejedinečnými informacemi, na stránky mohou být uvaleny sankce.

Jak najít duplicitní stránky

Chcete-li odstranit duplicitní stránky, musíte je nejprve najít. Existují tři způsoby, jak najít kopie na webu.

Jak odstranit duplicitní stránky

Musíte se zbavit duplikátů. Je nutné pochopit příčiny výskytu a zabránit šíření kopií stránek.

• Můžete použít vestavěné funkce vyhledávače. Na Googlu použijte atribut ve tvaru rel="canonical". Značka je vložena do kódu každého převzetí formuláře , který ukazuje na stránku předlohy, která má být indexována.
• Indexování stránek můžete zakázat v souboru robots.txt. Tímto způsobem však nebude možné duplicity ve vyhledávači zcela eliminovat. Koneckonců, nemůžete psát pravidla indexování pro každou jednotlivou stránku, bude to fungovat pouze pro skupiny stránek.
• Můžete použít přesměrování 301. Roboti tak budou přesměrováni z duplikátu do původního zdroje. V tomto případě jim odpověď serveru 301 sdělí, že taková stránka již neexistuje.

Duplicity ovlivňují hodnocení. Pokud nebudou včas odstraněny, pak je vysoká pravděpodobnost, že web spadne pod filtry Panda a ACS.

a pokud existuje duplicitní obsah a adresa URL je jiná, existuje kanonický a je uzavřen v robts, ale stránka je v indexu, jak by se to mělo posuzovat?

Canonical řeší problém duplikace.
Pokud se ale stránka dostala do indexu a poté byla uzavřena v robots.txt, pak ji robot nemůže znovu naskenovat a přepočítat parametry.

Souhlas s předchozí odpovědí. Problém můžete vyřešit odesláním požadavku na smazání ve vyhledávací konzoli.

Maxim Gordienko

Proč se doporučuje pro stránkování používat kanonický, místo smazání textu + noindex následovat + přidat "Stránka N" na začátek Titulku na druhé a dalších stránkách stránkování (nebo můžete přidat i prev / next)? Setkal jsem se s tím, že při umístění kanonických produktů z druhé a dalších stránek byly špatně indexovány.

Existovala praxe používání hlavičky HTTP X-Robots-Tag k zabránění indexování stránek, protože při používání robotů často vyskakují stránky jako tato: http://my.jetscreenshot.com... ?

Canonical je pouze doporučení. Můžete také použít přesměrování 301 pro relevantní stránky. U programů na hledání duplicit - doporučuji Comparser + ukazuje strukturu webu a je tam ještě pár užitečných funkcí. Serpstat je drahý.

Raději použijte canonical a prev-nekts a bude to skvělé.

Maxim Gordienko

Seoprofi například píše, že kanoniku má smysl dávat na stránkování pouze v případě, že existuje stránka „zobrazit všechny produkty“ (a doporučení Google příklad se stránkováním v klasické podobě neuvádí). A tak se zboží (obsah) na druhé stránce liší od první, je nelogické nastavovat kanonický.

Pokud potřebujete pouze zkontrolovat duplikáty, je lepší použít specifický software. Doporučuji Netpeak Spider. V současné době se aktivně vyvíjí a kontroluje spoustu parametrů na stránce https://netpeaksoftware.com... . V práci ho používáme neustále.
Serpstat je dobrý, protože je to platforma s mnoha nástroji: analytika dotazů, odkazy, audit, kontrola pozice.

Řekněme, lasíčkovi, odstranili jsme nové kategorie ze stránek internetového obchodu, vytvořili nové, v odebraných kategoriích byly předepsány nové kategorie pro zboží a další zboží - kvůli tomu v nás vznikly nové stránky zboží a v adrese URL byly vytvořeny nové kategorie. Jak lépe okrádat? Ujistěte se, že adresa URL je statická (ne dynamická) pro produkt a umístěte přesměrování 301 na staré stránky z nových výtvorů? (іinternet-magazin іsnuє 6 mіsyacіv) chi maє zmіnyuvatisya url produktu yakscho zmіnili categorіyu? (ve struktuře URL produktu є pojmenování kategorie).

1. Abyste se vyhnuli duplikaci URL produktů, umístěte je do stejné složky /produkt/ a kategorie se nastavují v nabídce schránek.
2. I když to není možné, vyberte jednu z možností.
2.1. Odkaz rel canonical na hlavní stránku produktu. Co nejdříve je to podle vašeho názoru cena nové stránky, protože nová kategorie je zahrnuta v URL. A vy sami si vyberete hlavní stranu.
2.2. Zaškrtněte přesměrování 301 na adresu URL hlavy. Pokud to není vaše chyba na webu, pošlete zprávu na starou adresu URL a poté ji odešlete na přesměrování 301.
3. Adresy URL produktů budou spíše statické nebo uživatelsky přívětivé.
4. "chi maє zmіnyuvatisya url produktu yakshcho zmіnili categorіyu? (ve struktuře adresy URL produktu є název kategorie)."
I když není možné nenastavit kategorii v URL (jako v odstavci 1.), tak když změníte kategorii v URL, musíte změnit a změnit i přesměrování 301 na novou adresu.

Za tak obsáhlé vysvětlení)

Přečtěte si, jak se vyhnout duplicitnímu obsahu. Existuje 33 položek stejného typu https://delivax.com.ua/pack...
Napsat jedinečný popis pro každého je obtížné a nezdá se, že by to bylo nutné. Ale vzhledem k tomu, že popis je duplicitní, z 33 pozic v indexu visí pouze 5. Má cenu se tím trápit a co s tím?

Jedním z hlavních důvodů, proč může web ztrácet pozice a návštěvnost, je zvyšující se počet duplikátů stránek na webu. Mohou vzniknout v důsledku zvláštností CMS (enginu), touhy získat maximální provoz z vyhledávání v důsledku šablonového zvýšení počtu stránek na webu a také v důsledku vědomého nebo nevědomého umístění odkazů. třetími stranami k vašim duplikátům z jiných zdrojů.

Problém duplikátů velmi úzce souvisí s problémem nalezení kanonické adresy stránky pomocí vyhledávacího analyzátoru. V některých případech může robot určit kanonickou adresu, například pokud bylo změněno pořadí parametrů v dynamické adrese URL:

?&cat= 10 &produkt= 25

Ve skutečnosti se jedná o stejnou stránku jako

produkt = 25 &cat= 10

Ale ve většině případů, zejména při použití , je obtížné určit kanonickou stránku, proto úplné a částečné duplikáty skončí v indexu.

Zajímavé je, že pro Yandex nejsou duplikáty tak hrozné a dokonce i na stránkách s výsledky vyhledávání na webu (které jsou částečnými duplikáty navzájem) to může přinést dobrý provoz, ale Google je k duplicitám kritičtější (kvůli boji proti MFA a šablonám).

Hlavní metody hledání duplikátů na webu

Níže jsou uvedeny hlavní metody, pomocí kterých můžete rychle najít duplicitní stránky na svém webu. Používejte je pravidelně.

1. Google Webmaster

Jít do google bar pro webmastery. Najděte sekci nabídky "Optimalizace" - "Optimalizace HTML". Na této stránce můžete vidět počet duplicitních meta popisů a TITLE.

Tímto způsobem můžete najít úplné kopie stránek, ale bohužel nelze určit částečné duplikáty, které mají jedinečné, avšak šablonové nadpisy.

2. Program Xenu

Xenu Link Sleuth- jeden z oblíbených optimalizačních programů, který pomáhá provést technický audit webu a mimo jiné najít duplicitní tituly (pokud například nemáte přístup do Google Webmaster).

Více podrobností o tomto programu je napsáno v recenzním článku. Jednoduše procházejte web, seřaďte výsledky podle názvu a vyhledejte shodu s vizuálními nadpisy. Se vším komfortem tudy má stejnou nevýhodu - neexistuje způsob, jak najít částečné duplikáty stránek.

3. Výsledky vyhledávání

Výsledky vyhledávání mohou odrážet nejen samotný web, ale také určitý postoj vyhledávače k ​​němu. Chcete-li hledat duplikáty na Googlu, můžete použít speciální dotaz.

site:mysite.ru -site:mysite.ru /&

Kde jsou komponenty:

site:mysite.ru- zobrazuje stránky webu mysite.ru, které jsou v indexu Google (obecný index).

site:mysite.ru/&- zobrazuje stránky webu mysite.ru účastnící se vyhledávání (hlavní index).

Můžete tak identifikovat stránky s malým množstvím informací a částečné duplikáty, které se neúčastní vyhledávání a mohou bránit stránkám z hlavního indexu ve vyšším hodnocení. Při vyhledávání nezapomeňte kliknout na odkaz „opakovat vyhledávání, včetně chybějících výsledků“, pokud bylo výsledků málo, abyste viděli objektivnější obrázek (viz příklad místo: drezex.com.ua -site:drezex.com.ua/&).

Nyní, když jste našli všechny duplicitní stránky, můžete je bezpečně odstranit úpravou enginu webu nebo přidáním značky do názvů stránek.

- kdo pracuje na propagaci webových stránek. Může vytvořit dvě identické vzorové stránky, které se liší adresami.

Algoritmy vyhledávačů fungují automaticky a často se stává, že duplikát je systémem vnímán jako relevantnější než původní stránka. Výsledkem je, že výstup nevrátí originál, ale jeho duplikát. Duplikát má zase jiné parametry, které později ovlivní pesimizaci webu.

Existovat různé cesty hledat a kontrolovat duplicitní stránky. Od interpreta vyžadují různé stupně znalostí CMS a také porozumění tomu, jak funguje vyhledávací index. Zkusme vám to ukázat nejjednodušší způsob zkontrolovat, zda web neobsahuje duplicitní stránky. Hned si všimneme, že tato metoda není příliš přesná. Zároveň však tato metoda umožňuje vyhledávat duplicitní stránky webu a nezabere to mnoho času.

Nyní se podívejme, jak totéž udělat pouze v systému Google. V zásadě se postup neliší, budete muset provést stejné akce jako v Yandexu.

Vyhledávač Yandex okamžitě poskytuje seznam duplikátů, ale v Google, abyste viděli duplikáty, musíte navíc kliknout na „Zobrazit skryté výsledky“, protože původní stránka se často zobrazuje na obrazovce.

Z obrázku je vidět, že v hlavním čísle je 1 stránka webu a je to také originál. Ale v indexu jsou další stránky, které jsou duplicitní. Chcete-li je zobrazit, musíte kliknout na odkaz „Zobrazit skryté výsledky“. Výsledkem je seznam, kde je originál na čísle 1, a pak jsou již umístěny duplikátory. Často bude nutné duplikáty vyčistit ručně.

Jak zkontrolovat, zda web neobsahuje duplicitní stránky

V níže uvedeném článku se dnes pokusíme zvážit mnoho problémů souvisejících s problémem duplicitních stránek, co způsobuje duplikáty, jak se toho zbavit a obecně, proč se musíte zbavit duplicit.

Pro začátek si pojďme zjistit, co se skrývá pod pojmem „duplikace obsahu“. Často se stává, že některé stránky mohou obsahovat částečně nebo úplně stejný obsah. Je jasné, že každá jednotlivá stránka má svou adresu.

Příčiny duplicit:

- vlastníci stránek sami vytvářejí duplikáty pro konkrétní účely. Řekněme, že by to mohla být stránka pro tisk, která umožní návštěvníkovi komerčního webu zkopírovat potřebné informace o konkrétním produktu nebo službě.

- jsou generovány motorem internetového zdroje, protože je zabudován v jejich těle. Určitý počet moderních CMS dokáže produkovat podobné stránky s různými URL, které jsou umístěny v různých adresářích.

- chyby webmastera, který pracuje na propagaci webu. Může vytvořit dvě identické vzorové stránky, které se liší adresami.

- změna struktury webu. Když vytvoříte novou šablonu s jiným systémem adres URL, nové stránky, které obsahují starý obsah, získají různé adresy URL.

Uvedli jsme možné důvody výskyt jasných dvojek, ale existují i ​​neostré, tedy částečné. Tyto stránky mají často podobnou část šablony zdroje, ale jejich obsah se mírně liší. Podobné duplikáty mohou být stránky webu, které mají stejný výsledek vyhledávání resp samostatný prvekčlánky. Nejčastěji jsou těmito prvky obrázky.

Zbavte se duplicitních stránek. Ne, nejedná se o virus, ale časem také roste, nezávisí to však na samotném zdroji. Duplikáty jsou často výsledkem neprofesionálního webmastera nebo výsledkem nesprávného kódu webu.

Je důležité vědět, že duplikáty mohou způsobit značné poškození zdroje. Jaké jsou důsledky přítomnosti duplikátů na webu? Za prvé se jedná o zhoršení indexování zdroje. Souhlaste s tím, že taková situace nepotěší majitele webu. Zatímco finance a čas jsou neustále vynakládány na propagaci zdroje, zdroj začne ztrácet svou popularitu během několika dní. Hloubka problému bude záviset na počtu odběrů.

Stává se, že hlavní stránka může mít několik duplikátů. S blogy je to trochu jinak. Díky replytocom může vzniknout obrovské množství duplikátů kvůli kopírování komentářů. Ukazuje se, že čím populárnější bude blog, tím více duplikátů bude obsahovat. Na druhé straně vyhledávače Funkce Google, kvůli přítomnosti takových duplikátů podceňuje pozici zdroje.

Algoritmy vyhledávačů fungují automaticky a často se stává, že duplikát je systémem vnímán jako relevantnější než původní stránka. Výsledkem je, že výstup nevrátí originál, ale jeho duplikát. Duplikát má zase jiné parametry, které později ovlivní pesimizaci webu.

co získáme? Duplicitní stránky se stávají skutečnou překážkou v indexování webu, stejně jako důvodem špatného výběru příslušné stránky vyhledávačem, snižují vliv přirozených odkazů. Kromě toho duplikáty nesprávně rozdělují vnitřní váhu, čímž snižují sílu propagovaných stránek a také mění ukazatele chování.

Jak zkontrolovat, zda web neobsahuje duplicitní stránky?

Existují různé způsoby, jak najít a zkontrolovat duplicitní stránky. Od interpreta vyžadují různé stupně znalostí CMS a také porozumění tomu, jak funguje vyhledávací index. Pokusíme se vám ukázat nejjednodušší způsob, jak na webu zkontrolovat duplicitní stránky. Hned si všimneme, že tato metoda není příliš přesná. Zároveň však tato metoda umožňuje vyhledávat duplicitní stránky webu a nezabere to mnoho času.

Chcete-li vyhledat a zkontrolovat duplikáty ve svém vlastním zdroji, stačí zadat speciální dotaz do pokročilého vyhledávání vyhledávače. Pokud používáte pokročilou verzi vyhledávání v Yandexu, můžete získat poměrně podrobné výsledky, protože zde je možné zadat parametry upřesnění dotazu.

Potřebujeme adresu zdroje a část textu, kterou chceme duplikovat. K tomu musíme vybrat část textu na naší stránce a poté zadat zkopírovaný text a adresu webu do pokročilého vyhledávání systému Yandex. Nyní musíte kliknout na tlačítko "Najít", po kterém systém začne hledat.

Výsledky se nezobrazí v normální mód. Seznam stránek bude obsahovat pouze názvy a úryvky našeho zdroje. V případě, že systém vygeneruje jediný výsledek, znamená to, že neexistují žádné duplikáty této stránky. Ale když vydáváte několik výsledků, musíte pracovat.

Nyní se podívejme, jak totéž udělat pouze v systému Google. V zásadě se postup neliší, budete muset provést stejné akce jako v Yandexu.

Pokročilé vyhledávání usnadňuje nalezení všech duplikátů pro konkrétní část textu. Samozřejmě tímto způsobem nezískáme duplikáty stránek, které neobsahují zadaný text. Je třeba říci, že pokud byl duplikát vytvořen zakřivenou šablonou, pak zobrazuje pouze například obrázek z originálu na jiné stránce. Samozřejmě, pokud duplikát neobsahuje text, pak jej nebude možné výše popsanou metodou určit. To vyžaduje jiný způsob.

Druhá metoda se také vyznačuje svou jednoduchostí. Je potřeba použít speciální operátor a požádat o indexaci vašeho webu, případně jeho jednotlivých stránek. Poté se budete muset ručně podívat na problém při hledání duplikátů.

Požadovaná pravidla syntaxe dotazu jsou:

V situaci, kdy je do vyhledávání zadána pouze adresa domovská stránka, zobrazí se nám seznam indexovaných stránek pomocí vyhledávacího robota. Pokud ale upřesníme adresu konkrétní stránku, pak systém zobrazí již indexované duplikáty této stránky.

Vyhledávač Yandex okamžitě poskytuje seznam duplikátů, ale v Google, abyste viděli duplikáty, musíte navíc kliknout na „Zobrazit skryté výsledky“, protože původní stránka se často zobrazuje na obrazovce.

Jak můžete vidět na obrázku, v hlavním čísle máme jednu stránku webu a je to také originál. Ale v indexu jsou další stránky, které jsou duplicitní. Chcete-li je zobrazit, musíte kliknout na odkaz „Zobrazit skryté výsledky“. Výsledkem je seznam, kde je originál na čísle 1, a pak jsou již umístěny duplikátory. Často bude nutné duplikáty vyčistit ručně.

Dnes budeme hovořit o duplicitním obsahu, nebo spíše o metodách hledání duplicitních stránek ve vašem zdroji. Problém duplikace moderní internet je akutní, protože pokud máte duplicitní stránky na webu, můžete být penalizováni vyhledávači.

Takže první věc, kterou potřebujeme vědět, je " co je duplikace obsahu (duplicitní stránky)“ a jaké jsou jejich typy, a pak budeme hledat způsoby, jak se s nimi vypořádat.

Duplicitní obsah je zobrazení stejného textu na různé stránky místě (na různých adresách). Duplicitní stránky na webu jsou dvou typů:

• Úplné duplikáty;
• Neúplné (částečné) duplikáty;

Plné záběry- to je, když jedna stránka plně zobrazuje obsah druhé a zároveň má jinou adresu.?&cat=10&product=25 a https://site/?product=25&cat=10

Neúplné záběry- jedná se o částečné zobrazení textu stránky na jiné. Jedná se například o zpravodajství v blozích nebo text v postranních panelech. Nejčastěji se nacházejí v internetových obchodech a na stránkách, kde jsou zveřejňována oznámení a novinky.

Jak identifikovat duplicitní stránky na webu.

Níže uvedu metody, které se používají k určení duplikátů. Není zde nic složitého, chce to jen trochu času a trpělivosti.

1. výsledky vyhledávání Yandex;
2. výsledky vyhledávání Google;
3. Stránka se otevře s lomítkem „/“ a bez;
4. Stránka se otevře s www a bez www;

1. Začněme první metodou, přejděte do svého účtu správce webu Google. Dále přejděte na kartu " Zobrazit ve vyhledávání nebo optimalizaci“ a zvolte „ HTML optimalizace". Na této stránce můžete najít a zobrazit všechny související meta popisy a názvy.

Google Webmaster určí duplicitní stránky na webu.

Tato metoda je skvělá pro detekci úplných záběrů, částečné záběry nelze touto metodou detekovat.

2. Dále zvážíme, jak můžete určit duplikáty pomocí Výsledky vyhledávání Yandex. Přejdeme do vyhledávače a zadáme část textu a zalomíme jej do „uvozovek“, abychom získali přesný výskyt fráze.

Yandex - zkontrolujte duplicitní stránky

Pokud se ve výsledcích vyhledávání objevila pouze jedna stránka originálu, je to skvělé - to znamená, že neexistují žádné duplikáty, ale pokud se objeví několik stránek, existují duplikáty, které je třeba odstranit.

3. Pomocí vyhledávače systémy Google, můžete určit duplicitní stránky na webu, stejně jako v Yandexu. Teprve potom je nutné vyhledávací řetězec zadejte požadavek site:moysite.ru -site:moysite.ru/&, kde je fráze moysite.ru nahrazena adresou vašeho webu. Pokud byla ve výsledcích vyhledávání nalezena pouze jedna z vašich stránek, pak neexistují žádné duplikáty, pokud jich je několik, je nutné přijmout opatření k boji proti duplicitě.

4. Duplikaci lze také překonat, pokud použijete . Systém umí generovat automatické odkazy, které se otevřou jak s lomítkem „/“, tak bez.?&cat=10&product=25, můžete zkontrolovat, zda se tato adresa otevírá s lomítkem na konci „/“ https://website/?&cat =10&produkt= 25/. Pokud se otevře a nepřesměruje () na výše uvedenou stránku, jedná se o duplicitní stránku. Pokud to přesměruje, vše funguje dobře a nemusíte se bát.

5. Určujeme zrcadla hlavní stránky webu. Podobně jako u výše popsané metody se snažíme přidat www nebo odebrat adresy stránek zepředu. Pokud jde o jednu a druhou adresu, pak máte duplikáty hlavní stránky a je třeba je slepit a vybrat hlavní zrcadlo webu.

Hledejte ve svém zdroji duplicitní obsah, protože to může mít špatné následky. Pokud je Yandex ještě více loajální k duplikátům, pak Google za to velmi trestá a ukládá. Duplicitní stránky jsou, zhruba řečeno, odpadky internetu a vyhledávače odpad nemají rády, protože požírá spoustu zdrojů. Doporučuji proto tyto problémy odstranit ještě dříve, než bude článek indexován vyhledávačem.