U početku sam mislio napisati jednostavan i lak "vikend post" o jednoj zanimljivosti koju sam nedavno primijetio na Google Search Consoleu. Ispostavilo se da sada na pločama Yandex i Google webmastera postoji automatska provjera grešaka u XML kartama web stranica. Ranije se sjećam da su se u te svrhe koristile posebne službe, ali sada je sve postalo mnogo lakše.
U članku ćete pronaći ne samo opis grešaka koje se mogu pratiti uz njihovu pomoć, već sam odlučio i dodatno razgovarati o tome kako dodati datoteku karte web stranice na Yandex Webmaster i Google Search Console. Neću otkriti ništa osim grandioznog, ali možda je neko propustio ovaj trenutak + početnicima će dobro doći. Sadržaj:
- + korisni linkovi.
- (uključujući traženje grešaka).
1. Kreirajte XML mapu web lokacije
Ako vaš web projekt još nema mapu web stranice, svakako ga napravite - ovo je izuzetno korisna funkcija kada (posebno u novim resursima). Želim napomenuti da u ovom slučaju govorimo o posebnom XML formatu (za tražilice), a ne o HTML -u (posjetitelji). Kako funkcionira ovisi o motoru koji koristite, evo nekoliko članaka na tu temu:
- Radimo (recenzije dodataka).
- - nekoliko usluga za bilo koji resurs.
- (uključujući XML u obzir).
- Lukav hack za kreiranje Sitemap -a na Blogspot blogu.
Karta web lokacije: http: // domain_name/sitemap.xml
Općenito, sreo sam informacije da tražilice neovisno znaju kako pronaći XML kartu web stranice ako se nalazi na standardnoj adresi, ali u načelu je bolje učitati je na traci s alatima.
2. Dodajte Sitemap na Google (Search Console)
Ranije se ovaj panel zvao Webmasters Tools i izgledao je potpuno drugačije. Sada je to funkcionalniji alat. Algoritam akcija je sljedeći:
- Register u Search Consoleu (ako već imate Google račun, imat ćete i pristup sistemu);
- Povežite svoj projekt tamo i potvrdite prava.
- Da biste dovršili zadatak dodavanja XML -a karte web lokacije, idite na odjeljak "Pretraživanje" - "Datoteke karata web stranice".
Ova stranica sadrži sve informacije o vašoj karti web stranice + možete dodati novu (2) ili provjeriti postoje li greške u trenutnoj (3).
Google Search Console podržava ugniježđene karte web stranica - postoji takva stvar, na primjer, u dodatku Yoast SEO. U ovom slučaju modul generira adresu: http: //vaša_domena/sitemap_index.xml.
U teoriji, možete dodati samo jednu datoteku karte web lokacije na Googe Search Console (glavna), a ostatak web lokacija će se automatski pokupiti. Samo u ovom slučaju sitemap.xml, a kada kliknete na nju, otići ćete u pododjeljke.
Usput, ako učitate zasebno sve XML datoteke (glavne i pod-stavke), tada će se dodati ukupan broj veza:
Vjerojatno u konzoli još ne postoji alat za razlikovanje ponavljanja ili je to samo takav format za prikaz ukupnog broja zapisa ili greška.
Što se tiče grešaka u karti web stranice
Ako postoje problemi s dodanim XML -om Sitemap -a, tada ćete na ploči vidjeti odgovarajuće oznake (ikona uzvičnika i unos u kolonu "Problemi"). Osim toga, bit će i upozorenja na stranici određene datoteke karte web stranice.
U slučaju na snimci zaslona možete vidjeti unos da neko pravilo robots.txt ne dopušta indeksiranje nekih adresa bloga. Takve stvari treba ispraviti, a zatim poslati datoteku na ponovnu provjeru - dugme "Test".
U drugom projektu dobio sam lošiju situaciju - karta web stranice je dala: (Ovo je općenito besmisleno. Štoviše, potreban modul je aktiviran i bio sam potpuno siguran da sve radi. Otkrio sam problem tek nakon što sam kartu Sitemapa dodao u mapu webmaster panel. Stoga je ovaj postupak dovoljno važan i traje samo nekoliko minuta.
3. Otpremite Sitemap na Yandex
Što se tiče ovdje, nakon registracije, dodavanja web lokacije i potvrde prava na nju, morate otići u odjeljak "Indeksiranje" - "Datoteke karte web stranice".
Stranica ima automatsko otkrivanje karte iz Robots.txt + možete dodati vlastite datoteke. Utičnica takođe podržava gnežđenje. Ako je nešto pošlo po zlu, prikazat će se unos greške. Na gornjoj snimci zaslona problemi su povezani s oznakom image: image u kojoj Yandex ne razumije. U Wordpresu postoje moduli koji eliminiraju ovaj zastoj, ali u principu to ne utječe na ništa. Ja lično ostavljam sve kako jeste.
Prije nego što dodate kartu web stranice na Yandex.Webmaster, možete je jednostavno brzo provjeriti. Ovaj alat je dostupan u okviru Alati - Analiza karte web lokacije.
Ukupno
Kao što sam gore rekao, savjetujem vam da potrošite 5-10 minuta kako biste datoteku Sitemap dodali Yandexu i Googleu. Ako ga vaš projekt još nema, svakako ga kreirajte. Ovaj proces, kao i upotreba, pomoći će poboljšati indeksiranje resursa, a također će vam omogućiti da pronađete greške za koje možda ne znate. Situacije su različite, na primjer, ažurirali su CMS i zaboravili spojiti modul karte web stranice, ili je počeo sam otkazivati - kada Sitemap počne davati grešku 404, to uopće nije cool.
Post je, naravno, više za početnike, ali nadam se da mu je i dobro došao. Ako imate šta dodati, napišite ispod.
Pomoću datoteke Sitemap možete obavijestiti Yandex o trenutnoj strukturi web lokacije tako što ćete navesti posebnu direktivu u datoteci robots.txt ili je dodati u Yandex.Webmaster.
Webmaster vam omogućava da:
Učitavanje karte web lokacije
Odaberite web lokaciju s popisa.
Unesite URL gdje je datoteka dostupna u polje. Na primjer, https://example.com/sitemapa.xml.
Pritisnite dugme Dodaj.
Nakon dodavanja datoteke, ona ide u red za obradu. Robot će ga preuzeti u roku od dvije sedmice. Svaki dodani fajl, uključujući i onaj priložen datoteci indeksa Sitemap, robot obrađuje zasebno.
Nakon preuzimanja, nasuprot svake datoteke, vidjet ćete jedan od statusa:
| Status | Opis | Bilješka |
|---|---|---|
| "UREDU" | ||
| "Preusmjeravanje" | Uklonite preusmjeravanje i obavijestite robota o ažuriranju | |
| "Greška" | Datoteka nije pravilno oblikovana | obavijestite robota o ažuriranju |
| "Nije indeksirano" | ||
| Disallow | obavijestite robota o ažuriranju |
| Status | Opis | Bilješka |
|---|---|---|
| "UREDU" | Datoteka je pravilno oblikovana i učitana u bazu robota | Datum posljednjeg preuzimanja bit će prikazan pored datoteke. Indeksirane stranice pojavit će se u rezultatima pretraživanja u roku od dvije sedmice |
| "Preusmjeravanje" | Navedeni URL preusmjerava na drugu adresu | Uklonite preusmjeravanje i obavijestite robota o ažuriranju |
| "Greška" | Datoteka nije pravilno oblikovana | Kliknite vezu Error za detalje. Nakon što promijenite datoteku, obavijestite robota o ažuriranju |
| "Nije indeksirano" | Prilikom pristupa karti web stranice, server vraća HTTP kôd koji nije 200 | Provjerite je li datoteka dostupna robotu pomoću alata tako da navedete punu putanju do datoteke. Ako datoteka nije dostupna, obratite se administratoru web lokacije ili servera na kojem se nalazi. |
| Pristup datoteci je odbijen u datoteci robots.txt pomoću direktive Disallow | Dozvolite pristup karti web mjesta i obavijestite robota o ažuriranju |
Ažuriranje karte web lokacije
Ako ste promijenili datoteku karte web stranice dodanu na Yandex.Webmaster, ne morate je brisati i ponovo učitavati - robot redovito provjerava datoteku ima li ažuriranja i grešaka.
Da biste ubrzali indeksiranje datoteke, kliknite ikonu. Ako koristite datoteku indeksa Sitemap -a, možete započeti obradu za svaku datoteku navedenu u njoj. Robot će preuzeti podatke u roku od tri dana. Funkcija se može koristiti do 10 puta za jedan host.
Kad potrošite sve pokušaje, sljedeći će biti dostupan 30 dana nakon prvog. Tačan datum prikazan je u sučelju webmastera.
Uklanjanje Sitemapa
U sučelju Yandex.Webmaster možete izbrisati datoteke koje su dodane na stranicu datoteka Sitemap: Ako je za datoteku Sitemap dodana direktiva u datoteci robots.txt, izbrišite je. Nakon izmjena, podaci o karti web mjesta nestat će iz baze robota i Yandex.Webmastera u roku od nekoliko tjedana.
Pitanja i odgovori
Karta web stranice prikazuje se u usluzi kao isključena stranica sa statusom "Nevažeći format dokumenta"
Prikazivanje karte web stranice (kao i drugih XML datoteka) kao isključenih stranica služi samo u informativne svrhe i ni na koji način ne utječe na indeksiranje web stranice ili obradu karte web lokacije.
Datoteka Sitemap može se prikazati u grupi isključenih stranica jer ju je robot pokušao indeksirati kao običnu stranicu, dok XML datoteke nisu indeksirane u Yandex tražilici i nisu uključene u rezultate pretraživanja.
Došlo je do greške "Nepoznata oznaka" prilikom obrade karte web lokacije
Karta web lokacije može sadržavati samo određene XML elemente. Ako webmaster pronađe druge elemente u datoteci (na primjer, oznaku mobilne ili višejezične verzije, adrese slika), webmaster će prikazati grešku "Nepoznata oznaka". Nepodržane elemente robot zanemaruje pri obradi karte web lokacije, dok se podaci iz podržanih elemenata uzimaju u obzir. Stoga nije potrebno mijenjati kartu web mjesta.
Ako se sadržaj datoteke promijeni, bit će potrebno do dvije sedmice da se ažuriraju informacije na webmasteru.
Datoteka karte web lokacije ima status "Nije indeksirano"
Datoteka karte web stranice možda neće biti indeksirana iz nekoliko razloga:
Robot je nedavno indeksirao kartu web stranice i još je nije obradio. Sačekajte dve nedelje. Ako koristite datoteku indeksa karte web lokacije s više datoteka, obrada može potrajati duže od jedne karte web lokacije.
Stranica nije bila dostupna robotu za indeksiranje. Morate sačekati sljedeću posjetu robota web lokaciji.
Pristup karti web lokacije odbijen u datoteci
Pozdrav dragi čitaoci web stranice bloga. Odlučio sam u jednom članku sažeti sve što sam već napisao o karti web stranice (Sitemap xml), što je prvenstveno potrebno da bi se tražilicama ukazalo na one stranice koje bi prije svega trebale indeksirati. To je vrlo važan i zapravo obavezan atribut svakog web projekta, ali mnogi to ili ne znaju ili ne pridaju veliki značaj karti web stranice.
Odmah stavimo tačku na "i" i pokušajmo odvojiti dva koncepta - karte web stranica u xml formatu i u HTML formatu (postoji i geografsko tumačenje ove riječi, o čemu sam pisao u članku ""). Druga je mogućnost uobičajena lista svih materijala web izvora, koja će biti dostupna svima klikom na odgovarajuću stavku izbornika. Ova je opcija također korisna i pomaže ubrzati i poboljšati indeksiranje vašeg resursa pomoću tražilica.
Karta web stranice u xml formatu - i potrebna mi je
No, glavni alat dizajniran za usmjeravanje tražilica na one stranice resursa koje je potrebno indeksirati je datoteka koja se zove Sitemap.xml (ovo je njegovo najčešće ime, ali u teoriji se može zvati kako god želite, ne materija), koja neće biti vidljiva posjetiteljima vašeg web projekta.
Sastavljen je uzimajući u obzir posebnu sintaksu razumljivu pretraživačima, koja će navesti sve stranice koje treba indeksirati s naznakom njihovog stepena važnosti, datuma posljednjeg ažuriranja i približne učestalosti ažuriranja.
Postoje dvije glavne datoteke koje svaki web projekt treba imati - robots.txt i sitemap.xml... Ako ih vaš projekt nema ili nisu pravilno popunjeni, tada s velikim stupnjem vjerojatnosti uvelike nanosite štetu svom resursu i ne dopuštate da se otvori sto posto.
Vi me, naravno, ne možete saslušati (jer ja nisam autoritet, zbog relativno male nakupljene činjenične građe), ali mislim da se nećete bez razlike svađati sa stručnjacima koji imaju statistiku na desetine hiljada projekata pri ruci .
U ovom slučaju, imao sam u prodavnici "klavir u grmlju". Neposredno prije nego što je napisan ovaj članak, vidio sam objavu stručnjaka iz poznatog sistema automatskog napredovanja pod neobičnim imenom "Ruke" (ovo je analog MegaIndexa, o kojem sam pisao).
Jasno je da je svaki sistem poput njih zainteresiran za uspješnu promociju projekata svojih klijenata, ali oni mogu samo napumpati resurse klijenata s masom veza, a nažalost ne mogu utjecati na sadržaj i ispravnu tehničku konfiguraciju web stranica.
Stoga je provedena vrlo zanimljiva i otkrivajuća studija koja je osmišljena kako bi identificirala 10 najpopularnijih razloga koji otežavaju promociju projekata i upućuju te podatke klijentima u ...
Naravno, na prvom mjestu je bio "nije jedinstven sadržaj" (ili ste ga kopirali, ili vaš, koji ne mijenja suštinu). Ali na drugom mjestu je bila samo karta web stranice u xml formatu, odnosno njeno odsustvo ili nedosljednost sa prepoznatim formatom izrade. Pa, na trećem mjestu bila je prethodno spomenuta datoteka robots.txt (njeno odsustvo ili pogrešno kreiranje):
Kada neosnovano tvrdite da vaš projekt mora imati mapu (inače kirdyk), to ne zvuči tako uvjerljivo kao u slučaju potkrepljivanja ove izjave stvarnim činjenicama iz prilično reprezentativne studije.
U redu, pretpostavimo da sam vas uvjerio i da vidimo kako možete sami napraviti kartu web stranice (sintaksu formata), kako je napraviti za Joomlu i WordPress, a također vidjeti kako je možete stvoriti pomoću posebnih internetskih generatora (generatora).
No, samo stvaranje karte web lokacije još uvijek nije dovoljno da biste bili sigurni da su tražilice ispravno indeksirale vaš projekt. Također će biti potrebno osigurati da tražilice znaju baš za ovu kartu web stranice (u našem slučaju to su Google i Yandex). To se može učiniti na dva načina, ali o tome ćemo nešto kasnije (mora postojati barem neka intriga koja zadržava pažnju čitatelja).
Zašto vam uopće treba web mjesto s kartom i datoteka robots.txt
Pokušajmo najprije opravdati logičku potrebu korištenja i datoteke robots.txt koja zabranjuje indeksiranje određenih elemenata vašeg web projekta, i datoteke karte web stranice koja propisuje indeksiranje određenih stranica. Da bismo to učinili, vratimo se prije pet ili deset godina unatrag, kada je većina resursa na Internetu bila samo skup HTML datoteka koje su sadržavale tekstove svih članaka.
Googleov ili Yandexov robot za pretraživanje jednostavno je otišao na takav html projekt i počeo indeksirati sve što mu dođe pod ruku, jer je sadržaj projekta bio gotovo posvuda. I šta se sada dešava, u uslovima široke upotrebe CMS -a (sistema za upravljanje sadržajem)? Zapravo, čak i odmah nakon instaliranja stroja, robot za pretraživanje već će pronaći nekoliko tisuća datoteka na vama, i to uprkos činjenici da još uvijek možda nemate nikakav sadržaj (pa, još niste napisali niti jedan članak).
Općenito, sadržaj u modernom CMS -u se u pravilu ne pohranjuje u datotekama, već u bazi podataka, koju, naravno, ne može izravno indeksirati robot za pretraživanje (savjetujem vam da besplatno radite s bazama podataka).
Jasno je da će nakon pregledavanja ovdje roboti za pretraživanje Yandex i Google i dalje pronaći vaš sadržaj i indeksirati ga, ali evo kako će se to brzo dogoditi i koliko će indeksiranje biti potpuno vaš projekat je veliko pitanje.
Upravo radi pojednostavljenja i ubrzanja indeksiranja projekata od strane pretraživača u uvjetima široke upotrebe CMS -a, a imperativ je stvaranje robots.txt i sitemap.xml. Uz pomoć prve datoteke, tražite od robota tražilice da indeksiraju koje datoteke ne treba gubiti vrijeme (objekti stroja, na primjer), a možete je koristiti i za zatvaranje indeksiranja i nekih stranica kako biste uklonili učinak dupliciranog sadržaja , koji je svojstven mnogim CMS -ovima (pročitajte više o tome u članku o).
Uz pomoć datoteke sa kartom web stranice, jasno i jasno govorite robotima Yandexa i Googlea koji sadržaj vašeg projekta sadrži kako se ne bi uzaludno kretali po uglovima ekonomičnosti datoteka korištenog stroja. Ne zaboravite da roboti imaju određena ograničenja u pogledu vremena i broja pregledanih dokumenata. Lutat će vašim datotekama motora i otići, a sadržaj će dugo ostati neindeksiran. Oh kako.
Sjetite se kako je jedan šareni lik govorio u čuvenoj komediji: "Ne ideš tamo, ideš ovdje, inače ...". Upravo funkciju ovog lika obavljaju robots.txt i karta web mjesta s ekstenzijom xml za reguliranje kretanja robota za pretraživanje kroz kutke vašeg web projekta. Jasno je da se botovi mogu pokrenuti, ali najvjerojatnije će poslušno slijediti vaša ispravno napisana uputstva o zabrani i propisivanju (na karti web stranice).
Jasno? Zatim prelazimo izravno na rješenje pitanja kako stvoriti sitemap.xml na različite načine i kako obavijestiti o njegovom postojanju dva kita za pretraživanje na ruskom internetu - Google i Yandex, kako ne bi preturali po vašem projektu za džabe, stvarajući dodatno opterećenje na vašem poslužitelju, ali to je, međutim, već vrlo mala stvar, glavna stvar je indeksiranje (brzo i sveobuhvatno).
Za razliku od robots.txt, koji ćete najvjerojatnije morati napisati vlastitom rukom, datoteka karte web stranice u xml formatu obično se stvara na neki automatski način. To je razumljivo, jer s velikim brojem stranica na projektu koji se često ažurira, njegovo ručno stvaranje može dovesti do oštećenja uma webmastera.
Da, to uopće nije potrebno, jer za gotovo svaki CMS postoji ekstenzija koja će vam omogućiti da kreirate, a kad se pojave novi materijali, ponovno stvorite datoteku karte web lokacije. Pa, ili uvijek možete upotrijebiti neku mrežnu kartu web stranice za generator (generator) u obliku gotovog rješenja.
Ali ipak, čini mi se, neće biti suvišno upoznati se s jednostavnom (ali šta da kažem - najjednostavnijom) sintaksom za kreiranje karte web stranice. Osim toga, na malim i rijetko ažuriranim projektima možete ga skicirati ručno.
Kako sami stvoriti Sitemap.xml u Joomli i WordPressu
Obično je "Sitemap" direktiva napisana na samom kraju. Sljedeći put kada posjete vaš web projekt, roboti za pretraživanje provjerit će sadržaj robots.txt i preuzeti vašu kartu za proučavanje. Međutim, na ovaj način sve vrste rotkvica mogu saznati o njenom postojanju, što će vam mjesto na karti pomoći ispljunuti vaš sadržaj.
No, postoji još jedan način za izravno prosljeđivanje informacija o lokaciji karte web stranica tražilicama bez posredovanja robots.txt. To se radi putem sučelja Yandex Webmaster i Googleove alatne trake, iako ga možete koristiti. Jeste li već upoznati s ovim alatima za tražilice?
Ako nije, svakako dodajte svoj projekt na oboje, a zatim na odgovarajućim karticama navedite put do karte web stranice u Xml formatu.
Ovako izgleda obrazac za dodavanje karte web stranice za Yandex Webmaster:
Ovako izgleda sličan obrazac za registraciju putanje na Googleovoj traci s alatima:
Generatori mrežnih karata web stranica i XML karte web stranica
Ako ne želite tražiti proširenja za svoj CMS koji vam omogućuju automatsko stvaranje web stranice karte, u ovom slučaju možete koristiti mrežne generatore. Ovdje, međutim, postoji jedan nedostatak u odnosu na automatsko stvaranje karte u samom CMS -u - nakon dodavanja novih materijala morat ćete ponovo otići na mrežnu uslugu i ponovo stvoriti ovu datoteku, a zatim je prenijeti na svoj server .
Vjerojatno jedan od najpoznatijih internetskih generatora karte web stranice je Sitemap Generator. Ima dosta funkcionalnosti i omogućit će vam besplatno generiranje karte web stranice za 1500 stranica, što je prilično mnogo.
Generator karti web stranica uzeti će u obzir sadržaj vaše datoteke robots.txt tako da stranice zabranjene za indeksiranje ne ulaze u mapu. To samo po sebi nije zastrašujuće jer će zabrana u robotu imati veći prioritet od bilo koga, ali će vas spasiti od nepotrebnih informacija u kreiranoj datoteci karte web stranice. Da biste napravili kartu, samo trebate navesti URL glavne stranice i dostaviti svoju e-poštu, nakon čega ćete biti u redu za generiranje:
Kada dođe vaš red, primit ćete obavijest putem e -pošte o tome i klikom na vezu iz pisma možete preuzeti datoteku koju je za vas napravio Sitemap Generator. Ostaje samo da ga postavite na pravo mjesto na vašem serveru. Pa, morat ćete s vremena na vrijeme ponoviti ovaj postupak kako bi vaša web stranica bila ažurirana.
Postoji slična usluga internetskog generatora na engleskom jeziku koju možete pronaći na ovoj vezi - XML karte web stranica. Na njemu postoji ograničenje od 500 stranica, ali inače je sve gotovo isto kao na gore opisanom.
Sretno ti! Vidimo se uskoro na stranicama web stranice bloga
Možda ćete biti zainteresirani
Što su URL -ovi, koja je razlika između apsolutnih i relativnih veza za web lokaciju 
Šta je Chmod, koje dozvole dodijeliti datotekama i mapama (777, 755, 666) i kako to učiniti putem PHP -a 
Yandex pretraživanje na web mjestu i u internetskoj trgovini 
OpenServer je moderan lokalni server i primjer njegove upotrebe za instaliranje WordPress -a na računalo 
Kako sam povećao promet svoje web stranice na 300 ljudi dnevno?
U ovom vodiču ćemo obraditi sljedeća pitanja:
Šta je Sitemap?
Ovo je datoteka koja sadrži popis veza do svih važnih stranica web stranice. Odnosno, ovaj dokument usmjerava pretraživače na glavni sadržaj na web mjestu.
Čemu služi karta web stranice?
Karta web lokacije potrebna je ako web lokacija ima problema s indeksiranjem, a uzrokovani su:
1) veliki broj stranica;
2) nedostatak linkova (internih ili eksternih) na stranice;
3) duboko gniježđenje na lokaciji (zbunjujuća struktura).
HTML vs XML karta web stranice
Karte web stranica su sljedećih vrsta:
- HTML;
Najjednostavnije objašnjenje za razliku između ovih formata je da je XML mapa prvenstveno za pretraživače, dok je HTML za korisnike.
HTML mapa- ovo je samo opći pregled web stranice, sadrži samo informacije i stranice koje korisnici trebaju vidjeti. Ako ste na web mjestu i tražite određeni odjeljak, kada odete na HTML Sitemap -a, lako ćete ga pronaći. Iako je ova vrsta karte web lokacije usmjerena na korisnika, može pomoći i u rangiranju vaših tražilica. Ovo je jedan od znakova da vam je stalo do pristupačnosti web stranice.
Prilikom sastavljanja HTML karte web stranice važno je uzeti u obzir:
1. Strukturirani sadržaj.
Karta web lokacije treba biti jasna i prilagođena korisnicima. Poželjno je da sadrži odjeljke, kategorije, potkategorije itd.
2. Sidra za povezivanje.
Protokol XML mape stranica je namijenjena robotima za pretraživanje. XML datoteka sadrži informacije o tome kada je URL zadnji put ažuriran, koliko je važan i koliko često dolazi do promjena.
Karta web lokacije obično se sastoji od sljedećih XML oznaka:
Obavezno:
Необязательные:
Не устанавливайте для каждого URL-адреса слишком частую смену файла и максимальный приоритет. Если метки частоты и приоритета не отражают реальность, вероятнее всего, поисковые системы будут более склонны игнорировать всю карту XML.
Другие форматы Sitemap
Помимо вышеперечисленных карт сайта, поисковые системы также поддерживают следующие форматы:
Для Google:
— RSS, mRSS и Atom 1.0;
RSS / Atom фиды должны содержать последние обновления вашего сайта. Обычно они небольшие и часто обновляются (что является плюсом).
— Сайты Google.
Для сайтов, созданных на платформе Google Сайты, Sitemap создаётся автоматически, и внести какие-то изменения невозможно.
Для Google и Яндекс:
— текстовый формат (TXT).
Файл должен быть в кодировке UTF-8 и состоять только из URL-адресов.
Требования Google и Яндекса к файлам Sitemap
1. Используйте кодировку UTF-8.
2. Максимальное количество URL – 50 000.
3. Ссылки в сайтмапе должны быть на том же домене, что и файл.
4. Если файл слишком большой, разделите его на несколько и укажите их в файле индекса Sitemap.
5. Ответ сервера при обращении к файлу должен быть 200 ОК.
6. Указывайте только канонические адреса страниц (без GET-параметров и идентификаторов сессий).
1. Максимальный размер – 10 МБ.
2. Поддерживает кириллические URL.
1. Максимальный размер – 50 МБ.
2. Поддерживает только цифры и латинские буквы.
Распространённая ошибка: чтобы уменьшить требования к пропускной способности канала, используют архиватор gzip. Размер сайтмапа должен быть 50 МБ (10 МБ) до сжатия, а не после.
Совет: русские доменные имена можно преобразовать с помощью кодировки Punycode.
Как создать XML Sitemap
1. Чтобы создать карту сайта, в первую очередь нужно определить канонические адреса, которые будут добавлены в файл.
2. Определить, какой формат файла будете использовать.
3. Создать файл можно вручную или, воспользовавшись генератором Sitemap.
Google в своей справке подготовил список онлайн и десктопных, платных и бесплатных генераторов карт сайта. Ознакомиться со всем списком можно, перейдя по ссылке .
Сгенерировать Sitemap проще, чем кажется. Разберём, как сгенерировать сайтмап, на примере деcктопного приложения Majento:
1. Парсим сайт.
2. Переходим в раздел «Сайты» => «Генерировать Sitemap».
3. Сохраняем в нужном нам формате.
4. Карта сайта готова.
Из online-генераторов XML-карты сайта заслуживает внимания XML Sitemap Generator .
Расширенные возможности этого сервера позволяют установить определённые XML-теги, включить/исключить нужные документы.
Исключить ненужные страницы можно и с помощью регулярных выражений.
Google поддерживает расширенный синтаксис для изображений. Для этого вы можете создать отдельную карту сайта для изображений или добавить синтаксис в существующую. Использование расширенного синтаксиса в Sitemap предоставляет поисковой системе дополнительную информацию об изображениях на сайте. Также это может помочь Google обнаружить и проиндексировать изображения, которые он не может найти при сканировании сайта.
Как и в обычной карте сайта, есть обязательные и необязательные XML-теги.
Обязательные:
Необязательные:
Ещё один расширенный синтаксис, который поддерживает Google, – XML-карта для видео.
Плюсы добавления XML-тегов для видео:
1) даёт понять Google, какой контент на сайте;
2) даёт возможность предоставить детальное описание к файлу;
3) станет доступным для поиска в Google Видео;
4) в поисковой выдаче будет отображаться заставка видео (может повысить количество переходов из поисковой выдачи).
Карта сайта для видеофайлов состоит из следующих обязательных элементов:
Заголовок и описание видео должны быть экранированы или упакованы в блок CDATA.
Со всеми XML-тегами карты сайта для видео можно ознакомиться в справке Google .
Где разместить карту сайта
Распространённые заблуждения о Sitemap
Так как у многих этот файл вызывает трудности и является «тёмным лесом», возникают определённые мифы в отношении карт сайта. Рассмотрим некоторые из них:
– «Включение URL-адреса в файл Sitemap для XML гарантирует, что он будет проиндексирован».
Нет. Важно отметить, что XML-файлы Sitemap – это только рекомендации. Карта сайта XML не гарантирует индексацию поисковыми системами страниц, указанных в файле.
– «Если я удалю URL из XML-карты, он будет удалён из индекса».
Нет. Карта сайта XML не исключает индексацию страниц, не включённых в карту сайта XML.
– «XML-файлы Sitemap трудно создавать и поддерживать»
Нет. Небольшие сайты могут легко создавать и размещать собственные XML-файлы вручную, используя приведённые выше примеры в качестве руководства по форматированию. Для более крупных сайтов и сайтов, которые изменяются чаще, плагины или модули, доступные для большинства CMS, могут автоматизировать обновление XML-файлов.
Заключение
Файл Sitemap – полезный инструмент для передачи поисковым роботам информации о структуре сайта. Используйте это руководство, чтобы понять, как работает карта сайта, как она устроена, как сгенерировать, разместить и проверить файл.
Подписаться на рассылкуКарта сайта (Sitemap.xml) – это специальный файл в формате.xml, хранящийся в корневой директории сервера. Это файл с информацией о страницах сайта, которые нужно индексировать. Обычно sitemap создают для Яндекса и Гугла, чтобы оповестить поисковых роботов о страницах, которые нужно внести в индекс. Ещё при помощи сайтмапа осуществляется проверка того, как часто происходят обновления, и индексация каких веб-документов является наиболее важной.
Видео из Вебмастерской Яндекса:
Sitemap.xml составляется с учетом специального синтаксиса, понятного поисковым машинам, где будут перечислены все страницы, подлежащие индексации с указанием степени их важности, даты последнего обновления и примерной частоты обновления.
Есть два основных файла, которые должны иметься у любого web-проекта - robots.txt и sitemap.xml . Если у вашего проекта их нет или они заполнены не правильно, то с большой долей вероятности вы сильно вредите своему ресурсу и не позволяете ему раскрыться на все сто процентов.
Влияет ли файл sitemap.xml на продвижение сайта
Если у вас отсутствует sitemap, это не означает, что поисковики не станут индексировать ресурс. Поисковые роботы зачастую и без этого неплохо сканируют сайты и включают их в поиск. Но иногда могут возникать сбои, из-за которых порой удается отыскать не все веб-документы. Основными причинами являются:
- Разделы сайта, в которые можно попасть, только совершив длинную цепочку переходов;
- Динамические URL-адреса.
Создание sitemap.xml помогает решить эту проблему.
Sitemap.xml влияет на SEO косвенно: облегчая и ускоряя индексацию страниц.
Карта сайта sitemap в формате HTML
Карты сайта делятся на 2 основных вида или формата: карта сайта html и карта сайта файл xml. HTML карта сайта - это страница сайта , на которой перечислены ссылки. Обычно это ссылки на самые важные разделы и страницы сайта. HTML карта сайта больше рассчитана на людей , нежели на роботов и помогает быстрее ориентироваться в основных разделах сайта. Для карты сайта в виде html-страницы существуют серьезные ограничения по количеству ссылок на одной странице. Если на странице будет слишком много ссылок, далеко не все ссылки могут быть проиндексированы или вовсе страница карты сайта может быть исключена из поиска за чрезмерное количество ссылок, пусть даже внутренних ссылок.
Для того, чтобы карта сайта html правильно индексировалась и адекватно воспринималась посетителями не стоит размещать на странице более 100 ссылок. Этого более чем достаточно, чтобы разместить на странице все разделы и подразделы, которые не влезли в основное меню.
Обычно, файл sitemap в формате HTML имеет древовидную структуру, где указаны развернутые разделы и подразделы. Излишне громоздкие HTML карты сайта, зачастую оформляются графическими элементами, CSS-стилями и дополняются Java-script. Однако, карта сайта html не имеет большого значения для поисковых систем.
HTML карта сайта - это не есть полноценный sitemap. Как же быть, если на сайте сотни, тысячи, десятки тысяч страниц? Для этого необходимо разместить ссылки на все страницы в карте сайта в формате xml.
Карта сайта sitemap.txt
Еще одним способом оформления карты сайт в виде файла может быть карта сайта в формате txt:
1. http://site.ru/ 2. http://site.ru/page/ 3. http://site.ru/page1/
Все просто. В файле sitemap.txt построчно перечисляются все необходимые ссылки. Карта сайта в формате txt - это «вариант для ленивых». Здесь работает аналогичное sitemap xml ограничение в 50.000 ссылок. Однако, TXT карта сайта лишена возможностей указания даты последнего изменения и приоритета страницы.
Карта сайта XML Sitemap
XML карта сайта - это файл формата xml, вида sitemap.xml , который обычно находится в корне сайта. У карты сайта в формате xml есть множество преимуществ перед html картой сайта:
- Sitemap xml - это специальный формат карты сайта , который определяется всеми популярными поисковыми системами, например Google и Яндекс.
- В xml sitemap можно указать до 50.000 ссылок .
- В sitemap xml можно указать относительный приоритет и частоту обновления страниц.
Содержимое карты сайта – лишь рекомендация для поискового робота. Например, если установить для страницы сайта ежегодную частоту обновления, поисковые роботы все равно будут ходить чаще. А если установить частоту обновления страницы ежечасно, это не значит, что роботы будет индексировать страницу каждый час.
Как создать правильный sitemap.xml
Рассмотрим, как сделать правильную xml-карту. Здесь должны быть соблюдены следующие требования:
- Размер файла должен быть не больше 10 мб;
- Карта должна содержать не больше 50000 ссылок. В тех случаях, когда ссылок больше, можно создать несколько карт и включить их в главную xml-карту;
- Адрес сайтмапа следует прописать в robots.txt;
- Также загрузите sitemap в яндекс и гугл (как добавить файл – описано ниже);
- Поисковые системы должны иметь доступ к карте. Необходимо использовать специальные теги, которые дают поисковикам понять, что это именно карта, а не что-то другое;
- У sitemap должна быть кодировка UTF-8.
Содержимое файла карты сайта sitemap.xml выглядит:
Tamo gdje se koriste sljedeće potrebne oznake:
- nadređena oznaka, sadrži sve URL -ove; - oznaka koja sadrži informacije o određenoj url-adresi; https://obanracer.ru/bs/- ova oznaka direktno navodi url.
- ova oznaka sadrži datum posljednje izmjene stranice; - oznaka se koristi za označavanje koliko se često stranica mijenja: uvijek, po satu, dnevno, sedmično, mjesečno, godišnje, nikada; Označava prioritet određene stranice u odnosu na druge stranice na web lokaciji od 0,1 - niskog prioriteta, do 1 - visokog prioriteta.
Changefreq označava učestalost promjena stranice:
- Po satu - ažuriranje po satu;
- Uvijek - uvijek ažurirano;
- Nedeljno - ažurira se jednom nedeljno;
- Dnevno - ažuriranja se dešavaju svakodnevno;
- Mjesečno - ažuriranja se dešavaju jednom mjesečno;
- Godišnje - jednom godišnje;
- Nikada - nije ažurirano (bolje je ne koristiti takvu vrijednost).
Prioritet govori pretraživačima koliko je stranica važna u odnosu na druge. Prioritet se može postaviti od 0,1 (nizak) do 1 (visok).
Datoteka sitemap.xml mora sadržavati referencu na XML imenski prostor:
Xmlns = "http://www.sitemaps.org/schemas/sitemap/0.9"
Ako datoteka karte web stranice sadrži više od 50 tisuća veza ili veličina datoteke sitemap.xml prelazi 10 MB, preporučuje se podijeliti kartu web lokacije u nekoliko datoteka. U tom slučaju, nekoliko veza do različitih datoteka karte mora biti navedeno u karti web lokacije.
Ovdje se koriste oznake s kojima smo već upoznati.
- nadređena oznaka, koja sadrži adrese svih mapa web lokacija; - oznaka koja sadrži parametre za svaku kartu web lokacije.
Kako stvoriti Sitemap.xml
Kreiranje karte web lokacije važan proces u kojem je potrebno jasno naznačiti koje stranice web stranice treba indeksirati i kako ih najbolje indeksirati. Koriste se različite vrste karte web -mjesta, ovisno o vrsti karte web -lokacije. načine za kreiranje karte web lokacije... Nema smisla raspravljati o tome kako zasebno stvoriti html kartu web stranice. Razmotrimo kako napraviti mapu karte u xml formatu datoteke. Postoji nekoliko osnovnih načina za stvaranje karte web lokacije, ali svima im je zajedničko gdje se nalazi karta web lokacije i kako je web lokacija identificira pomoću tražilica.
Kao što je već gore napisano - datoteka karte lokacije nalazi se u korijenu web lokacije... Tražilice mogu samostalno locirati datoteku karte web lokacije. No, postoji nekoliko načina za pružanje izravne veze do datoteka (karti) karte web stranice za brže otkrivanje od strane tražilica. Najlakši način da odredite lokaciju datoteke sa kartom web lokacije je izravno navođenje veze ili nekoliko veza do datoteka karte web stranice u alatima za webmastere iz Yandexa i Googlea. Također možete provjerite kartu web lokacije, ponašanje analiza ispravnosti karte lokacije, podudaranje koje stranice sa karte web lokacije je pronašla tražilica i koliko ih je u indeksiranju.
Drugi način usmjeravanja tražilica na lokaciju datoteke karte web stranice je pomoću direktive Sitemap u datoteci robots.txt.
Karta web stranice: http://site.ru/sitemap.xml
U robots.txt možete navesti nekoliko datoteka karte web stranice, nakon čega će se one automatski dodati u alate za webmastere. Pokrili smo kako pronaći kartu web -lokacije, a sada idemo na to kako stvoriti kartu web -lokacije.
Osnovni načini za stvaranje karte web stranice
- Generiranje karte web stranice od strane sistema za upravljanje web lokacijom, ako CMS ima slične ugrađene mogućnosti.
- Preuzmite kartu web lokacije sa internetske usluge treće strane. Postoji mnogo generatora mrežnih karata web stranica s različitim mogućnostima i ograničenjima. Vjerojatno jedan od najpoznatijih internetskih generatora karte web stranice je Sitemap Generator. Ima dosta funkcionalnosti i omogućit će vam besplatno generiranje karte web stranice za 1500 stranica, što je prilično mnogo. Postoji i xml-sitemaps.com koji ima mogućnost prilagođavanja parametara karte web lokacije, ali ima ograničenje broja veza u datoteci sitemap.xml od 500 komada.
- Preuzmite generator karte web stranica... Takvi programi za generiranje se obično plaćaju, ali uz njihovu pomoć možete redovito generirati xml mapu web stranice za jednu ili više web lokacija. Evo nekoliko primjera takvih programa za generiranje: SiteMap XML Dynamic SiteMap Generator, WonderWebWare SiteMap Generator.
- Automatsko kreiranje karte web lokacije u Joomla (Joomla), WordPress (Wordpress), Bitrix (Bitrix), ModX.
- Ručno kreiranje karte web lokacije.
Sitemap WordPress
Mapu web stranice za WordPress možete stvoriti pomoću dodatka Google XML Sitemaps. Za to možete postaviti mnoge postavke koje će vam omogućiti da isključite neke materijale na svojoj web lokaciji, a možete i postaviti očekivanu brzinu osvježavanja. Osim stvaranja karte, dodatak Google XML Sitemaps, prilikom objavljivanja novih materijala na vašem blogu, obavještava mnoge pretraživače o tome, pozivajući ih da se brzo indeksiraju.
Možete sami postaviti putanju do datoteke karte web stranice u postavkama dodatka, pa joj čak možete dati i naziv različit od klasičnog sitemap.xml.
Sitemap Joomla
Mapu web lokacije za Joomlu možete stvoriti pomoću Xmap komponente.
Provjerite Mapu web lokacije radi neispravnih veza
Kako se ne bi prevario pretraživač tražilice, sitemap.xml mora biti konfiguriran bez grešaka. Stoga, nakon svakog ažuriranja datoteke, morate provjeriti kartu web lokacije radi neispravnih veza.
Idite na Yandex Webmaster - odjeljak "Alati" - "Analiza datoteka karte web stranice".
Odaberite jedan od načina preuzimanja datoteke:
- kopirajte tekst sitmepa.xml;
- podnesite URL karte web lokacije;
- otpremite xml datoteku na uslugu.
Provjera sitemap.xml u Yandex Webmasteru
Analiza Sitemap.xml iz PixelPlus -a
Ako se pronađu greške (to se često događa), usluga će vam reći koji URL -ovi daju netočan odgovor (izbrisani, nepotrebni itd.).
Sitemap.xml je bitan alat
Karta web stranice jedan je od najvažnijih alata za promociju SEO web stranica. Nije važno kako je karta web stranice stvorena. Važno je koje će veze biti navedene na karti web stranice i koliko često će se ažurirati. Ponekad se sve učitava na kartu web stranice, pa čak i one veze koje su zabranjene u robots.txt ili nekanonskim vezama. Karta web stranice ažurira se jednom mjesečno ili rjeđe. Takav stav prema karti web stranice ne samo da je može učiniti beskorisnom, nego još gore - zbuniti robota za pretraživanje, što će negativno utjecati na indeksiranje i položaj web stranice u pretraživanju.
Napravite mapu web lokacije za svoj resurs. Ali budite oprezni i dobro razmislite šta ćete postaviti na kartu web lokacije, a šta ne.
