Kanonske veze (rel="canonical"). Nova oznaka rel=canonical za uklanjanje duplikata stranica rel canonical tag

Ako vaša stranica ima identičan ili vrlo sličan sadržaj dostupan na različitim URL-ovima, tada će vam novi format omogućiti da odredite koji URL treba vratiti u tražilicu. Također možete biti sigurni da su sve karakteristike, kao što je kapital veza, itd. će biti prebačen na ispravnu verziju adrese.

Sada možete dodati ovu oznaku da naznačite verziju vaše adrese unutar oznake na stranicama sa dupliranim sadržajem:

Na ovaj način, Google će shvatiti da se svi duplikati odnose na kanonsku adresu navedenu u oznaci. Dodatna svojstva adrese kao što su PageRank i povezani signali će se također prenijeti sa dupliciranih stranica na navedenu.

Takva oznaka će biti korisna uglavnom kada se koriste različite mašine (phpBB, IPB, WordPress, itd., na primjer, stranica ipbskins.ru - razvoj dizajna web stranice na IPB-u, morate koristiti dugački robots.txt kako biste izbjegli dupliranje sadržaj), stvaranje mnogo sličnih stranica, na primjer, to mogu biti stranice:

štampana verzija članka:
http://site.ru/article01.html?print=true
tekstualna verzija članaka za mob. telefoni:
http://site.ru/lofiversion/article01.html
duplirano zbog nedostatka motora:
http://site.ru/articles/?id=1&category=new
http://site.ru/articles/?id=1&tag=keyword
i niz drugih...

Ovaj standard može prilagoditi bilo koji pretraživač prilikom indeksiranja stranice.

Za popularni motor za blogovanje WordPress, već je razvijen kanonski dodatak koji umeće tag na željene stranice. Ostali popularni motori za blogove, forume, online trgovine, itd. će također proširiti svoju funkcionalnost u bliskoj budućnosti (ostanite sa nama).

Odgovori na neka popularna pitanja na oznaci:

Da li je rel="canonical" nagoveštaj ili direktiva?
Ovo je nagovještaj koji uzimamo u obzir i, u interakciji s drugim signalima, izračunavamo najrelevantniju stranicu za prikaz u rezultatima pretraživanja.

Mogu li koristiti relativnu putanju da navedem kanonski na sljedeći način: ?
Da, relativne staze se prepoznaju na isti način kao i u običnoj oznaci . Čak i ako unesete oznaku sa vezom do dokumenta, tada će se razmatrati relativne staze prema osnovnom URL-u.

Je li u redu ako kanonski URL-ovi sadrže manje od potpuno dupliciranog sadržaja?
Dozvoljavamo male razlike kao što je redoslijed sortiranja u tabeli proizvoda. Također razumijemo da robot može analizirati kanonske adrese u različito vrijeme, tako da je sve to normalno.

Šta ako rel="canonical" vrati grešku 404?
Nastavit ćemo indeksirati vaš sadržaj i koristiti heuristiku za određivanje kanonske adrese, međutim preporučujemo da koristite postojeće URL-ove kao kanonske URL-ove.

Šta ako rel="canonical" još nije indeksiran?
Pokušavamo brzo doći do kanonskog URL-a. Čim ga indeksiramo, odmah ponovo razmatramo rel="canonical" hint.

Može li kanonski URL sadržavati preusmjeravanje?
Da, možete odrediti preusmjeravanje, u kom slučaju će pretraživač obraditi proces preusmjeravanja kao i obično i pokušati indeksirati novu adresu.

Šta ako imam konfliktne signale za rel="canonical"?
Naši algoritmi su nježni: možemo pratiti kanonske lance, međutim, toplo preporučujemo da navedete jednu kanonsku adresu na svojim stranicama kako biste osigurali optimalne rezultate kanonilizacije.

Može li ova oznaka veze sugerirati kanonsku adresu na potpuno drugoj domeni?
br. Prelazak na drugu domenu je prikladniji. Google trenutno podržava kanokalizaciju unutar poddomena ili unutar jedne domene. Dakle, vlasnici stranica mogu odrediti www.example.com umjesto example.com ili help.example.com, međutim, ne može precizirati example.com umjesto example-widgets.com.

Zvuči zanimljivo, ali mogu li vidjeti primjer?
Da, wikia.com nam je pomogao kao ispitivač povjerenja. Na primjer, primijetit ćete to izvor na http://starwars.wikia.com/wiki/Nelvana_Limited sadrži rel=canonical http://starwars.wikia.com/wiki/Nelvana.

Dvije adrese su gotovo identične, osim što Nelvana_Limited, prvi URL, sadrži kratku poruku pored naslova. Ovo je dobar primjer korištenja oznake u budućnosti. Sa rel=canonical, svojstva dvije adrese se spajaju i rezultati pretrage prikazuju ispravnu verziju.

Ako imate bilo kakvih pitanja o korištenju nove oznake, možete ih postaviti u komentarima na službenom Google webmaster blogu.

1. Osim što se oslobađamo prirodnog dupliranog sadržaja (zbog nedostatka motora), oslobađamo se i umjetnog dupliranog sadržaja kada nas konkurenti pokušavaju iznervirati dodavanjem proizvoljnih parametara URL-u na stranicama.

2. Sada nema potrebe da koristite robots.txt da biste spriječili indeksiranje stranica kao što su “verzija za štampanje” i drugi duplikati (na primjer, u WordPress-u je bilo potrebno zatvoriti /teg/ putanju) i ugoditi svakoj tražilici odvojeno (postoje opšti standardi za robots.txt, ali postoji i niz karakteristika rada svakog pretraživača sa ovim fajlom, tako da nismo mogli predvideti zabranu indeksiranja nekih stranica odjednom za sve botove).

3. Sada imamo dobar alat da ubrzate indeksiranje sajta 🙂

Kanonski URL-ovi su misterija za mnoge ljude, i kao takvi, mnogi mogu zloupotrijebiti takve URL-ove za postavljanje 301 preusmjeravanja, na primjer. Ljudi pretpostavljaju da je ova funkcija povezana sa SEO-om, ali ne znaju kada i kako da je koriste. Naročito u WordPress-u (u poređenju sa običnim HTML sajtom) može biti prilično teško ručno postaviti kanonski URL za svaku stranicu sajta bez pribegavanja dodacima zbog rada šablona tema dostupnih u sistemu za upravljanje sadržajem.

U ovom članku ćemo vam pomoći u rješavanju nekih korisničkih problema koji su povezani s kanonskim URL-ovima. Korisnicima koji nisu u WordPres-u ovaj članak može biti od pomoći jer će predložiti osnovne principe kanonskih URL-ova koji se primjenjuju na bilo koji sistem upravljanja sadržajem ili metodu razvoja.

Imajte na umu da vam ovaj članak može izgledati prilično zastrašujuće ako nemate tehničke vještine vezane za WordPress, osnovni HTML ili SEO. Prvo ćemo vas upoznati sa osnovnim pojmovima. Ako vam se odjednom nešto u članku učini nerazumljivim, uvijek možete pretražiti tražilicu za odgovore na vaša pitanja.

Šta je kanonski URL?

Kanonski URL (često opisan kao rel=canonical, canonical tag, itd.) je ono što pretraživači koriste kada upućuju na materijal na vašoj web-lokaciji kada stranica materijala ima više verzija na vašoj web-lokaciji ili čak na webu. Danas se kanonski URL-ovi koriste za rješavanje nekih škakljivih problema s duplim sadržajem, a ponekad se ova mogućnost koristi za postavljanje 301 preusmjeravanja.

Google nudi odlično objašnjenje svrhe kanonskih URL-ova. Toplo preporučujem da ga proučite. Naveli su što je moguće jasnije.

Možda mislite da vaša stranica nema duplikat sadržaja. Odlično je ako vodite računa da se vaš sadržaj ne ponavlja različite stranice. U suprotnom, to može dovesti do smanjenja vaših rezultata pretraživanja.

Ako odlučite da duplirate tekst na svom sajtu, razmislite o tome ozbiljno: da ste tražilica koja pokušava da odgovori na upit korisnika, da li biste korisniku ponudili dve identične stranice u SERP-u? Ne! To je beskorisno za ljude. Umjesto toga, ponudili biste onoliko SERP-ova koliko možete pronaći, koji bi u skladu s tim odgovarali potrebama pretraživanja ljudi.

Dakle, ako imate duplirani sadržaj na svojoj web lokaciji, možete – i trebali biste – očekivati ​​da Google neće rangirati sve vaše stranice. Međutim, ovo nije sjajno ako razmišljate samo o metrikama pretraživača i SERP prisutnosti.

Duplicirani URL-ovi za koje možda ne znate

Odlično, vratimo se i pretpostavimo da smo se pobrinuli da stranice naše web stranice budu jedinstvene. Međutim, i dalje možete završiti sa nekim "skrivenim" dupliranim URL-ovima za koje jednostavno ne znate (naravno, nisu baš skriveni). Ovo bi vas moglo iznenaditi, ali trebate znati da pretraživači vide sljedeće URL-ove kao potpuno odvojene, čak i ako prikazuju isti sadržaj:

  • http://www.examplesite.com (primjećujete www?)
  • http://examplesite.com
  • https://examplesite.com (primjećujete https?)
  • http://www.examplesite.com/ (primjetite kosu crtu na kraju?)
  • http://examplesite.com/index.php

Ovo je razlog zašto su nam potrebni kanonski URL-ovi u HEAD oznaci HTML koda svih vaših stranica. Morate reći tražilicama koju verziju svih gore navedenih URL-ova (i drugih verzija) trebaju pregledati.

Da, morate donijeti konačnu odluku o tome hoćete li koristiti www ili ne u svim svojim linkovima u vašem web marketinškom procesu. Trebali biste se pridržavati iste strategije veza na cijeloj web lokaciji, pa čak i šire. Svi koji koriste vaše URL adrese to moraju znati: zaposleni, partneri, direktoriji u kojima ste navedeni, ljudi koji povezuju na vas, svi.

Također morate odlučiti da li ćete koristiti kosu crtu na kraju URL-a i da li ćete koristiti https (ako prihvatite važna informacija kao što su podaci o kreditnoj kartici). Odaberite jednu opciju i držite je se. Da sam na tvom mjestu, izabrao bih onaj koji se najčešće koristi kako bih izbjegao glavobolju popravljanja URL-ova.

Srećom, ako koristite WordPress, većina ovih problema se može riješiti. Pogledat ćemo različite dodatke i druge stvari koje će vam pomoći da se nosite s ovim.

Međutim, postoje i druga mjesta gdje su kanonski URL-ovi vrlo korisni.

Duplikat sadržaja generiran taksonomijama

Recimo da pišete članak i da ga uključite u više kategorija blogova s ​​različitim oznakama u WordPress-u (sve se to zovu taksonomije). Ljudi to uvijek rade. Ili recimo da se bavite e-trgovinom i vaši se proizvodi pojavljuju u više kategorija. Imamo problem: sadržaj može biti predstavljen više puta na različitim URL-ovima, što korisnicima olakšava navigaciju po stranici. Na primjer:

  • http://examplesite.com/store/candy/chocolate-truffles
  • http://examplesite.com/store/foods/chocolate-truffles

Želite da vaši korisnici mogu pronaći čokoladne tartufe u dvije kategorije: "bomboni" i "hrana". Uredu je. Ali koji od ova dva URL-a treba da indeksiraju pretraživači? Zapamtite da oni neće rangirati oba URL-a. Dakle, ovo morate sami odabrati. Ovdje na scenu stupaju kanonski URL-ovi. Takvi URL-ovi će reći pretraživačima: „Hej, ovaj sadržaj je potpuno isti kao onaj na drugoj stranici; molimo vas da ga indeksirate."

Zapamtite da nijedan pretraživač nije dužan poštivati ​​ovu kanonilizaciju i mogu je zanemariti ako smatraju da je netačna.

Korištenje unakrsnih kanonskih URL-ova prilikom dupliciranja sadržaja s drugih web lokacija

Postoji najvažniji razlog zašto vam je potreban kanonski URL. O tome ćemo u nastavku (ima i drugih, ali su složeniji, a princip je isti). Ponekad na svojoj web lokaciji postavljate sadržaj koji se pojavljuje i na drugim stranicama. Najjednostavniji primjer takve situacije je sindikacija (na primjer, saopštenja za javnost).

Recimo da vaša kompanija objavi saopštenje za javnost i postavi ga na vašu web stranicu. Ovo je sasvim normalno. Međutim, saopštenja za javnost funkcioniraju na sljedeći način: svaki izdavač sadržaja ih može koristiti besplatno. Posebno su dizajnirani za kopiranje i distribuciju. Postoje čak i čitave mreže sindikata, kao što je PRWeb. Ovo je prilično stari oblik marketinga.

Međutim, to stvara probleme sa SEO-om. Za robota tražilice, sadržaj saopštenja za javnost na vašem sajtu je potpuno isti kao i sadržaj saopštenja za javnost na drugim sajtovima sa vestima. Kako razumjeti gdje je original? Koji URL prikazati u SERP-u (rezultati pretrage)? Zapamtite - morate ga odabrati.

Obično ga pretraživači sami biraju ako im ništa ne ponudite. I takva ponuda je napravljena pomoću kanonskog URL-a. U slučaju saopštenja za javnost, međutim, malo je vjerovatno da će svaki mali časopis vijesti imati kanonski URL koji upućuje na vašu stranicu. Zapamtite da mnogi ljudi jednostavno ne znaju za to. Sumnjam da će brzo ukazati na originalni izvor sadržaja i odgovarajuće HTML kodiranje. Uostalom, oni objavljuju nekoliko različitih članaka dnevno.

Stoga biste trebali voditi računa o tome na svojoj web stranici. Da sam na vašem mjestu, koristio bih kanonski URL na stranici na kojoj se nalazi vaše saopštenje za javnost i vezu do kopije istog na glavnoj mreži za distribuciju na kojoj ste objavili članak za distribuciju. Na primjer, možete povezati kopiju članka na PRweb.com (ako koristite tu uslugu).

Ako želite vidjeti živi primjer situacije koja ne uključuje saopštenja za javnost, ali još uvijek utječe na kanonske URL-ove, pogledajmo sljedeći članak koji sam napisao za KISSmetrics prije godinu dana:

Ubrzo nakon toga, Entrepreneur.com je preuzeo ovaj članak jer su imali ugovor sa KISSmetrics (zapamtite, imali su dozvolu!)

Sada imamo isti sadržaj dostupan na dva URL-a. Tehnički, ovo je duplikat sadržaja, što je loše! Međutim, nemojte se plašiti. Ako pogledate izvorni kod za članak na Entreprenuer.com, naći ćete sljedeće:

Ovo govori pretraživačima gdje je originalni sadržaj dostavljen, što je dobra ideja. Također uklanja sumnje u krađu sadržaja u očima pretraživača (koji možda ne znaju za vaša zakonska prava na objavljivanje djela).

Međutim, ne biste trebali kreirati cijelu stranicu koja se sastoji od članaka drugih ljudi. U ovom slučaju, malo je vjerovatno da će vam kanonski URL pomoći u rangiranju. Stoga, nemojte zloupotrebljavati ovu taktiku.

Kada ne možete koristiti kanonske URL-ove za eksterni duplirani sadržaj

Želim da pričam o tome jer se često susrećem sa takvim situacijama. Ako želite da prikažete opis kompanije ili ličnu biografiju na svojoj web stranici, ne preporučujem korištenje istih riječi i fraza koje koristite na svojoj web stranici. društveni profili ili negdje drugdje na mreži.

Ako koristite isti opis koji imate na LinkedIn-u ili na svojoj Google Plus poslovnoj stranici, tada u suštini duplirate sadržaj. Nemojte koristiti kanonski URL na stranici O stranici i povežite svoj profil s njim socijalna mreža. Vaša stranica o stranici trebala bi se rangirati sama po sebi. U tom slučaju, koristite jedinstveni opis za vanjsku upotrebu. Ovo radim za sve svoje klijente.

Kako koristiti kanonske URL-ove u WordPress-u

Postoji nekoliko načina da to uradite, ali pokazaću vam najbolji koji i sam koristim: samo koristite WordPress SEO dodatak Joost De Valk.

Jednom kada instalirate ovaj dodatak na svoju web lokaciju, omogućit će vam da vodite računa o brojnim SEO metrikama, uključujući kanonske URL-ove. Međutim, dodatak nudi i druge postavke na koje morate obratiti pažnju.

Na snimku ekrana ispod, to možete vidjeti na ekranu za uređivanje za jednu objavu ili stranicu (dodatak radi i za prilagođene vrste objava) WordPress kontrolna tabla SEO nudi mnoštvo postavki i polja. Da biste postavili kanonske URL-ove koje možete koristiti za stvari kao što su saopštenja za javnost ili vanjski duplirani sadržaj, idite na karticu Napredno:

Kliknite na padajući meni da odaberete tip URL-a za kanonsku adresu u oznaci head svih vaših stranica:

Kada ne koristiti kanonski URL

Prvo pročitajte sljedeće na blogu Google Webmaster Central o uobičajenim greškama s rel=canonical URL-ovima. Pobrinite se da im vi - ili vaš programer - ne dozvolite. Drugo, nemojte koristiti kanonske URL-ove u sljedećim situacijama:

Kada želite izvršiti 301 preusmjeravanje

Ako želite preusmjeriti jednu stranicu na drugu tako da korisnici koji unesu stari URL ili kliknu na mrtvi link budu preusmjereni na novi URL, trebate koristiti 301 preusmjeravanje. Nemojte koristiti kanonske URL-ove za ovo. Međutim, u SEO-u se često primjenjuju na ovaj način.

Preusmjeravanje znači da postoji samo jedno mjesto na kojem se prikazuje sadržaj i vi tjerate korisnike da idu na tu stranicu. Ovo je prikladno, na primjer, ako ste premjestili svoju stranicu na novu domenu ili postavili novu strukturu URL-a zbog renoviranja stranice. Također možete koristiti 301 preusmjeravanje da pošaljete ljude na www ili ne-www verziju vaše stranice (ovo osigurava da niko ne ode na vašu web lokaciju na pogrešnoj adresi).

Zahvaljujući kanonskim URL-ovima, možete imati isti sadržaj na različitim stranicama na webu i imati jedan "originalni" izvor sadržaja. Drugim riječima, različite stranice koje sadrže isti sadržaj mogu postojati i biti pregledane od strane korisnika.

Međutim, još 2011. godine Rand Fishkin je napravio zanimljiv eksperiment u kojem je koristio kanonski URL u zaglavlju svih stranica na starom domenu kako bi poboljšao rangiranje drugog novog domena. I uspjelo je. O ovoj priči je ispričao u svom zapisu. Unos također objašnjava zašto su kanonski URL-ovi toliko važni za distribuciju sadržaja na više domena u svijetu SEO-a. Mislim da danas neće uspjeti, ali možete probati kao eksperiment.

Kada želite da pretraživači ignorišu vašu stranicu

Zapamtite da rel=canonical nije rješenje za probleme sa dupliranim sadržajem. Optimizacija za pretraživače je mnogo složenija, a ponekad je bolje rješenje koristiti robots datoteku da zaustavite indeksiranje stranica. Zbog toga WordPress dodatak SEO uključuje relevantne opcije.

Preporučujem svojim klijentima da zatvore neke stranice od indeksiranja koje nisu korisne za posjetitelje. Na primjer, zašto vam je potrebna stranica s odredbama i uvjetima, stranica za prijavu? Oni ne bi trebali biti tamo. Bolje je napraviti mjesta za vredniji sadržaj. Ovo uključuje prodajne stranice, opise proizvoda i informativne postove na blogu.

Također preporučujem korištenje pravila bez indeksa za stranice sa vrlo malo sadržaja (jer vaša web lokacija izgleda previše tanka) i za arhive koje imaju duplirani sadržaj. U WordPress-u, ovo se odnosi na arhive autora, arhive datuma i, u mom slučaju, arhive oznaka (jer sadrže isti sadržaj kao arhive kategorija). Također možete isključiti indeksiranje prilagođenih tipova postova i njihovih arhiva, pod uslovom da oni sadrže samo sadržaj sa drugih stranica na vašoj web-lokaciji.

Napomena: ako blokirate indeksiranje nečega, morat ćete ukloniti i ovaj sadržaj sa mape stranice, inače će doći do grešaka u Google Webmaster Tools-u.

Popravljanje URL-a da odgovara njegovom kanonskom pokazivaču

Sjećate li se da smo gore rekli o odabiru jedne verzije URL-a koja će se od sada koristiti u svim linkovima? Odlično, nakon što to učinite, morat ćete "počistiti" ili popraviti URL-ove na svojoj web lokaciji i drugdje kako biste ukazali na verziju po vašem izboru. Recimo da ste odlučili koristiti verziju svoje web lokacije koja nije www. Sada morate biti sigurni da sve vanjske i interne veze koriste verziju koju ste odabrali. Ako ne, pokušajte promijeniti URL-ove. Da, ovo može izgledati kao prilično komplikovana akcija, ali vrijedi.

Da biste brzo zamijenili sve URL-ove na vašoj web lokaciji, možete koristiti alat kao što je Search Replace DB. Međutim, koristite ga samo ako razumijete šta radite.

Postoje i dodaci koji vam omogućavaju pretraživanje i zamjenu putem WordPress konzole. Nakon zamjene uklonite sve što je povezano s vašom bazom podataka kako biste izbjegli nepotrebne sigurnosne rizike.

Da biste se pozabavili mrtvim linkovima u objavama i stranicama, koristite dodatak kao što je Redirection koji će obaviti posao umjesto vas.

Kada sve ovo uradite, provjerite jeste li prijavljeni na svoj Google račun Webmaster Tools i postavite željeni URL za svoju web lokaciju. Također, pošaljite i www i ne-www verzije svoje web lokacije u Google Webmaster Tools da postavite željene postavke.

Zaključak: Koristite kanonske URL-ove za SEO prednosti

Nadamo se da smo prevazišli haos koji je bio oko kanonskih veza i njihovog uticaja na SEO. Ako i dalje ne razumijete sve aspekte, preporučujem vam da slijedite veze navedene u ovom članku. Međutim, najbolje postignuće je to što sada znate kako koristiti kanonske URL-ove, znajući da oni imaju potencijal da proizvedu odlične SEO rezultate.

Duplikat sadržaja je problem s kojim se ne mogu nositi svi vlasnici poslovnih web stranica. Ponekad jednostavno nemaju vremena da se pozabave problemom. Srećom, pretraživači razumiju da se ponekad istom sadržaju može pristupiti s različitih URL-ova, i to sasvim legalno. Pretraživači su nam dali alat koji možemo koristiti - pa hajde da ga iskoristimo u našu korist!

Canonical tag (rel=”canonical”) je prilično važan alat. optimizacija za pretraživače. Često je čak i bolje od 301 preusmjeravanja kada se radi o dupliciranom sadržaju.

Pogledajmo pobliže ovu oznaku.

Šta nije u redu sa dupliranim sadržajem

Duplikat sadržaja su dva dokumenta koja su identična po sadržaju. Kada Google vidi duplikat, pokušava ga isključiti iz indeksa, jer u teoriji, korisnik ne želi da vidi isti dokument u rezultatima pretrage nekoliko puta. Osim toga, sama tražilica ne želi stalno obrađivati ​​hiljade, pa čak i milione duplikata stranica, trošeći svoj proizvodni kapacitet na to.

Problem za webmastera je što ako se iste informacije nalaze na različitim stranicama, onda će se samo jedna od ovih stranica pojaviti u rezultatima pretraživanja. Ali url koji Google odabere nije uvijek najoptimalniji za korisnika i nije uvijek izvorni izvor.

Sve dok tražilica ne utvrdi izvorni izvor, rezultati pretrage neće zadovoljiti ciljeve autora originalnog sadržaja. U ovom slučaju, kanonska oznaka ima ograničenu upotrebu, jer oni koji ukradu vaš sadržaj najvjerovatnije ga neće označiti.

S druge strane, ako na vašoj web stranici dođe do dupliciranja, tada će oznaka dobro doći. Čak i ako vaša stranica ima veze do dupliranih sadržaja, samo će originalna izvorna stranica biti od vrijednosti u SERP-ovima. Stoga, čak i ako postoje veze do nekoliko duplikata, samo jedna od ovih stranica će se smatrati značajnom za Google. I neće se povrijediti.

Naravno, ovo nije najbolje rješenje u smislu SEO-a. Ali to neće dovesti do bilo kakvih sankcija od strane Googlea.

Šta je rel=”canonical” tag

Oznaka ima sljedeću sintaksu: Na ovaj način će Google i Bing shvatiti da se svi duplikati odnose na kanonsku adresu navedenu u oznaci. Google ima jasnu ideju o upotrebi ove oznake:

Da, rel=”canonical” treba koristiti samo za odabir željene stranice prilikom umnožavanja (manje razlike u sadržaju su prihvatljive).

Drugim riječima, koristite ga samo za rješavanje duplikata sadržaja. Ako ga koristite u druge svrhe, mogli biste biti uhvaćeni u neželjenoj pošti tražilice.

Problemi sa dupliranim sadržajem

Na odgovarajući način implementirajte oznake na svoju web lokaciju. Ovo će vas spasiti od duplih problema sa sadržajem, od kojih su neki povezani sa sistemima za upravljanje sadržajem (CMS):

  1. Kodovi za praćenje. Neki sistemi zahtijevaju od vas da dodate varijable na kraj url-a za povratne veze do vaše stranice. Format može biti: www.example.com?tracking-variable ili ovaj: www.example.com/example.htm?tracking-code. Problem je u tome što pretraživači odvajaju adrese čak i ako se razlikuju samo po jednom znaku. Iako Google i Bing imaju na raspolaganju tehnologije koje pomažu u određivanju takvih adresa, još uvijek ima mnogo grešaka u njihovoj obradi. Bit će zanimljivo primijetiti da neki link do vaše stranice da biste dobili međusobnu povratnu vezu koristeći ovu metodu. Kanonska oznaka će vas zaštititi od ovoga.
  2. Prefiksi za url. Kao što smo već objasnili, bilo koje dvije adrese koje se razlikuju za najmanje jedan znak se tretiraju kao zasebne stranice. I postoji nekoliko slučajeva u kojima adresni prefiksi mogu dovesti do dupliciranog sadržaja. To uključuje, na primjer, dodatni jezik stranice (ruska i engleska verzija stranice) ili kreiranje dodatnih stranica od strane motora (izgovara se u WordPress-u).
  3. Paginacija. Ovo je kada se stranica automatski podijeli na nekoliko stranica sa istim sadržajem. Na primjer, ako imate online prodavnicu i proizvodi se mogu sortirati po boji proizvoda ili po cijeni (u ovom slučaju, za rezultat sortiranja se generira posebna stranica s istim opisima proizvoda).
  4. www. Uglavnom, to nije problem, jer Google obično ispravno određuje adrese sa i bez www. Ali ipak se dešava da pretraživač indeksira, takoreći, dvije verzije stranice (example.com i www.example.com). Kao rezultat toga, polovina vašeg sadržaja je indeksirana sa www, a druga polovina je indeksirana bez www. Obično je ovaj slučaj napisan u robot.txt, ali tu može pomoći i kanonska oznaka.
  5. Ako je nemoguće implementirati 301 preusmjeravanje. Čudno je da u nekim slučajevima webmaster nema priliku implementirati 301 preusmjeravanje, na primjer, zbog ograničen pristup na server. Kanonska oznaka je alternativa u ovom slučaju, s jedinom razlikom što će originalna stranica nastaviti postojati.

Ali ipak, u skladu sa Google politikom, kanonska oznaka je preporuka, a ne obavezno pravilo. Ova opcija će pomoći vlasnicima web lokacija da samostalno odrede koju stranicu Google treba smatrati kanonskom. Na ovaj način će Google lakše odrediti koju stranicu da indeksira prilikom dupliciranja sadržaja.

Dobar dan čitaoci. Za većinu ljudi, kanonski URL-ovi su izuzetno kriptični i često se mogu zloupotrebiti za stvari poput 301 preusmjeravanja. Korisnici znaju da su takvi linkovi povezani sa SEO-om, ali nisu sasvim sigurni kako se mogu koristiti. Govoreći o WordPress-u (za razliku od HTML stranice), nije tako lako ručno napisati kanonske veze za svaku stranicu na vašoj web-lokaciji bez korištenja dodatka, jer je to u suprotnosti s načinom na koji CMS šablon radi.

Ovaj će članak pomoći da razjasnimo neka pitanja koja korisnici WordPressa mogu imati o korištenju kanonskih URL-ova. Ne Korisnici WordPress-aće također smatrati da je ovaj članak koristan jer mogu naučiti osnovne principe, a zatim primijeniti ova pravila na vlastiti sistem upravljanja sadržajem ili obogatiti svoje iskustvo programera. Međutim, ako nemate tehničko znanje o WordPress-u ili osnovno znanje o HTML-u i optimizaciji za pretraživače (SEO), ovaj članak može izgledati teško pratiti. Pokrili smo sve pojmove tako da ih prvo možete upoznati. Ali, u svakom slučaju, iz ove publikacije možete dobiti potrebnu osnovu iz koje možete početi guglati kako biste pronašli više informacija kako biste dobili potpuniju sliku.

Šta je kanonski URL?

Kanonski URL (također poznat kao rel=canonical, kanonska oznaka i druga imena) je ono na što se pretraživači pozivaju kada vide duple verzije stranice na vašoj web lokaciji ili na internetu. Ova tehnika se sada koristi za rješavanje teških problema s duplim sadržajem, jer je često bolje rješenje od korištenja 301 preusmjeravanja.

Možda mislite da na vašem sajtu nema dupliranih sadržaja. I to je sjajno ako se pobrinete da se vaš sadržaj ne ponavlja na više stranica. U suprotnom, to može uzrokovati niže rangiranje vaše stranice u rezultatima pretraživanja.

Ako vaša stranica ima duplikat teksta, pokušajte ozbiljno razmisliti o ovom problemu: da ste tražilica koja pokušava odgovoriti na upit korisnika, da li biste tom korisniku dali dvije identične stranice u SERP-u? Naravno da ne! Potpuno je beskorisno. Dali biste im toliko različitih rezultata (u SERP-ovima) da mogu pronaći ono što im treba.

Stoga, ako se sadržaj na vašoj stranici ponavlja iznova i iznova, očekuje se da Google jednostavno neće rangirati takve stranice. A to nije dobro ako želite zauzeti barem neke pozicije u rezultatima pretrage.

Linkovi na duplirani sadržaj za koji ni ne znate da postoji

U redu, sada se vratimo i pretpostavimo da ste sve uradili kako treba i da ste sigurni da su sve vaše stranice apsolutno jedinstvene. Ali možda na vašem sajtu postoje "skriveni" dupli URL-ovi o kojima ne znate ništa (u stvari, nisu skriveni, ja sam ih samo tako nazvao). Ovo bi vas moglo iznenaditi, ali jeste li znali da pretraživači tretiraju sljedeće URL-ove kao potpuno nezavisne, iako su vama isti i prikazuju isti sadržaj?

http://www.examplesite.com (da li ste primijetili www?)

http://examplesite.com

https://examplesite.com (primjećujete https?)

http://www.examplesite.com/ (primjetite kosu crtu na kraju?)

http://examplesite.com/index.php

Zato vam je potreban kanonski URL u oznaci HTML kod za sve vaše stranice. Morate reći tražilicama koju verziju URL-a iznad ili druge trebaju pogledati.

To znači da morate jednom za svagda odlučiti želite li ili ne prestati koristiti www u svim vezama u vašem web projektu. Ovo bi trebala biti vaša strategija povezivanja unutar i izvan stranice. I svi koji koriste vaše URL-ove treba da znaju ovo: slobodnjaci koji rade za vas, vaši partneri, suvlasnici, a takođe i ovu adresu treba navesti u svim direktorijumima u kojima se nalazi vaša stranica. Također, morate odlučiti da li želite kosu crtu na kraju ili https (ako vaša stranica ima određene podatke unesene, kao što su kreditne kartice). Odaberite jednu opciju i držite je se u svakom trenutku. Da je na meni da biram, više bih volio najčešće korištenu opciju za smanjenje glavobolje kada je u pitanju organiziranje URL-ova.

Srećom, ako radite sa WordPress-om, većinu ovih problema je prilično lako popraviti. Reći ćemo vam o potrebnim dodacima i koracima koje treba slijediti kasnije u ovom članku.

Ali opet, postoji mnogo više upotreba za kanonske veze.

Duplicirani sadržaj kreiran taksonomijom

Recimo da napišete članak i uključite ga u različite kategorije blogova i oznake u WordPress-u (ovo se sve zove taksonomija). Ljudi to rade stalno. Ili, na primjer, imate online trgovinu u kojoj su proizvodi navedeni u različitim kategorijama. Zatim, po dizajnu, radi pogodnosti korisnika koji se kreću po stranici, isti sadržaj se pojavljuje na različitim URL-ovima, ali to dovodi do problema. Na primjer:

http://examplesite.com/store/candy/chocolate-truffles

http://examplesite.com/store/foods/chocolate-truffles

Želite da posjetitelji pronađu te "čokoladne tartufe" u obje kategorije: "slatkiši" i "hrana". Dobra aspiracija. Ali koji URL bi tražilice tražiti? Zapamtite da oni neće rangirati obje veze. Dakle, morate izabrati. Ovo je mjesto gdje kanonske veze dobro dolaze. Oni će pretraživačima reći "hej, ova stranica ima isti sadržaj kao i ona, molimo vas da rangirajte ovu stranicu, a ne onu."

Zapamtite da je ovo zahtjev - nijedna tražilica nije obavezna da se povinuje vašoj kanokalizaciji i mogu je zanemariti ako smatraju da je netačna.

Korištenje kanonskog URL-a za više domena za duplirani sadržaj

Ovo je posljednji razlog zašto vam je potreban kanonski URL element, koji će biti obrađen u ovom članku (ima i drugih, ali su složeni i princip korištenja se ne mijenja): kada na svojoj web stranici objavite sadržaj koji se također pojavljuje na druge stranice. Najočigledniji primjeri takvog dupliciranja su saopštenja za javnost. Ovako vaša kompanija objavljuje saopštenje za javnost i postavlja ga na vašu web stranicu. Savršeno je legalno. Ali, tradicionalno, saopštenje za javnost je nešto što svako može sam da objavi. Kreirani su za dijeljenje i kopiranje. Ovako rade distribucijske zajednice poput PRWeb-a. To je staromodan marketinški trik.

Ali ovo stvara sukob interesa SEO-a. Za robota za pretragu, sadržaj saopštenja za javnost na vašoj web lokaciji je isti kao i na stranicama koje su ga posudile. Dakle, gdje je originalna kopija? Koji link rangirati u rezultatima pretrage? Zapamtite da trebate odabrati samo jednu.

Obično pretraživači biraju umjesto vas, osim ako im vi ne ponudite svoj izbor. A to možete učiniti korištenjem kanonskog URL-a. U slučaju saopštenja za javnost, međutim, malo je vjerovatno da će svaka novinska stranica objaviti vaš članak s kanonskim URL-om vašeg izvora. Zapamtite da mnogima ovaj element nije baš jasan. Također sumnjam da bi itko odvojio vrijeme da pronađe izvor s originalnim člankom i ispravno kodira svoj HTML. Oni objavljuju više članaka dnevno, tako da samo vi možete osigurati da dobijete prave linkove na svojoj web stranici. Da sam na vašem mestu, stavio bih kanonski URL na stranicu koja sadrži saopštenje za štampu i uputio bih na kopiju na velikoj stranici zajednice na kojoj ste prvobitno objavili članak da biste ga posudili. Na primjer, otpremite kopiju članka na PRweb.com (ako koristite ovu uslugu). Samo mojih pet centi.

Evo primjera iz stvarnog života, izvan situacije s saopštenjem za javnost, gdje je kanonski URL dobro došao: pogledajte članak koji sam napisao o KISSmetrics prije otprilike godinu dana:

Ubrzo nakon toga, Entrepreneur.com je ugostio ovaj članak jer su imali ugovor sa KISSmetrics.

Evo URL-a tog članka:

http://www.entrepreneur.com/article/231237

Sada imamo isti sadržaj, koji vodi do dvije različite veze. Tehnički, to je dupli sadržaj, a duplirani sadržaj je "loš", sjećate se? Ali ne bojte se! Ako pogledate izvorni kod Entreprenuer.com vidjet ćete ovo

Ovo govori pretraživačima gdje se nalazi originalni sadržaj, što je ispravan izlaz.

Time se otklanja sumnja u krađu sadržaja u očima pretraživača (koji inače ne mogu saznati ko tačno posjeduje zakonska prava na objavljivanje sadržaja).

Vjerovatno ne biste željeli imati web lokaciju koja objavljuje samo sadržaj drugih ljudi. Ovdje je malo vjerovatno da će vam kanonski URL element pomoći da poboljšate rangiranje stranice. Zato nemojte preterano koristiti ovu taktiku.

Kada ne možete koristiti kanonski URL za duplirani sadržaj sa druge stranice

Želio bih da istaknem jednu stvar, jer sam ovu situaciju vidio mnogo puta. Ako ćete napisati opis kompanije ili ličnu biografiju na svojoj web stranici, ne bih preporučio da koristite isti skup riječi na svojim profilima na društvenim mrežama ili na bilo kojoj drugoj stranici. Ako pišete istu stvar iznova i iznova na svojoj LinkedIn stranici kompanije, Google Plus poslovnoj stranici, itd., jednostavno duplirate svoj sadržaj. Nećete moći koristiti kanonski URL na stranici o kompaniji ili osobi i povezati se na profil društvenih medija: ne želite da se ta stranica rangira sama. U ovom slučaju, samo svaki put napišite novi jedinstveni opis.

Kako koristiti kanonske URL-ove u WordPress-u

To se može uraditi Različiti putevi ali ja ću vam pričati o tome najbolja opcija, što znam: koristite dodatak Joost De Valk. Jednom kada instalirate ovu ekstenziju na svoju web lokaciju, ona će se pobrinuti za vaš SEO, uključujući upravljanje kanonskim URL-ovima za ono što sam nazvao "skrivenim" URL-ovima (vidi gore). Ali ipak vrijedi obratiti pažnju na neke postavke. Na snimku ekrana ispod možete vidjeti ekran za podešavanje za jednu objavu ili stranicu (također primjenjiv za prilagođene vrste postova ako ih koristite), a WordPress SEO okvir sadrži mnoga polja i postavke. Da biste postavili kanonske URL-ove, koji su korisni za stvari kao što su saopštenja za javnost i sadržaj dupliciran na drugim stranicama, kliknite karticu "Napredno":

Ovaj dodatak će vam uvelike pojednostaviti kanonski URL element. Sve što trebate učiniti je unijeti puni URL izvornog izvora vašeg sadržaja koji je objavljen na ovoj stranici. Drugim riječima, URL koji kopira sadržaj je veza koja bi trebala koristiti kanonski URL u HTML-u zaglavlja. Kopirani sadržaj će sada signalizirati pretraživačima da je to samo kopija. Ima smisla, zar ne?

U redu, ali to je samo princip. Na osnovu gore navedenog primjera, možda ćete ponekad htjeti naznačiti da samo kopirate sadržaj, iako to uopće nije slučaj, jer vam je jednostavno teško kontrolirati distribuciju sadržaja. Možete objaviti saopštenje za javnost na web stranici svoje kompanije i, ako želite, možete koristiti atribut za izvorni izvor sadržaja u mreži za sindikaciju koju koristite. U tom smislu, vi ćete djelovati kao jedan od sindikata. (Usput, ovo je samo moje mišljenje. Ovaj savjet možda neće odobriti drugi SEO stručnjaci. Zato ga koristite na vlastitu odgovornost. Google se "kune" da je vrlo dobar u identifikaciji originalnog izvora sadržaja, a kanonski pokazivači su samo dodatna pomoć, pretraživači ih mogu zanemariti).

U drugim slučajevima, kanonski URL-ovi koje unesete bit će interne veze na vašoj web-lokaciji sa dupliranim sadržajem. Recimo, na primjer, postavljate opis svog proizvoda na statičnu veleprodajnu stranicu. Ali vi koristite isti opis u odjeljku vaše web stranice gdje ljudi kupuju u maloprodaji.

Koristeći kanonsko URL polje u WordPress SEO postavkama, možete reći pretraživačima za koju vezu želite da se rangiraju.

komentar: Morate odabrati www ili ne-www verziju veze za svaku stranicu koristeći ove postavke. WordPress SEO dodatak to radi automatski. Ove postavke će vam možda trebati samo ako je URL vrlo različit ili je sadržaj na drugoj domeni.

Postavljanje https globalnog kanonskog URL-a koristeći WordPress SEO

Evo još jedne stvari koju možete učiniti sa kanonskim vezama koristeći WordPress SEO dodatak. Ako koristite SSL certifikate (za online prodaju), možete postaviti da vaša kanonska oznaka koristi https verziju vaših veza u slučaju da stranice mogu biti i http i https. Da biste to učinili, idite na SEO > Permalinks i pomaknite se do "Kanonske postavke" na vašoj WordPress kontrolnoj tabli.

Kliknite na padajući meni gdje možete odabrati tip URL-a koji želite da učinite kanonskim URL elementom u oznaci sve vaše stranice:

Kako bi pravilno promovirali stranice stranice u tražilice, morate reći robotima koji su URL-ovi poželjniji za ulazak u indeks. Ovo se postavlja pomoću posebnih oznaka.

Šta je rel kanonski?

Pogledajmo bliže oznaku rel="canonical". Njegov glavni cilj je suzbijanje dupliranja stranica i neinformativnih stranica (na primjer, stranica sa paginacijom), kao i poboljšanje kvaliteta indeksiranja propisivanjem prioritetne adrese.

Imao sam web stranicu s ograničenim budžetom za indeksiranje. To jest, u stvari je bilo 10 hiljada stranica, ali ih je moglo biti samo 2 hiljade u indeksu (jer je stranica bila mlada i nije joj se vjerovalo). Kao rezultat toga, one stranice koje su mi bile potrebne u indeksu često nisu stizale tamo. Canonical je pomogao - stavljanje kanonskog sa stranica paginacije na glavne URL-ove omogućilo je da se pretraživačima jasno dozvoli da shvate koje stranice treba da budu u indeksu.

Šta je kanonska veza?

Kanonska oznaka će biti izuzetno korisna ako vaša stranica ima duple stranice koje su dostupne na različitim URL-ovima. Uz to, morate propisati prioritetni kanonski URL za percepciju od strane pretraživača.

Ono što je bitno – prenosiće se i težina linka i druge karakteristike stranice (PageRank, itd.).

Ovaj atribut je specificiran unutar oznake na duple URL-ove sa željenim URL-om. Formatiran je ovako:

Čemu služi kanonski?

Ako postoje slične stranice, sve ih istovremeno indeksiraju pretraživači. Kao rezultat toga, nijedan od njih nije u potpunosti promoviran zbog činjenice da postoje interni linkovi na obje stranice. Pretraživač ne zna kome da da prioritet.

Isto važi i za eksterne linkove - ne promoviše se jedan URL, već nekoliko, a težina se takođe raspoređuje između njih. I stranica je na nižim pozicijama nego što bi mogla biti.

Zahvaljujući kanonskom, indeks pretraživača će imati preferirani kanonski URL.

Primjeri korištenja

Na primjer, imate štampanu verziju stranice na vašoj web lokaciji. Ili poseban url za mobilna verzija. I stavite kanonik od njih na glavnu stranicu, kao rezultat, ova glavna stranica dobija veću težinu i plus pri rangiranju, a gomila smeća se uklanja iz indeksa.

Kako se kanonski koristi za paginaciju

Morate staviti rel canonical sa stranica paginacije (site.ru/category/page/2) na prvu od njih (site.ru/category).

Mišljenja o postavljanju paginacije su različita - neki stručnjaci kažu da je potrebno zatvoriti sve stranice paginacije iz tražilica, drugi da ih je bolje ostaviti na raspolaganju robotima tražilica.

Yandex preporučuje postavljanje kanonske veze na prvu stranicu sa svih stranica sa paginacijom. Kao rezultat toga, Yandex robot će primijetiti da je to prva stranica koju treba indeksirati. Što se tiče indeksacije robe, navodi se da će Yandex i dalje pratiti druge linkove.

Google stručnjaci teže sljedećim opcijama:

  1. ostavite sve po starom - pretraživač različito prepoznaje i percipira različite vrste stranica;
  2. kreirajte zaseban URL "Prikaži sve" i postavite ga kao kanonski - posebno se preporučuje za članke na više stranica;
  3. dodajte rel="prev" i rel="next" atribute u oznaku veze da popravite odnos između URL-ova; Pretraživač će vratiti prvu.

A evo i Devakijevog videa, gdje on detaljno objašnjava paginaciju:

rel="next" i rel="prev" atributi

Postoji i drugo mišljenje - kao što su stranice sa paginacijom ne moraju biti zatvorene, naprotiv, trebale bi dobiti dodatni promet. I ovdje su bitne dvije stvari:

  • Svi URL-ovi moraju imati jedinstveni parametar oznake naslova, jedinstveni tekst i meta oznake;
  • Ako ste više orijentirani na Google, onda se preporučuje obavezna upotreba atributa rel="next" i rel="prev", koji moraju biti konfigurirani tako da svaka prethodna stranica vodi na sljedeću. URL sljedećeg se postavlja na korijensku adresu, URL prethodne i sljedeće na sljedećim, a samo prethodni na posljednjoj.

Možete propisati paginaciju sa ovim tagovima i postaviti kanonsku vezu na prvu ili na početna stranica- zavisno od karakteristika resursa.

Tema sa SEO paginatorom

Recimo da je jedan od blogova (Sawynih ili tako nešto, ne sjećam se više) pisao o slučaju kada su stranice sa paginacijom davale dodatni promet.

Ako se sličan proizvod pojavljuje na različitim URL-ovima, navigacija se može postaviti na sljedeće načine:

  1. Automatski pišite jedinstvene vrijednosti parametara, prikupljajući zaglavlja iz zasebnih dijelova, na primjer:

    (kupovina|narudžba|kupovina) suknje u (saratov|rostov|astrahan) (po niskoj cijeni|isplativo|jeftino) na popustu (u prodavnici|u online prodavnici)

    Generisaće se jedinstvene vrednosti meta oznake.

  2. Najefikasnije i najzahtjevnije je samostalno propisivanje ovih parametara, ručno. Svi naslovi će biti jedinstveni i veoma različiti jedan od drugog, uključujući i značenje. Ovo će vam omogućiti da promovirate svaki URL na niskofrekventnom i niskokonkurentnom ključni upiti u najboljim rezultatima pretraživača. Zahvaljujući upotrebi ove metode, semantičko jezgro će se proširiti. Osim toga, također je neprikladno pisati mnogo članaka za internet prodavnicu.

Važno je ovaj posao obaviti jednom pojedinačno za svaki URL. Parametri će biti fiksirani od strane pretraživača.

Postavljanje Canonical-a za WordPress

Mnogi WordPress dodaci odlično rade s ovom oznakom.

Većina njih je jednostavna za korištenje - aktiviramo dodatak, a kanonske veze se dodaju automatski. U drugim SEO dodacima dovoljno je označiti polje pored ovog parametra u postavkama. Ako članak pripada različitim kategorijama u isto vrijeme, onda se kanonska veza fiksira nezavisno.

Kada koristite Yoast SEO dodatak i postavite objavu u različite kategorije, pretraživač će vidjeti samo jednu stranicu.

Šta je još korisno znati o Canonicalu?

Važno je naglasiti sljedeće tačke:

  1. Kanonička oznaka nije direktiva, već nagovještaj koji treba uzeti u obzir i analizirati, naglašavajući najprikladniji URL za rezultate pretraživanja.
  2. Što se tiče dizajna kanonskih veza, ne postoji zabranjujući trenutak u obliku relativnog puta. Čak i ako je oznaka uvedena sa vezom do dokumenta, relativne staze će se tretirati kao što je navedeno u osnovnom URL-u.
  3. Kanonske stranice možda ne sadrže potpuno isti sadržaj i to je logično. Moguće su manje razlike.
  4. Čak i ako postoji greška 404, sadržaj će biti indeksiran. Međutim, preporučuje se da navedete radne URL-ove kao kanonske.
  5. Ako kanonski URL još nije indeksiran, još uvijek se čeka - obično ne dugo. Kada se prepozna, nagoveštaj će biti revidiran.
  6. Možete koristiti preusmjeravanje - pretraživač će prihvatiti preusmjeravanje i uzeti u obzir drugu adresu.
  7. Preporučuje se postavljanje identične kanonske oznake rel za najbolji rezultat kanonizacije.
  8. Kanonski URL se može napisati samo sa trenutnog domena. Da biste naveli URL s druge domene, trebali biste koristiti 301 preusmjeravanje.
  9. Kako se formatiraju kanonski URL-ovi može se proučiti na primjeru web-mjesta wikia.com otvaranjem izvornog koda stranice http://starwars.wikia.com/wiki/Nelvana_Limited, koja sadrži kanonski URL http://starwars.wikia .com/wiki/Nelvana
    Obje veze su skoro iste, ali prva ima kanonski atribut - i Google će prikazati verziju navedenu u ovom parametru.
  10. Pitanja o upotrebi kanonika mogu se postaviti na službenom blogu za webmastere Google tražilice.

U ovom slučaju, kanonik se stavlja na crnu ovcu

Prednosti povezane s mogućnošću ispravnog postavljanja indeksiranja pomoću kanonske oznake:

  • oslobađanje od sličnog sadržaja povezanog s nedostacima motora, kao i umjetno stvorenih svrsishodnih radnji konkurenata;
  • nema potrebe da koristite robots.txt da biste spriječili indeksiranje pojedinačnih stranica i zadovoljili sve tražilice.