Hitro indeksiranje strani. Hiter način za preverjanje indeksiranja strani v Yandexu in Googlu. Pisanje pravilnega pisma Yandexu

Iz tega gradiva se boste naučili:

  • Kaj je indeksiranje
  • Kako dodati spletno mesto v bazo podatkov
  • Kako pospešiti indeksiranje

Kaj je indeksiranje?

O tem smo vam že povedali. Skratka, to so odgovori na poizvedbe uporabnikov, ki jih ti vnesejo v iskalnik. Če kliknete »kupi slona«, se vam prikažejo spletna mesta, ki ponujajo slone na debelo in drobno. Yandex ali Google za takšne zahteve ne bosta prikazala plastičnih oken ali poklicala deklet. In zdaj pozor, vprašanje: ali se vsako spletno mesto uvrsti med rezultate iskanja? Ne, ne vsi. Iskalniki morajo vsaj vedeti za obstoj te strani in vsebino, ki je na njej objavljena. Konec koncev, kako lahko pokažeš nekaj, za kar nihče ne ve? Za to obstajajo baze podatkov spletnih mest. Na kratko, dodajanje spletnega mesta z njegovo vsebino v to bazo podatkov se imenuje indeksiranje. Kako deluje indeksiranje? Robot Yandex ali Google deluje po svojih algoritmih: išče informacije o vašem spletnem mestu (te informacije vključujejo ključne članke, besedila, fotografije itd. - z eno besedo vso vsebino). Je kot rentgen, pregleduje vsako stran spletnega mesta, jo analizira, skenira in doda vaše spletno mesto v bazo podatkov. Zdaj bo prikazan v rezultatih iskanja in prikazan kot odgovor na poizvedbe uporabnikov. In na kakšnih položajih - vodilnih ali zunanjih - je odvisno od vsebine, s katero je napolnjena. Seveda je indeksiranje spletnega mesta preprosto potrebno. Ko vaše spletno mesto začnejo videti iskalniki, obiskovalci pridejo nanj in raste

Kako dodati spletno stran v bazo podatkov?

Recimo, da ste ustvarili spletno mesto Mostbestsite.rf. Seveda smo jo napolnili z najboljšo vsebino in se veselimo njenega vrha. Če želite spletno mesto in vsebino indeksirati in vključiti v bazo podatkov, lahko uporabite dva načina.
  1. Počakajte na samoindeksiranje. Prej ali slej bodo roboti našli vaše spletno mesto - za to morate samo pustiti aktivne povezave do njega iz drugih virov. Velja, da več kot je povezav, hitrejše bo indeksiranje.
  2. Dodajte spletno mesto ročno tako, da izpolnite poseben obrazec v iskalniku. Tam morate navesti povezavo do spletnega mesta in kratke informacije o njem. V Yandexu se to na primer izvaja v storitviSpletni skrbnik Yandex Na strani Prijavite novo spletno mesto .
Tam, v Webmasterju, lahko nato spremljate statistiko zahtev, ki uporabnike pripeljejo na vaše spletno mesto. Tudi v Googlu je vse preprosto - spletno mesto lahko registrirate s povezavoGoogle Center za spletne skrbnike . Kako hitro je indeksiranje? Težko je reči natančne številke - odvisno je od vaše sreče. Toda eno stvar vemo zagotovo: Yandex indeksira počasneje kot Google. Bilo je primerov, ko je indeksacija trajala več tednov.

Kako pospešiti indeksiranje?

Algoritmi iskalnikov so nepredvidljiva stvar in kot že rečeno, natančnega recepta ni. Priporočamo lahko preizkušene metode (v bistvu enake tistim, ki vplivajo na promocijo spletne strani v rezultatih iskanja)
  1. Edinstvena vsebina, ki jo iskalniki tako obožujejo. Ena stvar: če ste objavili članek na spletni strani ali blogu in še ni bil indeksiran, ga lahko teoretično vsak ukrade in objavi sam. Če je članek prej indeksiran na drugem spletnem mestu, ste v težavah. Vaš članek bo obravnavan kot needinstven, vaš konkurent pa bo ostal v temi.
  2. Jasna struktura spletnega mesta. Upoštevajte pravilo treh klikov: na vsako stran z glavne strani lahko pridete v največ treh klikih. Manj je dobro, več je bolje! Na ta način boste olajšali delo iskalnikom, ki bodo indeksirali ne samo glavno stran, ampak tudi druge strani.
  3. Povezovanje z notranjimi stranmi je koristno tako za obiskovalce kot za robota.
  4. Oddajanje objav v imenike RSS. Vse vaše objave bodo podvojene v imenikih RSS, v katere so dodani viri RSS. To so viri za naročanje na posodobitve spletnega dnevnika ali spletnega mesta, tako da prejemate najnovejše v svoji e-pošti. Z njihovo pomočjo bo iskalnik hitro našel vaše nove članke in jih indeksiral.

Tukaj je primer uspešnega indeksiranja:

Pred tednom dni se je na enem od spletnih mest pojavil članek o pištoli VPO-213 . Na internetu praktično ni bilo nobenih informacij o tej pištoli - še ni bilo v prodaji. V videu na YouTubu je bila le kratka predstavitev. Temu primerno je bilo besedilo popolnoma edinstveno in skoraj edino na internetu na to temo. Okoli polnoči je bilo besedilo objavljeno na strani (niti na glavni strani!) in v kratkem času indeksirano. Naslednji dan ob pol devetih zjutraj je bil članek na tretjem mestu v rezultatih iskanja Yandex. Pri 9.50 je postala prva in to mesto še vedno drži.

Na splošno, če je vaš vir dober, dobro izdelan, potem ne bi smelo biti težav z njegovim indeksiranjem. Če spletno mesto, čeprav ne 100%, izpolnjuje zahteve iskalnikov - "za ljudi", potem vas bodo z veseljem pogledali in indeksirali vse novo, kar bo dodano.

Kakor koli že, prvi korak pri promociji spletnega mesta je, da ga dodate v indeks PS. Dokler vir ni indeksiran, na splošno ni ničesar za promocijo, ker iskalniki za to sploh ne bodo vedeli. Zato bom v tem članku preučil, kaj je indeksiranje spletnih mest v Yandexu in kako predložiti vir za indeksiranje. Povedal vam bom tudi, kako preveriti, ali je spletno mesto ali ločena stran vključena v indeks Yandex in kaj storiti, da pospešite indeksiranje Yandexa.

Indeksiranje spletnega mesta v Yandexu iščejo roboti iskalnik yandex vaše spletne strani in vnos vseh odprtih strani v bazo podatkov. Ruski iskalnik pajek v bazo podatkov doda podatke o spletnem mestu: njegove strani, slike, videe, dokumente, po katerih je mogoče iskati. Prav tako se iskalni bot ukvarja z indeksiranjem povezav in drugih elementov, ki niso skriti s posebnimi oznakami in datotekami.

Glavni načini indeksiranja vira:

    Prisilno - spletno mesto morate poslati v indeksiranje Yandexu prek posebnega obrazca.

    naravno - iskalni pajek uspe samostojno najti vašo spletno stran s prehodom iz zunanjih virov, ki povezujejo na spletno stran.

Čas, potreben za indeksiranje spletnega mesta v Yandexu, je za vsakogar drugačen in lahko traja od nekaj ur do nekaj tednov.

To je odvisno od številnih dejavnikov: katere vrednosti so v Sitemap.xml, kako pogosto je vir zapolnjen, kako pogosto se omembe spletnega mesta pojavljajo na drugih virih. Postopek indeksiranja je cikličen, zato bo robot k vam prihajal v (skoraj) enakih časovnih intervalih. Kako pogosto pa je odvisno od zgoraj omenjenih dejavnikov in posameznega robota.

Pajek lahko indeksira celotno spletno stran (če je majhna) ali ločen del (to velja za spletne trgovine ali medije). Na pogosto posodobljenih virih, kot so medijski in informacijski portali, živijo tako imenovani hitri roboti za hitro indeksiranje spletnih mest v Yandexu.

Včasih se lahko pri projektu pojavijo tehnične težave (ali težave s strežnikom), v tem primeru Yandexova indeksacija spletnega mesta ne bo izvedena, zato se lahko iskalnik zateče k naslednjemu scenariju:

  • takoj vrzi neindeksirane strani iz baze podatkov;
  • ponovno indeksirajte vir po določenem času;
  • nastavi strani, ki niso bile indeksirane, da so izključene iz baze, in če jih med ponovnim indeksiranjem ne najde, bo vržena iz indeksa.

Kako pospešiti indeksiranje spletnega mesta v Yandex

Kako pospešiti indeksiranje v Yandexu - pogosto zastavljeno vprašanje na različnih forumih za spletne skrbnike. Pravzaprav je življenje celotnega mesta odvisno od indeksiranja: položaj vira v PS, število strank od njih, priljubljenost projekta, dobiček na koncu.

Pripravila sem 10 metod, za katere upam, da vam bodo koristile. Prvih pet je standardnih za stalno indeksiranje vira, naslednjih pet pa vam bo pomagalo pospešiti indeksiranje vašega spletnega mesta v Yandexu:

    storitve zaznamkov;

    RSS vir - bo zagotovil oddajanje novih materialov iz vašega vira na e-pošto naročnikov in imenike RSS;

    izmenjava povezav - bo zagotovila stabilen porast dofollow povezav kakovostnih donatorjev, če so pravilno izbrani (kako pravilno izbrati);

    – če svoje strani še niste registrirali v imenikih, vam svetujem, da to storite. Mnogi ljudje pravijo, da so imeniki že zdavnaj umrli ali da bo registracija vanje uničila spletno mesto – to ni res. Natančneje, to ni popolna resnica, če se registrirate v vseh imenikih zaporedoma, potem bo vaš vir dejansko samo trpel zaradi tega. A s pravilnim izborom zaupanja in dobrimi katalogi bo učinek nedvomno.

Preverjanje indeksiranja spletnega mesta v Yandex

  • Operaterji spletnega mesta in URL-jev. Če želite preveriti indeksiranje spletnega mesta v Yandexu, lahko uporabite standardne operaterje iskalnikov ..biz. (seveda namesto moje domene vaša)

  • vrstica RDS. Menim, da je to najboljši in najhitrejši način za preverjanje indeksiranja strani v Yandexu. Ta vtičnik je mogoče namestiti v vse priljubljene brskalnike in bo takoj zagotovil podrobne informacije o številu strani spletnega mesta v indeksu in prisotnosti določenega gradiva v njem. S to razširitvijo ne boste izgubljali časa z ročnim vnašanjem URL-jev v storitve ali iskanja. Na splošno priporočam, vrstica RDS je izjemno priročna:
  • Service Serphant. Večnamenski vir, s katerim lahko analizirate spletno mesto: ocenjevanje učinkovitosti in spremljanje spletnih mest, analiziranje strani konkurentov, preverjanje pozicij in indeksiranje spletnih mest. Indeksiranje strani lahko brezplačno preverite na tej povezavi: https://serphunt.ru/indexing/. Zahvaljujoč paketnemu preverjanju (do 50 naslovov) in visoki zanesljivosti rezultatov je ta storitev po mojem mnenju ena izmed treh najboljših.

  • storitev XSEO. Nabor orodij za spletne skrbnike, v XSEO.in si lahko ogledate indeksiranje spletnega mesta v Yandexu. Pridobite tudi veliko dodatnih koristnih informacij o svojem viru:

  • Storitve PR-CY in CY-PR. Še nekaj storitev, ki vam bodo zagotovile informacije o skupnem številu indeksiranih strani:

  • Storitev Sitereport. Odlična storitev, ki bo opozorila na vse vaše napake pri delu na spletnem mestu. Ima tudi razdelek »Indeksacija«, kjer bodo predstavljene informacije za vsako stran spletnega mesta, ki označuje, ali je indeksirana ali ne v iskalnikih Yandex in Google. Zato priporočam uporabo tega vira za odkrivanje težav na spletnem mestu in preverjanje množičnega indeksiranja Yandex:

Ste ustvarili spletno stran, pa je ne najdete v iskalnikih? Brez problema! V tem gradivu se boste naučili, kako indeksirati spletno mesto v Yandexu in Googlu v najkrajšem možnem času. O prednostih hitrega vstopa v indeks iskalnika je verjetno odveč govoriti. Navsezadnje se vsak zaveda, da prej ko se njegovo spletno mesto prikaže v rezultatih iskanja, hitreje se bodo pojavile nove stranke. Da bi to delovalo, morate priti v bazo podatkov iskalnika.

Mimogrede, zahvaljujoč pravilnemu pristopu so nova gradiva na našem spletnem mestu precej dobro in kar je najpomembneje, iskalniki vedno hitro indeksirajo. Morda ste prišli na to stran, potem ko ste poslali ustrezno zahtevo iskalna vrstica. Pojdimo od besedila k praksi.

Kako ugotoviti, ali je spletno mesto indeksirano?

Prva stvar, ki jo morate storiti, je ugotoviti, ali spletno mesto indeksirajo iskalniki. Lahko se zgodi, da spletno mesto preprosto ni na prvi strani iskanja za poizvedbo, ki ste jo vnesli. To so lahko obsežne poizvedbe, na katerih je treba delati, da se prikažejo SEO promocija, in ne samo narediti in zagnati spletne strani.

Torej, da preverimo, gremo na vse iskalnike, ki jih je smiselno obiskati ( Yandex, Google, Mail, Rambler) in do vrstice iskalna poizvedba vnesite naslov spletnega mesta.

Če vaš vir še ni bil indeksiran, v rezultatih iskanja ne bo prikazano nič ali pa se bodo prikazala druga spletna mesta.

Kako indeksirati spletno mesto v Yandexu?

Najprej vam bomo povedali, kako indeksirati spletno mesto v Yandexu. Toda preden dodate svoj vir, preverite, ali deluje pravilno, se pravilno odpre v vseh napravah in vsebuje samo edinstveno vsebino. Na primer, če dodate spletno mesto v razvojni fazi, lahko preprosto padete pod filter - to se nam je zgodilo enkrat in morali smo čakati cel mesec, da je Yandex razumel, da imamo kakovostno spletno mesto, in ukinil sankcije .

Če želite obvestiti Yandex o novem spletnem mestu, morate dodajte v Yandex Webmaster in namestite Yandex Metrica, prvo orodje je odgovorno za Dodatne informacije o viru ( regija, struktura, hitre povezave) in kako spletno mesto izgleda v organskih rezultatih, drugo za zbiranje podatkov na spletnem mestu ( prisotnost, obnašanje itd.), kar po naših izkušnjah vpliva tudi na indeksiranje strani in njeno pozicijo v iskanju. Prav tako ne pozabite narediti zemljevida spletnega mesta in ga navesti na plošči za spletne skrbnike.

Kako indeksirati spletno stran v Googlu?

Najpogosteje Google sam hitro najde nova spletna mesta in jih postavi v iskanje, vendar je čakanje, da Google pride in opravi vse delo namesto nas, preveč predrzno, zato ugotovimo, kako indeksirati spletno mesto v Googlu.

Ko so spletna mesta dodana, bi moralo iti skozi od 3 do 7 dni, preden iskalniki posodobijo podatke in indeksirajo spletno mesto.

Vedno želite, da se nove spletne strani čim hitreje prikažejo v rezultatih iskanja in za to obstaja več skrivnih (in zelo preprostih) načinov za pospešitev indeksiranja spletnih strani v iskalnikih.

3. Za izvedbo manipulacije, opisane v odstavku 2, samo za iskalnik Googlovi sistemi, pojdite na Search Console. Izberite "Skeniraj" in »Glej kot Googlebot«-dodajte naslov nove strani in kliknite “Crawn”, nakar zahtevamo indeksiranje.

Analiza indeksiranja spletnega mesta

Na koncu je treba opozoriti, da se tudi po uspešnem indeksiranju spletnega mesta v iskalnikih delo ne konča. Potrebno je občasno analizirati indeksiranje spletnega mesta in odstraniti položaje za priljubljene poizvedbe. To vam bo omogočilo, da spremljate utrip in se ne boste znašli v situaciji, ko bo pomemben del prometa iz organskih rezultatov iskanja preprosto izginil.

To se je zgodilo številnim starim spletnim mestom, ki so po izdaji uporabljala stare metode promocije Algoritem Yandex Baden-Baden. Hkrati je Yandex vnaprej napovedal, da uvaja ta algoritem in da bodo preveč optimizirane strani izključene iz iskanja, medtem ko Google nikoli ne poroča o izdaji novih algoritmov. Zato vam bo le neumorno spremljanje omogočilo, da ostanete ali postanete voditelj teme!

Z Googlom je vse zelo preprosto. Svoje spletno mesto morate dodati v orodja za spletne skrbnike na https://www.google.com/webmasters/tools/, nato izberite dodano spletno mesto in tako pridete v iskalno konzolo vašega spletnega mesta. Nato v levem meniju izberite razdelek »Skeniranje« in v njem element »Ogled kot Googlebot«.

Na strani, ki se odpre, v prazno polje vpišemo naslov nove strani, ki jo želimo na hitro indeksirati (upoštevamo že vpisano domeno strani) in kliknemo na desni gumb “Crawl”. Počakamo, da je stran skenirana in se pojavi na vrhu tabele naslovov, ki smo jih predhodno skenirali na podoben način. Nato kliknite gumb »Dodaj v indeks«.

Hura, vašo novo stran Google takoj indeksira! V samo nekaj minutah ga boste lahko našli med rezultati iskanja Google.

Hitro indeksiranje strani v Yandex

IN nova različica so postala na voljo orodja za spletne skrbnike podobno orodje za dodajanje novih strani v indeks. V skladu s tem je treba tudi vaše spletno mesto najprej dodati v Yandex Webmaster. Do tja lahko pridete tudi tako, da izberete želeno spletno mesto v spletnem skrbniku, nato pojdite na razdelek »Indeksiranje«, izberite element »Ponovno iskanje strani«. V oknu, ki se odpre, vpišemo naslove novih strani, ki jih želimo hitro indeksirati (preko povezave v eno vrstico).

Za razliko od Googla se indeksiranje v Yandexu še ne zgodi takoj, vendar si prizadeva za to. Z zgornjimi dejanji boste robota Yandex obvestili o nova stran. In indeksirano bo v roku pol ure do ene ure - to kažejo moje osebne izkušnje. Morda je hitrost indeksiranja strani v Yandexu odvisna od številnih parametrov (ugleda vaše domene, računa in/ali drugih). V večini primerov se lahko tam ustavite.

Če opazite, da so strani vašega spletnega mesta slabo indeksirane s strani Yandex, torej obstaja več splošnih priporočil, kako se s tem spopasti:

  • Najboljše, a tudi težko priporočilo je, da na svoje spletno mesto namestite hitri robot Yandex. Če želite to narediti, je priporočljivo, da na spletno mesto vsak dan dodate sveže materiale. Po možnosti 2-3 ali več materialov. Poleg tega jih ne dodajte vseh naenkrat, ampak čez nekaj časa, na primer zjutraj, popoldne in zvečer. Še bolje bi bilo ohraniti približno enak urnik objav (približno enak čas za dodajanje novih materialov). Poleg tega mnogi priporočajo ustvarjanje vira RSS za vaše spletno mesto iskalni roboti lahko bere posodobitve neposredno iz njega.
  • Seveda vsi ne bodo mogli dodati novih materialov na spletno mesto v takšnih količinah - dobro je, če lahko dodate 2-3 materiale na teden. V tem primeru ne morete resnično sanjati o hitrosti Yandexa, ampak poskusite nove strani vnesti v indeks na druge načine. Za najučinkovitejšega se šteje objavljanje povezav do novih strani na nadgrajenih računih Twitter. Z uporabo posebni programi Tako kot Twidium Accounter lahko "napolnite" število Twitter računov, ki jih potrebujete, in z njihovo pomočjo hitro vstavite nove strani spletnega mesta v indeks iskalnika. Če nimate možnosti sami objaviti povezav do nadgrajenih Twitter računov, lahko takšne objave kupite prek posebnih menjalnic. Ena objava z vašo povezavo bo v povprečju stala 3-4 rublje in več (odvisno od moči izbranega računa). Toda ta možnost bo precej draga.
  • Tretja možnost za hitro indeksiranje je uporaba storitve http://getbot.guru/, ki vam bo za samo 3 rublje pomagala doseči želeni učinek z jamstvom rezultatov. Primerno za spletna mesta z redkim urnikom dodajanja novih publikacij. Obstajajo tudi nižje cene. Bolje je, da si ogledate njihove podrobnosti in razlike na spletni strani same storitve. Osebno sem zelo zadovoljen s storitvami te storitve kot pospeševalnika indeksiranja.

Seveda lahko dodajate tudi nove objave v družabne zaznamke, kar naj bi v teoriji prav tako pripomoglo k hitremu indeksiranju strani. Toda učinkovitost takšnega dodatka bo odvisna tudi od ravni vaših računov. Če imate na njih malo dejavnosti in račune uporabljate samo za takšno neželeno pošto, potem praktično ne bo koristnega rezultata.

P.S. z bogatimi izkušnjami je vedno relevantno - kontaktirajte nas!

Pozdravljeni, dragi bralci spletnega mesta. Danes vam bom povedal, kako najti in popraviti možne težave z indeksiranjem vašega spletnega mesta. Oglejmo si tri glavne točke.

  1. Robot mora indeksirati potrebne strani spletnega mesta iz;
  2. Te strani je treba hitro indeksirati;
  3. Robot naj ne obiskuje nepotrebnih strani spletnega mesta;

Vse se zdi precej preprosto. Toda v resnici se večina spletnih skrbnikov sooča z enakimi težavami pri nastavljanju indeksiranja. Pazljivo si jih oglejmo.

Trenutno v večini primerov, če govorimo o o novi strani spletnega mesta v rezultatih iskanja, se bo pojavila v nekaj deset minutah. Če govorimo o že indeksiranih straneh, potem to 3-5 dni.

Posledično se morate spomniti treh pravil, da bo vaše spletno mesto hitro obiskano:

  1. Prvič, imeti morate pravilno in redno posodobljeno datoteko zemljevida spletnega mesta;
  2. Drugič, ne uporabljajte direktive Crawl-delay samo, če se vam zdi tako. Takoj se prepričajte, da pojdite na svojo datoteko robots.txt in preverite, ali taka direktiva obstaja. Če je nameščen, pomislite, ali ga res potrebujete.
  3. Tretjič, uporabite "pajkanje strani", da robot obišče najpomembnejše strani vašega spletnega mesta z novo pomembno stranjo.

Robota odstranimo nepotrebne spletne strani

Ko robot začne obiskovati vaš vir, to pogosto nima vedno pozitivnega učinka na indeksiranje dobre strani mesto. Predstavljajmo si situacijo, recimo, da robot vašemu viru pošlje 5 zahtev na sekundo. Zdi se kot odličen rezultat, ampak kakšen smisel ima teh pet obiskov na sekundo, če se vsi nanašajo na storitvene strani vašega spletnega mesta ali dvojnike in robot ne posveča nobene pozornosti res pomembnim stranem. To je naš naslednji razdelek, kako ne indeksirati nepotrebnih strani.

  1. Uporabljamo razdelek za spletne skrbnike Yandex in statistiko iskanja po vsebini
  2. Dobimo naslove strani, ki jih robot ne sme indeksirati
  3. Prevajanje pravilne datoteke robots.txt

Oglejmo si orodje Crawl Statistics, izgleda takole. Tu so tudi grafi. Zanima nas, da se malo pomaknemo navzdol po strani z uporabo gumba "vse strani". Videli boste vse, kar je robot obiskal v zadnjih dneh.

Če med temi stranmi obstajajo storitvene strani, jih je treba prepovedati v datoteki robots.txt. Poglejmo, kaj natančno je treba prepovedati po točkah.

  1. Prvič, kot sem rekel prej, filtriranje strani, selekcija blaga, sortiranje naj bo prepovedano v datoteki robots.txt.
  2. Drugič, vsekakor prepovedujemo različne akcijske strani. Na primer, dodaj za primerjavo, dodaj med priljubljene, dodaj v košarico. Prepovedujemo tudi samo stran s košarico.
  3. Tretjič, prepovedujemo obvoz vsi servisni oddelki kot je iskanje po spletnem mestu, skrbniška plošča vašega vira, razdelki z uporabniškimi podatki. V datoteki robots.txt so na primer prepovedani tudi podatki o dostavi, telefonske številke itd.
  4. IN ID strani oznak utm je na primer treba prepovedati tudi pajkanje v datoteki robots.txt z uporabo direktive Clean-param.

Če se soočate z vprašanjem, ali naj to stran blokiramo ali naj to stran odpremo za indeksiranje, si odgovorite na preprosto vprašanje: ali uporabniki potrebujejo to stran? iskalnik? Če na tej strani ni treba iskati poizvedb, jo lahko onemogočite.

In majhen praktični primer, upam, da vas bo motiviral. Poglejte, na enem od virov robot opravi skoraj na tisoče klicev na dan na strani s preusmeritvijo. Pravzaprav so bile strani za preusmeritev dodane v strani v košarici.

Spremenimo datoteko robots.txt in iz grafa lahko vidite, da je dostop do takšnih strani praktično izginil. Hkrati se je takojšnja pozitivna dinamika - obhod potrebnih strani na tej stepski strani s kodo 200 močno povečal.

- Podvojene strani na spletnem mestu, kako jih najti in kaj narediti z njimi

In tukaj vas čaka še ena nevarnost - ta podvojene strani. Pod dvojniki imamo v mislih več strani ene spletne strani, ki so dostopne na različnih naslovih, a hkrati vsebujejo popolnoma enako vsebino. Glavna nevarnost dvojnikov je, da se lahko spremenijo v rezultatih iskanja, če so prisotni. Stran lahko konča na naslovu, ki ga ne potrebujete, in tekmuje z glavno stranjo, ki jo oglašujete, za nekatere zahteve. Poleg tega veliko število podvojenih strani oteži robotu za indeksiranje iskanje po spletnem mestu. Na splošno prinašajo veliko težav.

Mislim, da so skoraj vsi spletni skrbniki prepričani, da na njihovi spletni strani ni podvojenih strani. Želim te malo razburiti. Pravzaprav obstajajo dvojniki na skoraj vseh spletnih mestih v RuNetu. ? O tem imam podroben članek, po branju katerega ne boste imeli niti enega vprašanja.

- Preverjanje odzivne kode strežnika

Poleg datoteke robots.txt bi vam rad povedal tudi o pravilnih odzivnih kodah http. Zdi se tudi, da so bile stvari že večkrat povedane. Sama odzivna koda HTTP je določen status strani za robota za indeksiranje.

  1. http-200 - stran je možno indeksirati in omogočiti iskanje.
  2. http-404 pomeni, da je bila stran izbrisana.
  3. http-301 - stran preusmerjena.
  4. http-503 - začasno ni na voljo.

Kakšna je prednost uporabe orodja za pravilne http kode:

  1. Prvič, nikoli ne boste imeli različnih prekinjenih povezav do vašega vira, to je tistih povezav, ki vodijo do strani, ki se ne odzovejo z odzivno kodo 200. Če stran ne obstaja, potem odzivna koda 404 pomeni, da bo robot to razumel .
  2. Drugič, robotu bo pomagal pri načrtovanju pajkanja po resnično potrebnih straneh, ki se odzovejo z odzivno kodo 200.
  3. In tretjič, to vam bo omogočilo, da se izognete različnim vrstam smeti, ki pridejo v rezultate iskanja.

Prav o tem govori naslednji posnetek zaslona, ​​tudi iz prakse. Ko vir ni na voljo in se izvaja tehnično delo, robot prejme škrbino z odzivno kodo http 200. Natančno to je opis te škrbine, ki ga vidite v rezultatih iskanja.

Ker se stran odzove z odzivno kodo 200, se vrnejo. Strani s takšno vsebino seveda ni mogoče najti in prikazati na kakršne koli zahteve. V tem primeru pravilna nastavitev pojavil se bo http odgovor 503. Če stran ali vir začasno ni na voljo, bo ta odzivna koda preprečila izključitev strani iz rezultatov iskanja.

To so situacije, ko postanejo vaše pomembne in potrebne strani vašega vira našemu robotu nedostopne, na primer odgovorijo s kodo 503 ali 404 ali pa se namesto tega vrnejo v to škrbino.

Takim situacijam je mogoče slediti z orodjem "pomembne strani". Dodajte mu tiste strani, ki vašemu viru prinesejo največ prometa. Nastavite obvestila po e-pošti ali storitvi in ​​prejemali boste informacije o tem, kaj se dogaja s to stranjo. Kakšna je njegova odzivna koda, kakšen je njen naslov, kdaj je bil obiskan in kakšen je njegov status v rezultatih iskanja.


Pravilnost vrnitve določene odzivne kode lahko preverite z ustreznim orodjem v Yandex Webmaster (tukaj). V tem primeru preverimo odzivno kodo neobstoječih strani. Prišel sem do strani in jo dal v orodje, kliknil gumb za preverjanje in prejel odgovor 404.

Tukaj je vse v redu, saj stran ni bila na voljo, pravilno se je odzvala s kodo 404 in ne bo več vključena v iskanje. Posledično, da robotom preprečite obiskovanje nepotrebnih strani spletnega mesta, aktivno uporabite orodje za statistiko iskanja po vsebini, spremenite datoteko robots.txt in poskrbite, da strani vrnejo pravilno odzivno kodo http.

- Povzemimo

Robotu smo dali prave spletne strani z vsebino. Zagotovili smo, da je hitro indeksirano. Robotu smo prepovedali indeksiranje nepotrebnih strani. Vse te tri velike skupine nalog so med seboj povezane. To pomeni, da če robotu ne omejite indeksiranja servisnih strani, bo najverjetneje imel manj časa za indeksiranje potrebnih strani spletnega mesta.

Če robot ne prejme vsebine zahtevanih strani v celoti, teh strani ne bo hitro vključil v rezultate iskanja. To pomeni, da morate delati na indeksiranju svojega vira na kompleksen način, na vseh teh treh nalogah. In v tem primeru boste dosegli nekaj uspeha, da se bodo potrebne strani hitro pojavile v rezultatih iskanja.

Uradni odgovori Yandexa

Indeks je vključeval strani z velikimi črkami, čeprav spletno mesto ne vsebuje takih strani.Če so strani napisane z velikimi črkami, je robot najverjetneje našel povezave do njih nekje na internetu. Najprej preverite svojo stran, verjetno je nekje na internetu napačna povezava. Prišel je robot, ga videl in začel prenašati stran z velikimi črkami. Zanje je za takšne strani bolje uporabiti preusmeritev 301.

Zemljevid spletnega mesta ima več strani – je to normalno?Če govorimo o zemljevidu spletnega mesta, potem obstaja posebna oblika zemljevida spletnega mesta, v kateri lahko določite povezave do drugih datotek zemljevida spletnega mesta, potem je seveda normalno.

Če postavite povezave do vseh razdelkov kataloga na dno spletnega mesta, ki je prikazano na vseh straneh, ali bo to pomagalo indeksiranju ali škodovalo? Pravzaprav vam tega sploh ni treba storiti, to je, če ga obiskovalci vašega spletnega mesta ne potrebujejo, vam ga ni treba posebej dodati. Dovolj je samo datoteka z zemljevidom spletnega mesta. Robot bo ugotovil prisotnost vseh teh strani in jih dodal v svojo bazo podatkov.

Ali moram na zemljevidu mesta navesti pogostost posodabljanja? Datoteko zemljevida spletnega mesta lahko uporabite za zagotavljanje dodatnih informacij robotu za indeksiranje. Poleg samih naslovov naš robot razume še več oznak. Prvič, to je pogostost posodobitev, to je pogostost posodobitev. To je prioriteta in datum pajkanja zadnja sprememba. Vse te informacije vzame iz datoteke zemljevida spletnega mesta pri obdelavi datoteke in jih doda v svojo bazo podatkov ter jih pozneje uporabi za prilagajanje pravilnikov iskanja po vsebini.

Ali je mogoče brez zemljevida spletnega mesta? Da, poskrbite, da ima vaše spletno mesto jasno navigacijo z dostopnimi povezavami, ki vodijo do katere koli notranje strani. Vendar ne pozabite, da če je to nov vir (od avtorja: preberite, kako zagnati novo spletno mesto) in je na primer neka stran globoko na vašem spletnem mestu, na primer 5-10 klikov stran, potem robot bo potreboval veliko časa, da ugotovi njegovo razpoložljivost. Prvi prenos domača stran spletno mesto, pridobi povezave, nato znova prenese tiste strani, za katere je izvedel, itd. Datoteka zemljevida spletnega mesta vam omogoča prenos informacij o vseh straneh na robota hkrati.

Robot naredi 700 tisoč zahtev na dan na neobstoječih straneh. Najprej morate razumeti, od kod prihajajo takšne neobstoječe strani. Morda so relativne povezave na vašem spletnem mestu nepravilno uporabljene ali pa je bil kakšen razdelek v celoti odstranjen s spletnega mesta in robot vseeno nadaljuje s preverjanjem takšnih strani. V tem primeru jih preprosto onemogočite v datoteki robots.txt. V 12 urah bo robot prenehal dostopati do takih strani.

Če so storitvene strani indeksirane, kako jih lahko odstranite iz iskanja. Za odstranitev strani iz rezultatov iskanja uporabite tudi robots.txt. To pomeni, da ni pomembno, ali ste prepoved nastavili pri ustvarjanju spletnega mesta ali ko ste zagnali vir. Stran bo v enem tednu izginila iz rezultatov iskanja.

Ali je samodejno ustvarjen zemljevid spletnega mesta dober ali ne? V večini primerov se vsi zemljevidi spletnih mest ustvarijo samodejno, zato lahko rečemo, da je to verjetno dobro. Ničesar vam ni treba delati z rokami in svojo pozornost lahko posvetite nečemu drugemu.

Kako bo stran indeksirana, če bo kanonična sama sebi. Če kanonični atribut vodi na isto stran? Ali se ta stran šteje za kanonično? Pravilno bo indeksiran in vključen v rezultate iskanja, kar pomeni, da je uporaba te tehnike povsem pravilna.

Kaj pomeni "nekanoničen" status? Z Kanonični atribut je nastavljen na strani, ki vodi do druge strani na vašem spletnem mestu. Zato tej strani ne bo mogel vstopiti v iskanje. Odprto vir strani, poiščite, poglejte, kam vodi kanonična stran in v iskanju preverite kanonično stran.

Kaj je bolj pravilno, da je stran košarice prepovedana v robots.txt ali noindex?Če je stran prepovedana z uporabo metode noindex, jo bo robot občasno obiskal in preveril ta prepoved. Če želite preprečiti, da bi robot to storil, je bolje uporabiti prepoved v datoteki robots.txt.


Se vidiva! Bodite na tekočem z vsem in vedno na straneh spletnega dnevnika

Pomagajte projektu - naročite se na naš kanal Yandex.Zen!




Vrh