Istoria dezvoltării motoarelor de căutare pe Internet. Istoria motoarelor de căutare. Serviciu de publicitate contextuală – Bing Ads

Care motor de căutare a fost primul în RuNet? Yandex, Aport sau Rambler?

Primele motoare de căutare ale lui Runet (dintre care, potrivit unuia dintre fondatorii Rambler, erau 2 sau 3) s-au scufundat foarte repede în uitare. Printre acestea s-au numărat extensii morfologice ale sistemului AltaVista, care nu ne-au lăsat numele. Prin urmare, va trebui să alegem dintre cei care rămân:

Hoinar

Crearea Rambler a început în 1996, când existau doar câteva zeci de site-uri în segmentul rus al internetului. Dezvoltarea a fost finalizată până în toamna acelui an. Domeniul rambler.ru a fost înregistrat pe 26 septembrie, iar 8 octombrie 1996, de ziua unuia dintre creatori, Rambler a fost deschis utilizatorilor.

Rambler - primul motor de căutare din Runet dintre cele existente în prezent.

Motorul de căutare Aport a fost dezvoltat până în februarie 1996, dar la acel moment căuta doar pe site-ul russia.agama.com. Treptat numarul site-urilor a crescut si spre deschiderea oficiala 11 noiembrie 1997 anul, „Aport” a fost deja căutat pe 10.000 de site-uri. Astfel, „Aport” a fost unul dintre primele motoare de căutare de pe RuNet, dar din cauza intervalului limitat de căutare nu poate fi considerat cel mai vechi.

Yandex

CompTek, compania care a dezvoltat Yandex, a fost fondată în 1989. În 1993, CompTek a dezvoltat Yandex, un program de căutare pe hard disk. În 1996, programul a adăugat posibilitatea de a căuta pe Web. Prima a fost scrisă în 1997 robot de căutare, indexat de Runet și 23 septembrie 1997 A avut loc prezentarea oficială a Yandex.

Yandex de la CompTek nu este cel mai vechi, dar tehnologiile lor de căutare și cercetarea în lingvistică și morfologie sunt cele mai vechi din Rusia.

Istoria dezvoltării internetului rusesc (Runet) datează oficial din 1994. Atunci a fost înregistrat domeniul zone.ru și au început să apară primele site-uri, dintre care multe au devenit ulterior portaluri populare.

Biblioteca Moshkov, agenția de informații RosBusinessConsulting, studioul lui Artemy Lebedev - toate aceste resurse au fost fondate la mijlocul anilor 90 ai secolului trecut.

Cum au apărut primele motoare de căutare

Pentru o perioadă destul de lungă, „populația” Runetului a fost limitată la un număr mic dintre acești pionieri tehnologii de rețea. Erau atât de puțini, încât conceptul de „căutare” pur și simplu nu exista în acele zile.

Majoritatea site-urilor necesare puteau fi salvate în marcaje ale browserului, iar pentru restul existau directoare în care toate linkurile erau grupate în mai multe categorii principale. Primul astfel de catalog a fost proiectul Rusia pe net (http://www.ru), puțin mai târziu au apărut DMOZ, Yahoo și Yandex.Catalog.

Cu toate acestea, în timp, numărul utilizatorilor de internet a crescut, iar numărul de site-uri create astfel încât acești utilizatori să le poată vizita și să obțină informațiile de care aveau nevoie a devenit mai mare.

Treptat, bazele de date de catalog au crescut atât de mari încât a devenit foarte dificil să găsești ceva manual. Atunci a apărut ideea de a automatiza procesul de căutare și de a crea un serviciu interactiv specializat pentru aceasta.

Cererea dă întotdeauna naștere ofertei, așa că proiectele de căutare de la diferiți autori au început să apară pe internet unul după altul. Unii dintre ei, cum ar fi WebCrawler, Lycos, InfoSeek și alții, nu au reușit să obțină niciun succes serios și, după un timp, au murit în obscuritate pe vastele întinderi ale World Wide Web.

Dar pentru alte companii de succes, totul a ieșit mult mai bine - în această perioadă s-au format dezvoltatorii moderni de top de tehnologii de căutare și în ultimii ani au reușit să obțină rezultate uimitoare.

Ce este un motor de căutare

Un motor de căutare modern este un mecanism complex care necesită resurse enorme (atât umane, cât și materiale) pentru a fi susținut munca curentași dezvoltare durabilă.

Formarea rezultatelor căutării se bazează pe renumita formulă de clasare, care ia în considerare sute de factori diferiți, de la structura internă a site-ului și textele paginilor acestuia până la link-uri externe, atractivitatea ofertelor comerciale postate pe resursă și caracteristicile comportamentale ale utilizatorilor care au trecut la acesta dintr-o căutare.

În anii 2006-2007, reprezentanții Yandex au declarat că era nevoie de un întreg institut de cercetare pentru a-și descifra algoritmul, deoarece căutarea lor s-a bazat pe luarea în considerare a peste 800 de factori diferiți. Au trecut ani de atunci, formula de clasare a devenit mai complexă cu câteva ordine de mărime, iar factorii care au cel mai mare impact asupra rezultatelor căutării au devenit aproape imposibil de influențat.

Deci, în spatele simplității exterioare pagina principala iar reacția rapidă a lui Yandex sau Google la expresia de căutare pe care ați introdus-o ascunde munca minuțioasă a miilor de oameni și investiții financiare uriașe în infrastructură, echipamente și resurse umane.

În același timp, este evident că companiile lider de astăzi și-au asigurat o asemenea superioritate față de cei care vor să concureze cu ele cel puțin într-un fel încât prețul de intrare pe această piață se măsoară în miliarde de dolari.

Această stare de fapt poate fi confirmată de istoria încercărilor de pătrundere piata de cautare cea mai faimoasă și mai bogată companie de software Microsoft. Motorul său de căutare Bing a fost poziționat ca un concurent serios pentru jucătorii de top de mai bine de un deceniu, pentru care s-au investit sume uriașe de bani în el.

Și abia în ultimii ani aceste investiții au început să producă primele rezultate, deși încă pot fi numite satisfăcătoare doar cu o foarte mare exagerare: cota Bing pe piața rusă la momentul scrierii era mai mică de unu la sută.

Un alt exemplu care ilustrează bine concluziile făcute mai devreme este motorul de căutare rus Nigma. Creatorii săi au ales o strategie de marketing de nișă. Aparent, conștienți că în câmpul deschis al căutării generale este aproape imposibil să concurezi cu pilonii pieței, dezvoltatorii algoritmului au luat calea furnizării de servicii de căutare pentru structurile educaționale din domeniul chimiei, matematicii, fizicii și alte stiinte.

Cu toate acestea, publicul țintă al unui astfel de proiect este în mod evident mic, ceea ce se reflectă clar în prezența acestuia: conform contorului Liveinternet, numărul de utilizatori ai acestui sistem este de doar o zecime de unu la sută.

1. Liderul incontestabil în clasament este Yandex. Potrivit aceluiași contor, Yandex deține o „parte de control” pe piața motoarelor de căutare: în iulie 2014, cota motorului de căutare era de peste 52%.
2. Google a ocupat cu încredere locul doi cu 38%.
3. Locul al treilea cu o marjă destul de mare este ocupat de portalul mail.ru. Cu ceva timp în urmă, se pare că un site popular căuta un frate mai mare căruia să-l vândă la un preț mai mare - motoarele Yandex și Google erau integrate alternativ în platforma lor de căutare. Dar din 2013, compania a stabilit un curs pentru dezvoltarea independentă, iar acum site-ul implementează un algoritm de căutare cu design propriu. Adevărat, acest lucru nu a afectat în niciun fel cota de piață a sistemului, care, aparent, este determinată în principal de promovarea mărcii și de atractivitatea serviciilor prezentate pe site. În ultimii ani, traficul către serviciul go.mail.ru a fluctuat în jur de 7%.

Toate celelalte motoare de căutare, inclusiv odinioară puternicul Rambler, pot fi privite doar ca un fundal natural - toate nu au un impact semnificativ asupra distribuției locurilor în primele motoare de căutare, fiind la nivelul de 0,1-0,7 la sută din piaţă.

Analiza pieței ruse de căutare pe internet

Piața motoarelor de căutare din Rusia este foarte specifică. Pentru a-l descrie, pot fi folosite două caracteristici: concentrat și slab competitiv. Într-adevăr, ponderea celor trei jucători principali depășește 97%, ceea ce indică avantajul lor copleșitor față de toți ceilalți.

Motorul de căutare rus Yandex are o poziție dominantă. După cum am spus deja, cota sa depășește 50%. În acest sens, țara noastră este unică: doar aici, în China și în Cehia, motoarele naționale de căutare oferă o concurență tangibilă gigantului global - Google.

După numărul de procesate interogări de căutare Yandex ocupă locul patru în lume. Mai mult decât atât, dacă primul loc al Google în această listă cu greu poate fi pus la îndoială, atunci locul al doilea Baidu chinezesc cauzat doar de populația imensă a acestei țări. Locul al treilea este pentru Yahoo, care are în prezent un avantaj dublu față de monopolistul rus.

Conform regulilor pieței europene, Yandex poate fi într-adevăr numit monopolist - o astfel de definiție este atribuită acolo oricărei companii a cărei cotă de piață depășește 35%.

La noi, această stare de fapt se numește dominație și nu se pedepsește până nu se dovedește faptul abuzului de avantajul existent. Este clar că în mediul Internet este foarte dificil să confirmi faptul abuzului.

Cum să determinați ponderea unui motor de căutare în traficul total

O evaluare obiectivă a acestui indicator este destul de ușor de obținut. Cert este că marea majoritate a site-urilor rusești au instalate contoare de la principalul operator de statistici pe internet Liveinternet.

Desigur, nu toate site-urile instalează aceste contoare; în plus, următorul link nu ține cont de zonele de domeniu .su și рф. Dar totuși, eșantionul dat poate fi considerat destul de reprezentativ; el ia în considerare toate subiectele principale, regiunile și tipurile de site-uri disponibile astăzi pe RuNet.

Deci, puteți vedea starea actuală a lucrurilor la linkul: http://www.liveinternet.ru/stat/ru/searches.html?date=2014-07-31;period=... .

Acesta este un rezumat complet al numărului de vizitatori care au mers pe site-urile înregistrate pentru utilizatorii ruși în iunie și iulie 2014.

Concluziile sunt evidente. Am oferit deja o analiză a stării de fapt în secțiunea anterioară.

Caracteristicile principalelor motoare de căutare din Rusia

Yandex

Apariția acestui motor de căutare pe piață ilustrează foarte bine situația din țară în momentul în care a început să capete formă modernă. Nu degeaba Yandex este numit oglinda Runetului - aparent, această definiție poate fi extinsă la realitatea obiectivă.

Dezvoltarea unei companii este într-un fel foarte asemănătoare cu evoluția întregii societăți, așa că într-o oarecare măsură liderul național este o oglindă a întregii țări la sfârșitul secolului XX.

Pentru a ilustra o astfel de afirmație îndrăzneață, să ne uităm pe scurt la istoria companiei și a motorului de căutare Yandex.

Vremurile de după perestroika se caracterizează printr-o reevaluare serioasă a valorilor de către partea cea mai activă a societății și apariția unor noi oameni energici în arena politică și de afaceri, uniți de ideea principală din viața lor: modernizarea condițiilor de viață ale ei înșiși și țara lor pentru a asigura un standard de viață decent pentru toți cei care își împărtășesc convingerile.

Unul dintre luminarii acelei epoci este Arkady Volozh, care a reușit să unească în jurul său pe cei mai buni specialiști workaholic care au pus bazele viitorului sistem de căutare.

Yandex n-ar fi devenit, probabil, niciodată o oglindă a Runetului dacă nu ar fi fost uimitor instinctul lui Arkady Volozh, care a reușit să discearnă perspectiva principală a acelei vremuri în construirea unui motor de căutare rus.

Pentru a-și implementa ideea, a reușit să redirecționeze fluxurile financiare în acest proiect generate din tranzacții de barter pentru schimbul de loturi de calculatoare importate în țara noastră în schimbul trenurilor de semințe de dovleac Kuban.

Bineînțeles, proiectele mari nu se realizează fără o echipă de oameni care au aceleași idei. Și apoi fondatorul Yandex a fost norocos - a reușit să-l atragă de partea sa pe talentatul și foarte promițător fizician Ilya Segalovici, pe care îl cunoștea încă de la școală.

Este greu de spus care a fost ultimul pahar care a depășit toate perspectivele unei cariere științifice strălucitoare pentru viitorul mare om de știință. Se poate foarte bine ca adevărata obsesie și talentul de persuasiune al directorului permanent al Yandex să fi jucat un rol decisiv, dar Ilya a devenit directorul tehnic al companiei și a adus o contribuție neprețuită la dezvoltarea acesteia.

El a devenit autorul numelui și al logo-ului, care este acum cunoscut de toți cei care au vizitat vreodată Internetul. Segalovici a devenit interesat de ideea analizei morfologice a frazelor în limba rusă și de posibilitatea clasificării textelor pe baza regulilor de construire a structurilor gramaticale.

Ca urmare, a apărut expresia „Încă un alt index”, care, într-o versiune prescurtată, datorită mâinii ușoare a fondatorilor motoarelor de căutare, a devenit cuvântul Yandex. Mai târziu, pentru a sublinia scopul principal al motorului de căutare - de a căuta în segmentul de limbă rusă al Internetului - logo-ul a fost transformat în Yandex.

Ilya Segalovici și-a dedicat întreaga viață formării și dezvoltării acestui proiect. Din păcate, el a murit în 2013, dar munca lui continuă; Yandex își crește superioritatea față de concurenți prin îmbunătățirea constantă a algoritmului de căutare, ale cărui baze au fost puse de regretatul său director de tehnologie și dezvoltare.

Google

Motorul de căutare Google a fost fondat cu un an mai devreme decât Yandex, dar a apărut pe piața rusă abia în 2004. Desigur, de-a lungul anilor, Yandex a reușit să își adapteze căutarea la specificul țării noastre.

În ciuda faptului că un număr destul de semnificativ de utilizatori de internet, ca răspuns la o întrebare la care nu cunosc răspunsul, sugerează „Google” mai degrabă decât „întrebează Yandex”, principala problemă a gigantului global este luarea în considerare insuficientă a morfologia textelor în limba rusă, ca urmare a căreia răspunsul la întrebările utilizatorilor este adesea incomplet sau ușor distorsionat.

Vă puteți certa mult timp despre a cui căutare este mai bună și care sistem oferă clienți mai motivați (sau „fierbinți”). Dar, ni se pare, imaginea tipică pentru un utilizator rus este următoarea: mai întâi, este solicitată o „oglindă Runet”, iar dacă rezultatele căutării nu sunt relevante (și acest lucru, din păcate, se întâmplă destul de des), cererea este retransmis la Google.

Actualizările globale ale Google apar mult mai rar decât cele ale Yandex. Dar schimbă rezultatele căutării atât de serios, încât multe site-uri autorizate care au fost în top de ani de zile se găsesc în partea de jos a primelor sute de rezultate de căutare.

De exemplu, ultima versiune Algoritmul Panda a avut un impact mare asupra unor magazine online de top, afectând chiar și Amazon.com aparent de neatins și altele.

În 2013, compania a încetat în sfârșit difuzarea căutărilor altor persoane pe site-ul său și a implementat propria versiune a motorului de căutare la go.mail.ru.

Acest pas nu poate fi decât binevenit, deoarece în viitor motorul de căutare de la mail.ru poate oferi o rezistență serioasă duo-ului de lideri, care deocamdată se poate relaxa puțin, fără a simți la spate respirația rafală a concurenților.

Ponderea acestui motor de căutare nu depășește în prezent 7%, dar are perspective bune de creștere datorită dezvoltării servicii sociale furnizate de firma: Odnoklassniki, Moi Krug, mail etc.

Motoare de căutare cu cotă de piață mai mică de 1%.

Acest grup conține în principal sisteme care nu au reușit niciodată să pătrundă în elita căutării rusești. Printre acestea, compania Rambler ocupă o poziție aparte, ocupând cândva cu încredere locul doi și demonstrând tendințe foarte promițătoare.

Hoinar

După ce a apărut în 1996 ca o creație a programatorilor din orașul științific Pushchino sub conducerea talentatului entuziast Dmitri Kryukov, Rambler a devenit imediat lider pe piața motoarelor de căutare. În acele zile, Yandex nu exista încă, iar Google tocmai își începea marșul prin America și țările învecinate.

S-ar părea că un astfel de avans ar fi trebuit să-l ajute pe „vagabond” (așa este tradus cuvântul Rambler din engleză) să obțină avantaje competitive notabile în dezvoltare.

Dar fie conflictele interne din companie, fie lipsa unei strategii clar definite au dus la faptul că Rambler difuzează acum căutarea Yandex și este mai bine cunoscut ca un agregator al unor servicii populare, inclusiv site-ul de rating Rambler Top100.

Bing

Aka MSN Search, Live Seacrh, Windows Live Seacrh este un produs al Microsoft, care luptă cu disperare pentru un loc în soare pe piața motoarelor de căutare. Acesta este unul dintre puținele servicii care utilizează propriul motor.

Rezultatele căutării sunt destul de acceptabile, principala problemă a site-ului pare să fie popularitatea scăzută în rândul utilizatorilor.

Aport

Un alt exemplu al soartei triste a ceea ce a fost cândva unul dintre liderii pieței. Au fost momente când acest motor de căutare a ocupat ferm locul trei după Yandex și Rambler, iar webmasterii au căutat să intre în catalogul său la fel de activ ca în DMOZ sau catalogul Yandex.

Acum site-ul găzduiește un magazin online de bunuri de uz casnic populare. Dacă rămâne căutarea pe aport, aceasta este ascunsă undeva în profunzimea resursei, pe unul dintre subdomeniile acesteia.

Ce ai nevoie pentru a scrie propriul motor de căutare

Pentru a răspunde la această întrebare, trebuie să înțelegeți bine ce este un motor de căutare și cum funcționează. Am examinat deja parțial principiile de bază ale construirii unei formule pentru clasarea site-urilor în rezultatele căutării. În plus, trebuie reținute următoarele puncte:

Sarcina principală a unui motor de căutare este să ofere un răspuns la cererea utilizatorului. Răspunsul trebuie să fie clar și relevant, altfel utilizatorul va pleca în alte sisteme, chiar și în ciuda concurenței scăzute din această industrie.

Pentru a da un astfel de răspuns, algoritmul de căutare are nevoie, la momentul formării sale, să scaneze conținutul a multor miliarde de pagini de pe Internet în căutarea celor mai potrivite pentru o anumită solicitare. Pentru a face acest lucru, motoarele de căutare își creează propriile baze de date, numite indexuri, și stochează acolo toate informațiile necesare.

Indexul se formează prin scanarea constantă a rețelei în căutarea de site-uri noi care au apărut, precum și modificări ale paginilor deja indexate. Acest lucru este realizat de programe speciale numite roboți de indexare.

Ei vizitează site-uri web non-stop și citesc informații actualizate. Organizarea muncii unor astfel de roboți necesită construirea unui centru de date mare, cu câteva mii de computere puternice, cu toată infrastructura, începând de la sursă de alimentare neîntreruptibilăși răcire la întreținere și upgrade regulate.

Utilizatorii doresc să primească răspunsuri rapide și adecvate la întrebările lor. Prin urmare, un motor de căutare modern trebuie să țină cont nu doar de caracteristicile site-urilor pe care le cunoaște, ci și de preferințele, caracteristicile comportamentale și localizarea geografică a fiecăruia dintre clienții săi.

Pentru a face acest lucru, algoritmii de căutare trebuie să aibă elemente de inteligență artificială și să poată învăța independent în procesul muncii lor. Evident, pentru a scrie un astfel de motor ai nevoie de o echipă mare de programatori de top.

Avand in vedere ca motoarele de cautare de top au rezolvat deja toate aceste probleme si au tot potentialul necesar pentru dezvoltarea in continuare, costul intrarii pe aceasta piata pare aproape exorbitant.

Prin urmare, este puțin probabil ca în viitorul apropiat să apară un jucător nou, capabil să-și ocupe rapid locul cuvenit printre sistemele existente. Deși, dacă acest lucru se va întâmpla brusc, toată lumea va beneficia - atât motoarele de căutare în sine, care vor primi noi stimulente pentru o îmbunătățire și mai mare, cât și noi, utilizatori obișnuiți capricioși, cărora le lipsește mereu ceva și ne dorim ca căutarea să devină din ce în ce mai calitativă. zi .

Pe Internet, un site special pe care un utilizator, la o anumită solicitare, poate primi link-uri către site-uri care corespund acestei solicitări. Sistemul de căutare este format din trei componente: 1 robot de căutare; 2 indici de sistem; si 3 programe,...... Dicţionar financiar

Substantiv, număr de sinonime: 3 căutare (9) bloodhound (16) motor de căutare (13) Dicționar de sinonime AS ... Dicţionar de sinonime

sistem de căutare- motor de căutare Un site cu care sunt căutate alte site-uri. Căutarea se efectuează prin introducerea cuvintelor cheie în caseta de căutare. Spre deosebire de directoare, chiar dacă site-ul nu a fost preînregistrat, acesta poate fi găsit folosind un motor de căutare.... ... Ghidul tehnic al traducătorului

sistem de căutare- ieškos sistema statusas T sritis automatika atitikmenys: engl. sistem de căutare vok. Suchsystem, n rus. motor de căutare, f pranc. système de recherche, m … Automatikos terminų žodynas

Sistem de căutare- – (motor de căutare în limba engleză, sinonime: motor de căutare, motor de căutare, motor de căutare) – Un instrument de căutare a informațiilor pe Internet. De regulă, activitatea unui motor de căutare constă în două etape. Program special(robot de căutare, mașină, agent,... ... Dicţionar Enciclopedic al Media

Control, un sistem de control automat (vezi Control automat), în care acțiunile de control sunt modificate automat prin metoda de căutare, astfel încât să se realizeze cel mai bun (într-un anumit sens) control al obiectului; la…… Marea Enciclopedie Sovietică

Un sistem de control automat, în care acțiunile de control sunt modificate automat folosind metoda de căutare automată pentru a fi implementate cel mai bun management obiect; în acest caz, modificări ale caracteristicilor obiectului sau influențe externe. miercuri in avans... Marele Dicţionar Politehnic Enciclopedic

SMP 1 este conceput pentru a căuta salvatorii care se află în condiții critice asociate cu o amenințare la adresa vieții, precum și pentru căutarea încărcăturii scăpate și a diferitelor obiecte în condiții de vizibilitate slabă. Include: o unitate radio pentru căutarea activelor... ... Dicţionar de situaţii de urgenţă

sistem automat de regăsire a informațiilor- 3.2.5 sistem automat de regăsire a informațiilor: IRS, implementat electronic tehnologia calculatoarelor Sursă … Dicționar-carte de referință de termeni ai documentației normative și tehnice

Acest termen are alte semnificații, vezi Aport. Aport... Wikipedia

Cărți

• Probleme extreme ale teoriei grafurilor și ale internetului. Manual, Raigorodsky Andrey Mikhailovici. Această broșură este dedicată studiului diferitelor probleme extreme din teoria grafurilor, a căror soluție (cel puțin parțială) poate fi utilă în analiza datelor. A apărut pe baza...
• Probleme extreme ale teoriei grafurilor și Internetului, Raigorodsky F.M.. Această broșură este dedicată studiului diferitelor probleme extreme ale teoriei grafurilor, a căror soluție (cel puțin parțială) poate fi utilă în analiza datelor. A apărut pe baza...

La începutul anilor '90, utilizatorii de internet nu aveau obiceiul de a pune întrebări motoarelor de căutare. Link-urile către site-uri utile despre care am aflat în principal de la prieteni au fost adunate separat fișiere text. Ulterior, au apărut site-uri de directoare cu categorii care au fost completate manual. Astfel, de exemplu, Yahoo! și Biblioteca virtuală (VLib), care a fost întreținută și stocată pe serverul CERN de către inventator Internet modern Tim Berners-Lee.

Primul motor de căutare din istorie este considerat a fi Archie, care a apărut în 1990, o arhivă de fișiere cu directoare de site descărcabile și posibilitatea de a căuta prin ele, creată de studenții de la Universitatea McGill din Montreal. Archie nu a indexat conținutul site-urilor: motoarele de căutare lansate în 1993, inclusiv World Wide Web Wanderer, ALIWEB și JumpStation, au aflat acest lucru. Acesta din urmă a devenit primul motor de căutare cu drepturi depline în sensul modern: cu ajutorul roboților, a colectat și clasat link-uri în rezultatele căutării pe baza similitudinii cu interogarea utilizatorului.

Creatorii primelor motoare de căutare
în cea mai mare parte sau renunta la acest job, sau plecat la muncă
la marile companii de internet

Introdus în 1994, AltaVista a devenit primul motor de căutare care a lucrat cu interogări în limbaj natural, iar primul motor de căutare cu adevărat puternic a fost WebCrawler, care a indexat întregul conținut al paginilor. În cele din urmă, în 1997–1998, au fost lansate Google și Yandex, cele mai populare motoare de căutare din Rusia de astăzi. Datorită unor algoritmi mai buni, aceștia au devenit lider internațional și, respectiv, regional, dar le-a luat timp să preia cote de la alți participanți la piață. Creatorii primelor motoare de căutare, în cea mai mare parte, fie au renunțat la această ocupație, fie au plecat să lucreze pentru marile companii de internet care și-au cumpărat întregul sistem.

Pe vremea când dezvoltarea Internetului abia începea, cantitatea de informații disponibile era relativ mică și utilizatorii de internet erau puțini. În fazele inițiale ale dezvoltării rețelei, aceasta a fost folosită de angajații universităților și laboratoarelor de cercetare pentru a face schimb de informații între instituții. La acea vreme, căutarea de informații pe internet nu era relevantă, spre deosebire de astăzi.

Prima modalitate de organizare și sistematizare a accesului la resurse informaționale a fost crearea de directoare de site-uri web. Au început să grupeze legăturile în funcție de subiecte specifice.

Pionierul în zonă a fost Yahoo, care a apărut în aprilie 1994. De-a lungul timpului, numărul de site-uri a crescut și Yahoo a adăugat o opțiune de căutare în director. Nu a fost un motor de căutare în sensul cel mai adevărat, deoarece domeniul de căutare era limitat la resursele directoarelor.

Ulterior, cataloagele s-au răspândit și au început să fie folosite peste tot, dar internetul nu a stat pe loc, ci a continuat să se dezvolte. Odată cu acesta s-au dezvoltat și metode de căutare. Pe acest moment directoarele aproape și-au pierdut popularitatea, acest lucru se explică prin faptul că un director modern, chiar dacă conține o cantitate uriașă de resurse, va putea oferi doar acces la o mică parte din informațiile conținute în rețea.

În zilele noastre, cel mai mare director de pe web este Open Directory Project, sau DMOZ, care conține informații despre 5 milioane de resurse, dar acesta este relativ mic în comparație, de exemplu, cu motorul de căutare Google, care conține aproximativ 8 miliarde de documente.

Un sistem de căutare cu drepturi depline a fost lansat abia în 1994, a devenit sistemul de căutare WebCrawler.

Un an mai târziu, în 1995, au apărut proiectele de motoare de căutare AltaVista și Lycos. Unul dintre ei, AltaVista, în special, a deținut o poziție de lider în domeniul căutării timp de mulți ani.

Doi ani mai târziu, în 1997, studenții de la Universitatea Stanford Sergey Brin și Larry Page au dezvoltat un motor de căutare sistemul Google, care este astăzi lider în domeniul căutării.

Anul acesta a fost și anul în care a fost anunțată oficial crearea motorului de căutare rus Yandex, care este încă lider în segmentul în limba rusă al rețelei.

În momentul de față, există doar 3 motoare de căutare care au ajuns la nivel internațional: MSN Search, Yahoo și Google. Aceste sisteme au propriile baze de date și algoritmi de căutare. Majoritatea celorlalte motoare de căutare își folosesc rezultatele. Deci Mail.ru folosește baza de date Yandex, search.aol.com folosește Google, iar Lycos, AltaVista și AllTheWeb folosesc Yahoo.

Liderul de căutare pe internetul rus în acest moment este Yandex, urmat de Rambler, urmat de Google, Mail.ru, A port și KM.ru.

Motoarele de căutare au diferiți algoritmi de operare, iar pentru a ocupa o poziție bună în rezultatele căutării și pentru a atrage vizitatori vizați, trebuie să cunoașteți caracteristicile optimizării SEO pentru diferite motoare de căutare. De exemplu