Zgodovina razvoja internetnih iskalnikov. Zgodovina iskalnikov. Storitev za postavljanje kontekstualnega oglaševanja - Bing Ads

Kateri je bil prvi iskalnik v Runetu? Yandex, Aport ali Rambler?

Prvi iskalniki Runet (od katerih je bilo po mnenju enega od ustanoviteljev Ramblerja 2 ali 3) so zelo hitro potonili v pozabo. Med njimi so bile morfološke razširitve sistema AltaVista, ki nam niso zapustile svojih imen. Zato bomo morali izbrati med tistimi, ki ostanejo:

Rambler

Ustvarjanje "Ramblerja" se je začelo leta 1996, ko je bilo v ruskem segmentu interneta le nekaj deset spletnih mest. Razvoj se je končal do jeseni istega leta. Domena rambler.ru je bila registrirana 26. septembra in 8. oktober 1996, na rojstni dan enega od ustvarjalcev, je bil Rambler odprt za uporabnike.

Rambler - prvi iskalnik v Runetu od tistih, ki trenutno obstajajo.

Iskalnik Aport je bil razvit do februarja 1996, vendar je takrat iskal le na strani russia.agama.com. Postopoma je število lokacij raslo in do uradne otvoritve 11. november 1997 leta je "Aport" že iskal 10.000 mest. Tako je bil "Aport" eden prvih iskalnikov v Runetu, vendar ga zaradi omejenega obsega iskanja ni mogoče prepoznati kot najstarejšega.

Yandex

CompTek, ki je razvil Yandex, je bil ustanovljen leta 1989. Leta 1993 je CompTek razvil Yandex, program za iskanje trdih diskov. Leta 1996 je bila programu dodana možnost iskanja po spletu. Leta 1997 prvi iskalni robot, indeksiran Runet in 23. september 1997 leta je potekala uradna predstavitev Yandexa.

Yandex podjetja CompTek ni najstarejši, so pa njihove iskalne tehnologije ter raziskave na področju jezikoslovja in morfologije najstarejše v Rusiji.

Zgodovina razvoja ruskega interneta (Runet) uradno sega v leto 1994. Takrat je bila registrirana domenska cona .ru in začela so se pojavljati prva spletna mesta, od katerih so mnoga kasneje prerasla v priljubljene portale.

Knjižnica Moškova, tiskovna agencija RosBusinessConsulting, studio Artemija Lebedeva - vsi ti viri so bili ustanovljeni sredi 90. let prejšnjega stoletja.

Kako so se pojavili prvi iskalniki?

Dolgo časa je bila "populacija" Runeta omejena na majhno število teh pionirjev. omrežne tehnologije. Bilo jih je tako malo, da koncept "iskanje" v tistih časih preprosto ni obstajal.

Večino potrebnih spletnih mest je bilo mogoče shraniti v zaznamke brskalnika, za ostala pa so bili imeniki, kjer so bile vse povezave razvrščene v več glavnih kategorij. Prvi takšen katalog je bil projekt Russia on the Net (http://www.ru), malo kasneje so se pojavili DMOZ, Yahoo in Yandex.Catalog.

Sčasoma pa se je število uporabnikov interneta povečalo, povečalo pa se je tudi število spletnih mest, ustvarjenih tako, da jih ti uporabniki lahko obiščejo in prejmejo potrebne informacije.

Postopoma so se baze podatkov imenikov tako povečale, da je postalo zelo težko najti karkoli ročno. Nato se je porodila ideja, da bi avtomatizirali proces iskanja in za to ustvarili specializirano interaktivno storitev.

Povpraševanje vedno povzroči ponudbo, zato so se iskalni projekti različnih avtorjev začeli pojavljati na internetu eden za drugim. Nekateri izmed njih, kot so WebCrawler, Lycos, InfoSeek in drugi, niso uspeli doseči resnejšega uspeha in so čez nekaj časa padli v neznanje na prostranstvih svetovnega spleta.

Toda za druga, uspešnejša podjetja, se je vse izkazalo veliko bolje - vodilni sodobni razvijalci iskalnih tehnologij so se oblikovali v tem obdobju in v zadnjih letih so uspeli doseči osupljive rezultate.

Kaj je iskalnik

Sodoben iskalnik je kompleksen mehanizem, ki za vzdrževanje zahteva ogromne vire (človeške in materialne). tekoče delo in trajnostni razvoj.

Oblikovanje rezultatov iskanja temelji na razvpiti formuli za razvrščanje, ki upošteva na stotine različnih dejavnikov, od notranje strukture spletnega mesta in besedil njegovih strani do zunanjih povezav, privlačnosti komercialnih ponudb, objavljenih na viru, in obnašanje uporabnikov, ki so nanj preklopili iz iskanja.

Že v letih 2006-2007 so predstavniki Yandexa napovedali, da je za dešifriranje njihovega algoritma potreben cel raziskovalni inštitut, saj njihovo iskanje temelji na več kot 800 različnih dejavnikih. Od takrat so minila leta, formula za razvrščanje se je za več velikosti zapletla in na dejavnike, ki najbolj vplivajo na rezultate iskanja, je postalo skoraj nemogoče vplivati.

Torej za zunanjo preprostostjo domača stran in hiter odziv Yandexa ali Googla na vneseno iskalno besedno zvezo skriva mukotrpno delo na tisoče ljudi in velike finančne naložbe v infrastrukturo, opremo in človeške vire.

Ob tem je očitno, da so si trenutno vodilna podjetja zagotovila takšno prednost pred tistimi, ki jim želijo vsaj na nek način konkurirati, da se cena vstopnice na ta trg meri v milijardah dolarjev. .

To stanje lahko potrdi zgodovina poskusov prodora iskalni trg najbolj znano in najbogatejše programsko podjetje Microsoft. Njegov iskalnik Bing se že več kot desetletje postavlja kot resna konkurenca vodilnim igralcem, za kar so vanj vložili ogromna sredstva.

In šele v zadnjih letih so te naložbe začele dajati prve rezultate, čeprav jih še vedno lahko imenujemo zadovoljive le z zelo velikim pretiravanjem: Bingov delež na ruskem trgu je bil v času pisanja manj kot en odstotek.

Drug primer, ki dobro ponazarja prejšnje zaključke, je ruski iskalnik Nigma. Njegovi ustvarjalci so izbrali nišno trženjsko strategijo. Očitno so se razvijalci algoritma dobro zavedali, da je na odprtem področju splošnega iskanja skoraj nemogoče tekmovati s stebri trga, zato izbrali pot zagotavljanja iskalnih storitev za izobraževalne strukture s področja kemije, matematike, fizike in druge vede.

Vendar ciljno občinstvo takšnega projekta očitno ni veliko, kar očitno vpliva na njegovo obiskanost: po števcu Liveinternet je število uporabnikov tega sistema le desetinka odstotka.

1. Nesporni vodja ocene je Yandex. Po istem števcu ima Yandex "kontrolni delež" na trgu iskalnikov: julija 2014 je bil delež iskalnika več kot 52%.
2. Google se je samozavestno utrdil na drugem mestu - 38%.
3. Tretje mesto zaseda portal mail.ru s precej veliko razliko. Pred časom je priljubljeno spletno mesto očitno iskalo starejšega brata, ki bi ga lahko prodali po višji ceni - motorja Yandex in Google sta bila izmenično integrirana v njihovo iskalno platformo. Toda od leta 2013 je podjetje zastavilo smer neodvisnega razvoja in zdaj je spletno mesto implementiralo iskalni algoritem lastne zasnove. Res je, da to na noben način ni vplivalo na tržni delež sistema, ki je očitno odvisen predvsem od priljubljenosti blagovne znamke in privlačnosti storitev, predstavljenih na spletnem mestu. V zadnjih nekaj letih je promet na go.mail.ru nihal okrog 7 %.

Vse druge iskalnike, vključno z nekoč močnim Ramblerom, lahko štejemo le za naravno ozadje - vsi nimajo bistvenega vpliva na porazdelitev mest v prvih iskalnikih, saj so na ravni 0,1-0,7 odstotka iskalnikov. trgu.

Analiza ruskega trga internetnega iskanja

Trg iskalnikov v Rusiji je zelo specifičen. Za opis lahko uporabimo dve značilnosti: koncentrirano in šibko konkurenčno. Delež treh glavnih igralcev namreč presega 97 %, kar kaže na njihovo izjemno prednost pred vsemi ostalimi.

Prevladujoč položaj zaseda ruski iskalnik Yandex. Kot smo že povedali, njegov delež presega 50 %. V tem je naša država edinstvena: samo tukaj, na Kitajskem in Češkem, imajo nacionalni iskalniki oprijemljivo konkurenco svetovnemu velikanu - Googlu.

Glede na število predelanih iskalne poizvedbe Yandex je četrti na svetu. Ob tem, če o prvem mestu Googla na tem seznamu skoraj ni mogoče utemeljeno dvomiti, pa o drugem mestu kitajski Baidu posledica same velikosti te države. Tretje mesto pripada Yahooju, ki ima doslej dvakratno prednost pred ruskim monopolom.

Po pravilih evropskega trga lahko Yandex res imenujemo monopolist - taka definicija je tam dodeljena vsakemu podjetju, katerega tržni delež presega 35%.

V naši državi se to stanje imenuje prevlada in se ne kaznuje, dokler se ne dokaže dejstvo zlorabe obstoječe prednosti. Jasno je, da je v internetnem okolju dejstvo zlorabe zelo težko potrditi.

Kako ugotoviti delež iskalnika v celotnem prometu

Objektivno oceno tega kazalnika je precej enostavno dobiti. Dejstvo je, da ima velika večina ruskih spletnih mest nameščene števce vodilnega operaterja internetne statistike Liveinternet.

Seveda vsa spletna mesta ne postavljajo teh števcev, poleg tega naslednja povezava ne upošteva domenskih con .su in rf. Kljub temu se zgornji vzorec lahko šteje za precej reprezentativnega, saj upošteva vse glavne teme, regije in vrste spletnih mest, ki so trenutno na voljo v Runetu.

Torej, trenutno stanje stvari si lahko ogledate na povezavi: http://www.liveinternet.ru/stat/ru/searches.html?date=2014-07-31;period=... .

To je popoln povzetek števila obiskovalcev, ki so junija in julija 2014 obiskali spletna mesta, registrirana kot ruski uporabniki.

Sklepi so očitni. Analizo stanja smo že podali v prejšnjem razdelku.

Značilnosti glavnih iskalnikov v Rusiji

Yandex

Pojav tega iskalnika na trgu zelo dobro ponazarja stanje v državi v času, ko je začel dobivati ​​sodobno podobo. Ni čudno, da Yandex imenujejo ogledalo Runeta - očitno je to definicijo mogoče razširiti na objektivno resničnost.

Razvoj podjetja je na nek način zelo podoben razvoju celotne družbe, tako da je državni vodja do neke mere ogledalo celotne države ob koncu 20. stoletja.

Da bi ponazorili tako drzno izjavo, si na kratko oglejmo zgodovino nastanka podjetja in iskalnika Yandex.

Za čase po perestrojki je značilno resno ponovno vrednotenje najbolj aktivnega dela družbe in pojav novih energičnih ljudi na političnem in poslovnem prizorišču, ki jih združuje glavna življenjska ideja: posodobiti pogoje za obstoj sebe in svoje države, da bi zagotovili dostojen življenjski standard za vse, ki delijo njihova prepričanja.

Eden od svetil tiste dobe je Arkadij Volož, ki mu je uspelo okoli sebe združiti najboljše strokovnjake za deloholike, ki so postavili temelje za prihodnji iskalnik.

Yandex verjetno nikoli ne bi postal ogledalo Runeta, če ne bi bilo neverjetnega duha Arkadija Voloža, ki mu je uspelo razbrati glavno perspektivo tistega časa pri izgradnji ruskega iskalnika.

Da bi uresničil svojo idejo, mu je uspelo v ta projekt preusmeriti finančne tokove, ustvarjene z menjalnimi posli za izmenjavo serij računalnikov, uvoženih v našo državo v zameno za ešalone kubanskih bučnih semen.

Seveda velikih projektov ni brez ekipe somišljenikov. In tukaj je imel ustanovitelj Yandexa srečo - uspelo mu je pritegniti na svojo stran nadarjenega in zelo obetavnega fizika Ilyo Segalovicha, ki ga je poznal že iz šole.

Težko je reči, kaj je bila zadnja kaplja, ki je odtehtala vse možnosti za sijajno znanstveno kariero bodočega velikega znanstvenika. Lahko se zgodi, da sta resnična obsedenost in talent za prepričevanje stalnega direktorja Yandexa igrala odločilno vlogo, vendar je Ilya postal tehnični direktor podjetja in je neprecenljivo prispeval k njegovemu razvoju.

Prav on je postal avtor imena in logotipa, ki je zdaj znan vsem, ki so kdaj dostopali do interneta. Segalovič se je začel zanimati za idejo o morfološki analizi besednih zvez v ruščini in možnosti razvrščanja besedil na podlagi pravil za gradnjo slovničnih struktur.

Posledično se je pojavil izraz "Še en indeks" - "še en indeks", ki je v skrajšani različici z lahkoto roko ustanoviteljev iskalnika postal beseda Yandex. V prihodnosti, da bi poudarili glavni namen iskalnika - iskanje v rusko govorečem segmentu interneta - je bil logotip pretvorjen v Yandex.

Ilya Segalovich je vse svoje življenje posvetil oblikovanju in razvoju tega projekta. Na žalost je leta 2013 umrl, a njegov posel živi naprej, Yandex povečuje svojo premoč nad tekmeci, nenehno izboljšuje iskalni algoritem, katerega temelje je postavil njegov pokojni direktor tehnologije in razvoja.

Google

Iskalnik Google je bil ustanovljen leto prej kot Yandex, vendar se je na ruskem trgu pojavil šele leta 2004. Seveda je Yandex z leti uspel svoje iskanje prilagoditi posebnostim naše države.

Kljub dejstvu, da dokaj veliko število uporabnikov interneta na vprašanje, na katerega ne poznajo odgovora, ponudi "googlanje" namesto "vprašanje Yandexa", je glavna težava svetovnega velikana nezadostno upoštevanje morfologije ruskega jezika -jezikovnih besedil, zaradi česar je odziv na zahteve uporabnikov pogosto nepopoln ali rahlo popačen.

Lahko se dolgo prepirate o tem, čigavo iskanje je boljše in iz katerega sistema prihajajo bolj motivirani (ali »vroči«) kupci. Toda, kot se nam zdi, je tipična slika za ruskega uporabnika videti takole: najprej se zahteva "ogledalo Runeta" in če se rezultati njegovega iskanja izkažejo za neustrezne (in to se na žalost zgodi precej pogosto), se zahteva ponovno posreduje Googlu.

Googlove globalne posodobitve so veliko manj pogoste kot Yandexove. Toda tako resno spremenijo rezultate, da številna ugledna spletna mesta, ki so bila leta na vrhu, končajo na dnu prvih stotih rezultatov izdaje.

na primer Najnovejša različica Algoritem Panda je dobro zadel nekatere vodilne spletne trgovce, prizadel je celo na videz nedotakljivega amazon.com in druge.

Leta 2013 je podjetje končno prenehalo objavljati iskanje nekoga drugega na svojem spletnem mestu in uvedlo svojo različico iskalnika na go.mail.ru.

Ta korak je mogoče le pozdraviti, saj se lahko v prihodnosti iskalnik iz mail.ru resno upre duetu voditeljev, ki se lahko za zdaj nekoliko sprostijo, ne da bi občutili silovit dih konkurentov za hrbtom.

Delež tega iskalnika zdaj ne presega 7%, vendar ima dobre možnosti, da se z razvojem poveča socialne storitve ki jih zagotavlja podjetje: Odnoklassniki, Moj krog, pošta itd.

Iskalniki z manj kot 1% tržnim deležem

V tej skupini so koncentrirani predvsem sistemi, ki se niso uspeli prebiti v elito ruskega iskanja. Med njimi posebno mesto zaseda podjetje Rambler, ki je nekoč samozavestno zasedlo drugo mesto in pokazalo zelo obetavne trende.

Rambler

Po tem, ko se je leta 1996 pojavil kot zamisel programerjev iz znanstvenega mesta Pushchino pod vodstvom nadarjenega navdušenca Dmitrija Kryukova, je Rambler takoj postal vodilni na trgu iskalnikov. V tistih časih Yandex še ni obstajal, Google pa je šele začel svoj pohod po Ameriki in sosednjih državah.

Zdi se, da bi takšen hendikep moral pomagati "potepuhu" (namreč, beseda Rambler je prevedena iz angleščine) pridobiti opazne konkurenčne prednosti v razvoju.

Toda notranji konflikti v podjetju ali pomanjkanje jasno opredeljene strategije so pripeljali do dejstva, da zdaj Rambler oddaja iskanje Yandex in je bolj znan kot zbiralnik nekaterih priljubljenih storitev, vključno z oceno spletnega mesta Rambler Top100.

bing

Je tudi MSN Search, Live Seacrh, Windows Live Seacrh – produkt Microsofta, ki se obupno bori za mesto pod soncem na trgu iskalnikov. To je ena redkih storitev, ki uporablja lasten motor.

Rezultati iskanja so povsem sprejemljivi, glavna težava spletnega mesta je očitno nizka priljubljenost med uporabniki.

Aport

Še en primer žalostne usode nekoč enega vodilnih na trgu. Včasih je bil ta iskalnik trdno na tretjem mestu za Yandexom in Ramblerjem, spletni skrbniki pa so si prizadevali vstopiti v njegov katalog tako aktivno kot v katalog DMOZ ali Yandex.

Zdaj spletno mesto gosti spletno trgovino s priljubljenimi izdelki za gospodinjstvo. Iskanje na portu, če še ostane, je skrito nekje v globini vira, na eni od njegovih poddomen.

Kaj je potrebno, da napišete svoj iskalnik

Da bi odgovorili na to vprašanje, morate imeti dobro predstavo o tem, kaj je iskalnik in kako deluje. Deloma smo že obravnavali osnovna načela gradnje formule za uvrstitev spletnega mesta v rezultatih iskanja. Poleg tega je treba upoštevati naslednje točke:

Glavna naloga iskalnika je odgovoriti na uporabnikovo poizvedbo. Odgovor mora biti jasen in relevanten, sicer bo uporabnik odšel v druge sisteme, kljub nizki konkurenci v tej panogi.

Da bi dal takšen odgovor, mora iskalni algoritem pregledati vsebino več milijard spletnih strani v času njenega nastanka in poiskati najprimernejše za določeno poizvedbo. Da bi to naredili, iskalniki ustvarijo svoje baze podatkov, ki se imenujejo indeksi, in tam shranijo vse potrebne informacije.

Indeks se oblikuje z nenehnim skeniranjem omrežja v iskanju novih spletnih strani, ki so se pojavile, kot tudi sprememb na že indeksiranih straneh. To delo opravljajo posebni programi, imenovani roboti indekserji.

24 ur na dan hodijo po spletnem mestu in berejo posodobljene informacije. Organizacija dela takšnih robotov zahteva izgradnjo velikega podatkovnega centra za več tisoč zmogljivih računalnikov s celotno infrastrukturo, ki sega od brezprekinitveno napajanje in hlajenja do rednega vzdrževanja in nadgradenj.

Uporabniki želijo prejeti hitre in ustrezne odgovore na svoja vprašanja. Zato bi moral sodoben iskalnik upoštevati ne le lastnosti znanih spletnih mest, temveč tudi preference, vedenjske značilnosti in geografsko lokacijo vsake od strank.

Za to morajo imeti iskalni algoritmi elemente umetne inteligence in biti sposobni samostojnega učenja med svojim delom. Očitno je, da za pisanje takšnega motorja potrebujete veliko ekipo programerjev najvišjega razreda.

Glede na to, da so vodilni iskalniki vse te težave že rešili in imajo ves potreben potencial za nadaljnji razvoj, se zdi strošek vstopa na ta trg skoraj previsok.

Zato se v bližnji prihodnosti verjetno ne bo pojavil nov igralec, ki bi bil sposoben hitro zavzeti svoje pravo mesto med obstoječimi sistemi. Če pa se to nenadoma zgodi, bodo imeli koristi vsi – tako iskalniki sami, ki bodo dobili nove spodbude za še večje izboljšave, kot mi, muhasti običajni uporabniki, ki nam vedno nekaj manjka in želimo, da je iskanje vsak dan boljše in boljše. .

Na internetu posebna spletna stran, na kateri lahko uporabnik na dano zahtevo prejme povezave do strani, ki ustrezajo tej zahtevi. Iskalni sistem sestavljajo tri komponente: 1 iskalni robot; 2 sistemska indeksa; in 3 programi, ... ... Finančni besednjak

Obst., število sinonimov: 3 iskalnik (9) iskalnik (16) iskalnik (13) slovar sinonimov AS ... Slovar sinonimov

iskalni sistem- iskalnik Spletno mesto, ki išče druga spletna mesta. Iskanje poteka z vnosom ključnih besed v iskalno polje. Za razliko od imenikov, tudi če spletno mesto ni bilo vnaprej registrirano, ga je mogoče najti z iskalnikom. ... ... Priročnik tehničnega prevajalca

iskalni sistem- ieškos sistem statusas T sritis automatika atitikmenys: engl. iskalni sistem vok. Tak sistem, n rus. iskalnik, fpranc. système de recherche, m … Automatikos terminų žodynas

Iskalni sistem- - (angleški iskalnik, sinonimi: iskalnik, iskalnik, iskalnik) - Orodje za iskanje informacij na internetu. Delo iskalnika je praviloma sestavljeno iz dveh stopenj. Posebni program(iskalni robot, stroj, agent, ... ... Enciklopedični slovar medijev

Kontrole, avtomatski nadzorni sistem (glej Samodejno krmiljenje), v katerem se nadzorna dejanja samodejno spremenijo z iskalno metodo tako, da se izvaja najboljši (v nekem smislu) nadzor nad objektom; pri…… Velika sovjetska enciklopedija

Krmilni sistem avtomatskega krmiljenja, v katerem se nadzorna dejanja z metodo avtomatskega iskanja spreminjajo tako, da se izvaja najboljši nadzor nad objektom; ob spreminjanju značaja na predmet ali zunanje vplive. Srede vnaprej... Veliki enciklopedični politehnični slovar

SMP 1 je namenjen iskanju reševalcev, ki so v kritičnih razmerah, povezanih z nevarnostjo za življenje, pa tudi za iskanje pristajajočega tovora in različnih predmetov v pogojih slabe vidljivosti. Sestavljen je iz: radijske enote za iskanje aktivnih ... ... Slovar za nujne primere

avtomatiziran sistem za iskanje informacij- 3.2.5 avtomatiziran sistem za iskanje informacij: IPS, izveden na osnovi elektronskega Računalništvo Vir … Slovar-priročnik izrazov normativne in tehnične dokumentacije

Ta izraz ima druge pomene, glej Aport. Pristanišče ... Wikipedia

knjige

• Ekstremni problemi v teoriji grafov in internetu. Učbenik, Rajgorodski Andrej Mihajlovič. Ta brošura je posvečena študiju različnih ekstremnih problemov v teoriji grafov, katerih (vsaj delna) rešitev je lahko uporabna pri analizi podatkov. Izvira iz…
• Ekstremni problemi teorije grafov in interneta, Raigorodsky F.M. Izvira iz…

V zgodnjih 90. letih prejšnjega stoletja uporabniki interneta iskalnikom niso imeli navade postavljati vprašanj. Povezave do uporabnih strani, ki smo jih izvedeli predvsem od znancev, smo zbrali v ločeno besedilne datoteke. Kasneje so se pojavila kataloška mesta z rubrikatorji, ki so se dopolnjevali ročno. Takšni so bili na primer Yahoo! in virtualno knjižnico (VLib), ki jo je vzdrževal in hranil na strežniku CERN izumitelj sodobni internet Tim Berners-Lee.

Za prvi iskalnik v zgodovini velja Archie, ki se je pojavil leta 1990, datotečni arhiv s prenosljivimi imeniki spletnih mest in možnostjo iskanja po njih, ki so ga ustvarili študenti univerze McGill v Montrealu. Archie ni indeksiral vsebine spletnih strani: iskalniki, ki so bili lansirani leta 1993, med katerimi so bili World Wide Web Wanderer, ALIWEB in JumpStation, so se tega naučili. Slednji je postal prvi polnopravni iskalnik v sodobnem smislu: s pomočjo robotov je zbiral in razvrščal povezave v rezultatih glede na njihovo podobnost z zahtevo uporabnika.

Ustvarjalci prvih iskalnikov
v razsutem stanju oz opusti to službo, oz šel v službo
velikim internetnim podjetjem

AltaVista, predstavljen leta 1994, je bil prvi iskalnik, ki je delal s poizvedbami v naravnem jeziku, prvi resnično močan iskalnik pa je bil WebCrawler, ki je v celoti indeksiral vsebino strani. Končno sta v letih 1997-1998 začela delovati Google in Yandex, danes najbolj priljubljena iskalnika v Rusiji. Zahvaljujoč najboljšim algoritmom so postali mednarodni oziroma regionalni vodja, vendar so potrebovali čas, da so odvzeli delež drugim udeležencem na trgu. Ustvarjalci prvih iskalnikov so večinoma opustili ta poklic ali pa se zaposlili v velikih internetnih podjetjih, ki so odkupila njihove celotne sisteme.

V času, ko se je razvoj interneta šele začenjal, je bila količina dostopnih informacij relativno majhna, uporabnikov omrežja pa malo. V začetnih fazah razvoja omrežja so ga uporabljali zaposleni na univerzah in raziskovalnih laboratorijih za izmenjavo informacij med institucijami. Takrat iskanje informacij po internetu, za razliko od danes, ni bilo aktualno.

Prvi način organiziranja in sistematiziranja dostopa do informacijskih virov je bilo ustvarjanje imenikov spletnih mest. Povezave so začeli združevati glede na določeno temo.

Na tem področju je bil pionir Yahoo, ki se je pojavil aprila 1994. Sčasoma je število spletnih mest naraščalo in Yahoo je dodal možnost iskanja po imeniku. To ni bil iskalnik v pravem pomenu besede, ker je bil obseg iskanja omejen na vire imenika.

Kasneje so se imeniki razširili in začeli uporabljati povsod, vendar internet ni miroval, ampak se je še naprej razvijal. Hkrati so se razvijale tudi metode iskanja. Vklopljeno ta trenutek Imeniki so skoraj izgubili svojo priljubljenost, to je posledica dejstva, da bo sodoben imenik, tudi če vsebuje ogromno virov, lahko zagotovil dostop le do majhnega dela informacij, ki jih vsebuje omrežje.

Danes je največji katalog na spletu Open Directory Project ali DMOZ, ki vključuje informacije o 5 milijonih virov, vendar je to razmeroma malo v primerjavi z na primer iskalnikom Google, ki vsebuje približno 8 milijard dokumentov.

Popoln iskalnik je bil izdan šele leta 1994, postal je iskalnik WebCrawler.

Leto kasneje, leta 1995, sta se pojavila projekta iskalnika AltaVista in Lycos. Eden od njih, zlasti AltaVista, že vrsto let drži vodilni položaj pri iskanju.

Dve leti pozneje, leta 1997, sta študenta univerze Stanford Sergey Brin in Larry Page razvila iskalnik Google, ki je danes vodilni v iskanju.

To leto je postalo tudi leto, ko je bila uradno objavljena ustanovitev ruskega iskalnika Yandex, ki je še vedno vodilni v rusko govorečem segmentu omrežja.

Trenutno obstajajo le 3 iskalniki, ki so postali mednarodni, to so MSN Search, Yahoo in Google. Ti sistemi imajo lastne baze in iskalne algoritme. Večina drugih iskalnikov uporablja njihove rezultate. Tako Mail.ru uporablja bazo podatkov Yandex, search.aol.com - Google, Lycos, AltaVista in AllTheWeb pa - Yahoo.

Yandex je trenutno vodilni pri iskanju na ruskem internetu, sledi mu Rambler, sledijo pa mu Google, Mail.ru, Aport in KM.ru.

Iskalniki imajo različne algoritme dela in za dobro pozicijo med iskalnimi rezultati in privabljanje ciljnih obiskovalcev morate poznati značilnosti SEO optimizacije za različne iskalnike. Na primer