Zgodovina razvoja internetnih iskalnikov. Zgodovina iskalnikov. Storitev kontekstnega oglaševanja – Bing Ads

Kateri iskalnik je bil prvi v Runetu? Yandex, Aport ali Rambler?

Prvi iskalniki Runeta (od katerih je bilo po mnenju enega od ustanoviteljev Ramblerja 2 ali 3) so zelo hitro potonili v pozabo. Med njimi so bile morfološke razširitve sistema AltaVista, ki nam niso zapustile svojih imen. Zato bomo morali izbrati med tistimi, ki ostanejo:

Rambler

Ustvarjanje Ramblerja se je začelo leta 1996, ko je bilo v ruskem segmentu interneta le nekaj deset spletnih mest. Razvoj je bil zaključen do jeseni istega leta. Domena rambler.ru je bila registrirana 26. septembra in 8. oktober 1996, na rojstni dan enega od ustvarjalcev, je bil Rambler odprt za uporabnike.

Rambler - prvi iskalnik v Runetu trenutno obstoječih.

Iskalnik Aport je bil razvit do februarja 1996, vendar je takrat iskal le na strani russia.agama.com. Postopoma je število lokacij raslo proti uradni otvoritvi 11. november 1997 Leto so »Aport« iskali že na 10.000 straneh. Tako je bil "Aport" eden prvih iskalnikov v RuNetu, vendar ga zaradi omejenega obsega iskanja ni mogoče šteti za najstarejšega.

Yandex

CompTek, podjetje, ki je razvilo Yandex, je bilo ustanovljeno leta 1989. Leta 1993 je CompTek razvil Yandex, program za iskanje trdih diskov. Leta 1996 je program dodal možnost iskanja po spletu. Prva je bila napisana leta 1997 iskalni robot, ki ga indeksira Runet in 23. september 1997 Potekala je uradna predstavitev Yandexa.

CompTekov Yandex ni najstarejši, so pa njihove iskalne tehnologije ter raziskave na področju jezikoslovja in morfologije najstarejše v Rusiji.

Zgodovina razvoja ruskega interneta (Runet) uradno sega v leto 1994. Takrat je bila registrirana domena zone.ru in začela so se pojavljati prva spletna mesta, od katerih so mnoga kasneje prerasla v priljubljene portale.

Knjižnica Moškova, informacijska agencija RosBusinessConsulting, studio Artemija Lebedeva - vsi ti viri so bili ustanovljeni sredi 90. let prejšnjega stoletja.

Kako so se pojavili prvi iskalniki

Dolgo časa je bila "populacija" Runeta omejena na majhno število teh pionirjev omrežne tehnologije. Bilo jih je tako malo, da koncept »iskanje« v tistih časih preprosto ni obstajal.

Večino potrebnih spletnih mest je bilo mogoče shraniti v zaznamke brskalnika, za ostala pa so bili imeniki, kjer so bile vse povezave razvrščene v več glavnih kategorij. Prvi takšen katalog je bil projekt Russia on the Net (http://www.ru), malo kasneje so se pojavili DMOZ, Yahoo in Yandex.Catalog.

Sčasoma pa se je število uporabnikov interneta povečevalo in število spletnih mest, ki so jih ti uporabniki lahko obiskali in pridobili potrebne informacije, se je povečalo.

Postopoma so se baze podatkov katalogov tako povečale, da je postalo zelo težko karkoli najti ročno. Potem se je pojavila ideja, da bi avtomatizirali postopek iskanja in za to ustvarili specializirano interaktivno storitev.

Povpraševanje vedno povzroči ponudbo, zato so se iskalni projekti različnih avtorjev začeli pojavljati na internetu eden za drugim. Nekateri med njimi, kot so WebCrawler, Lycos, InfoSeek in drugi, niso uspeli doseči resnejšega uspeha in so čez nekaj časa umrli v neznanju na širnih prostranstvih svetovnega spleta.

Toda za druga, uspešnejša podjetja, se je vse izkazalo veliko bolje - vodilni sodobni razvijalci iskalnih tehnologij so se oblikovali v tem obdobju in v zadnjih letih so uspeli doseči osupljive rezultate.

Kaj je iskalnik

Sodoben iskalnik je kompleksen mehanizem, ki zahteva ogromno virov (človeških in materialnih) za podporo tekoče delo in trajnostni razvoj.

Oblikovanje rezultatov iskanja temelji na razvpiti formuli za razvrščanje, ki upošteva na stotine različnih dejavnikov, od notranje strukture spletnega mesta in besedil njegovih strani do zunanjih povezav, privlačnosti komercialnih ponudb, objavljenih na viru, in vedenjske značilnosti uporabnikov, ki so nanj prešli iz iskanja.

V letih 2006-2007 so predstavniki Yandexa izjavili, da je za dešifriranje njihovega algoritma potreben celoten raziskovalni inštitut, saj njihovo iskanje temelji na upoštevanju več kot 800 različnih dejavnikov. Od takrat so minila leta, formula za razvrščanje je postala za nekaj velikosti bolj zapletena in na dejavnike, ki najbolj vplivajo na rezultate iskanja, je postalo skoraj nemogoče vplivati.

Torej za zunanjo preprostostjo domača stran in hiter odziv Yandexa ali Googla na vneseno iskalno besedno zvezo skriva mukotrpno delo na tisoče ljudi in velike finančne naložbe v infrastrukturo, opremo in človeške vire.

Hkrati pa je očitno, da so si vodilna podjetja danes zagotovila takšno premoč nad tistimi, ki jim želijo vsaj na nek način konkurirati, da se cena vstopa na ta trg meri v milijardah dolarjev.

To stanje lahko potrdi zgodovina poskusov prodora iskalni trg najbolj znano in najbogatejše programsko podjetje Microsoft. Njegov iskalnik Bing se že več kot desetletje postavlja kot resna konkurenca vodilnim igralcem, za kar so vanj vložili ogromne količine denarja.

In šele v zadnjih letih so te naložbe začele dajati prve rezultate, čeprav jih še vedno lahko označimo za zadovoljive le z zelo velikim pretiravanjem: Bingov delež na ruskem trgu je bil v času pisanja tega članka manjši od enega odstotka.

Drug primer, ki dobro ponazarja prejšnje zaključke, je ruski iskalnik Nigma. Njegovi ustvarjalci so izbrali nišno trženjsko strategijo. Očitno so se razvijalci algoritma dobro zavedali, da je na odprtem področju splošnega iskanja skoraj nemogoče tekmovati s stebri trga, zato ubrali pot zagotavljanja iskalnih storitev za izobraževalne strukture s področja kemije, matematike, fizike in druge vede.

Vendar pa je ciljna publika takšnega projekta očitno majhna, kar se jasno odraža v njegovi obiskanosti: po števcu Liveinternet je število uporabnikov tega sistema le desetinka odstotka.

1. Nesporni vodja na lestvici je Yandex. Po istem števcu ima Yandex "kontrolni delež" na trgu iskalnikov: julija 2014 je bil delež iskalnika več kot 52-odstoten.
2. Google je zanesljivo zasedel drugo mesto z 38 %.
3. Tretje mesto z dokaj veliko prednostjo zaseda portal mail.ru. Pred časom je priljubljena stran očitno iskala starejšega brata, ki bi mu lahko prodala po višji ceni – Yandex in Google motorja sta bila izmenično integrirana v njihovo iskalno platformo. Toda od leta 2013 je podjetje zastavilo smer neodvisnega razvoja in zdaj spletno mesto izvaja iskalni algoritem lastne zasnove. Res je, da to nikakor ni vplivalo na tržni delež sistema, ki je očitno določen predvsem s promocijo blagovne znamke in privlačnostjo storitev, predstavljenih na spletnem mestu. V zadnjih letih je promet do storitve go.mail.ru nihal okoli 7%.

Vse druge iskalnike, vključno z nekoč močnim Ramblerom, lahko štejemo le za naravno ozadje - vsi nimajo bistvenega vpliva na porazdelitev mest v prvih iskalnikih, saj so na ravni 0,1-0,7 odstotka iskalnikov. trgu.

Analiza ruskega trga internetnega iskanja

Trg iskalnikov v Rusiji je zelo specifičen. Za opis lahko uporabimo dve značilnosti: koncentrirano in šibko konkurenčno. Delež treh glavnih igralcev namreč presega 97 %, kar kaže na njihovo izjemno prednost pred vsemi drugimi.

Ruski iskalnik Yandex ima prevladujoč položaj. Kot smo že povedali, njegov delež presega 50 %. V tem je naša država edinstvena: samo tukaj, na Kitajskem in Češkem, nacionalni iskalniki predstavljajo oprijemljivo konkurenco svetovnemu velikanu - Googlu.

Po številu obdelanih iskalne poizvedbe Yandex je četrti na svetu. Še več, če je prvo mesto Googla na tem seznamu težko vprašljivo, potem drugo mesto kitajski Baidu povzroča le ogromna populacija te države. Tretje mesto je zasedel Yahoo, ki ima trenutno dvakratno prednost pred ruskim monopolistom.

Po pravilih evropskega trga lahko Yandex res imenujemo monopolist - taka definicija je tam dodeljena vsakemu podjetju, katerega tržni delež presega 35%.

V naši državi se to stanje imenuje prevlada in se ne kaznuje, dokler se ne dokaže dejstvo zlorabe obstoječe prednosti. Jasno je, da je v internetnem okolju zelo težko potrditi dejstvo zlorabe.

Kako ugotoviti delež iskalnika v celotnem prometu

Objektivno oceno tega kazalnika je precej enostavno dobiti. Dejstvo je, da ima velika večina ruskih spletnih mest nameščene števce vodilnega operaterja internetne statistike Liveinternet.

Seveda vsa spletna mesta ne namestijo teh števcev, poleg tega naslednja povezava ne upošteva domenskih con .su in рф. Kljub temu se dani vzorec lahko šteje za precej reprezentativnega, saj upošteva vse glavne teme, regije in vrste spletnih mest, ki so danes na voljo v RuNetu.

Torej, trenutno stanje si lahko ogledate na povezavi: http://www.liveinternet.ru/stat/ru/searches.html?date=2014-07-31;period=... .

To je popoln povzetek števila obiskovalcev, ki so obiskali spletna mesta, registrirana za ruske uporabnike, za junij in julij 2014.

Sklepi so očitni. Analizo stanja smo podali že v prejšnjem razdelku.

Značilnosti glavnih iskalnikov v Rusiji

Yandex

Pojav tega iskalnika na trgu zelo dobro ponazarja stanje v državi v času, ko je začel dobivati ​​sodobno podobo. Ni zaman, da se Yandex imenuje ogledalo Runeta - očitno je to definicijo mogoče razširiti na objektivno resničnost.

Razvoj podjetja je na nek način zelo podoben evoluciji celotne družbe, zato je državni voditelj do neke mere ogledalo celotne države ob koncu 20. stoletja.

Da bi ponazorili tako drzno izjavo, si na kratko oglejmo zgodovino podjetja in iskalnika Yandex.

Za čase po perestrojki je značilno resno ponovno vrednotenje najbolj aktivnega dela družbe in pojav novih energičnih ljudi na političnem in poslovnem prizorišču, ki jih združuje glavna življenjska ideja: posodobiti življenjske pogoje sebi in svoji državi, da bi zagotovili dostojen življenjski standard za vse, ki delijo njihova prepričanja.

Eden od svetil tiste dobe je Arkadij Volozh, ki mu je uspelo okoli sebe združiti najboljše strokovnjake za deloholike, ki so postavili temelje za prihodnji iskalni sistem.

Yandex verjetno nikoli ne bi postal ogledalo Runeta, če ne bi bil neverjeten instinkt Arkadija Volozha, ki je v gradnji ruskega iskalnika uspel razbrati glavno perspektivo tistega časa.

Za uresničitev svoje zamisli mu je uspelo v ta projekt preusmeriti finančne tokove, ustvarjene z menjalnimi posli za izmenjavo serij računalnikov, uvoženih v našo državo v zameno za vlake kubanskih bučnih semen.

Seveda velikih projektov ni brez ekipe somišljenikov. In potem je imel ustanovitelj Yandexa srečo - uspelo mu je pritegniti na svojo stran nadarjenega in zelo obetavnega fizika Ilyo Segaloviča, ki ga je poznal že iz šole.

Težko je reči, kaj je bila zadnja kaplja, ki je odtehtala vse možnosti za sijajno znanstveno kariero bodočega velikega znanstvenika. Lahko se zgodi, da sta resnična obsedenost in talent prepričevanja stalnega direktorja Yandexa igrala odločilno vlogo, vendar je Ilya postal tehnični direktor podjetja in je neprecenljivo prispeval k njegovemu razvoju.

Prav on je postal avtor imena in logotipa, ki je zdaj znan vsem, ki so kdaj obiskali internet. Segalovič se je začel zanimati za idejo o morfološki analizi besednih zvez v ruščini in možnosti razvrščanja besedil na podlagi pravil za gradnjo slovničnih struktur.

Posledično se je pojavil izraz "Še en indeks", ki je v skrajšani različici, zahvaljujoč lahki roki ustanoviteljev iskalnika, postal beseda Yandex. Kasneje, da bi poudarili glavni namen iskalnika - iskanje v rusko-jezičnem segmentu interneta - je bil logotip preoblikovan v Yandex.

Ilya Segalovich je vse svoje življenje posvetil oblikovanju in razvoju tega projekta. Žal je leta 2013 preminil, a njegovo delo živi naprej, Yandex svojo premoč nad tekmeci povečuje z nenehnim izboljševanjem iskalnega algoritma, katerega temelje je postavil njegov pokojni direktor tehnologije in razvoja.

Google

Iskalnik Google je bil ustanovljen leto prej kot Yandex, vendar se je na ruskem trgu pojavil šele leta 2004. Seveda je Yandex z leti uspel svoje iskanje prilagoditi posebnostim naše države.

Kljub temu, da precejšnje število uporabnikov interneta na vprašanje, na katerega ne poznajo odgovora, raje predlaga »Google« kot »vprašaj Yandex«, je glavna težava svetovnega giganta nezadostno upoštevanje morfologija besedil v ruskem jeziku, zaradi česar je odgovor na vprašanja uporabnikov pogosto nepopoln ali rahlo popačen.

Lahko se dolgo prepirate o tem, čigavo iskanje je boljše in kateri sistem zagotavlja bolj motivirane (ali "vroče") stranke. Toda zdi se nam, da je tipična slika za ruskega uporabnika naslednja: najprej se zahteva »ogledalo Runeta« in če rezultati iskanja niso ustrezni (in to se na žalost pogosto dogaja), se zahteva ponovno posredovan Googlu.

Googlove globalne posodobitve se pojavljajo veliko manj pogosto kot Yandexove. A rezultate iskanja spremenijo tako resno, da se mnoga avtoritativna spletna mesta, ki so bila leta na vrhu, znajdejo na dnu prvih stotih iskalnih rezultatov.

na primer Najnovejša različica Algoritem Panda je imel velik vpliv na nekatere vodilne spletne trgovine, vplival je celo na na videz nedotakljivo Amazon.com in druge.

Leta 2013 je podjetje končno prenehalo objavljati iskanja drugih ljudi na svojem spletnem mestu in uvedlo svojo različico iskalnika na go.mail.ru.

Ta korak je mogoče le pozdraviti, saj lahko v prihodnosti iskalnik mail.ru povzroči resen odpor vodilnemu dvojcu, ki se za zdaj lahko malo sprosti, ne da bi za hrbtom občutil sunkovito sapo konkurentov.

Delež tega iskalnika trenutno ne presega 7 %, ima pa dobre možnosti, da se bo zaradi razvoja povečal socialne storitve ki jih zagotavlja podjetje: Odnoklassniki, Moi Krug, pošta itd.

Iskalniki z manj kot 1% tržnim deležem

Ta skupina vsebuje predvsem sisteme, ki se nikoli niso uspeli prebiti v elito ruskega iskanja. Med njimi ima posebno mesto podjetje Rambler, ki je nekoč samozavestno zasedlo drugo mesto in pokazalo zelo obetavne trende.

Rambler

Po tem, ko se je leta 1996 pojavil kot zamisel programerjev iz znanstvenega mesta Pushchino pod vodstvom nadarjenega navdušenca Dmitrija Kryukova, je Rambler takoj postal vodilni na trgu iskalnikov. V tistih časih Yandex še ni obstajal, Google pa je šele začel svoj pohod po Ameriki in sosednjih državah.

Zdi se, da bi takšna prednost morala pomagati "potepuhu" (tako je beseda Rambler prevedena iz angleščine) pridobiti opazne konkurenčne prednosti v razvoju.

Toda notranji konflikti v podjetju ali pomanjkanje jasno opredeljene strategije so privedli do dejstva, da Rambler zdaj oddaja iskanje Yandex in je bolj znan kot zbiralnik nekaterih priljubljenih storitev, vključno z ocenjevalnim mestom Rambler Top100.

Bing

Aka MSN Search, Live Seacrh, Windows Live Seacrh je izdelek Microsofta, ki se obupno bori za mesto pod soncem na trgu iskalnikov. To je ena redkih storitev, ki uporablja lasten motor.

Rezultati iskanja so povsem sprejemljivi, glavna težava spletnega mesta pa je majhna priljubljenost med uporabniki.

Aport

Še en primer žalostne usode nekoč enega vodilnih na trgu. Včasih je bil ta iskalnik trdno na tretjem mestu za Yandexom in Ramblerjem, spletni skrbniki pa so si prizadevali vstopiti v njegov katalog tako aktivno kot v DMOZ ali katalog Yandex.

Zdaj spletno mesto gosti spletno trgovino s priljubljenimi izdelki za gospodinjstvo. Če iskanje po aportu ostane, je skrito nekje v globinah vira, na eni od njegovih poddomen.

Kaj potrebujete, da napišete svoj iskalnik

Če želite odgovoriti na to vprašanje, morate dobro razumeti, kaj je iskalnik in kako deluje. Delno smo že preučili osnovna načela izdelave formule za razvrščanje spletnih mest v rezultatih iskanja. Poleg tega je treba upoštevati naslednje točke:

Glavna naloga iskalnika je zagotoviti odgovor na uporabnikovo zahtevo. Odgovor mora biti jasen in relevanten, sicer bo uporabnik odšel v druge sisteme, kljub nizki konkurenci v tej panogi.

Da bi dal takšen odgovor, mora iskalni algoritem v času svojega oblikovanja pregledati vsebino več milijard spletnih strani v iskanju najprimernejših za določeno zahtevo. Za to iskalniki ustvarijo lastne baze podatkov, imenovane indeksi, in tam shranijo vse potrebne informacije.

Indeks se oblikuje z nenehnim skeniranjem omrežja v iskanju novih spletnih mest, ki so se pojavila, kot tudi sprememb že indeksiranih strani. To delo opravljajo posebni programi, imenovani roboti za indeksiranje.

24 ur na dan obiskujejo spletna mesta in berejo posodobljene informacije. Organiziranje dela takšnih robotov zahteva izgradnjo velikega podatkovnega centra z več tisoč zmogljivimi računalniki z vso infrastrukturo, začenši z brezprekinitveno napajanje in hlajenja do rednega vzdrževanja in nadgradenj.

Uporabniki želijo prejeti hitre in ustrezne odgovore na svoja vprašanja. Zato mora sodoben iskalnik upoštevati ne le lastnosti spletnih mest, ki jih pozna, temveč tudi preference, vedenjske značilnosti in geografsko lego vsake svoje stranke.

Da bi to dosegli, morajo imeti iskalni algoritmi elemente umetne inteligence in biti sposobni samostojnega učenja v procesu svojega dela. Očitno je, da za pisanje takšnega motorja potrebujete veliko ekipo vrhunskih programerjev.

Glede na to, da so vodilni iskalniki vse te težave že rešili in imajo ves potreben potencial za nadaljnji razvoj, se zdi strošek vstopa na ta trg skoraj previsok.

Zato je malo verjetno, da se bo v bližnji prihodnosti pojavil nov igralec, ki bo sposoben hitro prevzeti svoje pravo mesto med obstoječimi sistemi. Če pa se to nenadoma zgodi, bodo imeli koristi vsi – tako iskalniki sami, ki bodo dobili nove spodbude za še večje izboljšave, kot mi, muhasti navadni uporabniki, ki nam vedno nekaj manjka in želimo, da je iskanje vsako leto boljše in kakovostnejše. dan

Na internetu posebna spletna stran, na kateri lahko uporabnik na dano zahtevo prejme povezave do strani, ki ustrezajo tej zahtevi. Iskalni sistem sestavljajo tri komponente: 1 iskalni robot; 2 sistemska indeksa; in 3 programi, ... ... Finančni slovar

Samostalnik, število sopomenk: 3 iskalec (9) lovec (16) iskalnik (13) Slovar sinonimov AS ... Slovar sinonimov

iskalni sistem- iskalnik Spletno mesto, s katerim se išče po drugih spletnih mestih. Iskanje poteka z vnosom ključnih besed v iskalno polje. Za razliko od imenikov, tudi če stran ni bila vnaprej registrirana, jo je mogoče najti z iskalnikom.... ... Priročnik za tehnične prevajalce

iskalni sistem- ieškos sistem statusas T sritis automatika atitikmenys: engl. iskalni sistem vok. Tak sistem, n rus. iskalnik, f pranc. système de recherche, m … Automatikos terminų žodynas

Iskalni sistem- – (angl. iskalnik, sinonimi: iskalnik, iskalnik, iskalnik) – Orodje za iskanje informacij na internetu. Delo iskalnika je praviloma sestavljeno iz dveh stopenj. Poseben program(iskalni robot, stroj, agent,... ... Enciklopedični slovar medijev

Nadzor, avtomatski nadzorni sistem (glej Samodejni nadzor), v katerem se nadzorna dejanja samodejno spremenijo z metodo iskanja, tako da se izvaja najboljši (v nekem smislu) nadzor nad objektom; pri…… Velika sovjetska enciklopedija

Samodejni nadzorni sistem, v katerem se nadzorna dejanja samodejno spreminjajo z uporabo metode samodejnega iskanja, da se izvede najboljše upravljanje objekt; v tem primeru spremembe lastnosti objekta ali zunanji vplivi. Srede vnaprej... Veliki enciklopedični politehnični slovar

SMP 1 je namenjen iskanju reševalcev, ki se znajdejo v kritičnih razmerah, povezanih z življenjsko nevarnostjo, ter iskanju odvrženega tovora in različnih predmetov v pogojih slabe vidljivosti. Vsebuje: radijsko enoto za iskanje aktivnih... ... Slovar izrednih razmer

avtomatiziran sistem za iskanje informacij- 3.2.5 avtomatiziran sistem za iskanje informacij: IRS, izveden elektronsko računalniška tehnologija Vir … Slovar-priročnik izrazov normativne in tehnične dokumentacije

Ta izraz ima druge pomene, glej Aport. Pristanišče... Wikipedia

knjige

• Ekstremni problemi teorije grafov in interneta. Učbenik, Rajgorodski Andrej Mihajlovič. Ta brošura je posvečena študiju različnih ekstremnih problemov v teoriji grafov, katerih (vsaj delna) rešitev je lahko uporabna pri analizi podatkov. Nastala je na podlagi...
• Ekstremni problemi teorije grafov in interneta, Raigorodsky F.M.. Ta brošura je posvečena študiju različnih ekstremnih problemov teorije grafov, katerih (vsaj delna) rešitev je lahko uporabna pri analizi podatkov. Nastala je na podlagi...

V zgodnjih 90. letih prejšnjega stoletja uporabniki interneta iskalnikom niso imeli navade postavljati vprašanj. Povezave do uporabnih strani, za katere smo izvedeli predvsem od prijateljev, smo zbrali v ločeno besedilne datoteke. Kasneje so se pojavila spletna mesta imenikov s kategorijami, ki so se dopolnjevale ročno. Takšni so bili na primer Yahoo! in virtualno knjižnico (VLib), ki jo je vzdrževal in hranil na strežniku CERN izumitelj sodobni internet Tim Berners-Lee.

Za prvi iskalnik v zgodovini velja Archie, ki se je pojavil leta 1990, datotečni arhiv s prenosljivimi imeniki spletnih mest in možnostjo iskanja po njih, ki so ga ustvarili študenti univerze McGill v Montrealu. Archie ni indeksiral vsebine spletnih mest: iskalniki, ki so bili lansirani leta 1993, vključno s World Wide Web Wanderer, ALIWEB in JumpStation, so se tega naučili. Slednji je postal prvi polnopravni iskalnik v sodobnem smislu: s pomočjo robotov je zbiral in razvrščal povezave v iskalnih rezultatih glede na podobnost z uporabnikovo poizvedbo.

Ustvarjalci prvih iskalnikov
večinoma oz opusti to službo, oz šel v službo
velikim internetnim podjetjem

AltaVista, predstavljen leta 1994, je postal prvi iskalnik, ki je delal s poizvedbami v naravnem jeziku, prvi resnično močan iskalnik pa je bil WebCrawler, ki je indeksiral celotno vsebino strani. Končno sta se v letih 1997–1998 začela izvajati Google in Yandex, danes najbolj priljubljena iskalnika v Rusiji. Zahvaljujoč boljšim algoritmom so postali mednarodno oziroma regionalno vodilni, vendar so potrebovali čas, da so prevzeli delež drugim udeležencem na trgu. Ustvarjalci prvih iskalnikov so večinoma opustili ta poklic ali pa se zaposlili v velikih internetnih podjetjih, ki so kupila njihove celotne sisteme.

V času, ko se je razvoj interneta šele začenjal, je bilo razpoložljivih informacij relativno malo, uporabnikov interneta pa malo. V začetnih fazah razvoja mreže so jo uporabljali zaposleni na univerzah in raziskovalnih laboratorijih za izmenjavo informacij med institucijami. Takrat iskanje informacij po internetu, za razliko od danes, ni bilo aktualno.

Prvi način organiziranja in sistematiziranja dostopa do informacijskih virov je bilo ustvarjanje imenikov spletnih mest. Povezave so začeli združevati glede na določene teme.

Pionir na tem področju je bil Yahoo, ki se je pojavil aprila 1994. Sčasoma se je število spletnih mest povečalo in Yahoo je dodal možnost iskanja po imeniku. To ni bil iskalnik v pravem pomenu besede, ker je bil obseg iskanja omejen na vire imenikov.

Kasneje so se katalogi razširili in začeli uporabljati povsod, vendar internet ni obstal, ampak se je še naprej razvijal. Skupaj z njim so se razvile tudi metode iskanja. Vklopljeno ta trenutek Imeniki so skoraj izgubili priljubljenost, to je razloženo z dejstvom, da bo sodoben imenik, tudi če vsebuje ogromno virov, lahko zagotovil dostop le do majhnega dela informacij, ki jih vsebuje omrežje.

Danes je največji imenik na spletu Open Directory Project ali DMOZ, ki vsebuje informacije o 5 milijonih virov, a je to razmeroma malo v primerjavi z na primer Googlovim iskalnikom, ki vsebuje približno 8 milijard dokumentov.

Popoln iskalni sistem je bil izdan šele leta 1994, postal je iskalni sistem WebCrawler.

Leto kasneje, leta 1995, sta se pojavila projekta iskalnika AltaVista in Lycos. Predvsem ena od njih, AltaVista, je bila dolga leta vodilna na iskalnem področju.

Dve leti pozneje, leta 1997, sta študenta univerze Stanford Sergey Brin in Larry Page razvila iskalnik sistem Google, ki je danes vodilna v iskalnem polju.

To leto je bilo tudi leto, ko je bila uradno objavljena ustanovitev ruskega iskalnika Yandex, ki je še vedno vodilni v ruskojezičnem segmentu omrežja.

Trenutno so samo 3 iskalniki dosegli mednarodno raven: MSN Search, Yahoo in Google. Ti sistemi imajo lastne baze podatkov in iskalne algoritme. Večina drugih iskalnikov uporablja njihove rezultate. Tako Mail.ru uporablja bazo podatkov Yandex, search.aol.com uporablja Google, Lycos, AltaVista in AllTheWeb pa Yahoo.

Vodja iskanja na ruskem internetu je trenutno Yandex, sledi mu Rambler, sledijo mu Google, Mail.ru, A port in KM.ru.

Iskalniki imajo različne algoritme delovanja in za dobro pozicijo med iskalnimi rezultati in privabljanje ciljnih obiskovalcev morate poznati značilnosti SEO optimizacije za različne iskalnike. Na primer