Іздеу жүйелері қай жылы пайда болды? Іздеу жүйелері. Іздеу жүйесі нарығы

Интернеттің алғашқы күндерінде пайдаланушылар артықшылықты азшылық болды және қол жетімді ақпарат көлемі салыстырмалы түрде аз болды. Ол кезде оған қол жеткізу негізінен әртүрлі ірі оқу орындары мен зертханалардың қызметкерлеріне қолжетімді болды және алынған мәліметтер ғылыми мақсатта пайдаланылды. Ол кезде интернетті пайдалану қазіргідей өзекті емес еді.

1990 жылыБритандық ғалым Тим Бернерс-Ли (ол сондай-ақ URI, URL, HTTP, World Wide Web өнертапқышы) сайтты жасады. info.cern.ch, бұл Интернет сайттарының әлемдегі бірінші қол жетімді каталогы. Осы сәттен бастап Интернет тек ғылыми ортада ғана емес, сонымен қатар жеке компьютерлердің қарапайым иелері арасында да танымал бола бастады.

Осылайша, қол жеткізуді жеңілдетудің бірінші жолы ақпараттық ресурстарИнтернетте веб-сайттардың каталогтарын қалыптастыру басталды. Олардағы ресурстарға сілтемелер тақырыптар бойынша топтастырылған.

Мұндай бірінші жоба Yahoo ашық болып саналады 1994 жылдың сәуірінде. Ондағы сайттар санының жылдам өсуіне байланысты көп ұзамай сұраныс бойынша қажетті ақпаратты іздеуге мүмкіндік туды. Әрине, бұл әлі толыққанды іздеу жүйесі емес еді. Іздеу тек каталогтағы деректермен шектелді.

Интернет дамуының алғашқы кезеңдерінде сілтеме каталогтары өте белсенді пайдаланылды, бірақ бірте-бірте танымалдылығын жоғалтты. Себебі қарапайым: қазіргі каталогтарда көптеген ресурстар болса да, олар Интернетте қолжетімді ақпараттың аз ғана бөлігін көрсетеді. Мысалы, желідегі ең үлкен каталог - DMOZ(Ашық каталог жобасы). Ол бес миллионнан астам ресурс туралы ақпаратты қамтиды, Google іздеу деректер базасында сегіз миллиардтан астам құжаттан төмен.

Орыс тіліндегі ең үлкен каталог - Яндекс каталогы. Онда жүз төрт мыңнан сәл астам ресурстар туралы ақпарат бар.

Іздеу жүйесін дамытудың хронологиясы

1945– Американдық инженер Ванневар Буш кейіннен гипермәтіннің пайда болуына әкелген идеяның жазбасын жариялады және осылайша сақталған ақпараттан деректерді жылдам алу жүйесін әзірлеу қажеттігін талқылады (қазіргі іздеу жүйелерінің баламасы). Ол енгізген жадты кеңейту құрылғысының концепциясы Интернетте ақырында жүзеге асатын түпнұсқа идеяларды қамтыды.

1960 ж— Джерард Салтон және оның Корнелл университетіндегі командасы SMART ақпараттық іздеу жүйесін әзірледі. SMART — Salton's Magic Automatic Retriever of Text құралының аббревиатурасы, яғни «Salton's Magic Automatic Text Retriever». Жерард Салтон заманауи іздеу технологиясының атасы болып саналады.

1987-1989 – дамыған Арчи— FTP мұрағаттарын индекстеу үшін іздеу жүйесі. Archie ftp серверлеріндегі тізімдерді іске асыруды автоматтандыратын сценарий болды, олар кейін жергілікті файлдарға жіберілді, содан кейін ғана жергілікті файлдарда орындалады. жылдам іздеуқажетті ақпарат. Іздеу стандартты Unix grep пәрменіне негізделген, ал деректерге пайдаланушының қол жеткізуі telnet желісіне негізделген.

Келесі нұсқада деректер жеке деректер қорларына бөлінді, олардың бірінде тек мәтіндік файл атаулары болды; ал екіншісі – мыңдаған хосттардың иерархиялық каталогтарына сілтемелері бар жазбалар; және алғашқы екеуін байланыстыратын тағы бір. Archie бағдарламасының бұл нұсқасы алдыңғы нұсқасына қарағанда тиімдірек болды, өйткені іздеу тек файл атаулары бойынша жүргізіліп, бұрыннан бар көптеген көшірмелерді жойды.

Іздеу жүйесі барған сайын танымал болды, әзірлеушілер оның жұмысын қалай тездетуге болатынын ойлай бастады. Жоғарыда аталған дерекқор қысылған ағаш теориясына негізделген басқасымен ауыстырылды. Жаңа нұсқа, негізінен файл атауларының тізімінің орнына толық мәтінді дерекқорды жасады және бұрынғыдан айтарлықтай жылдамырақ болды. Сонымен қатар, кішігірім өзгерістер Archie жүйесіне веб-беттерді индекстеуге мүмкіндік берді. Өкінішке орай, әртүрлі себептермен Арчидегі жұмыс көп ұзамай тоқтап қалды.

1993 жылыӘлемдегі бірінші іздеу жүйесі жасалды Дүниежүзілік өрмек Wandex. Ол Массачусетс технологиялық институтынан Мэттью Грей әзірлеген World Wide Web Wanderer ботына негізделген.

1993 жыл– Мартин Костер жасайды Aliweb- World Wide Web желісіндегі алғашқы іздеу жүйелерінің бірі. Сайт иелері іздеуде көрінуі үшін оларды Aliweb индексіне өздері қосуға мәжбүр болды. Тым аз веб-шеберлер жасағандықтан, Aliweb танымал бола алмады

1994 жылдың 20 сәуірі– Вашингтон университетінен Брайан Пинкертон босатылды WebCrawler— беттерді толығымен индекстейтін бірінші бот. Іздеу жүйесі мен оның предшественниктерінің негізгі айырмашылығы - ол пайдаланушыларға кез келген веб-бетте кез келген кілт сөзді іздеуге мүмкіндік береді. Бүгінгі таңда бұл технология кез келген іздеу жүйесінің іздеу стандарты болып табылады. WebCrawler іздеу жүйесі пайдаланушылардың кең ауқымына белгілі бірінші жүйе болды. Әттең өткізу қабілетітөмен болды және жүйе күндіз жиі қолжетімсіз болды.

1994 жылдың 20 шілдесі- ашылды ЛикосКарнеги Мелон университетінде жасалған іздеу технологиясының негізгі дамуы болып табылады. Майкл Малдин осы іздеу жүйесіне жауапты болды және әлі күнге дейін Lycos Inc компаниясының жетекші маманы болып қала береді. Lycos 54 000 құжат каталогымен ашылды. Бұған қоса, ол берген нәтижелер реттелген, сонымен қатар префикстер мен шамамен сәйкестіктер ескерілген. Бірақ Lycos-тың негізгі айырмашылығы оның үнемі кеңейтіліп отыратын каталогында болды: 1996 жылдың қарашасына қарай 60 миллион құжат индекстелді, бұл сол кездегі кез келген басқа іздеу жүйесінен көп.

1994 жылдың қаңтары- негізі қаланды Ақпарат іздеу. Бұл шын мәнінде жаңашыл емес еді, бірақ оның бірқатар пайдалы толықтырулары болды. Осы танымал толықтырулардың бірі сіздің бетіңізді нақты уақытта қосу мүмкіндігі болды.

1995 жыл- бастады AltaVista. Пайда болғаннан кейін AltaVista іздеу жүйесі пайдаланушылар арасында тез танылды және өз құрдастары арасында көшбасшы болды. Жүйе сол кезде іс жүзінде шексіз өткізу қабілетіне ие болды, бұл табиғи тілде сұрауларды құрастыруға, сондай-ақ тұжырымдауға болатын бірінші іздеу жүйесі болды. күрделі сұраулар. Пайдаланушыларға 24 сағат ішінде өздерінің URL мекенжайларын қосуға немесе жоюға рұқсат берілді. AltaVista сонымен қатар көптеген іздеу кеңестері мен амалдарын ұсынды. AltaVista жүйесінің басты артықшылығы көптеген тілдерді, соның ішінде қытай, жапон және корей тілдерін қолдау болып саналады. Шынында да, 1997 жылы Интернеттегі бірде-бір іздеу жүйесі бірнеше тілмен, әсіресе сирек кездесетін тілдермен жұмыс істемеді.

1996 жыл— AltaVista іздеу жүйесі орыс тіліне арналған морфологиялық кеңейтімді іске қосты. Сол жылы алғашқы отандық іздеу жүйелері – Rambler.ru және Aport.ru іске қосылды. Алғашқы отандық іздеу жүйелерінің пайда болуы Рунет дамуының жаңа кезеңін белгіледі, бұл орыстілді қолданушыларға ана тілінде сұрау салуға, сондай-ақ желіде болып жатқан өзгерістерге жылдам жауап беруге мүмкіндік берді.

1996 жылы 20 мамыр— іздеу жүйесімен бірге Inktomi корпорациясы пайда болды Хотбот. Оны жасаушылар Калифорния университетінің екі командасы болды. Сайт пайда болған кезде ол тез танымал болды. 2001 жылдың қазан айында Дэнни Салливан «Inktomi's спам сайттарының дерекқоры жұртшылық үшін ашық» атты мақала жазды, онда Inktomi компаниясының кездейсоқ спам-сайттар дерекқорын, сол кезде шамамен 1 миллион URL мекенжайы бар, жұртшылыққа қолжетімді етіп жасағанын сипаттайды. .

1997 жыл– Батыс елдерінде Стэнфорд университетінен С.Брин мен Л.Пейдж негізін қалаған кезде іздеу жүйелерінің дамуында бетбұрыс болды. Google(BackRub жобасының бастапқы атауы). Олар өздерінің іздеу жүйесін әзірледі, бұл пайдаланушыларға морфологияны, сөздердің емле қателерін ескере отырып, жоғары сапалы іздеуді жүзеге асыруға мүмкіндік берді, сонымен қатар сұрау нәтижелерінің өзектілігін арттырады.

1997 жылғы 23 қыркүйек– деп жариялады Яндекс, ол тез арада орыстілді интернет пайдаланушылар арасында ең танымал іздеу жүйесіне айналды. Яндекс іздеу жүйесінің іске қосылуымен отандық іздеу жүйелері сайттарды іздеу және индекстеу жүйесін жетілдіріп, нәтижелерді жеткізумен қатар, жаңа қызметтерді ұсына отырып, бір-бірімен бәсекеге түсе бастады.

Осылайша, іздеу жүйелерінің дамуы мен олардың қалыптасуын жоғарыда аталған кезеңдерді сипаттауға болады.

Бүгінгі таңда әлемдік нарықта үш көшбасшы - Google, Yahoo және Bing орнықты. Олардың өз деректер базасы және өз іздеу алгоритмдері бар. Көптеген басқа іздеу жүйелері осы үш негізгі іздеу жүйесінің нәтижелерін пайдаланады. Мысалы, AOL дерекқорды пайдаланады Google деректеріал AltaVista, Lycos және AllTheWeb Yahoo дерекқорын пайдаланады.Түрлі комбинациялардағы барлық басқа іздеу жүйелері аталған жүйелердің нәтижелерін (мәселелерін) пайдаланады.

ТМД елдерінде танымал іздеу жүйелеріне ұқсас талдау жасасақ, mail.ru хабарларын тарататынын көреміз. Google іздеу, өзінің жаңа әзірлемелерін қолдана отырып, Rambler өз кезегінде Яндекс таратады. Сондықтан бүкіл RuNet нарығын осы екі алпауыт арасында бөлуге болады.

Сондықтан ТМД елдерінде веб-сайтты жылжыту, әдетте, осы екі PS-те ғана жүзеге асырылады.

1. Кіріспе

Веб-сайттарды іздеу жүйесін оңтайландыру әдетте веб-сайт құрылымын өзгертуді, оны жарнамаланатын сұрауларға байланысты мәтіндік мазмұнмен толтыруды қамтиды. әртүрлі жолдарресурстың сілтемесін арттыру. Стандартты оңтайландыру процестерінен басқа, белгілі бір іздеу жүйесіне қолданылған көптеген әдістер бар. Әрине, іздеу жүйелері ашық дереккөзәлі де сирек кездеседі және оңтайландырушыларда басқатырғыштар көп, бірақ кейбір негізгі мінез-құлық үлгілерін бұрыннан қалыптасқан жүйелерде байқауға болады.

Бұл мастер-класста біз жанасумен боламыз салыстырмалы талдауЕң танымал шетелдік іздеу жүйелерін және ресейлік іздеу жүйелерін қарастырайық.

2. Ресейдің іздеу жүйелері

Google, Yandex және Rambler қазіргі уақытта Ресейдегі ең танымал іздеу жүйелері болып саналады. Яндекс жүйесі көбірек барады және қажетті дәрежеде сәйкес нәтижелерге ие, сондықтан көбінесе оңтайландырушылар осы жүйедегі ресурсты жылжытуға міндеттенеді.

Осы іздеу жүйелерінің әрқайсысын толығырақ қарастырайық.

Google

Google-дың өзінің ресейлік аналогы бар, ол американдық түпнұсқаға қарағанда танымал емес, бірақ іздеу сапасы жағынан одан кем түспейді. Ресейде Google-дың көптеген жанкүйерлері бар, олар бұл іздеу жүйесі ең жақсы нәтиже береді.

Google пайдаланатын PageRank ең алдымен сілтеменің танымалдылығына негізделген. Анау. Беттің өзектілігін есептеу кезінде ең үлкен үлес басқа беттердегі беттерге сілтемелердің саны мен сапасынан келеді.

Қосулы осы сәт Google дерекқорында миллиардтан астам индекстелген беттер бар.

Google - сіздің сайтыңызды терең индекстейтін бірнеше іздеу жүйелерінің бірі. Google сілтеменің танымалдылығын беттің өзектілігін анықтаудағы ең маңызды фактор ретінде пайдаланады. Сондықтан үлкен және танымал сайттардың іздеу нәтижелерінде жоғары орынға шығуы оңайырақ. Бұл сонымен қатар Google-ді спамнан қорғайды.

Google келесі факторлардың рейтингтік беттерге ең әсер ететініне сенеді:

• Сілтеменің танымалдылығы (цитата индексі);
• Түйінді сөздердің жақындығы мен тығыздығы (түйінді сөздердің тығыздығы мен жиілігі);
• Сілтеме мәтініндегі түйінді сөздер (сілтемелердегі кілт сөздер);
• Екпінді мәтін (екпінді мәтін).

Айырықша ерекшелігіЯндекс – барлық сөз формаларында интуитивті іздеу. Орыс тілінің ерекшеліктерінің бірегей дамуы.

Яндекс каталогында мұндай тұжырымдама қолданылады тақырыптық дәйексөз индексі (TCI) . Ол сіздің сайтыңызға сыртқы сілтемелердің саны мен сапасымен анықталады. Сілтеменің сапасына сізге сілтеме жасайтын ресурстың TCI әсер етеді. Сіздің сайтыңыздың сізге сілтеме жасайтын ресурстарға тақырыптық жақындығы маңызды рөл атқарады.

Дәйексөз индексін есептеу кезінде форумдардан, веб-тақталардан, конференциялардан және сайттардағы сілтемелер тегін хостинг(егер олар Яндекс каталогында сипатталмаса). Әрине, Яндекс индекстемейтін сайттардың сілтемелері (мысалы, шетелдік сайттар) ескерілмейді.

Хосттардың саны келушілерге байланысты (неғұрлым көп болса, соғұрлым көп хосттар), ал Яндекс дәйексөз индексі сайт авторларына байланысты (ресурсқа неғұрлым көп авторлар сілтеме жасаса, CY мәні соғұрлым жоғары болады).

Дәйексөз индексінің мәні Яндекс каталогындағы ресурстың өзектілігін және сәйкесінше таңдалған бөлімдегі сіздің сайтыңыздың орнын анықтайды.

Құжатты қайта индекстеу шамамен екі аптада бір рет орындалады, бірақ робот әр сайтқа бөлек реттеледі. Мұның бәрі жаңарту жиілігіне байланысты. Яндекске сәйкес тег< meta name="Revizit-after" content="n-days">роботтың жұмысында ешқандай рөл атқармайды.

Яндекс ресейлік желіні индекстейді, сондықтан іздеу жүйесіне su, ru, am, az, by, ge, kg, kz, md, ua, uz домендеріндегі серверлер енгізіледі. Қалған серверлер оларда орыс тіліндегі мәтін табылған жағдайда ғана қосылады.

Тақырып туралы ақпарат (тег< title >) Яндекс іздеу нәтижелерінде көрсетеді. Тегтегі сөздер< title >, басқаларға қарағанда салмағы көп. Тегтегі кілт сөздер< meta>сонымен қатар құжаттағы сөздің салмағын арттырады, бірақ сөздің өзі бетте болса ғана.

Жоғарыда аталған әдістерден басқа, сөздің өзектілігіне оның тақырыптарда қолдану жиілігі әсер етеді (< h1>, < h2>...), alt атрибутында, құралдар кеңестерінде (тег< acronym>) және бұл сөздің құжатта кездесетін пайызы, яғни. оны қаншалықты жиі қолданасыз. Бірақ сонымен бірге құжаттың мағынасын сақтау қажет, әйтпесе Яндекс бұл сөзді спам деп санауы мүмкін.

Rambler

Бұл бүгінгі таңдағы ең жақсы рубрикатор. Бұл ыңғайлы, өйткені барлық ресурстар бөлімдерге, бөлімшелерге және т.б. Олардың көпшілігі белгілі бір ресурстың танымалдылығын анықтауға мүмкіндік беретін Top100 рейтингіне қатысады.

Rambler-те веб-сайтты жылжытудың негізгі факторы сайтта орнатылған есептегіш арқылы өлшенетін жақсы мазмұн мен трафик болып табылады деп саналады. Осылайша, рейтингтегі жоғары орындарды Интернетте жақсы ілгерілетілген, жоғары сапалы және бұрыннан қалыптасқан, трафикті жоғары сайт иелене алады.

Апорт

Көрсетілген іздеу жүйелерінің ең танымалы. Негізгі критерийлер бұл жүйесайттарды сұрыптау кезінде мыналарды ескереді:

• құжат мәтініндегі іздеу сөздерінің саны (пайызбен), құжат мәтініндегі іздеу сөздерінің арасындағы қашықтық;
• мәтіндегі іздеу сөздері кездесетін орын (атауы, сипаттамасы, мета тег және т.б.);
• сыртқы түрімәтінде іздеу сөздері терілетін шрифт (көлемі, жуандығы, түсі);
• Интернеттен сілтемелер саны бұл құжат;
• Интернеттен осы құжатқа сілтемелер мәтінінде іздеу сөзін пайдалану.

3. Шетелдік іздеу жүйелері

Төменде келтірілген шетелдік іздеу жүйелері бүкіл әлемде кеңінен танымал және қолданылады. Веб-шеберлер үшін бұл іздеу жүйелері тіркелудің ең маңызды орындары болып табылады, өйткені олар сайтқа көптеген келушілерді тартуға мүмкіндік береді. Аталған жүйелердің кейбірі толыққанды іздеу жүйелері емес, тек басқа белгілі іздеу жүйелерінің ресурстарын пайдаланады.

Бұл индекстелген беттердің санына негізделген ең үлкен іздеу жүйелерінің бірі болып саналады. Жүйе күрделі таңдау критерийлері арқылы іздеу мүмкіндігінің арқасында үлкен танымалдылыққа ие болды. AltaVista Open Directory, LookSmart, Ask Jeeves каталогтарынан іздеу түріндегі қосымша қызметтерді ұсынады.

Google - бұл сайттың танымалдығының негізгі өлшемі ретінде веб-сайтқа сілтемелер санын пайдаланатын іздеу жүйесі. Бұл әсіресе қарапайымды пайдаланып жақсы сайттарды іздеу кезінде пайдалы іздеу сұраулары. Google өте маңызды сілтемелермен танымал. Google индекстелген сайттардың өте үлкен дерекқорына ие және оның кейбір нәтижелерін Yahoo және Netscape Search қызметтеріне береді.

Yahoo - ең танымал және ең көне іздеу жүйесі. Yahoo-да каталогтарының мазмұнын құрастыратын және өңдейтін 150-ге жуық редактор жұмыс істейді. Yahoo дерекқорында 1 миллионнан астам индекстелген сайттар бар. Сондай-ақ, жеке деректер базасы болмаған жағдайда, Yahoo Google дерекқорын пайдаланады, ал бұрын, ол Inktomi дерекқорын пайдаланғанын айту керек.

Direct Hit шертулер санын өлшейді. Көбірек клик алатын сайттар алады ең жақсы рейтинг. «Танымал іздеу жүйесі» ретінде белгілі.

Direct Hit нәтижелері HotBot бағдарламасында да пайда болады және оларды MSN іздеуінде де көрсетуге болады.

Жүйе нәтижелері LookSmart, Inktomi, RealNames және Direct Hit қызметтерінен алынған. Іздеу пайдаланушыларында алдыңғы іздеу нәтижелерін сақтаудың бірегей мүмкіндігі бар.

Жүйенің таңғажайып айырмашылығы - іздеу нәтижелеріндегі позициялар сатылады. GoTo мұны маңыздырақ деп санайды. Сондай-ақ жоғарырақ орындарды сатып алуға болады әртүрлі рейтингтер. Төленбеген нәтижелерді Inktomi қамтамасыз етеді.

Бұл жүйе іздеу сөзін тікелей енгізу мүмкіндігін жүзеге асырмайды, тек басқа іздеу жүйелерінің интерфейсі арқылы. Және олардың саны өте көп.

Тән ерекшелігі осы базадағы серіктестердің әрқайсысы үшін тамаша нәтиже деп атауға болады. Нәтижелерді өзгерту белгілі бір іздеу жүйесінің нәтижелерінің басқалардан ерекшеленуіне мүмкіндік береді.

Бұл жүйе еріктілердің көмегімен толтырылды. Жеткілікті қалыптасқаннан кейін оның нәтижелерін еркін пайдалануға мүмкіндік туды. Қазіргі уақытта Open Directory Lycos, AOL Search, AltaVista және HotBot арқылы пайдаланылады.

Бұл жүйенің айрықша ерекшелігі – кілт сөзді терген кезде (мысалы, компания бренді) сол компанияның ресми сайтына кіруге болады.

4. Көтермелеу ерекшеліктері

Қандай іздеу жүйесі болса да, ресейлік немесе шетелдік, қандай сүзгілеу алгоритмдері болса да, белгілі бір сұрау үшін ресурстың өзектілігін бағалаудың негізгі критерийі - бұл жақсы жаңалық жоғары сапалы мәтіндік мазмұнның болуы. Саналы оңтайландырушылар үшін ресурсты алға жылжыту кезіндегі басты міндет, ең алдымен, нақты іздеу жүйесін оңтайландыру емес, сайттың мазмұнын, оның ішкі сілтемесін шарлауын және тікелей пайдаланушыға ыңғайлылығын оңтайландыру болып табылады.

Көптеген іздеу жүйелерінде жарнамалаудың екінші маңызды қадамы - ресурсқа сілтемелердің максималды саны. Көптеген тікелей пайдаланушылар арасында бұл критерий нәтижені толығымен қамтамасыз ете алмайды деген пікір бар болса да, бүгінгі күні қажет.

Түрлі іздеу жүйелерін жылжытудың басқа мүмкіндіктері, шынын айтқанда, толығымен «таза» емес, іздеу жүйелерінің сүзгі алгоритмдерінің шығындарымен тікелей қалыптасады деп айта аламыз. Осылайша, іздеу жүйелерінің өзі оптимизаторларды трюктерді қолдануға итермелейді. Бұл әсіресе монополияға бейімділікпен сипатталатын ресейлік негізгі іздеу жүйелеріне қатысты.

5. Қорытынды

Мастер-класс іздеу гиганттары арасындағы түбегейлі айырмашылықтарды бағалауға және Интернетте көбірек немесе аз маңызды ақпаратты қалай алуға болатыны туралы түсінік алуға мүмкіндік береді. Көптеген іздеу жүйелерінің болуы айтарлықтай бәсекелестік тудырады және біз білетіндей, бәсекелестік прогресс пен дұрыс бағытта дамуға бағытталған процестерді тудырады. Бұл ретте басты басымдық бұрынғысынша сапалы нәтиже болып табылады. Ура!

Интернет қауымдастығының дамуының алғашқы жылдарында белсенді интернет пайдаланушылар азшылықты құрады, ал интернет-ресурстардағы ақпарат көлемі салыстырмалы түрде аз болды. Әлемге қол жеткізу ақпараттық желіКөбінесе ғылыми зертханалар мен ірі оқу орындарының қызметкерлері ғана болды. Жалпы алғанда, желілік ресурсты пайдалану бүгінгідей өзекті емес еді.

Іздеу жүйелерінің даму тарихы

Интернетті көпшілікке тарату жолындағы үлкен қадам 1990 жылы info.centr.ch сайтының пайда болуы болды. Бұл сайт Интернет сайттарының бірінші жалпыға қолжетімді каталогы болды. Құрастырушысы – британдық ғалым Тим Бернерс-Ли, ол сонымен қатар URI, HTTP, World Wide Web және URL құрушы болып саналады. Осы сәттен бастап Интернет-сайттар пайдаланушылардың мамандандырылған топтарында ғана емес, сонымен қатар үй компьютерлерінің қарапайым иелері арасында да өзекті болды. Бұл каталогта ыңғайлы болу үшін ұқсас тақырыптар бойынша топтар негізінде ақпараттық ресурстар орналастырылған, бұл ақпаратты іздеуді айтарлықтай жеңілдетті.

Бірақ прогресс мұнымен тоқтап қалмады және 1994 жылы Лукос деген атпен белгілі Карнеги университеті жасаған іздеу технологиясы дүниеге келді. Майкл Малдин жасаған бұл анықтамалық 50 000-нан астам құжат ресурсынан басталды. Лукоста сұраулар сұраудың шамамен сәйкестіктерін есепке алды және іздеу нәтижесі кіріс және шығыс ақпарат арасындағы сәйкестікке байланысты дәрежеленді. Сондай-ақ, ресурс үнемі жаңа интернет беттерімен жаңартылып отырды. Қараша айында Лукоста 55 миллионнан астам беттер мен құжаттар болды, бұл сол кездегі кез келген құжат каталогынан әлдеқайда көп.

1994 жылдың соңында Infosek ресурсы пайда болды. Басқа ресурстармен салыстырғанда оның бірқатар артықшылықтары болды. Мысалы, нақты уақыт режимінде пайдаланушының сайттарды каталог дерекқорына қосу.

1995 жылы іздеу жүйесіндегі жаңа құбыжық AltaVista болды. Ол интернет қолданушылары арасында тез танымал болды және өз саласында жетекші орынға ие болды. Оның басты ерекшелігі табиғи, ауызекі тілде сұрауларды құрастыру мүмкіндігі болды, сонымен қатар пайдаланушыларға өздерінің URL мекенжайларын қосуға рұқсат берілді. Дегенмен, AltaVista-ның басты артықшылығы оның корей, жапон және қытай, сондай-ақ орыс тілдері сияқты бірнеше тіл бумаларын қолдау болды.

Іздеу технологиясындағы үлкен қадам Интернетте жаңа іздеу жүйесінің пайда болуы болды, оның аты қазір әрбір пайдаланушыға, атап айтқанда Google-ға белгілі. 1997 жылы Стэнфорд университетінен Л.Пейдж пен С.Брин өздерінің ойшылдарының іздеу алгоритмдеріне жаңа мүмкіндіктерді енгізді. Іздеуде жүйе шығарған іздеу нәтижелерінің өзектілігінің жүйелері қолданылды және сұраныс жасағанда морфология және мүмкін емле қателері ескерілді.

Қазіргі уақытта іздеу жүйелері нарығында үш негізгі көшбасшы бар - Bing, Google және Yahoo. Олардың иелігінде іздеу алгоритмдері мен өз өндірісінің деректер базасы бар. Көптеген іздеу жүйелері, олардың көпшілігі бар, іздеу жүйелері арасында осы үш титанның әзірлемелерін пайдаланады.

Іздеу жүйелерінің арқасында қарапайым адамға ақпараттық өрістің кең ауқымын ашу оңайырақ болды. Оларды дамытпай, адамдар арасындағы ақпарат алмасу жолдарын жетілдіру мүмкін емес.

Интернеттің дамуы енді ғана басталған кезеңде қолжетімді ақпараттың көлемі салыстырмалы түрде аз болды, интернетті пайдаланушылар аз болды. Желі дамуының бастапқы кезеңдерінде оны университеттер мен ғылыми зертханалардың қызметкерлері мекемелер арасында ақпарат алмасу үшін пайдаланды. Ол кезде интернеттен ақпарат іздеу қазіргідей өзекті емес еді.

Ақпараттық ресурстарға қолжетімділікті ұйымдастырудың және жүйелеудің бірінші жолы веб-сайттардың анықтамалықтарын құру болды. Олар сілтемелерді белгілі бір тақырыптар бойынша топтастыруға кірісті.

Бұл аймақтағы пионер 1994 жылы сәуірде пайда болған Yahoo болды. Уақыт өте келе сайттар саны артып, Yahoo каталогтарды іздеу опциясын қосты. Бұл нақты мағынада іздеу жүйесі емес еді, өйткені іздеу ауқымы каталог ресурстарымен шектелген.

Кейіннен каталогтар таралып, барлық жерде қолданыла бастады, бірақ Интернет бір орында тұрған жоқ, бірақ дамуын жалғастырды. Онымен бірге іздеу әдістері де дамыды. Қазіргі уақытта каталогтар дерлік танымалдылығын жоғалтты, бұл қазіргі заманғы каталог, тіпті оның құрамында ресурстардың үлкен көлемі болса да, желідегі ақпараттың аз ғана бөлігіне қол жеткізуді қамтамасыз ете алатындығымен түсіндіріледі.

Бұл күндері интернеттегі ең үлкен каталог 5 миллион ресурстар туралы ақпаратты қамтитын Open Directory жобасы немесе DMOZ болып табылады, бірақ бұл, мысалы, шамамен 8 миллиард құжатты қамтитын Google іздеу жүйесімен салыстырғанда, салыстырмалы түрде аз.

Толыққанды іздеу жүйесі тек 1994 жылы шығарылды, ол WebCrawler іздеу жүйесі болды.

Бір жылдан кейін, 1995 жылы AltaVista және Lycos іздеу жүйесінің жобалары пайда болды. Солардың бірі, атап айтқанда, AltaVista ұзақ жылдар бойы іздеу саласында жетекші орынға ие болды.

Екі жылдан кейін, 1997 жылы Стэнфорд университетінің студенттері Сергей Брин мен Ларри Пейдж бүгінде іздеуде көшбасшы болып табылатын Google іздеу жүйесін жасады.

Биыл да ресейлік Яндекс іздеу жүйесінің құрылғаны ресми жарияланған жыл болды, ол әлі күнге дейін желінің орыстілді сегментінде көшбасшы болып табылады.

Қазіргі уақытта халықаралық деңгейге жеткен тек 3 іздеу жүйесі бар: MSN Search, Yahoo және Google. Бұл жүйелердің өз деректер базасы мен іздеу алгоритмдері бар. Басқа іздеу жүйелерінің көпшілігі өз нәтижелерін пайдаланады. Сонымен Mail.ru Яндекс дерекқорын пайдаланады, search.aol.com Google пайдаланады, ал Lycos, AltaVista және AllTheWeb Yahoo пайдаланады.

Қазіргі уақытта ресейлік интернетте іздеу көшбасшысы Яндекс, одан кейін Rambler, одан кейін Google, Mail.ru, A порты және KM.ru.

Іздеу жүйелерінде әртүрлі операциялық алгоритмдер бар және іздеу нәтижелерінде жақсы орын алу және мақсатты келушілерді тарту үшін әртүрлі іздеу жүйелері үшін SEO оңтайландыру мүмкіндіктерін білу қажет. Мысалы

Интернеттің ресейлік сегментіндегі алғашқы іздеу жүйелерінің тарихы 1995 жылдан басталады деп жалпы қабылданған. Дәл осы жылы Altavista іздеу жүйесінің морфологиялық кеңейтімі Runet пайдаланушыларына қол жетімді болды. Кеңейтуден кейін бірден дерлік Aport және Rambler түпнұсқа іздеу жүйелері пайда болды, олар бірінші ресейлік іздеу жүйелері болып саналады.

AltaVista 1995 жылдың желтоқсанында шығарылды және оны сол кездегі ең қуатты DEC Alpha есептеу сервері қолдады. Бұл күніне миллиондаған іздеу сұрауларын өңдей алатын ең жылдам іздеу жүйесі болды.

Апорт

Aport іздеу жүйесі 1996 жылдың ақпанында Rambler-тен бірнеше ай бұрын көпшілікке көрсетілді. Оны іске қосу кезінде машина тек russia.agama.com сайтында іздеді. Кейіннен, Aport әзірлеушілері өз жобаларын әзірлеуде өте баяулық көрсетті, іздеуді өте ұзақ уақыт бойы, алдымен 4 серверде, содан кейін 6. Апорт бүкіл Рунетті индекстеуді 1997 жылдың қарашасында ғана үйренді, сол кезде. ресми түрде іске қосылды. Осы уақытқа дейін Rambler деп аталатын басқа іздеу жүйесі орыс тіліндегі сегментте сәтті жұмыс істеп жатыр.

Барлық осы жағдайларға қарамастан, Апорту 2000 жылдардың басына дейін. нарықтың негізгі ойыншылары Rambler және Яндекспен сәтті бәсекелесе алды және Рунеттегі іздеу көшбасшыларының тізіміне қосылды. Кейіннен бұл іздеу жүйесін жасаған компанияны телекоммуникациялық холдинг сатып алды, барлық даму тоқтатылды, ал Апорт өзінің негізгі бәсекелестерінен жеңіліп, позициясын тез жоғалтты.

Қазіргі уақытта Aport - бұл 1400 санаттағы 8 миллионнан астам тауар ұсынатын фирмалар мен компаниялардың үлкен деректер базасы бар электрондық сауда алаңы.

Rambler

Stack телекоммуникациялық компаниясының командасы 1994 жылы түпнұсқа ресейлік іздеу жүйесін құру туралы шешім қабылдады. Осы уақытқа дейін Стектің Интернетпен, серверлермен және веб-сайттармен жұмыс істеу тәжірибесі болды. Интернеттің ресейлік сегментімен жұмыс істей отырып, компания мамандары шетелдік іздеу жүйелері кириллица алфавитін және бірнеше кодтауы бар беттерді іс жүзінде қабылдамайтынын және Runet сайттарын өте нашар индекстейтінін анықтады.

Rambler» тілінен аударылған ағылшынша- «кезбе», «қаңғыбас», «қыдырған адам».

Жаңа іздеу жүйесінің өзегін бағдарламашы Дмитрий Крюков бірнеше айдың ішінде жазған. Жаңа станоктағы жұмысты жасаушысы Сергей Лысаков Крюковқа өте қиын жұмысында белсенді көмектескен Stack компаниясы қаржыландырды. Rambler атауы және болашақ іздеу жүйесінің логотипі, сонымен қатар Дмитрий. rambler.ru домені 1996 жылы 26 қыркүйекте тіркелді, ал 8 қазанда желіде оны жасаушы Rambler деп аталатын іздеу жүйесін орналастырды. Ол кезде жаңа іздеу жүйесі 100 мың құжатты индекстеген болатын, бұл ойластырылған және стратегиялық маңызды қадам болды, бұл Rambler-ге бірнеше жыл бойы RuNet-те сөзсіз іздеу көшбасшысы болуға мүмкіндік берді.