Веб-сайтты индекстеу дегеніміз не? Бұл қалай болады? Осы және басқа сұрақтарға жауапты мақаладан таба аласыз. Веб-индекстеу (іздеу жүйелерінде индекстеу) – іздеу жүйесі роботы арқылы дерекқорға сайт туралы ақпаратты қосу процесі, кейіннен мұндай процедурадан өткен веб-жобалар туралы ақпаратты іздеу үшін пайдаланылады.
Веб-ресурстар туралы деректер көбінесе кілт сөздерден, мақалалардан, сілтемелерден, құжаттардан тұрады. Аудио, кескіндер және т.б. да индекстелуі мүмкін. Кілт сөзді анықтау алгоритмі іздеу жүйесіне байланысты екені белгілі.
Индекстелген ақпарат түрлерінде (флеш файлдар, javascript) кейбір шектеулер бар.
Бастауды басқару
Сайтты индекстеу – күрделі процесс. Оны басқару үшін (мысалы, белгілі бір бетті тіркеуге тыйым салу үшін) robots.txt файлын және Рұқсат ету, тыйым салу, Тексеруді кешіктіру, Пайдаланушы агенті және т.б. сияқты нұсқауларды пайдалану керек.
Сонымен қатар, Google және Yandex роботтарынан ресурс мазмұнын жасырып, индекстеу үшін тегтер мен реквизиттер қолданылады (Yahoo тегті пайдаланады).
Goglle іздеу жүйесінде жаңа сайттар екі күннен бір аптаға дейін, ал Яндексте бір аптадан төрт аптаға дейін индекстеледі.
Сайтыңыздың іздеу жүйесінің нәтижелері сұрауларында көрінуін қалайсыз ба? Содан кейін оны Rambler, Yandex, Google, Yahoo және т.б. өңдеуі керек. Веб-сайтыңыздың бар екендігі туралы іздеу жүйелеріне (өрмекшілер, жүйелер) хабарлауыңыз керек, содан кейін олар оны толығымен немесе ішінара тексереді.
Көптеген сайттар жылдар бойы индекстелмеген. Олардағы ақпаратты иелерінен басқа ешкім көрмейді.
Өңдеу әдістері
Сайтты индекстеу бірнеше жолмен жасалуы мүмкін:
- Бірінші опция қолмен қосу. Сайт деректерін іздеу жүйелері ұсынатын арнайы пішіндер арқылы енгізу керек.
- Екінші жағдайда, іздеу жүйесі роботының өзі веб-сайтыңызды сілтемелер арқылы тауып, оны индекстейді. Ол сіздің сайтыңызды жобаңызға әкелетін басқа ресурстардан сілтемелер арқылы таба алады. Бұл әдіс ең тиімді болып табылады. Егер іздеу жүйесі сайтты осылай тапса, ол оны маңызды деп санайды.
Уақыт
Сайтты индекстеу тым жылдам емес. Шарттар әр түрлі, 1-2 апта. Беделді ресурстардан алынған сілтемелер (тамаша PR және Titz бар) сайтты іздеу жүйесінің деректер базасында орналастыруды айтарлықтай жылдамдатады. Бүгінгі күні Google ең баяу болып саналады, дегенмен 2012 жылға дейін ол бұл жұмысты бір аптада орындай алатын. КімгеӨкінішке орай, бәрі тез өзгереді. Mail.ru осы саладағы веб-сайттармен жарты жылдай жұмыс істегені белгілі.
Іздеу жүйелерінде сайтты индекстеу әрбір маманның қолынан келе бермейді. Іздеу жүйелері өңдеген сайттың дерекқорына жаңа беттерді қосу уақытына оның мазмұнын жаңарту жиілігі әсер етеді. Егер ресурста жаңа ақпарат үнемі пайда болса, жүйе оны жиі жаңартылып тұратын және адамдар үшін пайдалы деп санайды. Бұл жағдайда оның жұмысы тездетіледі.
Веб-сайтты индекстеу барысын веб-шеберлерге арналған арнайы бөлімдерде немесе іздеу жүйелерінде бақылай аласыз.
Өзгерістер
Сонымен, біз сайттың қалай индекстелетінін анықтадық. Айта кету керек, іздеу жүйесінің деректер базасы жиі жаңартылып отырады. Сондықтан жобаңыздың оларға қосылған беттерінің саны келесі себептерге байланысты өзгеруі мүмкін (кемуі де, көбеюі де):
- веб-сайтқа қарсы іздеу жүйесінің санкциялары;
- сайтта қателердің болуы;
- іздеу жүйесінің алгоритмдерін өзгерту;
- жексұрын хостинг (жоба орналасқан серверге қол жетімсіздігі) және т.б.
Яндекс жалпы сұрақтарға жауаптар
"Яндекс" - көптеген пайдаланушылар пайдаланатын іздеу жүйесі. Ол өңделген зерттеу сұрауларының саны бойынша әлемдік іздеу жүйелерінің арасында бесінші орында. Оған сайт қоссаңыз, дерекқорға қосу тым көп уақыт алуы мүмкін.
URL қосу оның индекстелуіне кепілдік бермейді. Бұл жүйе роботына айтылатын әдістердің бірі ғанажаңа ресурс туралы. Басқа веб-сайттардағы сайтқа сілтемелер аз немесе жоқ болса, оны қосу оны жылдам табуға көмектеседі.
Егер индекстеу орындалмаса, Яндекс роботынан қосымшаны жасау кезінде серверде қандай да бір ақаулардың бар-жоғын тексеру керек. Сервер қате туралы хабарласа, робот жұмысын тоқтатады және оны бару ретімен аяқтауға тырысады. Yandex қызметкерлері іздеу жүйесінің дерекқорына беттерді қосу жылдамдығын арттыра алмайды.
Яндекс-те сайтты индекстеу өте қиын тапсырма. Сіз іздеу жүйесіне ресурсты қалай қосу керектігін білмейсіз бе? Егер оған басқа веб-сайттардан сілтемелер болса, онда сізге арнайы сайт қосудың қажеті жоқ - робот оны автоматты түрде тауып, индекстейді. Егер сізде мұндай сілтемелер болмаса, іздеу жүйесіне сайттың бар екенін айту үшін "URL қосу" пішінін пайдалануға болады.
URL мекенжайын қосу жасауыңыздың индекстелетініне (немесе индекстелетініне) кепілдік бермейтінін есте сақтаңыз.
Көптеген адамдар Яндекс-те сайтты индекстеу үшін қанша уақыт кететінін қызықтырады. Бұл компанияның қызметкерлері кепілдік бермейді және шарттарды болжамайды. Әдетте, робот сайт туралы білгеннен кейін оның іздеудегі беттері екі күнде, кейде бір-екі аптада шығады.
Процесс
"Яндекс" - дәлдік пен назар аударуды қажет ететін іздеу жүйесі. Сайтты индекстеу үш бөліктен тұрады:
- Іздеу роботы ресурс беттерін тексереді.
- МазмұнСайттың (мазмұны) іздеу жүйесінің деректер базасында (индексінде) жазылған.
- 2-4 аптада дерекқорды жаңартқаннан кейін нәтижелерді көре аласыз. Сайтыңыз іздеу нәтижелерінде пайда болады (немесе көрсетілмейді).
Индекстеуді тексеру
Веб-сайтты индекстеуді қалай тексеруге болады? Мұны істеудің үш жолы бар:
- Іздеу жолағына бизнесіңіздің атын енгізіңіз (мысалы, «Яндекс») және бірінші және екінші беттердегі әрбір сілтемені тексеріңіз. Егер сіз өзіңіздің ойыңыздың URL мекенжайын сол жерден тапсаңыз, робот өз тапсырмасын орындады.
- Іздеу жолағына веб-сайттың URL мекенжайын енгізуге болады. Қанша интернет парағы көрсетілгенін, яғни индекстелгенін көре аласыз.
- Mail.ru, Google, Yandex сайтындағы веб-шеберлердің беттеріне тіркеліңіз. Сайтты растаудан өткеннен кейін сіз индекстеу нәтижелерін және ресурсыңыздың жұмысын жақсарту үшін жасалған басқа іздеу жүйесінің қызметтерін көре аласыз.
Яндекс неліктен істен шығады?
Google-да сайтты индекстеу келесі түрде жүзеге асырылады: робот дерекқорға сайттың сапасыз және сапалы барлық беттерін таңдамай-ақ енгізеді. Бірақ рейтингке тек пайдалы құжаттар ғана енгізілген. Ал «Яндекс» дереу барлық веб қоқыстарын алып тастайды. Ол кез келген бетті индекстей алады, бірақ іздеу жүйесі ақырында барлық қоқысты жояды.
Екі жүйенің де қосымша индексі бар. Төмен сапалы беттердің екеуі де жалпы веб-сайттың рейтингіне әсер етеді. Мұнда қарапайым философия жұмыс істейді. Белгілі бір адамның сүйікті ресурстарыпайдаланушы өз шығарылымында жоғары орындарға ие болады. Бірақ дәл осы адамға соңғы рет ұнамаған сайтты табу қиынға соғады.
Сондықтан, біріншіден, веб-құжаттардың көшірмелерін индекстеуден жабу, бос беттерді тексеру және сапасыз мазмұнның индекстелуіне жол бермеу керек.
Yandex жылдамдығын арттырыңыз
Яндексте сайтты индекстеуді қалай тездетуге болады? Мына қадамдарды орындаңыз:
- Компьютеріңізге Yandex браузерін орнатыңыз және оны сайт беттерін шолу үшін пайдаланыңыз.
- Яндекс. Вебмастерде ресурсты басқару құқығын растаңыз.
- Мақала сілтемесін Twitter-де жариялау. Яндекс бұл компаниямен 2012 жылдан бері жұмыс істеп келе жатқаны белгілі.
- Сайт үшін Яндекс іздеуді қосыңыз. "Индекстеу" бөлімінде сіз өзіңіздің URL мекенжайларыңызды енгізе аласыз.
- "Яндекс. Метрика" кодын "Беттерді индекстеу үшін жіберуге тыйым салынады" белгісін қойып енгізіңіз.
- Робот үшін ғана бар және аудиторияға көрінбейтін Сайт картасын жасаңыз. Тексеру одан басталады. Сайт картасының мекенжайы robots.txt файлына немесе "Веб-шебер" - "Индекстеу параметрлері" - "Сайт картасы файлдары" ішіне сәйкес пішінде енгізіледі.
Аралық әрекеттер
Веб-бет Яндекспен индекстелгенше не істеу керек? Отандық іздеу жүйесі сайтты негізгі дереккөз ретінде қарастыруы керек. Сондықтан да мақала жарияланғанға дейін оның мазмұнын «Арнайы мәтіндер» формасына қосу қажет. Әйтпесеплагиатшылар жазбаны өз ресурсына көшіреді және дерекқорда бірінші болады. Нәтижесінде олар авторлар деп танылады.
Google дерекқоры
Google үшін жоғарыда сипатталған ұсыныстар қолайлы, тек қызметтер әртүрлі болады:
- Google+ (Twitter алмастырады);
- Google Chrome;
- Бағдарламашыларға арналған Google құралдары - "Сканерлеу" - "Googlebot сияқты" - "Сканерлеу" опциясы - "Индекс" опциясы;
- Google ресурсында іздеу;
- Google Analytics (Yandex. Metrics орнына).
Тыйым салу
Сайтты индекстеуге тыйым салу дегеніміз не? Сіз оны бүкіл бетке де, оның бөлек бөлігіне де (сілтеме немесе мәтін бөлігі) қоса аласыз. Шын мәнінде, жаһандық индекстеуге тыйым салу да, жергілікті тыйым да бар. Ол қалай жүзеге асырылады?
Robots.txt ішіндегі іздеу жүйесінің дерекқорына веб-сайтты қосуға тыйым салуды қарастырайық. robots.txt файлын пайдалану арқылы бір бетті немесе бүкіл ресурс тақырыбын келесідей индекстеуді алып тастауға болады:
- Пайдаланушы-агент:
- Рұқсат етпеу: /kolobok.html
- Рұқсат етпеу: /фото/
Бірінші пункт нұсқаулардың барлық PS үшін анықталғанын айтады, екіншісі kolobok.html файлын индекстеуге тыйым салынғанын көрсетеді, ал үшіншісі фото қалтасын толығымен толтыруға мүмкіндік бермейді. дерекқор. Бірнеше бетті немесе қалтаны алып тастау қажет болса, олардың барлығын Robots қолданбасында көрсетіңіз.
Белгілі бір интернет парағын индекстеуді болдырмау үшін роботтар мета тегін пайдалануға болады. Ол robots.txt файлынан ерекшеленедіол барлық PS-ке бірден нұсқаулар береді. Бұл мета тег html пішімінің жалпы принциптеріне сәйкес келеді. Ол беттің тақырыбына тегтер арасында орналасуы керек. Тыйым салу жазбасы, мысалы, келесідей жазылуы мүмкін:.
Ajax
Яндекс Ajax сайттарын қалай индекстейді? Бүгінгі таңда Ajax технологиясын көптеген веб-сайт жасаушылар пайдаланады. Әрине, оның әлеуеті зор. Оның көмегімен сіз жылдам және өнімді интерактивті веб-беттер жасай аласыз.
Алайда іздеу жүйесі роботы веб-тізімді пайдаланушы мен браузерден басқаша «көреді». Мысалы, адам қозғалмалы жүктелетін Интернет парақтары бар ыңғайлы интерфейске қарайды. Тексеріп шығушы үшін сол беттің мазмұны бос болуы немесе сценарийлер жұмыс істемейтін статикалық HTML мазмұнының қалған бөлігі ретінде ұсынылуы мүмкін.
Ajax сайттарын жасау үшінбар URL мекенжайын пайдалануға болады, бірақ іздеу жүйесі оны пайдаланбайды. Әдеттетаңбасынан кейінгі URL бөлігі бөлінеді. Мұны ескеру керек. Сондықтан https://site.ru/example сияқты URL мекенжайының орнына https://site.ru сайтында орналасқан ресурстың басты бетіне қосымша жасайды. Бұл Интернет парағының мазмұны дерекқорға түспеуі мүмкін дегенді білдіреді. Нәтижесінде ол іздеу нәтижелерінде көрсетілмейді.
Ajax сайттарын индекстеуді жақсарту үшін Яндекс іздеу роботындағы өзгерістерді және осындай веб-сайттардың URL мекенжайларын өңдеу ережелерін қолдады. Бүгінгі таңда веб-шеберлер Яндекс іздеу жүйесіне ресурстар құрылымында сәйкес схеманы құру арқылы индекстеу қажеттілігін көрсете алады. Ол үшін сізге қажет:
- Беттердің URL мекенжайындағыбелгісін ауыстырыңызүстінде !. Енді робот осы интернет парағы мазмұнының HTML нұсқасына өтініш бере алатынын түсінеді.
- Мұндай бет мазмұнының HTML нұсқасы ! URL мекенжайында орналастырылуы керек. ?_escaped_fragment_=дегенмен ауыстырылды.
