un păianjen motor de căutare, de asemenea, cunoscut ca un crawler web, este un bot de Internet care accesează cu crawlere site-uri web și stochează informații pentru motorul de căutare pentru a indexa.
gandeste-te in felul acesta. Când căutați ceva pe Google, acele pagini și pagini de rezultate nu se pot materializa doar din aer. De fapt, toate provin din indexul Google, pe care îl puteți vizualiza ca o bibliotecă enormă, în continuă expansiune, de informații-text, imagini, documente și altele asemenea. Este în continuă expansiune, deoarece noi pagini web sunt create în fiecare zi!
nu este o descriere reală a unui index al motorului de căutare.
deci, cum ajung aceste pagini noi în index? Păianjenii motoarelor de căutare, desigur.
cum funcționează păianjenii motoarelor de căutare?
păianjenii, cum ar fi Googlebot, vizitează paginile web în căutarea de date noi pentru a le adăuga la index. Acest lucru este esențial, deoarece modelul de afaceri Google (atragerea consumatorilor și vânzarea spațiului publicitar) se bazează pe furnizarea de rezultate de căutare de înaltă calitate, relevante și actualizate.
și păianjenii sunt destul de deștepți. Ei recunosc hyperlink-urile, pe care le pot urmări imediat sau pot lua o notă pentru accesarea cu crawlere ulterioară. În orice caz, legăturile interne dintre paginile de pe același site funcționează similar cu pietrele pas cu pas, prin faptul că deschid calea pentru ca păianjenii să acceseze cu crawlere și să stocheze informații noi.
apropo de asta…
De ce ar trebui să-mi pese de păianjenii motoarelor de căutare?
Search engine optimization (SEO) se referă la creșterea vizibilității dvs. în rezultatele căutării organice. Sunteți cu scopul de a atinge Autoritatea de domeniu și de a obține site-ul dvs. pe prima pagină pentru cât mai multe cuvinte cheie posibil.
un prim pas bun spre prima pagină: permițând motorului de căutare să găsească efectiv paginile dvs. web. Dacă lucrurile tale nu sunt indexate, nici măcar nu adulmeci pagina 13.
vestea bună: nu trebuie să lucrați prea mult pentru a obține paginile dvs. noi accesate cu crawlere și indexate. Practic, atâta timp cât vă conectați la noul dvs. conținut dintr-un conținut vechi, păianjenii vor urma în cele din urmă acele linkuri către noua pagină și o vor stoca pentru indexare. Așa cum am spus mai devreme: legăturile interne sunt cruciale.
Dacă sunteți nerăbdător să obțineți noile lucruri indexate și în rezultatele căutării cât mai curând posibil, puteți trimite direct noua adresă URL la Google și spuneți păianjenului să o acceseze cu crawlere. Odată ce ați lovit submit, nu ar trebui să fie mai mult de câteva minute.
pot face ceva pentru a ajuta păianjenii motorului de căutare?
De ce, da. Ba da, poți.
în esență, doriți ca păianjenii să vadă cât mai mult din site-ul dvs. și doriți să faceți navigarea lor cât mai perfectă. Începeți cu viteza site-ului dvs. Păianjenii își propun să lucreze cât mai repede posibil, fără a încetini site-ul dvs. în detrimentul experienței utilizatorului. Dacă site-ul dvs. începe să rămână în urmă sau apar erori de server, păianjenii se vor târî mai puțin.
Acest lucru, desigur, este opusul a ceea ce doriți: mai puțin crawling înseamnă mai puțină indexare înseamnă performanțe mai slabe în rezultatele căutării. Viteza Site-ului este cheia.
mențineți un sitemap XML pentru a crea un director convenabil pentru motoarele de căutare. Acest lucru le va spune care URL-uri au nevoie de crawling regulat.
un principiu de bază al arhitecturii site-ului: mențineți clicurile la minimum. Pentru a fi mai precis, nicio pagină de pe site-ul dvs. nu ar trebui să fie la mai mult de 3 sau 4 clicuri distanță de alta. Orice altceva decât atât face navigarea greoaie atât pentru utilizatori, cât și pentru păianjeni.
în cele din urmă, rezervați o adresă URL unică pentru fiecare conținut. Dacă atribuiți mai multe adrese URL aceleiași pagini, devine neclar păianjenilor pe care ar trebui să le utilizeze. Amintiți-vă: o parte fundamentală a SEO este ușurarea lucrărilor păianjenilor. Nu te chinui cu păianjenii, și vei fi bine.