een zoekmachine spider, ook bekend als een webcrawler, is een internetbot die websites kruipt en informatie opslaat om de zoekmachine te indexeren.
zie het zo. Als je iets op Google zoekt, kunnen die pagina ’s en pagina’ s met resultaten niet zomaar uit het niets tevoorschijn komen. In feite komen ze allemaal uit Google ‘ s index, die je kunt visualiseren als een enorme, steeds groeiende bibliotheek van informatie-tekst, afbeeldingen, documenten, en dergelijke. Het wordt steeds groter omdat er elke dag nieuwe webpagina ‘ s worden gemaakt!
geen werkelijke weergave van een zoekmachine-index.
dus, hoe komen die nieuwe pagina ‘ s in de index? Zoekmachine spinnen, natuurlijk.
Hoe werken zoekmachine spiders?
Spiders, zoals Googlebot, bezoeken webpagina ‘ s op zoek naar nieuwe gegevens om toe te voegen aan de index. Dit is cruciaal omdat het bedrijfsmodel van Google (consumenten aantrekken en advertentieruimte verkopen) afhankelijk is van het leveren van hoogwaardige, relevante en actuele zoekresultaten.
de spinnen zijn ook behoorlijk slim. Ze herkennen hyperlinks, die ze direct kunnen volgen, of een notitie nemen voor later kruipen. Hoe dan ook, interne links tussen pagina ‘ s op dezelfde site functie vergelijkbaar met stepping stones, in die zin dat ze de weg effenen voor spinnen om te kruipen en nieuwe informatie op te slaan.
nu we het er toch over hebben …
waarom zou ik me zorgen moeten maken over zoekmachine spiders?
Search engine optimization (SEO) is alles over het verbeteren van uw zichtbaarheid in de organische zoekresultaten. U bent gericht op domein autoriteit te bereiken en krijg uw site op pagina een voor zo veel zoekwoorden mogelijk.
een goede eerste stap naar pagina één: de zoekmachine in staat stellen om uw webpagina ‘ s daadwerkelijk te vinden. Als je spullen niet geïndexeerd worden, snuffel je niet eens aan pagina 13.
het goede nieuws: u hoeft niet te hard te werken om uw nieuwe pagina ‘ s te laten doorzoeken en indexeren. Kortom, zolang u een link naar uw nieuwe inhoud van een aantal oude inhoud, de spiders zal uiteindelijk volgen die links naar de nieuwe pagina en opslaan voor indexatie. Zoals we al eerder zeiden: interne verbindingen zijn cruciaal.
Als u uw nieuwe materiaal zo snel mogelijk wilt laten indexeren in de zoekresultaten, kunt u de nieuwe URL direct naar Google sturen en de spin vertellen om het te crawlen. Zodra u op submit, het mag niet meer dan een paar minuten.
kan ik iets doen om de zoekmachine spiders te helpen?
waarom, Ja. Ja, dat kun je wel.
in essentie wil je dat de spiders zoveel mogelijk van je site zien, en wil je hun navigatie zo naadloos mogelijk maken. Begin met uw site snelheid. De spiders streven ernaar om zo snel mogelijk te werken zonder uw site te vertragen ten koste van de gebruikerservaring. Als uw site begint te vertragen, of server fouten ontstaan, zullen de spiders minder kruipen.
Dit is natuurlijk het tegenovergestelde van wat je wilt: minder kruipen betekent minder indexeren betekent slechtere prestaties in de zoekresultaten. Site snelheid is de sleutel.
onderhouden van een XML sitemap om een handige map voor de zoekmachines te maken. Dit zal hen vertellen welke URL ‘ s regelmatig moeten kruipen.
een basisprincipe van sitearchitectuur: houd klikken tot een minimum. Om preciezer te zijn, geen enkele pagina op uw site moet meer dan 3 of 4 klikken verwijderd zijn van een andere. Iets meer dan dat maakt navigatie omslachtig voor zowel gebruikers als spinnen.
reserveer tot slot een unieke URL voor elk stuk inhoud. Als u meerdere URL ‘ s aan dezelfde pagina toewijst, wordt het onduidelijk welke spinnen ze moeten gebruiken. Vergeet niet: een fundamenteel onderdeel van SEO is het maken van de spinnen’ banen gemakkelijk. Belabor niet de spinnen, en het komt goed met je.