Webcrawler

Een webcrawler is hetzelfde als een zoekmachine spider. Een webcrawler is een bot die over het hele internet op een systematische manier een kopie maakt van elke pagina die ze tegenkomen. Vervolgens worden deze kopietjes door Google verwerkt en zitten ze in het nieuwe Google algoritme. Google doet dit om continue updates te realiseren. Hierdoor worden ook nieuwe pagina’s snel en goed geïndexeerd, zodat ze vindbaar zijn binnen Google.

Hieronder vind je verdere toelichting. In het online marketing woordenboek van SEO vrienden vind je diverse termen die te maken hebben met SEO, SEA en online marketing. Heb je vragen of mis je een woord? Dan kun je uiteraard contact met ons opnemen.

Wil je het maximale uit je website halen?

Neem nu contact op

Zoekmachine spider

De webcrawler wordt ook webspider of zoekmachine spider genoemd. De naam webcrawler komt uit het Engels. Het gaat over een spin (de bot) die continue over het (spinnen)web (het internet) kruipt.

Om ervoor te zorgen dat al jouw pagina’s worden geïndexeerd door de zoekmachine spider, is het belangrijk om een XML sitemap te maken. Door een XML sitemap te maken kan de spider ook pagina’s lezen die ‘verstopt’ zitten. Denk bijvoorbeeld aan een pagina die bereikt moet worden na een interactieve handeling. De spider voert geen interactieve handelingen uit en zal deze pagina dus niet indexeren. Als je een pagina juist niet wil indexeren, kan dat ook. Je hoeft simpelweg aan te geven dat een pagina niet geïndexeerd mag worden.

Op ons online marketing blog vind je interessante artikelen over online marketing, of ga terug naar ons online marketing woordenboek.

Heb je nog vragen over webcrawler, neem dan gerust contact met ons op. Wil je meer weten over online marketing om je website beter vindbaar te maken? Wij adviseren en helpen je graag bij SEO – zoekmachine optimalisatie – en SEA – zoekmachine adverteren.

Is je bedrijf niet gevestigd in een van de onderstaande regio’s? Ook dan zijn wij je uiteraard graag van dienst!

Aalsmeer – Alblasserdam – Albrandswaard – Alkmaar – Almere – Alphen aan den Rijn – Amersfoort – Amstelveen – Amsterdam – Baarn – Barendrecht – Beemster – Bergen (NH.) – Beverwijk – Blaricum – Bloemendaal – Bodegraven-Reeuwijk – Brielle – Bunnik – Bunschoten – Capelle aan den IJssel – Castricum – De Bilt – De Ronde Venen – Delft – Den Haag / ’s-Gravenhage – Den Helder – Diemen – Dordrecht – Drechterland – Dronten – Edam-Volendam – Eemnes – Enkhuizen – Goeree-Overflakkee – Gooise Meren – Gorinchem – Gouda – Haarlem – Haarlemmerliede en Spaarnwoude – Haarlemmermeer – Hardinxveld – Giessendam – Heemskerk – Heemstede – Heerhugowaard – Heiloo – Hellevoetsluis – Hendrik-Ido-Ambacht – Hillegom – Hilversum – Hoeksche Waard – Hollands Kroon – Hoorn – Houten – Huizen – IJsselstein – Kaag en – Braassem – Katwijk – Koggenland – Krimpen aan den IJssel – Krimpenerwaard – Landsmeer – Langedijk – Lansingerland – Laren – Leiden – Leiderdorp – Leidschendam-Voorburg – Lelystad – Leusden – Lisse – Lopik – Maassluis – Medemblik – Midden-Delfland – Molenlanden – Montfoort – Nieuwegein – Nieuwkoop – Nissewaard – Noordoostpolder – Noordwijk – Oegstgeest – Oostzaan – Opmeer – Ouder-Amstel – Oudewater – Papendrecht – Pijnacker-Nootdorp – Purmerend – Renswoude – Rhenen – Ridderkerk – Rijswijk – Rotterdam – Schagen – Schiedam – Sliedrecht – Soest – Stede Broec – Stichtse Vecht – Texel – Teylingen – Uitgeest – Uithoorn – Urk – Utrecht – Utrechtse Heuvelrug – Veenendaal – Velsen – Vijfheerenlanden – Vlaardingen – Voorschoten – Waddinxveen – Wassenaar – Waterland – Weesp – Westland – Westvoorne – Wijdemeren – Wijk bij Duurstede – Woerden – Wormerland – Woudenberg – Zaanstad – Zandvoort – Zeewolde – Zeist – Zoetermeer – Zoeterwoude – Zuidplas en Zwijndrecht

Comments are closed.