SEO optimalisatieTechnische SEO optimalisatie

Welke informatie met ik allemaal in mijn robots.txt vermelden?

In een robots.txt bestand staan richtlijnen voor de zoekmachine wanneer hij uw site crawlt. De spider zal dus altijd eerst het robots.txt bestand ophalen om te kijken of er specifieke zaken zijn waarop hij moet letten. In het bestand geeft u regel per regel aan of de crawler wel of geen toegang krijgt tot dat deel van uw website. Enkele basisrichtlijnen die u best volgt bij het opstellen van uw…
Lees meer