Robots.txt generator

Internet nieuws

Google biedt recent via webmasterhulpprogramma's. , een robots.txt-generator aan. Het is bedoeld om webeigenaars te helpen bij de aanmaak van een robots.txt-bestand. Een robots.txt bestand is één van de twee belangrijkste manieren naast de robots meta tag om te vermijden dat de zoekmachine uw pagina indexeert. Robots.txt generatoren zijn niet nieuw, maar het is de eerste keer dat een zoekmachine een dergelijke tool aanbiedt.

Microsoft koopt Powerset ( zoek...