Aranya web: diferència entre les revisions

Contingut suprimit Contingut afegit
m robot estandarditzant mida de les imatges, localitzant i simplificant codi
Recuperant 1 fonts i marcant-ne 0 com a no actives.) #IABot (v2.0.8
Línia 12:
 
== Enllaços externs ==
* [http://www.robotstxt.org/wc/robots.html The Web Robots Page] {{Webarchive|url=https://web.archive.org/web/20080517034604/http://www.robotstxt.org/wc/robots.html |date=2008-05-17 }} {{en}}
* [http://google.dirson.com/googlebot.php Googlebot, l'aranya de Google] {{es}}
{{Autoritat}}