# # Voglio provare a disabilitare l' accesso a TUTTI i # files presenti sul server Web da parte di TUTTI gli # "spider" dei motori di ricerca. # (A.R. 29/01/2007) # # Lista degli spider noti: # Nome spider Motore di ricerca # googlebot Google # fast Fast - Alltheweb # slurp Inktomi - Yahoo! # scooter Altavista # mercator Altavista # Ask Jeeves Ask Jeeves # teoma_agent Teoma # ia_archiver Alexa - Internet Archive # User-agent: * Disallow: /cgi-bin/ # Disallow: / # # Disabilita l' accesso al disco /extra # Disallow: /~mauri/extra/CSN2/