Estàndart d'exclusió de robots
El estàndart d'exclusió de robots, també conegut com el protocol de l'exclusió de robots o protocol de robots.txt, és un método per a evitar que certs bots que analisen els llocs web o atres robots que investiguen tot o una part de l'accés d'un lloc web, públic o privat, agreguen informació innecessària als resultats de busca. Els robots són d'us freqüent pels motors de busca per a categorizar archius dels llocs web, o pels webmasters per a corregir o filtrar el còdic font.
L'archiu robots.txt
[editar | editar còdic]Un archiu robots.txt en un lloc web funcionarà com una petició que especifica que determinats robots no facen cas a archius o directoris específics en la seua busca.[1] Açò pot realisar-se, per eixemple, per a deixar fòra d'una preferència els resultats d'una busca alvançada, o de la creència que el contingut dels directoris seleccionats pot ser enganyós o inaplicable a la classificació del lloc en la seua totalitat.[2]
Desventages
[editar | editar còdic]Este protocol és consultiu. Confia en la cooperació dels robots del sitie web, de modo que marca una o més àrees d'un lloc fòra dels llímits de busca en l'us d'un archiu robots.txt, encara que este no necessàriament garantise aïllament complet. Alguns administradors de llocs web utilisen l'archiu robots.txt per a fer algunes seccions privades, invisibles al restant del món, pero ya que els archius estan disponibles en forma pública, el seu contingut podria ser vist de totes maneres per qualsevol persona en un navegador web i coneiximents mijanament alvançats.
En alguns casos, l'incloure un directori en este archiu li anuncia la seua presència a possibles hackers, aixina ells poden determinar fàcilment alguns softwares usats en el lloc per mig de buscar "chafades típiques" en el robots.txt.
Vore també
[editar | editar còdic]Referències
[editar | editar còdic]Referències
[editar | editar còdic]- Este artícul conté una traducció derivada de «Estándar de exclusión de robots» de Wikipedia en castellà publicada baix la Llicència de documentació lliure de GNU i la Llicència Creative Commons Reconeiximent-CompartirIgual 4.0 Internacional.