Mientras lees esto, hay robots pidiendo las p\u00e1ginas de tu sitio que no son de Google.<\/p>\n
Se llaman GPTBot, ClaudeBot, PerplexityBot y varios m\u00e1s. Son los rastreadores de las empresas de inteligencia artificial, llevan un par de a\u00f1os recorriendo internet y hoy est\u00e1n en los registros de acceso de pr\u00e1cticamente cualquier sitio publicado.<\/p>\n
La pregunta que todo el mundo hace es si conviene bloquearlos. Y la respuesta corta es que depende de cu\u00e1l, porque no todos hacen lo mismo, aunque casi nadie hace la distinci\u00f3n.<\/p>\n
Esa distinci\u00f3n es todo el asunto. Vamos a ella.<\/p>\n
Los que se meten a tu sitio se dividen en dos grupos con prop\u00f3sitos completamente distintos.<\/p>\n
Los de entrenamiento.<\/strong> Recogen contenido para entrenar los modelos que vienen. Su visita de hoy no te trae ni una sola visita: lo que hacen es influir en lo que el modelo del pr\u00f3ximo a\u00f1o sabe del mundo. Ac\u00e1 est\u00e1n GPTBot, ClaudeBot, Google-Extended, Applebot-Extended y CCBot.<\/p>\n Los de b\u00fasqueda en vivo.<\/strong> Alimentan el \u00edndice que se consulta en el momento<\/em> en que alguien hace una pregunta. Cuando le preguntas algo a un asistente y te responde citando p\u00e1ginas con enlaces, esos enlaces salen de ac\u00e1. En este grupo est\u00e1n OAI-SearchBot, Claude-SearchBot y PerplexityBot.<\/p>\n Y hay un tercer tipo, m\u00e1s chico, que aparece cuando un usuario pega tu enlace en el chat y el asistente va a leer esa p\u00e1gina espec\u00edfica en ese instante.<\/p>\n La consecuencia pr\u00e1ctica es la que casi nadie te dice: bloquear a los de entrenamiento te saca del modelo del a\u00f1o que viene, pero bloquear a los de b\u00fasqueda te saca de las respuestas de hoy.<\/strong><\/p>\n Son decisiones distintas y mucha gente las toma juntas sin darse cuenta, copiando y pegando una lista de bloqueos que encontr\u00f3 en internet.<\/p>\n Cada robot se identifica con un nombre propio cuando pide una p\u00e1gina. Estos son los que vas a ver:<\/p>\n Los nombres cambian y aparecen nuevos cada cierto tiempo, as\u00ed que conviene mirar la documentaci\u00f3n de cada empresa antes de escribir una regla, en vez de copiar una lista vieja.<\/p>\n No hay que adivinar. En cPanel tienes dos formas de verlo.<\/p>\n La primera es La segunda, m\u00e1s c\u00f3moda si no quieres leer un archivo de texto enorme, es Vale la pena mirarlo aunque no vayas a cambiar nada. Es tu sitio y son datos tuyos.<\/p>\n Todo se controla desde un archivo de texto llamado La regla se escribe usando el nombre del robot. Para bloquear a los de entrenamiento y dejar entrar a los de b\u00fasqueda, por ejemplo, ser\u00eda algo as\u00ed:<\/p>\n Y ac\u00e1 viene la advertencia honesta, que es la parte que los art\u00edculos sobre este tema suelen saltarse.<\/p>\n Si de verdad hay contenido que no quieres que nadie lea, no basta con pedirlo por escrito: hay que ponerlo detr\u00e1s de una contrase\u00f1a. Todo lo que est\u00e1 publicado y abierto, est\u00e1 publicado y abierto.<\/p>\n Depende de qu\u00e9 vendes, y la respuesta honesta para la mayor\u00eda de los negocios chilenos no es la que se ve en los titulares.<\/p>\n Si tu sitio existe para que te encuentren y te contraten<\/strong> \u2014una pyme de servicios, un taller, una consulta, una tienda, un profesional independiente\u2014 no bloquees a nadie, y menos a los de b\u00fasqueda. Tus clientes ya est\u00e1n pregunt\u00e1ndole a un asistente qu\u00e9 proveedor elegir. Que tu sitio no est\u00e9 disponible para responder esa pregunta no te protege de nada: solo te deja fuera de la conversaci\u00f3n.<\/p>\n El contenido que est\u00e1s cuidando, adem\u00e1s, ya est\u00e1 p\u00fablico. Cualquier persona puede leerlo entrando a tu p\u00e1gina.<\/p>\n Si tu contenido es el producto<\/strong> \u2014un medio que vive de las visitas, cursos, una base de datos que cost\u00f3 a\u00f1os armar, material que se paga para acceder\u2014 la decisi\u00f3n es la contraria, y tiene sentido bloquear a los de entrenamiento y dejar solo a los de b\u00fasqueda, que al menos te devuelven el enlace.<\/p>\n El punto intermedio, que es donde cae casi todo el mundo: abierto para los de b\u00fasqueda, y los de entrenamiento los decides con calma.<\/strong> No es una decisi\u00f3n permanente y se puede cambiar cuando quieras.<\/p>\n Vas a escuchar hablar de Seamos precisos, porque en esto hay mucho entusiasmo suelto: es una propuesta, no un est\u00e1ndar adoptado.<\/strong> Ninguna empresa grande de inteligencia artificial se ha comprometido p\u00fablicamente a usarlo.<\/p>\n Dicho eso, ponerlo cuesta muy poco: es un archivo de texto con la descripci\u00f3n de tu sitio y los enlaces a tus p\u00e1ginas principales. Si la convenci\u00f3n prospera, quedaste listo. Si no prospera, perdiste veinte minutos. Es una apuesta barata, y hay que presentarla como lo que es y no como una obligaci\u00f3n.<\/p>\n Dejar entrar a los robots es el permiso, no el logro<\/a>. Que un asistente te cite depende de otras cosas:<\/p>\n \u00bfBloquear a GPTBot afecta mi posici\u00f3n en Google?<\/strong> No. Son robots distintos con reglas distintas. Bloquear \u00bfLos rastreadores de IA me consumen recursos del hosting?<\/strong> Consumen, como cualquier visita. En un sitio normal es un porcentaje menor del tr\u00e1fico y no se nota. Si tienes un sitio muy grande y ves un consumo desproporcionado, ah\u00ed s\u00ed conviene mirarlo.<\/p>\n \u00bfC\u00f3mo edito el robots.txt en WordPress?<\/strong> Los complementos de SEO traen un editor. Tambi\u00e9n puedes subir el archivo directamente a la ra\u00edz del sitio desde el administrador de archivos de cPanel.<\/p>\n \u00bfY si me copian el contenido?<\/strong> Bloquear rastreadores no impide que una persona copie y pegue tu texto. Contra eso lo que sirve es publicar primero y que tu sitio sea reconocible como la fuente.<\/p>\n Entra a tu Despu\u00e9s m\u00e9tete a los registros de acceso de tu cPanel y busca los nombres de este art\u00edculo. Vas a encontrarlos, y es sano saber qui\u00e9n entra a tu casa.<\/p>\n En AltaHosting revisamos esto como parte de la puesta a punto de un sitio: qu\u00e9 robots est\u00e1n entrando, si el Mientras lees esto, hay robots pidiendo las p\u00e1ginas de tu sitio que no son de Google. Se llaman GPTBot, ClaudeBot, […]<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"pagelayer_contact_templates":[],"_pagelayer_content":"","site-sidebar-layout":"default","site-content-layout":"","ast-site-content-layout":"default","site-content-style":"default","site-sidebar-style":"default","ast-global-header-display":"","ast-banner-title-visibility":"","ast-main-header-display":"","ast-hfb-above-header-display":"","ast-hfb-below-header-display":"","ast-hfb-mobile-header-display":"","site-post-title":"","ast-breadcrumbs-content":"","ast-featured-img":"","footer-sml-layout":"","ast-disable-related-posts":"","theme-transparent-header-meta":"","adv-header-id-meta":"","stick-header-meta":"","header-above-stick-meta":"","header-main-stick-meta":"","header-below-stick-meta":"","astra-migrate-meta-layouts":"default","ast-page-background-enabled":"default","ast-page-background-meta":{"desktop":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"ast-content-background-meta":{"desktop":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"_seopress_titles_title":"","_seopress_titles_desc":"","_seopress_analysis_target_kw":"","_siteseo_titles_title":"GPTBot y ClaudeBot en Tu Sitio: Bloquear o Dejar Pasar","_siteseo_titles_desc":"GPTBot, ClaudeBot y PerplexityBot ya visitan tu sitio. Cu\u00e1les entrenan modelos, cu\u00e1les alimentan las respuestas de hoy y a cu\u00e1les conviene dejarlos entrar.","_siteseo_analysis_target_kw":"gptbot, bloquear bots de ia robots txt, claudebot, rastreadores de inteligencia artificial, llms txt","_ah_schema_faq":"","_ah_schema_planes":"","footnotes":""},"categories":[16],"tags":[],"class_list":["post-176","post","type-post","status-publish","format-standard","hentry","category-tutoriales-wordpress"],"_links":{"self":[{"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/posts\/176","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/comments?post=176"}],"version-history":[{"count":2,"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/posts\/176\/revisions"}],"predecessor-version":[{"id":180,"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/posts\/176\/revisions\/180"}],"wp:attachment":[{"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/media?parent=176"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/categories?post=176"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/altahosting.cl\/blog\/wp-json\/wp\/v2\/tags?post=176"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}Qui\u00e9n es qui\u00e9n<\/h2>\n
\n
C\u00f3mo saber si te est\u00e1n visitando<\/h2>\n
M\u00e9tricas \u2192 Registros de acceso sin procesar<\/code>. Descargas el archivo y buscas dentro los nombres de la lista de arriba. Cada l\u00ednea es una petici\u00f3n, con la fecha, la direcci\u00f3n desde donde vino y la p\u00e1gina que pidi\u00f3.<\/p>\nM\u00e9tricas \u2192 Awstats<\/code>, en la secci\u00f3n de robots. Te da el resumen de qu\u00e9 rastreadores entraron y cu\u00e1nto pidieron.<\/p>\nC\u00f3mo se les dice que pasen o que no<\/h2>\n
robots.txt<\/code>, que vive en la ra\u00edz de tu sitio. Puedes ver el de cualquier p\u00e1gina agregando \/robots.txt<\/code> al final del dominio.<\/p>\n\n
User-agent: GPTBot<\/code> seguido de Disallow: \/<\/code><\/li>\nUser-agent: ClaudeBot<\/code> seguido de Disallow: \/<\/code><\/li>\nUser-agent: OAI-SearchBot<\/code> seguido de Allow: \/<\/code><\/li>\nUser-agent: PerplexityBot<\/code> seguido de Allow: \/<\/code><\/li>\n<\/ul>\nrobots.txt<\/code> es una se\u00f1al de cortes\u00eda, no un candado.<\/strong> Las empresas grandes declaran p\u00fablicamente que lo respetan, y en general lo hacen. Pero es una convenci\u00f3n voluntaria, y se han documentado casos de rastreadores que la ignoran.<\/p>\nEntonces, \u00bfbloquear o no?<\/h2>\n
Sobre el archivo llms.txt<\/h2>\n
llms.txt<\/code>, un archivo pensado para entregarle a los modelos un resumen ordenado de tu sitio.<\/p>\nLo que s\u00ed mueve la aguja<\/h2>\n
\n
Preguntas r\u00e1pidas<\/h2>\n
Google-Extended<\/code> tampoco afecta tu posici\u00f3n en el buscador: solo el uso de tu contenido en los productos de inteligencia artificial de Google.<\/p>\nQu\u00e9 hacer esta semana<\/h2>\n
robots.txt<\/code> y mira qu\u00e9 dice. Si nunca lo tocaste, lo m\u00e1s probable es que est\u00e9 abierto, y para la mayor\u00eda de los negocios eso est\u00e1 bien.<\/p>\nrobots.txt<\/code> dice lo que t\u00fa crees que dice y si tus mapas del sitio est\u00e1n declarados donde corresponde. Si quieres que lo miremos contigo, escr\u00edbenos.<\/p>\n","protected":false},"excerpt":{"rendered":"