Siga las instrucciones a continuación para ¿Cómo crearlo?:
¿Qué es el archivo robots.txt
Un archivo robots.txt le dice a los rastreadores del programa a qué URL puede acceder el rastreador en su sitio. Esto se usa principalmente para evitar sobrecargar su sitio con solicitudes; no es un mecanismo para mantener una página de Internet fuera de Google. Para mantener una página de Internet fuera de Google, bloquee la indexación con noindex o proteja la página con contraseña.
¿Cómo crearlo?
En primer lugar, debe abrir el panel de su sitio web. y haga clic en el botón Complemento. Así que aquí tenemos que hacer clic en Agregar nuevo botón.
Entonces aquí tenemos que buscar YOAST SEO. Entonces, como puede hacer esto aquí, solo tenemos que hacer clic en el botón de instalación. Espere unos segundos y haga clic en el botón activo.
en el lado izquierdo puedes ver la barra de SEO. Tenemos que hacer clic en él.
y ahora haga clic en la sección de herramientas y luego haga clic en el editor de archivos.
Para que pueda ver ahora que su archivo Txt se ha generado automáticamente.
Así que vamos a probarlo. si funciona. Para probar, tiene que buscar su nombre de dominio y también agregar Robots.txt. Puede ver que su archivo Robots.txt funciona perfectamente.