• Descarga el eBook gratuito SEO en Wordpress 2015 aquí

    • Pack con las mejores herramientas SEO en las VIP Tools apúntate!


     
    Calificación:
    • 1 votos - 5 Media
    • 1
    • 2
    • 3
    • 4
    • 5
    Indexación de Google

    BlackHat Bronce


    **
    Puntos de comerciante: 0 (0%)
    9

    2


    Crédito: 0.46 BHC
    Mensaje: #1
    Indexación de Google
    ¡¡De verdad que no se cómo narices indexa Google una nueva web!!
    He creado una página para una empresa de material dental nuevo y de segunda mano (
    Para ver el enlace necesitas registrarte o acceder a tu cuenta
    ), y estuve trabajando en la web unas semanas con el fichero robots.txt y la meta robots "capando" a Google: NOINDEX, NOFOLLOW.

    [Imagen: Crowlers.jpg]

    Bueno, pues para mi sorpresa me he dado cuenta de que esto no vale absolutamente para nada. Google ha indexado todo el contenido, incluido el de una carpeta llamada beta que estaba bloqueada expresamente.

    ¿Esto es normal? ¿Para que sirve entonces configurar robots.txt?

    rubensdlt, orgulloso de ser un miembro de Foro Black Hat SEO desde Jan 2015.
    24-03-2015 02:29 PM
    Buscar Citar

    BlackHat Plata


    ****
    Puntos de comerciante: 3 (100%)
    665


    Programador Promotor Twitter 100 Posts Asistente

    Crédito: 8.83 BHC
    Mensaje: #2
    RE: Indexación de Google
    El fichero robots es una "recomendación" ,además a muchos bots tienes que decirles dónde esta ese fichero. (edito.., o era el sitemap)

    Pero no deja de ser una "recomendación" que los bots harán caso o no....según les convenga,

    Personalmente, pensaba que Google hacía casa a esta recomendación, pero parece que no es así.
    Yo recuerdo que en alguna web me decía que había bloqueado demasiadas cosas en el fichero robots y que no podía llegar el bot, por eso pienso que Google debería hacer caso al fichero robots.txt

    y otra cosa, robots.txt tiene permisos de lectura?, entiendo que si.

    Igual esto es el problema, que haya seguido los enlaces antes de hacerle caso al fichero robots

    De la página de Google
    "Es posible que Googlebot tarde un tiempo en detectar los cambios una vez que hayas creado el archivo robots.txt. Si Googlebot sigue rastreando contenido bloqueado en el archivo robots.txt, comprueba que la ubicación de este archivo sea correcta."

    Miguel2008, orgulloso de ser un miembro de Foro Black Hat SEO desde Oct 2014.
    (Este mensaje fue modificado por última vez en: 24-03-2015 02:53 PM por Miguel2008.)
    24-03-2015 02:42 PM
    Buscar Citar

    BlackHat Cobre


    ***
    Puntos de comerciante: 0 (0%)
    166

    9


    Crédito: 1.66 BHC
    Mensaje: #3
    RE: Indexación de Google
    Yo no veo que en robots.txt tengas bloqueado nada, y el meta noindex nofollow no bloquea a los robots, simplemente le dice a google que los enlaces sean nofollow.

    Bloquea lo que necesites en robots.txt y seguro que en unos días el contenido desaparece.

    Aquí es donde hay que poner
    Para ver el enlace necesitas registrarte o acceder a tu cuenta
    ?
    24-03-2015 03:43 PM
    Buscar Citar
     Gracias recibidas por: rubensdlt

    BlackHat Plata


    ****
    Puntos de comerciante: 3 (100%)
    665


    Programador Promotor Twitter 100 Posts Asistente

    Crédito: 8.83 BHC
    Mensaje: #4
    RE: Indexación de Google
    (24-03-2015 03:43 PM)chicoperro escribió:  Yo no veo que en robots.txt tengas bloqueado nada, y el meta noindex nofollow no bloquea a los robots, simplemente le dice a google que los enlaces sean nofollow.

    Bloquea lo que necesites en robots.txt y seguro que en unos días el contenido desaparece.

    Yo entendía que ahora el robots lo había cambiado por otro para que se indexase la web, pero si el fichero robots ha sido siempre el que tiene ahora, entonces no busques más la solución!! ya te lo ha dicho @chicoperro

    Miguel2008, orgulloso de ser un miembro de Foro Black Hat SEO desde Oct 2014.
    24-03-2015 05:16 PM
    Buscar Citar

    BlackHat Bronce


    **
    Puntos de comerciante: 0 (0%)
    9

    2


    Crédito: 0.46 BHC
    Mensaje: #5
    RE: Indexación de Google
    No me he explicado entonces,
    Hoy martes, he cambiado el robots.txt y la meta robots para que Google empezara a indexar porque hemos dado la web por finalizada, pero la página ya estaba indexada por lo menos desde hace una semana.

    Pensé que se me había pasado y que lo había dejado abierto, pero no es así. Google ha pasado por encima del robots.txt y de la meta y me ha indexado el contenido... ¿es normal?

    rubensdlt, orgulloso de ser un miembro de Foro Black Hat SEO desde Jan 2015.
    24-03-2015 06:23 PM
    Buscar Citar

    BlackHat Plata


    ****
    Puntos de comerciante: 3 (100%)
    665


    Programador Promotor Twitter 100 Posts Asistente

    Crédito: 8.83 BHC
    Mensaje: #6
    RE: Indexación de Google
    Pues no es lo más normal, yo le pase un sitemap a google con "directorios" que no podía ver porque el fichero "robots" lo bloqueaba, y me envió una alerta, diciéndome que no podía verlos por el fichero robots.

    Yo entiendo que no es lo más normal, supongo que algo fallaría, de todas maneras Google tiene un "sitio" dónde puedes hacer pruebas en tiempo real de lo que ve o no el bot.

    Miguel2008, orgulloso de ser un miembro de Foro Black Hat SEO desde Oct 2014.
    24-03-2015 06:42 PM
    Buscar Citar

    BlackHat Cobre


    ***
    Puntos de comerciante: 0 (0%)
    166

    9


    Crédito: 1.66 BHC
    Mensaje: #7
    RE: Indexación de Google
    No es normal, si que puede ser que te indexe la url, pero si está bloqueada por robots.txt en google sale un mensaje en la descripción que dice que no puede mostrar el contenido porque está bloqueado, igual eso es lo que te ha pasado, no sé.

    Aquí es donde hay que poner
    Para ver el enlace necesitas registrarte o acceder a tu cuenta
    ?
    24-03-2015 06:52 PM
    Buscar Citar

    BlackHat Cobre


    ***
    Puntos de comerciante: 2 (100%)
    170



    Crédito: 6.31 BHC
    Mensaje: #8
    RE: Indexación de Google
    Consulta en Herramientas para webmasters de Google errores de rastreo actualiza sitemap y en la seccion Explorar como Google actualiza tu indice y tus url

    debe indexarte

    hbarillas, orgulloso de ser un miembro con respeto y seriedad de Foro Black Hat SEO
    25-03-2015 04:24 AM
    Buscar Citar

    BlackHat Cobre


    ***
    Puntos de comerciante: 0 (0%)
    111

    7


    Crédito: 2.14 BHC
    Mensaje: #9
    RE: Indexación de Google
    Yo he probado en varias de mis webs en wordpress bloqueando el acceso desde "Disuade a los motores de búsqueda de indexar este sitio" y no las indexa para nada

    Para ver el enlace necesitas registrarte o acceder a tu cuenta
    26-03-2015 06:50 AM
    Buscar Citar


    Posibles temas similares...
    Tema: Autor Respuestas: Vistas: Último mensaje
      indexacion erronea leop18 1 139 28-10-2016 12:36 PM
    Último mensaje: Peisithanatos
      google sigue posicionando paginas de tiendas onlida pollxander 0 143 11-10-2016 09:09 PM
    Último mensaje: pollxander
      Sabéis si hacer esto lo penaliza google??? :huh: alexander_sp 6 299 09-10-2016 02:21 AM
    Último mensaje: feligosky
      Indexación rara örsön 4 271 29-08-2016 02:05 PM
    Último mensaje: örsön
      ¿Google adsense sanciona por usar fotos de la red? forista125 8 960 01-07-2016 10:38 PM
    Último mensaje: Raul51
      Penalizaciones de Google mrclics 7 603 22-06-2016 12:29 PM
    Último mensaje: örsön
      Como se hace este error de Google? dany_shady 3 458 10-06-2016 01:25 PM
    Último mensaje: Juan Digital
      ¿Usáis mucho el disavow links de google webmaster? millmess 7 1,083 06-05-2016 11:09 AM
    Último mensaje: cobras
      Baneo en Google Nodsert 3 862 05-04-2016 11:53 AM
    Último mensaje: patriarca
      Problemas indexación google athos_54 2 450 29-03-2016 03:50 AM
    Último mensaje: AprendizSEO71

    Salto de foro:


    Usuario(s) navegando en este tema: 1 invitado(s)
    Anuncios FBH (+ info)

    Foro Black Hat

    ForoBlackHat es un foro público con ánimo de desarrollo de aplicaciones y estrategias SEO para la comunidad hispano hablante cuyo objetivo sea el de aprender técnicas de posicionamiento.

    Nuestra comunidad cuenta con un equipo de programadores que desarrollan día a día nuevas herramientas gratuitas para los usuarios. ¡Siéntete libre de registrarte y comentar por los hilos!