Posicionamiento Web y Sponsors Adultos para Webmasters

Dreamhost Bloquea a Googlebot

Dreamhost Bloquea a Googlebot

abr 27, 2008

Tremenda decepcion me estoy llevando con Dreamhost… De ellos, se pueden leer muchisimas cosas malas por la web, pero lo cierto, que sus precios asequibles y “supuesta” capacidad me ayudaron en los inicios, y los que me conocen saben que, hasta hoy, yo era un acerrimo defensor de Dreamhost y se lo recomendaba todos mis conocidos sin dudarlo… hasta hoy.

Desde hace un par de meses veniamos notando un estancamiento en el crecimiento de visitas de varias de nuestras webs, tanto de ocio como de sexo, perdiendo un altisimo % de las visitas de google.

Al principio pense que era por estar ocupado con otros proyectos que estamos lanzando a la web y no poder dedicar tanto tiempo al seo de esos dominios, ya que, a fin de cuentas, el tiempo es uno de nuestros mayores efectivos y el repartirlo entre todas las cosas pendientes que siempre hay se torna en dificil…

La situación se habia tornado para nosotros finalmente en dramatica, ya que no es solo la perdida de visitas, sino la perdida de los beneficios diarios que nos permiten sobrevivir, de todo el trabajo y tiempo invertido en el posicionamiento web de los dominios, de horas y horas intentando entender a google para que de golpe te olvide asi… en fin, que os voy a contar… era imperativo solucionarlo.

Comienzo a investigar centrandome en las webs individualmente buscando posibles problemas…todo parece estar bien, por lo que decido probar subiendo de nuevo los sitemaps…

Entro a las herramientas para webmasters de google y descubro que todas, absolutamente todas las webs alojadas en dreamhost presentan errores… “Error general de HTTP: Error de HTTP 403 (Prohibido)”

Compruebo horrorizado que googlebot no se “pasa” por ninguna de mis webs desde la misma fecha: finales de Enero… el motivo, el mismo… “En estos momentos no podemos acceder a su página principal debido a un error HTTP (403)”. Los sitemaps tampoco accesibles, y nuestras paginas practicamente desaparecidas de el indice de google.

Al ver que afectaba a todas las webs de esta forma estaba seguro que tenia que venir por el hosting. Compruebo en paralelo nuestros dominios alojados en un servidor dedicado, y efectivamente, a ellos google accedia sin problemas, fuera lo que fuera, venia por parte del hosting de dreamhost…

Sin perder tiempo escribo una larga carta al soporte, explicandoles la importancia de la situacion para nosotros, y rogandoles me confirmaran que ellos no estaban bloqueando a googlebot… me responden al poco tiempo confirmandome que NO estaban bloqueando….

“I do truly empathize with your situation. However I don’t see anything that would totally
block any of them from seeing your most of your site. ”

Estaba claro entonces, solo podia ser que alguna seo-bruja lola me habia puesto un par de velas negras con el fin de hacer desaparecer nuestras webs de las serps de google…

 

 

Al dia siguiente, vuelvo a revisar las webs alojadas en dreamhost… el robots txt, lo borro,lo cambio,lo agito…nada. Miro el .htacess… y nada, por algun motivo, sigue bloqueado googlebot…

Al final, y casi por casualidad, veo en la raiz del servidor (no en los dominios) un .htaccess que me mira disimuladamente. Mala pinta tiene, lo examino, y efectivamente, se confirman mis sospechas, y con ellas, se me cae toda la confianza que tenia en la que para mi era una de las grandes empresas de hosting, dreamhost…

Deny From 74.6
Deny From 38.99
Deny From 66.249

Investigando un poco mas, descubro que la ip 66.249. pertenece a google… Ahora todo encajaba, y lo que veo mas grave, no se comunicaron conmigo desde Dreamhost para avisarme que iban a bloquear ips. He revisado detenidamente el historial de mensajes desde su consola por si se me hubiera colado en el mail, pero no, no me lo comunicaron, y eso lo veo un error grave.

Al eliminar el citado .htaccess y volver a subir el sitemap…magia! El bloqueo había desaparecido…

Comprendo que, debido al entorno compartido, deban aplicar estas medidas con algunas ips, sobre todo cuando se pueden tratar de un ataque DDos, pero no comprendo como pueden bloquear a el robot del principal motor de busqueda, y mucho mas sin comunicarselo al cliente.

Y me termina de decepcionar el hecho de que, incluso consultando al soporte con todos los datos y preguntando abiertamente si estaban bloqueando googlebot, me dicen que no… supongo se le paso al soporte comunicármelo cuando lo hicieron, y se le paso confirmarme que efectivamente existía el bloqueo…pero es preocupante pensar cuantos clientes pueden estar siendo actualmente bloqueados sin saberlo.

En fin, creo mi etapa con Dreamhost ha terminado…que harías tú?

7 comentarios

  1. Carfran /

    Por mi parte, estaria claro. Hay que cambiar.

  2. Hola yo también tuve un problema similar con mi blog personal, sin embargo, no pasaba en el resto de las webs. Gracias por tu explicación, cuando puedo lo consulto con un amigo para valorar alternativas.

  3. Xarlie /

    En el raíz? exactamente donde? Me gustaría buscarlo a ver si yo tengo algo parecido y estar un poco al loro de eso.

  4. Saludos Miguel! Muchas gracias a ti por seguirnos en Seo Adulto, y enhorabuena por tu blog!

  5. Saludos Xarlie, gracias por seguirnos!
    Yo lo encontre justo un nivel por encima de los dominios, por eso estaba bloqueando absolutamente todo…
    Saludos!

  6. A mí me pasó lo mismo en dreamhost, pero me avisaron antes por mail.

Trackbacks/Pingbacks

  1. 1&1 No Permite Contenidos Adultos » Seo Adulto - [...] no gano para disgustos debido al hosting de nuestra red de webs. Aun estamos recuperandonos del bloqueo de dreamhost ...
  2. Dreamhost bloqueando al bot de google? at MALDER - [...] pajarito me ha dicho que tengamos cuidado con dreamhost ya que todos sabemos lo sonado de sus problemas con ...

Responder