Consumo de Google en transferencia.

[Morph]

Hola, en dos mese se ha disparado el consumo de este robot en mi espacio.
Datos de consumo:
Julio 2006: 486 Mb
Agosto 2006: 1.6Gb
Septiembre 2006: A dia 21= 2.6 Gb

No se a que viene tanto consumo por parte de este robot, si sigue asi este mes llegara a los 3 Gb y los venideros no se igual se come la transferencia el solo. jeje

Ayer mire lo del robots.txt y he puesto uno en la raiz de mi hosting cerrando la entrada a los robots a todo, menos al Foro principal, al foro de las demos y un Phpbb3 que tengo en pruebas, creo que este tambien lo cerrare.

No se alguna idea de que puede estar pasado, a que viene que se haya disparado el consumo de este robot, en 2 meses se ha multiplicado por 8 lo que me consume, el caso es que no se si tiene solucion por eso pregunto aqui haber si alguien puede decirme algo.
Si necesitais mas datos para este tema me lo comentais y los pongo. Saludos

[cporty]

Mira, yo no tengo ni idea de esto de los robots, lo unico, decirte que yo he tenido que cerrar y eliminar mi foro porque cada dia consumia un giga de tráfico... Solo tenia 6gb/mes y claro, estando a mediados de mes pues... Me dijeron algo de los robots, mira esta link:

http://www.phpbb-es.com/foro/trafico-me ... t6237.html

Espero que te ayude, un saludo!

[Morph]

cporty, Ese post ya lo mire y alguno mas, por eso le meti el robots.txt Gracias por tu ayuda. Saludos

[casimedicos]

exacto cada vez consumen mas

eso se debe a una sencila caracteristica y es que de mes a mes tu foro es mas grande con lo cual el robot lee, se come mas paginas, visita mas enlaces, pues hay mas posts, mas usuarios, mas datos y mas enlaces a visitar

asimismo cada vez eres mas popular, y mas visitas

con lo cual, traga mas....

con lo cual has de escoger o buen posicionamiento en el buscador o sacrificar trafico

lo que si puedes hacer si tienes un sitemap o bien en las metatags cambiar el tiempo de visita de los robots de daily por weekly o mensual,... pero claro cuanto mas pongas pues peor para el posicionamiento

en fin, no se si me he explicado

en cuanto a lo de los otros robots evidentemente has de bloquearlos

decir que yo use el modulo ese de añadir a yahoo los enlaces, y ahora el de yahoo tambien esta empezando a tragar de lo lindo ....

con lo cual.........¿¿??

[invi]

La mejor solucion es un phpBB sin el mod este de los robots xD
consumen que no veas.. y sin ese mod no pasaria esto.
perderás pisicionamiento en buscadores, pero al menos no te verás comprometido en situaciones dificiles en transferencia.

[casimedicos]

no hay que ser tan drastico vale este

simplemente desactivalo, el mod_rewrite y el sitemap, etc... y es mas si le pones en el robots.txt que no escanee nada pues no rastrea nada

yo te diria que aumentes el tiempo que pasa entre cada visita del robot y si aun asi no consigues reducirlo lo suficiente pues le bloquees el acceso...

pero es mi opinion

[cporty]

Pero si yo no tenia nada de robots, vamos, el phpBB 2.0.21 limpio y cada dia era 1gb con 220 usuarios y solo 10 online (como muxo)... No es normal!

[casimedicos]

cporty no mezcles ajos con cebollas, lo tuyo si no me equivoco ya esta explicado en otro tema y te han dado soluciones

lo que plantea morph es distinto el habla de google en especifico y eso depende de ello

....

[cporty]

cporty no mezcles ajos con cebollas, lo tuyo si no me equivoco ya esta explicado en otro tema y te han dado soluciones

lo que plantea morph es distinto el habla de google en especifico y eso depende de ello

.... Cierto, lo que pasa, es que no me dieron solucion y por eso estoy activo en este tema, para ver si se puede solucionar el problema!

Un saludo!

[Morph]

Pues ahora que lo dices tengo puesto "2 days" Te refieres a esto no? <meta name="Revisit" content="2 days" /> Claro eso influye pues le metere para probar "4 days" controlare y vere si asi se soluciona.

[quote]en cuanto a lo de los otros robots evidentemente has de bloquearlos[/quoteicy] Esto no se a que te refieres no lo entendi bien, que cierre la entrada a los otros robots, los otros me consumen muy poco el Yahoo, el MSN o el Ask Jeeves esos no se tragan casi nada.

Probare eso Gracias por vuestras respuestas. Saludos

[casimedicos]

me refiero a los spambots del post de cporty

emjor ponle en el matatag 7 dias
y en el sitemap del xs si no recuerdo mal tambien puees configurar en el ACP la importancia (bajasela) y el tiempo de visita de los temas del foro

ya nos contaras si disminuye

[Morph]

casimedicos, Ok voy a cambiar eso por 7 dias y miro lo otro. Saludos

[Morph]

casimedicos, [quote]sitemap del XS si no recuerdo mal tambien puees configurar en el ACP la importancia (bajasela) y el tiempo de visita de los temas del foro [/quoteicy] Esto no lo encuentro, a no ser que este confundido. Lo otro ya le puse 7 dias. Saludos

[casimedicos]

acp
configuration
board
Sitemap Settings

pero ahora lo de la prioridad no recuerdo bien si influia en el tiempo de visita pero creo que si leetelo en las normas de google o en el mod

pero creo que si

[Morph]

casimedicos,
ACP
configuration
board
Sitemap Settings

Lo busque pero no lo encuentro, tengo la version 058. Saludos