robots.txt

Tutti gli articoli che parlano di robots.txt:

6 milioni le pagine inutili create dal “bug” di Blogger / Blogspot

Wednesday, September 10th, 2008

Una delle grandi crociate di Google è quella contro i contenuti duplicati: nessuno si aspetterebbe, pertanto, che un suo prodotto come Blogger (cfr. Google buys Pyra Labs) generasse un contenuto duplicato per ogni commento scritto sul blog (per chi è interessato, questa è la soluzione parziale al problema).

Un singolo sito (come il mio blog personale) può generare anche 100 pagine di contenuti duplicati… al che mi sono chiesto: quanti contenuti duplicati Blogger genera in totale?

… basta una semplice ricerca su Google:Blogger / Blogspot: 6,000,000 of duplicated content indexed!
(more…)


SMS Gratis