Страница 1 от 1

Трафик от Гугъл и др. роботи

Пуснато: 21 февруари 2009, 20:18
от SecondShoe
Направи ми впечатление, че в Гугъл са индексирани суровите текстове от библиотеката. Предполагам, че и другите роботи на търсещи машини имат достъп до тези текстове и постоянно ровичкат из тях забавяйки работата на нормалните потребители. Според мен роботите не трябва да имат достъп достъп до тези текстове. Трябва да виждат само допълнителната информация, анотацията, но не и пълния текст.

Пуснато: 21 февруари 2009, 20:35
от Борислав
Да-а, моя грешка. Като за начало ще им кажа да не ги индексират.