Трафик от Гугъл и др. роботи

[SecondShoe]

Направи ми впечатление, че в Гугъл са индексирани суровите текстове от библиотеката. Предполагам, че и другите роботи на търсещи машини имат достъп до тези текстове и постоянно ровичкат из тях забавяйки работата на нормалните потребители. Според мен роботите не трябва да имат достъп достъп до тези текстове. Трябва да виждат само допълнителната информация, анотацията, но не и пълния текст.

[Борислав]

Да-а, моя грешка. Като за начало ще им кажа да не ги индексират.