Оглавление файла ( /WEBMASTER/robots-faq.txt )



  • The Web Robots FAQ

  • нЕСКОЛЬКО СЛОВ О ТОМ, КАК РАБОТАЮТ РОБОТЫ (spiders) ПОИСКОВЫХ МАШИН

  • сТАНДАРТ ИСКЛЮЧЕНИЙ ДЛЯ РОБОТОВ
    • Size: 43399 bytes
    Last-modified: Thu, 28 May 1998 14:14:26 GMT

    RLE_Banner_NetworkRLE_Banner_Network

    Music.lib.ru MP3 Легально! Бесплатно!
    "Самиздат" ждет Писателей и Читателей
    "Заграница" - впечатления о зарубежной жизни
    Водный туризм - готовь байдарку зимой