Software

Сообщение **Zork** » Вт дек 19, 2006 15:59

404 Research Lab. - Все об ошибке 404 - первейшем враге всех веб-серферов любителей. Наверно все её недолюбливают, ан нет, есть и у этой мерзопакости поклонники. Вот, целый сайт своей любимице соорудили.

Сообщение **Zork** » Вт дек 26, 2006 17:27

Robots.Txt. При индексации сайтов роботы поисковых систем учитывают специальные инструкции, находящиеся в файле robots.txt, который, в свою очередь, помещается на сайте его создателем. При работе с этим инструментом можно (даже наверняка) столкнуться с массой подводных камней. Этот сайт поможет их избежать с наибольшей эффективностью.

Этот сайт содержит информацию о стандарте на robots.txt и другие статьи о написании корректно себя ведущих веб-роботов.