Яндекс не только ввел новый алгоритм и все проапдейтил в последние дни. Сегодня я наткнулся на новость следующего содержания:

Файл robots.txt используется веб-мастерами, чтобы объяснить роботу поисковой системы, какие страницы и разделы сайта нельзя индексировать, а какие можно. Стандарт предусматривает небольшой набор директив, поэтому написание правил индексации для крупных сайтов является сложной задачей. Мы решили упростить эту работу и с сегодняшнего дня поддерживаем в robots.txt директиву Allow, спецсимволы “*” и “$

Прочитать подробнее об использовании robots.txt для яндекса можно тут.

P.S. Ищу человка, способного сделать тему для форума phpbb3.
ICQ - 855427