Тег: robots.txt
Яндекс теперь поддерживает маски в robots.txt, т. е. символы «$» и «*» в «disallow» и «allow» (да, теперь ещё и «allow» поддерживается
Пишу, по большей части, про историю, свою жизнь и немного про программирование.
Пишу, по большей части, про историю, свою жизнь и немного про программирование.
Яндекс теперь поддерживает маски в robots.txt, т. е. символы «$» и «*» в «disallow» и «allow» (да, теперь ещё и «allow» поддерживается