Можем ли мы использовать регулярные выражения в файле robots.txt для блокировки URL-адресов?
У меня есть несколько динамически генерируемых URL. Могу ли я использовать регулярные выражения для блокировки этих URL-адресов в файле