Я хочу проверить, как будет вести себя мой сайт, когда его падают. Однако я хочу исключить все URL, содержащие слово «страница». Я старался:
$ wget -r -R "*page*" --spider --no-check-certificate -w 1 http://mysite.com/
Предполагается, что -R
флаг отклоняет шаблон URL, содержащий слово «страница». За исключением того, что это не похоже на работу:
Spider mode enabled. Check if remote file exists.
--2014-06-10 12:34:56-- http://mysite.com/?sort=post&page=87729
Reusing existing connection to [mysite.com]:80.
HTTP request sent, awaiting response... 200 OK
Как исключить паутинга такого URL?