Нужна настройка мониторинга неработающих ссылок на сайте

Сайт растёт уже несколько лет: страницы переносятся, разделы объединяются, а внешние ресурсы, на которые мы когда-то ссылались, иногда просто исчезают. Часть ссылок постепенно превращается в мёртвые. Сами мы замечаем это редко, обычно уже после жалобы посетителя или падения позиций в поиске, а хочется узнавать о проблеме раньше.

Нужно настроить систему, которая будет регулярно обходить все страницы сайта, проверять каждую внутреннюю и внешнюю ссылку и фиксировать те, что не открываются. Важно, чтобы в отчёте было точно указано, на какой странице встретилась проблемная ссылка и в каком месте — в тексте, меню или подвале. Как только появляется новая неработающая ссылка, ответственному должно приходить письмо, чтобы проблему не искали вручную месяцами.

Отдельно важна точность: не хочется ложных срабатываний из-за временных сбоев или страниц с авторизацией, и не хочется, чтобы обход пропускал страницы в глубине структуры. Расскажите, какими инструментами планируете пользоваться.

Что должно быть в итоге:
— регулярный обход всех страниц сайта
— отдельные списки внутренних и внешних битых ссылок
— указание страницы и места для каждой ссылки
— письмо ответственному при появлении новых проблем
— понятный отчёт, а не технический лог