Потрібне налаштування моніторингу непрацюючих посилань на сайті

Сайт розвивається вже кілька років: сторінки переносяться, розділи об'єднуються, а зовнішні ресурси, на які ми колись посилалися, час від часу зникають. Частина посилань поступово перетворюється на мертві. Самі ми помічаємо це рідко, зазвичай уже після скарги відвідувача або падіння позицій у пошуку, а хотілося б дізнаватися про проблему раніше.

Потрібно налаштувати систему, яка регулярно обходитиме всі сторінки сайту, перевірятиме кожне внутрішнє й зовнішнє посилання і фіксуватиме ті, що не відкриваються. Важливо, щоб у звіті було точно вказано, на якій сторінці знайдено проблемне посилання і в якому місці — в тексті, меню чи підвалі. Щойно з'являється нове непрацююче посилання, відповідальному має надходити лист, щоб проблему не шукали вручну місяцями.

Окремо важлива точність: не хочеться хибних спрацювань через тимчасові збої чи сторінки з авторизацією, і не хочеться, щоб обхід пропускав сторінки в глибині структури. Розкажіть, якими інструментами плануєте користуватися.

Що має бути в підсумку:
— регулярний обхід усіх сторінок сайту
— окремі списки внутрішніх і зовнішніх битих посилань
— вказання сторінки та місця для кожного посилання
— лист відповідальному в разі появи нових проблем
— зрозумілий звіт, а не технічний лог