Есть хорошие сервисы, делающие технический аудит сайта с помощью сканирования сайта, поиска целого и частичного совпадения содержимого, вычисления веса страниц, проверки ошибок, выявление неправильных и нерабочих ссылок. Также анализируют скорость загрузки, объём страниц.