Находим и удаляем дубли страниц

Статья расскажет, как найти и удалить все дубли страниц которые могут быть созданны на сайте.