На сайте опубликовано много текстов. По ошибке в текстах встречаются повторы - опубликованы по нескольку раз. У каждой публикации есть: заголовок, тег (такой же как заголовок) и сам текст.

Нужно поставить готовый скрипт (если есть) или написать по определению и удалению таких дубликатов. Чтобы он анализировал не только заголовки но сравнивал сами тексты.

Сайт состоит из 90 поддоменов на каждом из которых тексты на разных языках. Скрипт должен проверить и почистить и морду сайта и все поддомены.

Есть готовое решение - плагин "Find Duplicates". Но его надо вручную запускать на каждом поддомене. Это не устраивает.