Как удалить одинаковые ссылки?

Берёте все ссылки, пихаете их в ассоциативный массив, где ключом является имя домена, а значением ссылка целиком, и это при условии, что такого ключа в массиве ещё нет.

Таким образом в массиве у каждого ключа-домена будет первая ссылка из списка.

Пробовал брать из одного файла домены с другого ссылки, сравнивать. Но что то не выходит у меня 😡

Пробовал сравнивать строки, тоже что то не вышло.

буду еще пробовать.

Откуда взялись файлы? :)

Изначально же были только "ссылки вида".

Вы правы, файлы содержат ссылки. Вернее файл a.txt грязные ссылки.

А в файл b.txt я закинул домены, удалив повторы.

А на форум я выложил примеры, чтоб понятен был смысл.

По реализации я думаю надо сделать так.

Брать ссылку из базы a.txt и записывать эту ссылку в новый файл назовем его x.txt

далее при проходе циклом проверять.

Если есть такой домен есть то пропускаем и не записываем.

И так пока не пройдем все ссылки.

Из базы выборку я делал тоже сравнивая данные, но там проще было.

типа так

$result = mysql_query('SELECT COUNT(title) as cnt FROM `dle_post` WHERE `title`="'.$title.'"');

$cnt=mysql_fetch_row($result);

unik=$cnt[0];

if($unik){ }

$links=array();

foreach (file("a.txt") as $url) {

  if ($host=parse_url($url, PHP_URL_HOST)) {

    if (!$links[$host]) {

      $links[$host]=$url;

    }

  }

}

В результате имеем массив $links, в котором каждому хосту присвоена одна ссылка (первая из списка).