Как сделать сложную выборку из файла

Имеется файл:

Нужно из этого файла выбрать к примеру:

100-plaginov-adobe-photoshop-1358318344.html
oficialnoe-rukovodstvo-po-photoshop-cs5-na-russkom-yazyke-1358283088.html
osnovy-photoshop-s-nulya-ot-a-do-ya-videokurs-1358248501.html

То есть только по одному экземпляру (можно по любому из однотипных).

Формат строки такой:
<имя файла>-<timestamp(это 10 цифр)>.html

по имени файла надо бы сделать что-то вроде sort -u, но как это сделать к части...

Пока что моих познаний не хватает это реализовать, просьба помочь.

Уже как бы идею понял, но по странной причине все равно не работает.
Идея: ведь можно использовать тот же sort -u (это же как бы удаляет дубли) с сортировкой по полю. То есть задача сводится в простановке разделителя в нужное место -а это же эелементарно sed'ом можно сделать.

Но как видим по непонятной мне причине оно не срабатывает - как это понимать?
При этом перемешивание строк работает:

Теперь другой вопрос - что я делаю не так? Что разве sort -u не удаляет дубли?

И все таки разобрался, может кому-то что-то подобное пригодится, поэтому опубликую тут решение.

Оказалось вот что (читать внимательно маны полезно :)) - ключ k для sort на самом деле не указывает на поле по которому надо сортировать

-k, --key=POS1[,POS2]
              start a key at POS1 (origin 1), end it at POS2 (default end of line)

То есть это позиция, с которой надо учитывать текст для сортировки, учитывая разделитель, то есть k1 вообще не будет иметь смысла - так как будет эквивалентно обычной сортировке.
Поэтому надо чтобы наше поле было не первым а вторым после разделителя и тогда использовать ключ -k2.


То есть задача сводится:
1. Прописать в нужном месте разделитель.
2. Переставить местами поля по разделителю - так чтобы поле по которому будем сортировать было не первым, а вторым.
3. Отсортировать с удалением дублей, начиная с позиции начала второго поля.
4. Переставить местами поля по разделителю - вернуть в исходное положение.
5. Удалить разделитель.

Вот на практике:

То есть все работает!
Может можно как-то и проще (в чем я сомневаюсь), но для меня сейчас главное что это работает!

"valet" написал:

$ cat test|sed -r 's~([0-9]+)\.html$~\|\1\.html~gi'|sed -r 's~([^\|]+)\|(.*)~\2\|\1~gi'|sort -t"|" -u -k2|sed -r 's~([^\|]+)\|(.*)~\2\|\1~gi'|sed -r 's~\|~~gi'

OMG! :D
В sed и bash я не силён, но, ИМХО, так "человечнее":

$ for z in `sed -r 's/\-[0-9]{10}\.html//' file.txt | uniq`; do grep -m 1 $z file.txt; done;

-=Serj=-, можно и так, вот только работать мне кажется будет медленнее из-за конструкции for.. in

Да, кстати сейчас проверил. На очень большом файле вариант от -=Serj=- к сожалению работает ужастно медленно, а оно и логично: в моем варианте сложность обработки - это несколько обработок входного файла sed'ами, а в варианте от -=Serj=- что мы имеем: мы получаем нужные уникальные куски строк (заметим что этих кусков при большом файле огромное количество, порядок которых измеряется количеством строк в файле), а потом делаем выборки из входного файла для каждой этой строки - вы представляете что будет творится если в файле миллионы строк - сложность выполнения будет равна выполнению миллионов скриптов над и так огромным файлом.
Так что вариант то рабочий, но "человечнее" он только визуально и фактически непригодный для выполнения в реальных условиях.