Одинаковые строки Memo

[Dima_D]

Большое всем спасибо!

Сообщение от InternetStranger

Совсем не обязательно, но можно добавить 2 строчки, для увеличения производительности:

begin
     Memo1.Lines.BeginUpdate;  // Отключаем прорисовку Memo
     // ... тело цикла, в котором происходит обновление Memo
     Memo1.Lines.EndUpdate;    // Включаем прорисовку Memo, отобразятся все произведенные изменения
end;

Подробности, например, здесь.
Разница ощутима будет, когда число строк ~ 1000-3000

Обработка регулярным выражение 5000 строк занимала 32 c., теперь 9 это при том что все строки получаю с помощью idhttp1.get

[Ralik]

А как удалить не только продублированное значение, но и сам орининал? То есть если несколько раз повтор, то удалить и то и другое?

[Stilet]

А может просто не стоит допускать дублирования?
Выискивать их потом дело неблагодарное.