Как избежать бана со стороны сервера за запросы

[AndrzejX]

Здравствуйте! Хочу сделать свой Sitemap генератор. Для этого компонентом idHTTP получаю текст страницы, нахожу ссылки, получаю эти страницы и т.д. Между запросами пауза (увеличивал до 1500 мсек). Так вот, максимум на 960 странице сервер перестаёт отдавать страницы. Возможно, со стороны сервера это выглядит как атака? Как этого избежать, или что я делаю неправильно? Параметр ReadTimeOut=10 000, может нужно ждать дольше? Но ведь браузер открывает "недоступную" страницу практически моментально!

[Voody]

Используйте прокси.
А вообще, если через браузер заходит, то не похоже на бан. Можно увидеть код?

[AndrzejX]

Да всё обычно. Получаю страницу

var Text, Link: String; //Link - полученная с одной из предыдущих страниц ссылка
begin
  try
    Text:=idHTTP1.get(Link);
  except
    Text:='Cтраница недоступна';
  end;
end;

И вот наступает момент, когда все последующие страницы недоступны. Копирую Link, вставляю в браузер - OK! Прикреплю весь проект. Он рабочий, хоть и не доведён. Не получается пока перекодировать текст в UTF-8, но это потом.