|
|
Регистрация Восстановить пароль |
Повторная активизация e-mail |
Регистрация | Задать вопрос |
Заплачу за решение |
Новые сообщения |
Сообщения за день |
Расширенный поиск |
Правила |
Всё прочитано |
|
Опции темы | Поиск в этой теме |
07.12.2009, 13:25 | #1 |
Пользователь
Регистрация: 12.11.2008
Сообщений: 55
|
Как избежать бана со стороны сервера за запросы
Здравствуйте! Хочу сделать свой Sitemap генератор. Для этого компонентом idHTTP получаю текст страницы, нахожу ссылки, получаю эти страницы и т.д. Между запросами пауза (увеличивал до 1500 мсек). Так вот, максимум на 960 странице сервер перестаёт отдавать страницы. Возможно, со стороны сервера это выглядит как атака? Как этого избежать, или что я делаю неправильно? Параметр ReadTimeOut=10 000, может нужно ждать дольше? Но ведь браузер открывает "недоступную" страницу практически моментально!
Последний раз редактировалось AndrzejX; 07.12.2009 в 13:49. |
07.12.2009, 15:55 | #2 |
Форумчанин
Регистрация: 22.06.2009
Сообщений: 310
|
Используйте прокси.
А вообще, если через браузер заходит, то не похоже на бан. Можно увидеть код? |
07.12.2009, 17:03 | #3 |
Пользователь
Регистрация: 12.11.2008
Сообщений: 55
|
Да всё обычно. Получаю страницу
Код:
Последний раз редактировалось AndrzejX; 08.12.2009 в 02:23. |
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
как избежать кэширования в Опере | rolling | PHP | 3 | 01.12.2009 18:34 |
Как избежать сужения (уменьшение размера) пикселей изображения, при включенном свойстве Stretch? | Лукманов Александр | Мультимедиа в Delphi | 8 | 26.10.2009 09:52 |
Как избежать повторение одного и того же номера дважды | CockPuncher | Microsoft Office Excel | 6 | 03.09.2009 09:53 |
Как при постройке графика избежать диления на 0 | Zerony | Общие вопросы Delphi | 9 | 12.01.2009 18:02 |
Программирование под Windows (ошибка), как избежать ошибки Unresolved external '_main' referenced fro | DeLure | Общие вопросы C/C++ | 2 | 02.03.2008 01:35 |