|
|
Регистрация Восстановить пароль |
Регистрация | Задать вопрос |
Заплачу за решение |
Новые сообщения |
Сообщения за день |
Расширенный поиск |
Правила |
Всё прочитано |
|
|
Опции темы | Поиск в этой теме |
28.12.2014, 19:07 | #1 |
Форумчанин
Регистрация: 21.09.2009
Сообщений: 431
|
Как скачать весь материал с сайта
Собственно интересует следующий сайт - http://line6.com/customtone/browse/podfarm/
Скачать нужно пресеты. На кнопке скачать ( стрелочка вниз ) висит вот такой код: PHP код:
Мне бы узнать каким методом можно принять файл и сохзранить на диск что бы в цикле сохранить абсолютно весь материал с сайта |
28.12.2014, 19:19 | #2 |
Старожил
Регистрация: 31.05.2010
Сообщений: 13,543
|
Качаем сайтмапу http://line6.com/sitemap.xml. Парсим и идём по всем урлам.
Пиши пьяным, редактируй трезвым.
Справочник по алгоритмам С++ Builder |
28.12.2014, 20:25 | #3 | |
Форумчанин
Регистрация: 21.09.2009
Сообщений: 431
|
Цитата:
|
|
28.12.2014, 20:51 | #4 |
Старожил
Регистрация: 31.05.2010
Сообщений: 13,543
|
Грузим сайтмапу. Выдёргиваем урлы. Закачиваем страницу. Парсим страницу. Выуживаем из страницы все ссылки и скачиваем всё, что на станице.
Есть другой способ. Лямзим пароль от сайта. Заходим по FTP и тырим всё, что там лежит.
Пиши пьяным, редактируй трезвым.
Справочник по алгоритмам С++ Builder |
28.12.2014, 20:59 | #5 |
Старожил
Регистрация: 30.12.2009
Сообщений: 11,430
|
залогинится на сайте для начала... без этого не скачаете ничего. Дальше изучайте HTML после авторизации.
|
28.12.2014, 21:01 | #6 | |
Форумчанин
Регистрация: 21.09.2009
Сообщений: 431
|
Цитата:
Код:
|
|
28.12.2014, 21:04 | #7 | |
Заблокирован
Регистрация: 24.11.2014
Сообщений: 721
|
kakawkinБез авторизации ничего скачать нельзя. Соответственно в задачу ложится авторизация на сайте, куки, и т.д. и т.п. Далее парсим нужные страницы на предмет URL на скачку, качаем. Опять же с куками. В виду того, что файлов много, ещё бы не плохо в потоках качаться. А в виду того, что интернет, штука нестабильная, придётся ещё крутить докачку. В итоге задача вырастает в здоровенную программу.
Цитата:
Последний раз редактировалось WinCoder; 28.12.2014 в 21:07. |
|
28.12.2014, 21:08 | #8 | |
Форумчанин
Регистрация: 21.09.2009
Сообщений: 431
|
Цитата:
То что логиниться надо это в курсе и не сложно. Ты сам смотрел страницу ? Нету там ничего на предмет URL и кнопка обрабатывается кодом java-scripts который отдельно в файле. Как скачивается уже понял там ссылка в которую подставляется id-tone который на странице а не как не в каких то сайтмапах. Ввиду того что файлов много и они весят 1,3кб мы просто скачиваем их в 20 потоках и всё будет нормально. И докачки ненадо ибо файлы имеют крошечный размер. Задача не вырастает в здоровенную программу. Всем спасибо кто помог! |
|
28.12.2014, 21:20 | #9 |
Заблокирован
Регистрация: 24.11.2014
Сообщений: 721
|
Зачем тему создавал? Непонятно.
|
28.12.2014, 21:31 | #10 | |
Старожил
Регистрация: 30.12.2009
Сообщений: 11,430
|
Цитата:
Че приходил, сам не понял. |
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Как "предложить" браузеру пользователя скачать шрифт с моего сайта? | lexluther | HTML и CSS | 14 | 08.04.2013 14:19 |
как скачать pdf-файл со своего сайта | alhon | HTML и CSS | 4 | 19.03.2013 13:13 |
Как скачать flv с сайта? | fs444 | JavaScript, Ajax | 10 | 14.05.2011 10:58 |
Как на юкозе вывести материал по тегам | nikolj | JavaScript, Ajax | 0 | 01.05.2011 11:45 |
Как скачать значок с сайта | misher | Свободное общение | 43 | 05.01.2011 17:59 |