0
-
25.12.2013, 11:03 #1
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
вопрос по скачиванию с интернета
Прошу не переносить пару дней.
Вопрос такого плана: чем и как разово можно выделить кучу ссылок на сайте, что бы они начали скачиваться по очереди? В любом браузере максимальное количество скачиваний 6-10 штук и на каждую ссылку тыкать надо. А когда куча ссылок, да еще названия одинаковые почти и длинные постоянно приходится висеть у компа и перебирать лог загрузки, что бы одно и тоже не скачалось дважды.... не удобно это короче. Вот и требуется что-то, чем можно выделить сразу 100-300 ссылок за раз, ткнуть один раз и ждать пока все скачается. Подскажите кто знает-. . - -. .. .... ..- .-.-
-
25.12.2013, 11:06 #2
- Регистрация
- 12.05.2005
- Адрес
- Россия, Санкт-Петербург
- Возраст
- 46
- Сообщений
- 3,730
Спасибо: Получено: 201
Отправлено: 16
0ReGet или любой другой download менеджер.
VW Passat Variant 1999 1.6 ARM....был, VW Passat Variant 2004 1.9 AVF.....был, сбылась мечта идиота
-
25.12.2013, 11:46 #3
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
0mixa,даунлоад манагеры я знаю. Там надо указывать ссылки по отдельности. Копировать либо правой кнопкой "открыть в..." Скопом выделить и воткнуть на скачку низя
--- Добавлено чуть позже ---
что бы понятно было вот пример http://zakupki.gov.ru/pgz/public/action/orders/info/order_document_list_info/show?source=epz¬ificationId=8170333 отсюда надо скачать разово все выложенные файлы путем пары кликов, а не регулярным кликаньем. Чем?-. . - -. .. .... ..- .-.-
-
25.12.2013, 12:16 #4
-
25.12.2013, 12:26 #5
-
25.12.2013, 12:34 #6
-
25.12.2013, 12:56 #7
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
0Если бы все так просто было Серега ни один даун...манагер не ставит в закачку. Там даже ссылок нет на эти файлы. Яваскрипт и все. Кликаешь на ссыль и тут же происходит закачка. УРЛ не скопировать на скачку. Вот и мыкаюсь
-. . - -. .. .... ..- .-.-
-
25.12.2013, 13:08 #8
-
25.12.2013, 13:20 #9
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
0да уж 7 лет скоро, как понял и простил, но надо стремиться к лучшему может подскажут что путное люди добрые
-. . - -. .. .... ..- .-.-
-
25.12.2013, 13:32 #10
- Регистрация
- 12.05.2005
- Адрес
- Россия, Санкт-Петербург
- Возраст
- 46
- Сообщений
- 3,730
Спасибо: Получено: 201
Отправлено: 16
0регет сканирует страницу html и позволяет по фильтру выбрать необходимые файлы для скачки.списком.
в твоем примере не уверен,что справится,т.к.каждая ссылка по скрипту работает.правда,я давно не слежу за развитием регета - может,в свежих версиях есть такая возможность.попробуй.VW Passat Variant 1999 1.6 ARM....был, VW Passat Variant 2004 1.9 AVF.....был, сбылась мечта идиота
-
25.12.2013, 13:36 #11
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
0mixa,пробовал я его. как и другие даунлоадеры. Все так же, никак.
-. . - -. .. .... ..- .-.-
-
25.12.2013, 14:05 #12
- Регистрация
- 25.07.2005
- Адрес
- Ростов-на-Дону
- Возраст
- 40
- Сообщений
- 3,532
- Записей в дневнике
- 4
Спасибо: Получено: 601
Отправлено: 392
0оборотень, к FireFox есть плагин "DownThemAll!". После его установки. клацаешь на любом месте страницы правой кнопкой и выбираешь dTa OneClick, появится окно, в котором страница будет проанализирована на ссылки, можно выбрать тип файлов, отметить всех их сразу и сделать массовую закачку в выбранную директорию. В нюансах думаю разберешься. Попробуй.
--- Добавлено чуть позже ---
Аааа, они за жабоскриптом, боюсь ничем ты их не возьмешь.
Скорее всего надо писать какой парсер, что-то типа Wget страницы + Pyton разбор ее с жабой, потом создание списка линков и их закачка.
Стандартные тулзы такое не схавают.Passat B5, 1.8T, 98г., AEB, AКПП5-ТТ; Winde.ru (Upsolute) Race Chip; плазменные лампы D2S от СанСаныча; +Crunch 2140s;
http://passat-rostov.ru
-
25.12.2013, 14:18 #13
-
25.12.2013, 14:26 #14
-
25.12.2013, 14:39 #15
-
25.12.2013, 15:12 #16
- Регистрация
- 25.07.2005
- Адрес
- Ростов-на-Дону
- Возраст
- 40
- Сообщений
- 3,532
- Записей в дневнике
- 4
Спасибо: Получено: 601
Отправлено: 392
1оборотень, Да, путем какой-нибудь проги не решаемо.
Есть такой язык программирования Питон, простой как две копейки, относительно.
Так вот, по твоей ссылке первый архив скачивается по ссылке http://zakupki.gov.ru/pgz/documentdo...ntId=134174968
Если в фаерфоксе навести мышку на ссылку и нажать Исследовать элемент, то будет выдан кусок страницы, где рядом есть строка downloadDocument(134174968). Видишь как цифры с скобке совпадают с ссылкой закачки?
Например в HTML-тексте сохраненной страницы есть текстовая инфа:
<a id="prFrm134174968" class="iceOutLnk" href="javascript:" onclick="downloadDocument(134174968);return false;">
Я попробовал вручную найти цифры, подставить их в ссылку и дать ее манагеру закачки - он начал качать, т.е. линк к файлу не динамический, созданный персонально для тебя, а постоянный.
Любому челу, который владеет питоном, на это написание сей чудо проги надо 15 минут.
Ну это как пример, кому-то удобнее на С написать или С++ или на .NET, кто чем владеет лучше.
Я не умею кодить.Passat B5, 1.8T, 98г., AEB, AКПП5-ТТ; Winde.ru (Upsolute) Race Chip; плазменные лампы D2S от СанСаныча; +Crunch 2140s;
http://passat-rostov.ru
-
25.12.2013, 15:40 #17
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
0Genrix, цифры скачиваемого файла по яваскрипту я и в яндекс браузере вижу, путем просмотра кода элемента. А вот что бы скачать не знал, как образовать ссылку. Спасибо за образец. Сейчас попробую поколдовать с фильтрами кода элемента в яндекс браузере. Может получится выделить только коды с текстом downloadDocument****** , а там уж, путем колхозных манипуляций в ворде, состряпаю ссылки и засажу в даун...манагер. В любом случае это быстрее и с меньшими ошибками выйдет нежели тыкая по каждой из 200-300 скриптов мышой
-. . - -. .. .... ..- .-.-
-
25.12.2013, 15:46 #18
- Регистрация
- 25.07.2005
- Адрес
- Ростов-на-Дону
- Возраст
- 40
- Сообщений
- 3,532
- Записей в дневнике
- 4
Спасибо: Получено: 601
Отправлено: 392
0Как-то на работе на меня повесили ежемесячное пробивание всех контрагентов на предмет банкротства.
Сведения печатаются в Коммерсанте, пробиваются по ИНН на сайте Коммерсанта, ИНН вводится в форму на сайте.
Так вот, таких организаций для пробивания было более 1000 штук. Раз в месяц и руками - лучше застрелиться сразу.
Один хороший человек мне за спасибо на питоне за 15-20 минут сделал скрипт, который за 0,5 сек отбирал банкротов и их ИНН складывал в файлик.
Только надо было подождать 30-40 минут, пока скачаются страницы-ответы на более 1000 ИНН.
А дальше я уже персонально, по отобранным ИНН, смотрел руками кто банкроот.
За платно за такую прогу-скрипт с меня просили 1500р.Passat B5, 1.8T, 98г., AEB, AКПП5-ТТ; Winde.ru (Upsolute) Race Chip; плазменные лампы D2S от СанСаныча; +Crunch 2140s;
http://passat-rostov.ru
-
25.12.2013, 16:38 #19
- Регистрация
- 12.09.2007
- Адрес
- Россия, снова Нерезиновск :/
- Возраст
- 44
- Сообщений
- 3,708
Спасибо: Получено: 54
Отправлено: 82
0да уж.
Блин. В Я.браузере не дает скачать коды элемента, да и отсортировать не дает. Можно только кликнув на конкретный яваскрипт посмотреть его код.
А чем можно целиком скачать страницу с кодами элементов всех яваскриптов?
--- Добавлено чуть позже ---
отбой с вопросом скачал в кодировке даун..манагером. Сейчас натравлю фильтр на downloadDocument****** и посмотрим что выйдет
--- Добавлено чуть позже ---
Genrix,что-то с парсерами совсем потерялся скачал страницу в кодировке. В наличии файл с расширением .HTM Как в нем убрать все ненужное, что бы остались только downloadDocument(******) В ручную упарюсь. Подсоби какой парсер скачать???-. . - -. .. .... ..- .-.-
-
25.12.2013, 18:14 #20
- Регистрация
- 18.08.2012
- Адрес
- Сокол, Вологодской обл.
- Возраст
- 47
- Сообщений
- 4,401
Спасибо: Получено: 675
Отправлено: 477
0вот эту попробую,качал и по 50 штук в очередь
http://www.dimonius.ru/?usdPassat B2-был, Passat B3 тоже был,VW Passat B5 Variant и этот был.... Passat B6, BMP, 140 лошадей)))
Похожие темы
-
Вопрос по омывателям фар.
от Borisich в разделе Архив 2005г.Ответов: 47Последнее сообщение: 25.02.2005, 14:26 -
Вопрос про навигацию
от Dmitry в разделе Архив 2004г.Ответов: 31Последнее сообщение: 15.11.2004, 09:07 -
вопрос про освежители воздуха
от MiSt в разделе Архив 2004г.Ответов: 17Последнее сообщение: 11.11.2004, 13:43 -
юридический вопрос
от sovt в разделе Архив 2004г.Ответов: 32Последнее сообщение: 05.11.2004, 14:24 -
Вопрос дизелистам и не только!
от Vasilich в разделе Архив 2004г.Ответов: 74Последнее сообщение: 20.10.2004, 10:51