ShigaLex Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Рекурсивная загрузка веб-сайтов; оффлайн-браузеры — общая тема по вопросу; если вы еще не определились с выбором инструмента, то вам туда. HTTrack Website Copier   HTTrack — свободное приложение для рекурсивной загрузки веб-сайтов, т.е. для той задачи, которую решают Wget в режиме зеркалирования (--mirror) и проприетарные Teleport Pro и Offline Explorer. Основной интерфейс — неинтерактивный командный, но доступно и по меньшей мере две графические оболочки: виндовый WinHTTrack и браузерный WebHTTrack.   | Офсайт | Википедия | Фрешмит | Ман |   Документация: • Httrack Users Guide by Fred Cohen — довольно длинный учебник • FAQ & Troubleshooting — официальный FAQ • HTTrack Website Copier by Leto Kauler — годная смесь FAQ'а и мануала   Зачатки FAQ'а: Q: Я хочу загрузить сайт, который требует авторизации. Что делать? A: Кинуть в текущую директорию файл cookies.txt с нужными (но лишние не помешают) куками в нетскэйповском формате, HTTrack его подхватит. У Файрфокса куки в требуемом виде можно получить, воспользовавшись расширением «Export Cookies»; у Хрома — «Cookie.txt export».   Смело правьте и дополняйте шапку, однако не забывайте отписываться об исправлениях и сохранять исходный вариант. Всего записей: 18 | Зарегистр. 30-07-2007 | Отправлено: 21:34 30-07-2007 | Исправлено: Maz, 15:54 01-04-2019

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > через граф.интерфейс  HTTrack Website Copier не все функции доступны или работают? Я не знаю. Говорю же, что не знаком ни с тем, ни с другим гуем. Вообще такое вполне может быть, но в данном случае, скорее всего, вы просто не нашли, как это сделать через гуй, а я и не искал. :-)   > при установке Цигвин какие пакеты выбрать чтобы можно было запустить HTTrack? Кроме тех, что выбраны по умолчанию — только собственно httrack. И это общее правило — существует же разрешение зависимостей (dependencies resolving): вы выбираете только нужный вам пакет, а пакетный мэнэджер добавит и все остальное, что нужно еще. ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 18:36 08-09-2012 | Исправлено: ASE_DAG, 18:37 08-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > В HTTrack в по умолчанию стоит принимать куки. Я знаю.   > http://xxx:yyy@www.traderacademy.ru/forum/ Это HTTP basic authentication. А вам нужна авторизация POST-запросом (сделаете браузером) с сохранением состояния в куках — скормите полученные браузером куки сабжу.   Ну как, вы там поставили Цигвин? ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 20:24 08-09-2012 | Исправлено: ASE_DAG, 20:24 08-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > в чем может быть дело? Гм. Архизабавно. Лишние куки таки мешают, если их слишком много. Отфильтруйте предварительно нужные:   $ grep 'traderacademy.ru' cookies.txt > cookies.txt.tmp $ mv cookies.txt{.tmp,} $ httrack 'http://www.traderacademy.ru/forum/'   Надо поправить шапку, подыскав иное расширение — которое экпортитирует только куки для текущего сайта. ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 20:33 13-09-2012 | Исправлено: ASE_DAG, 20:34 13-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > www.traderacademy.ru Нет, неправильно. Не $ grep 'www.traderacademy.ru' cookies.txt > cookies.txt.tmp, а $ grep 'traderacademy.ru' cookies.txt > cookies.txt.tmp. ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 21:15 13-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > Может я не правильно запускаю HTTrack? Я не знаю, как вы его запускаете. Вы этого не сообщили. ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 00:08 14-09-2012 | Исправлено: ASE_DAG, 00:15 14-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > А команды я не знаю   А я ее уже говорил: $ httrack 'http://www.traderacademy.ru/forum/'   Тем не менее, пока мы тут с вами канителились, они немного поменяли механизм авторизации, чтобы об’единить авторизацию на форуме с авторизацией на сайте. Во-первых, перелогиньтесь браузером (заодно воочию увидите, что форма логина поменялась), снова сохраните (Tools › Export Cookies...) и отфильтруйте ($ grep 'traderacademy.ru' ...) куки. А во-вторых, теперь они проверяют юзер-агент, и его надо указывать отличным от дефолтного, тогда как не далее, чем позавчера это еще было не нужно.   $ firefox http://ifconfig.me/ua скопировать вывод $ UA='<сюда вставить>' $ httrack -F "$UA" 'http://www.traderacademy.ru/forum/' ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 18:41 15-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Andreykhv > Процесс пошел, авторизация прошла. Ну слава богам, наконец-то.   > а какой командой можно будет продолжить закачку?   А как вы ее остановили? ^C? Ну тогда $ httrack -i ($ httrack --continue). ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 22:56 15-09-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору dyarsleau > security warning: maximum number of simultaneous connections limited to 4 --disable-security-limits, не?     > Из-под FAR-а всё нормально, но если записать ту же командную строку в bat-файл > из-за %" и т.п. Да, если я правильно помню, в виндовом шелле есть какой-то маразм, связанный с различием синтаксиса интерактивных команд и скриптов. Только никакого отношения с сабжу это не имеет, спросите у ваших товарищей по командной оболочке. ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 20:00 29-11-2012

ASE_DAG Gold Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору dyarsleau Описание синтаксиса, к которому можно обращаться как к справочнику — это всегда ман. $ man httrack Но на Винде он у вас, конечно, в таком виде не присутствует, поэтому Гугль в помощь, и первая же ссылка. ---------- Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC] Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 00:41 01-12-2012 | Исправлено: ASE_DAG, 00:59 01-12-2012

Страницы: 1 2 3 4 5 6 7 8 9 10 11

Компьютерный форум Ru.Board » Компьютеры » Программы » HTTrack Website Copier

Переход по форумам  Закладки   » Компьютеры Цифровое изображение Программы Microsoft Windows UNIX Другие OS Hardware В помощь сисадмину Прикладное программирование Игры Форумные игры   » Интернет Web-программирование В помощь вебмастеру Графика Хостинг Зацените-ка!   » Тематические Ikonboard v.2 Ikonboard v.3 Invision Board Другие форумы PHP-Nuke и другие порталы Мобила   » Общие Спорт Флейм Темы по региональным встречам Музыка и Кино Юмор Литература и Живопись   » Ru.Board Новости Помощь по форуму   » Андеграунд eBookz Варезник Раздачи и акции Мобильный варезник Андеграунд Игры и фильмы   » Специальные Тестирование