Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Рекурсивная загрузка веб-сайтов; оффлайн-браузеры (OfflineExplorer, TeleportPro, HTTrack)

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33

Открыть новую тему     Написать ответ в эту тему

Orlon



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Сравниваем возможности и недостатки оффлайн-браузеров:
OfflineExplorer - (Pro/Potable/Enterprise)
Teleport - (Pro-$50/Ultra-$200/VLX-$2000/Exec-$2500)
 
WebCopier, Webzip, SXBandMaster, WebTransporter, HTTrack, Wget, Wysigot...
Что лучше?
 
ТАБЛИЦЫ СРАВНЕНИЯ :
 
1. по версии разработчика OfflineExplorer цитата
2. по версии автора статьи на iXBT.com
 
Путеводитель по offline-браузерам подробная серия статей на iXBT.com
 
Родственные темы:
Web Organizer-ы (CyberArticle, NetCollector, etc.,)
Мониторинг обновления web-сайтов
RSS Feed Readers | News Aggregators
Сохранение составного flash
rutv.ru Скачиваем потоковое видео

Всего записей: 549 | Зарегистр. 08-01-2002 | Отправлено: 03:21 30-01-2002 | Исправлено: ASE_DAG, 02:41 08-09-2011
Petrik_Pjatochkin



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
OlegChernavin

Цитата:
Я исправил это в Offline Explorer. На следующей неделе выпустим версию 6.2, которая их будет скачивать и показывать без проблем.

 
Если вы про спойлеры, то, кстати, Teleport VLX 1.59 скачивает странички rutracker.org со спойлерами и их можно потом развернуть/свернуть оффлайн. Но не всё оказалось так гладко - если в спойлере находится картинка, то почему-то она не загружается Teleport'ом. Несколько дней бился, чтобы это исправить, но безрезультатно.
 
PS: Кажется, он вообще не загружает картинки, которые находятся в комментариях пользователей, а не только в спойлерах.

Всего записей: 689 | Зарегистр. 04-12-2007 | Отправлено: 22:35 16-02-2012 | Исправлено: Petrik_Pjatochkin, 22:56 16-02-2012
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Картинки тоже скачиваются нормально. Вот обновленный OE.exe файл от Про версии:
 
http://www.metaproducts.com/download/betas/OEP3726.zip

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 17:35 17-02-2012
Petrik_Pjatochkin



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
OlegChernavin
Вот так выглядит тема на rutracker:
   
 
Вот так выглядит тема, скачанная OE:
   
 
Спойлеров нет.

Всего записей: 689 | Зарегистр. 04-12-2007 | Отправлено: 02:16 18-02-2012
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Вот новая версия (Offline Explorer Pro), которая должна корректно показывать спойлеры:
 
http://www.metaproducts.com/download/betas/opsetup.exe

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 16:50 20-02-2012
Petrik_Pjatochkin



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
OlegChernavin, спасибо! Теперь показывает правильно.

Всего записей: 689 | Зарегистр. 04-12-2007 | Отправлено: 03:26 22-02-2012
DDuRik1982

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
доброго времени,
 
очень нужна помощь, пытаюсь скачать сайт. (crlaurence.com)  
логинюсь в эксплорере, выставляю в настроиках программы брать куки с него же - забираю, в целом сохраняет все кроме цен и количества товара, сайт по ходу их подгружает от кудато сам.
вот вопрос: как мне забирать цены и кол-во товаров?
 
софт TeleportPro
 
помогите если не сложно, удасться сделать - отблагодарю хорошо...

Всего записей: 42 | Зарегистр. 27-01-2007 | Отправлено: 02:24 26-02-2012 | Исправлено: DDuRik1982, 03:46 26-02-2012
ASE_DAG



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
DDuRik1982
> выставляю в настроиках программы
О какой программе речь? И если вы ограничены в инструментах ею, то лучше будет в ветку по ней и обратиться (ссылки в шапке).

----------
Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC]

Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 02:48 26-02-2012
DDuRik1982

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
прошу извинения
 
TeleportPro
 
https://www.dropbox.com/gallery/51077867/1/Capture?h=dbebc4
 
не цены не количества

Всего записей: 42 | Зарегистр. 27-01-2007 | Отправлено: 03:46 26-02-2012 | Исправлено: DDuRik1982, 04:07 26-02-2012
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Насколько я понял, нужно зайти на сайт с паролем, чтобы увидеть цены. Это так?

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 15:09 29-02-2012
PREVED



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Приветствую всех.
 
Решил не создавать отдельную тему, а запостить вопрос здесь - задача, собственно, имеет прямое отношение к локальному архивированию контента сайтов.
 
Возникла необходимость в специфическом оффлайн-граббере страниц, в функционал которого входило бы автоматическое сохранение всех открываемых браузером веб-страниц. Т.е. программа должна мониторить браузер (Опера, FF, IE - в принципе мне любой из популярных подойдет, лишь бы поддерживался софтом) и параллельно сохранять ВСЕ открываемые в браузере страницы, которые подпадают под определенный набор правил (маска url, к примеру). Желательно, чтобы сохранялись несколько вариантов одной и той же страницы открытой в разное время (т.к. сайты динамические и могут меняться). Т.е. нужен своеобразный локальный автоматический архиватор веба. Очень хотелось бы иметь возможность фильтровать сохраняемый контент по тиму данных (к примеру, не сохранять флэш).
 
Есть ли софт, способный полностью (или хотя бы частично) закрыть эту потребность? Как вариант, может прокси-сервер какой-нибудь посоветуете, способный в процессе работы автоматически архивировать сайты в "вечном кэше"?
 
Заранее спасибо.

Всего записей: 1962 | Зарегистр. 10-03-2006 | Отправлено: 23:40 23-04-2012
ASE_DAG



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PREVED
> автоматическое сохранение всех открываемых браузером веб-страниц
У Вимператора / Пентадактиля (это для Файрфокса, да) есть функционал автокоманд, в т.ч. по факту загрузки страницы, с фильтром по урлам.
 
> сохранялись несколько вариантов одной и той же страницы открытой в разное время
Здесь, возможно, будет удобно заюзать Скрапбук.
 
Перейдем к конкретным примерам. Допустим, отдаем Вимператору такие команды:
:command scrapbook js ScrapBookBrowserOverlay.execCapture(0, null, false, 'urn:scrapbook:root')
:au PageLoad ^http://forum.ru-board.com/.* scrapbook

 
Первой мы определяем альяс scrapbook для молчаливого сохранения текущей страницы в корневой папке Скрапбука. Второй указываем исполнять scrapbook после каждой загрузки страницы, URI коей удовлетворяет регэкспу ^http://forum.ru-board.com/.*.
 
Вот как-то так. ;-) Вопросы есть?

----------
Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC]

Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 15:36 24-04-2012 | Исправлено: ASE_DAG, 15:37 24-04-2012
Alex8898798



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
к сожалению не нашел ответов, покурил инет и руборд. создам постик.
речь пойдет о Offline Explorer
был скачан сайт, где были ссылки на документы pdf с русскими названиями файлов, к примеру "Все О Париже.pdf" в результате локально на винте имею кучу пдфок с непонятной кодировкой названия файла. Причем определить не могу и соответственно перекодировать тоже. Подскажите что делать?
Так же проблема с интерфейсом, у меня винда 7 английская, при выборе интерфейса Offline Explorer все меню что открывается окошками не имеет русских букв.

Всего записей: 79 | Зарегистр. 06-10-2003 | Отправлено: 02:54 26-04-2012
ASE_DAG



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Alex8898798
А какого ответа вы ожидаете? Если по Офлайн-эксплореру, то лучше будет в ветку по нему и обратится.
А если по приведению имен файлов в читаемый вид, то давайте сюда пример получившегося имени.
 
P.S. Не сюда (не в сообщение) — местный говнопарсер не пропустит, а на какой-нибудь пастообменник.

----------
Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC]

Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 10:50 26-04-2012 | Исправлено: ASE_DAG, 10:52 26-04-2012
Alex8898798



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

 _25D0¦_25D0µ_25D0Ѕ_25D0Ѕ_25D0ѕ_25D1Ѓ_25D1‚_25D0ё_252e Robb Report 09_252e2011_0683A339C7.pdf
 _25D0¦_25D0µ_25D0Ѕ_25D0Ѕ_25D0ѕ_25D1Ѓ_25D1‚_25D0ё_252e Robb Report 09_252e2011.pdf
 _25D0ђ_25D0І_25D1Ѓ_25D1‚_25D1Ђ_25D0ё_25D0№_25D1Ѓ_25D0є_25D0ё_25D0№ _25D0І_25D0ѕ_25D1Ђ_25D0є_25D1€_25D0ѕ_25D0ї _25D0ј_25D0°_25D1Ђ_25D1‚ 2011_0683AED9C6.pdf
 _25D0ђ_25D0І_25D1Ѓ_25D1‚_25D1Ђ_25D0ё_25D0№_25D1Ѓ_25D0є_25D0ё_25D0№ _25D0І_25D0ѕ_25D1Ђ_25D0є_25D1€_25D0ѕ_25D0ї _25D0ј_25D0°_25D1Ђ_25D1‚ 2011.pdf
 _25D0§_25D1‚_25D0ѕ _25D0ґ_25D0°_25D1Ђ_25D1Џ_25D1‚ _25D0ї_25D0ѕ_25D0ґ_25D0°_25D1Ђ_25D0є_25D0ё - Forbes Style _25D0·_25D0ё_25D0ј_25D0° 2011-2012_03AC30A12B.pdf
 _25D0§_25D1‚_25D0ѕ _25D0ґ_25D0°_25D1Ђ_25D1Џ_25D1‚ _25D0ї_25D0ѕ_25D0ґ_25D0°_25D1Ђ_25D0є_25D0ё - Forbes Style _25D0·_25D0ё_25D0ј_25D0° 2011-2012.pdf
 _25D0ћ_25D1‚_25D0µ_25D0»_25D0ё _25D0’_25D1‹_25D1Ѓ_25D1€_25D0°_25D1Џ _25D0ї_25D1Ђ_25D0ѕ_25D0±_25D0°_03AC42A12B.pdf
 _25D0љ_25D0ѕ_25D0Ѕ_25D1†_25D0µ_25D1Ђ_25D1‚_25D1‹ _25D0Ѕ_25D0° _25D0±_25D0»_25D0°_25D0Ѕ_25D0є_25D0µ_0683A245C5.doc
 
Добавлено:
упс получилось!
спасибо за желание помочь. вот такие названия файлов получились вместо русских. и их очень много для ручной сортировки (  
к сожалению опознать в какой они кодировке у меня вчера не вышло.

Всего записей: 79 | Зарегистр. 06-10-2003 | Отправлено: 11:46 26-04-2012
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
В последних версиях Offline Explorer в диалоге Свойств проекта - секция Обработка - есть галка для использования Unicode в именах файлов. Попробуйте с ней загрузить сайт.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 14:19 26-04-2012
ASE_DAG



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Alex8898798
> опознать в какой они кодировке у меня вчера не вышло
Ну, алгоритм преобразования к читаемому виду тут понятен:
— заменяете _25 на %;
— все не-acsii символы заменяете на их 16-тиричные коды в CP1251 (напр. ђ на 90);
— применяете к полученной строке urldecode (т.е. операцию обратную urlencode’у).
 
Писать скрипт мне сейчас некогда, да и, думаю, теперь без меня справитесь. ;-)

----------
Dmitry Alexandrov <321942@gmail.com> [PGP] [BTC]

Всего записей: 9272 | Зарегистр. 12-05-2005 | Отправлено: 15:53 26-04-2012
Alex8898798



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ASE_DAG
мама мия!
спасибо! )

Всего записей: 79 | Зарегистр. 06-10-2003 | Отправлено: 01:32 27-04-2012
shveicar



Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
Alex8898798
Есть такая программка - штирлиц называется....

Всего записей: 333 | Зарегистр. 26-09-2010 | Отправлено: 18:48 02-05-2012 | Исправлено: shveicar, 18:48 02-05-2012
DimitarSerg



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Подскажите пожалуйста такое:
Нужно скачать весь файловый архив сайта http://flz.crackteam.ws/
Там нужно ждать сначала 15с, потом еще 60... Короче тысячи файлов можно до конца жизни тянуть...
Все сссылки на файлы постоянны в виде  
http://flz.crackteam.ws/cache/636acff367be2d179a420daae55ccb03547.zip
 
Можно ли каким-то образом (заданием настроек, неважно в какой программе OE, Teleport) скачать все эти файлы (их будет ооочень много).
 
Заранее благодарен.

----------
Total Commander 10.00 IT Edition 4.4
Хто з мечем прийде до нас, від меча і загине!

Всего записей: 3405 | Зарегистр. 26-05-2010 | Отправлено: 14:58 07-05-2012
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Похоже, сайт не работает - DATABASE UPDATED NOW, PLEASE REVISIT LATER

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 16:10 07-05-2012
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33

Компьютерный форум Ru.Board » Компьютеры » Программы » Рекурсивная загрузка веб-сайтов; оффлайн-браузеры (OfflineExplorer, TeleportPro, HTTrack)


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru