Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Пережатиe/Pекомпрессия/Oптимизация файлов для лучшего сжатия

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152

Открыть новую тему     Написать ответ в эту тему

spider91

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору



Oбсуждаем какими утилитами и каким способом оптимизировать файлы для лучшего сжатия.

 

 
Precomp (по-русски) Прекомпрессор с интерфейсом командной строки. Вы можете использовать его для достижения лучшего сжатия некоторых типов файлов (работает с файлами, сжатыми методами ZLib или Deflate, и GIF-файлами). Precomp пытается произвести распаковку потоков этих файлов, и, если они декомпрессированые при последующей перекомпрессии идентичны бит-в-бит оригинальному потоку, то перекомпрессия не производится.
 
В результате получается .pcf-файл (PCF = PreCompressedFile), который содержит больше декомпрессированных данных, чем оригинальный файл. Обратите внимание, что этот файл больше оригинального, но, если сжать его методом сжатия сильнее, чем Deflate, он сожмётся лучше, чем оригинал (или использовать lprepaq для прекомпрессии и сжатия за один шаг).

пример для командной строки | Важно: Precomp 0.4.1 и выше | пример для Inno Setup
 
Если файл, который дали Precomp'у он смог обработать (разжать), то в результате получится файл большего размера. Если дали файл JPG и т.п., то в результате получится файл меньшего размера.
 
Rep (Встроен в FreeArc) LZ77-препроцессор, позволяющий находить повторяющиеся блоки данных на больших дистанциях (до половины объёма ОЗУ, max 2gb).
 
SRep aka SuperREP LZ77-препроцессор, позволяющий находить повторяющиеся блоки данных на сверхбольших дистанциях (в 10-20 раз больше размера ОЗУ при -l512 и ещё дальше при увеличении -l). В отличии от Rep при распаковке копирует повторяющиеся данные непосредственно из распакованного файла.
 
PackJPG Программа разработанная специально для перепаковки JPEG файлов без потерь (восстановление идёт бит в бит). В среднем уменьшает размер JPEG файлов на 18%.
 
PNGOut и OptiPNG Aлгоритмы для cжатия PNG.
png optimize suite(Win32) Набор консольных компрессоров для PNG с батником, брутфорсит PNGи
 
Tiff Precompression of Tiff files encoded with packbits. It precompresses only the first page of multi-page tiff files yet.
 
DICT (Встроен в FreeArc) Словарный препроцессор для текстовых файлов, заменяющий часто встречающиеся последовательности символов на краткие коды, таблица замены создаётся путём анализа каждого блока данных (по умочанию по 64 мб)
 
Delta (Встроен в FreeArc) Препроцессор (фильтр) увеличивающий сжатие табличных данных в бинарных файлах. Он обнаруживает табличные данные и затем 1) вычитает последовательные значения в каждой колонке, 2) переставляет колонки стараясь максимизировать дальнейшее сжатие
 
MM (Встроен в FreeArc) Простой препроцессор мультимедийных данных, не уменьшающий их размеры, но вычитающий последовательные значения. Используя GRZip или PPMd на его выходных данных, можно добиться сжатия на уровне rar, uharc и sbc. Использует модуль mmdet для определения структуры (кол-во каналов*размер сэмпла) входных данных.
 
Rad Video Tools Программа для сжатия/создания файлов с расширением .bik и .smk. Tак же можно добавлять/удалять звуковые дорожки в этих файлах. пример
 
NVidia nvDXT tool Mощная утилита для сжатия текстур (.dds). пример
 
AMD Compressonator Mощная утилита для сжатия текстур (.dds и не только). Бывший ATI Compress.
 
Xdelta Tool and library for differential compression. Xdelta release version 3 supports VCDIFF encoding and decoding. Supports compressing 64 bit files on Windows, Linux, etc. пример
 
батники для перекомпрессии ZIP-ресурсов игр и офисных (MS Office2007; Oo) файлов Cкрипты осуществляют рекурсивный поиск и распаковку в одноимённые папки zipов для более плотного сжатия FA, а также последующее сжатие содержимого папок в одноимённые файлы. Маски прописывать в скрипте пример
 
XWRT 3.2 Препроцессор/компрессор, заточенный под XML (часто встречаются в играх а также в офисных 2007файлах)
Описание: XWRT is a good XML compressor, actually working with all textual files. It transforms XML to more compressible form and uses zlib (default), LZMA, PPMVC, or lpaq6 as back-end compressor. The program also creates a semi-dynamic dictionary and replaces frequently used words with shorter codes.
пример
 
Примечание для всех участников

Перед тем, как задать вопрос: Первый вариант: загрузите "версию для печати" (ссылка справа вверху, над номерами страниц) и попробуйте поискать средствами браузера (ctrl+F).
Большинство типовых задач уже решались, причем неоднократно!

Всего записей: 605 | Зарегистр. 02-02-2009 | Отправлено: 15:02 24-04-2009 | Исправлено: Maz, 21:57 30-01-2021
Shegorat



Advanced Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
ChanVS

Цитата:
Кто подскажет "//Если путь неполный, то добавляем необходимые строчки"  
Каки это строчки?

При распаковке arc архивов берется путь распаковки текущего архива и добавляется к пути файла который сейчас распаковывается т.к путь файла неполный, пример "main\iw_00.iwd". При распаковке из Inno Setup сразу берется полный путь файла.

Цитата:
И еще Скрипт CoD WW FreeArc+isPrecomp у меня закработал, когда заархивировал FreeArc-ом файлы pcf.

Естественно. Cкрипт FreeArcExtract+ISPrecomp я писал, и isprecomp связывал с FreeArc'ом, потому что им чаще пользуются чем обычным сжатием инно. Вообще должна быть где-то новая версия FreeArcExtract+ISPrecomp я кому-то ее давал.  

Цитата:
Но, я хочу убрать распаковка FreeArc-ом. (Трата время на переписывания и распаковку).  
Кто-то поможет убрать?

А смысл? FreeArc чаще всего лучше пакует чем инно, скорее всего ты не умеешь им пользоваться. Но если уж сильно хочется, то кидай скрипт в тему Inno Setup и кто-нибудь тебе поможет. Только не надоедай там слишком частыми постами с этой просьбой.

----------
Krinkels.org - создание инсталляционных пакетов.
Как много дел считались невозможными, пока они не были осуществлены.

Всего записей: 695 | Зарегистр. 09-06-2009 | Отправлено: 07:13 30-07-2010
ChanVS

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Shegorat
Спасибо за помощь. Хороший скрипт.
Еще один вопрос.  
Я запаковывал 3 файла с pcf (архив FreeArc ненаходил)
Запаковал все pcf где-то 74, то нашел и все ок. Это проверка архива?
И еще. У меня репак Cod MW и там только precomp, гно без прогреса.
Я хотел добавить pcf и прогресс.
Спасибо еще раз буду строить!
 
Добавлено:
Да забыл.
FreeArc хорош не спорю им паковал.
Я просто подогнал упаковку всех файлов в размер 4,5 Гб для болванки.
И мне сжатие сильное в данный момент не нужно. Дело в скорости установки!

Всего записей: 78 | Зарегистр. 02-07-2010 | Отправлено: 10:25 02-08-2010
rp0Mk0cTb



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
научите пользоваться rep'ом, а то я совсем с ним не в лодах

Всего записей: 60 | Зарегистр. 16-07-2010 | Отправлено: 21:04 02-08-2010
ChanVS

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
rp0Mk0cTb
скачай прогу с перепаковщики и ты поймешь, что они присуют.
http://krinkelsinc.googlecode.com/files/Packers%20Show%202.3.exe

Всего записей: 78 | Зарегистр. 02-07-2010 | Отправлено: 11:26 05-08-2010
LonerDergunov



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Ээх, что-то подзабылось, давно не паковал.
Напомните, пожалуйста - влияет ли на качество работы в precompe и srepe объем оперативной памяти?
 
На одной машине 6 Гб, на второй - 2 Гб. Хотелось часть упаковки сделать на двухгиговой, а окончательно упаковать Freearcom уже на шестигиговой. Повлияет ли это на размер или precomp и srep на шестигиговой могут выдать лучший результат?

Всего записей: 2972 | Зарегистр. 11-07-2007 | Отправлено: 18:27 05-08-2010
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
precomp использует всего 10 мб
 

Код:
SuperREP 1.5: lz77 preprocessor that consumes only 2-3% of filesize for compression
  May 11, 2010   homepage: http://freearc.org/research/SREP.aspx
 
  Usage: SREP [options] infile outfile
     infile/outfile may be denoted as "-" that means stdin/stdout
  Options are:
     -m1: check matches by SHA1 digest (compression memory = 6-7% of filesize)
     -m2: check matches by rereading old data (compression memory = 2-3% of filesize)
     -d: decompression (requires only 16 mb of memory besides of OS I/O buffers)
     -delete: delete source file after successful (de)compression
     -index=FILENAME: read/write index of compressed data into separate file
     -l: minimum LZ match length, default 512
     -s: print stats
 

 
Добавлено:

Цитата:
http://krinkelsinc.googlecode.com/files/Packers%20Show%202.3.exe

новые версии здесь: http://www.krinkels.ru/load/1

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 19:25 05-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Добрый день!
Помогите разобраться со следующими вопросами:
1. когда я обрабатываю файлы через Precomp или Rep (SRep) или Xdelta, получаю под каждый свой файл новый файл, можно получить один файл в который входят все файлы;
2. влияет ли степень сжатия на оперативную память при распаковке файлов, при условии что файлы были запакованы через Precomp;
3. Rep (SRep) используют определенное кол-во оперативное памяти при распаковке или как-то по другому;
4. Почему на сегодняшний день нет смысла использовать Xdelta (в FAQ написано что "на сегодня для таких случаев есть srep", выходит нет смысла использовать Xdelta);
5. влияет ли степень сжатия на оперативную память при распаковке файлов, при условии что файлы были запакованы через Xdelta;
6. можно ли превзойти/сравниться с NOSSO по степени сжатия, но при этом скорость и количество оперативной памяти при распаковке должны быть такие же или близки к NOSSO.

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 11:56 09-08-2010 | Исправлено: lorents, 12:06 09-08-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents по поводу Xdelta, иногда без неё необойтсь!
Есть места где где реп, среп ничем непомогут.. а Xdelta спасает!

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 12:03 09-08-2010
Profrager



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents
1. Чтобы все файлы были в одном обычно применяют упаковку без сжатия в любой упаковщик, а потом уж обрабатывают прекомпом или срепом.
2. Если ты только про прекомп, то он при распаковке кушает всего несколько Мб оперативки.
3. Srep при распаковке требует чуть больше 16Мб оперативки, Rep - столько же, сколько задано было при сжатии.
4. Xdelta теперь только для патчей, среп довольно таки хорошо справляется с любыми совпадениями на любом расстоянии.
5. на счет XDelta не проверял, но думается, что для него требуется фиксированный небольшой объем оперативки.
6. впервые слышу о NOSSO

Всего записей: 888 | Зарегистр. 22-05-2010 | Отправлено: 16:19 09-08-2010
ndch

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Обновился MP3packer - http://omion.dyndns.org/mp3packer/mp3packer-1.21.rar

Всего записей: 5206 | Зарегистр. 31-08-2008 | Отправлено: 16:29 09-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Profrager
спасибо, что разъяснил мне интересующие моменты.
 

Цитата:
6. впервые слышу о NOSSO

Самый наглядный пример NOSSO это Adobe Reader например версии 9.3 (рекомендую скачать)
При запуске, идет распаковка фалов, куда помню. Я просто привык распаковывать Adobe Reader через FeadExtractor
 
А вот самое интересное
http://nanoflooder.narod.ru/acrord9.xls
 
V2driver
я кстати с этим и столкнулся
 
И еще один вопрос, ни кто не знает чем упакован Nero Multimedia Suite 10.0.13100 Trial?

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 17:09 09-08-2010 | Исправлено: lorents, 17:31 09-08-2010
egor23



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents

Цитата:
И еще один вопрос, ни кто не знает чем упакован Nero Multimedia Suite 10.0.13100 Trial?

1. Препроцессор, что за препроцессор используется незнаю, вроде просто убираются одинаковае файлы.
2. После препроцессора дожимают LZMA:27

Всего записей: 3831 | Зарегистр. 03-11-2003 | Отправлено: 19:18 09-08-2010 | Исправлено: egor23, 19:19 09-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
egor23
есть идея, что это InstallAware Setup Squeezer for InstallShield

Цитата:
2. После препроцессора дожимают LZMA:27

а что такое 27?

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 19:27 09-08-2010
Pasha_ZZZ



Gold Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору

Цитата:
а что такое 27?
Размер словаря - 128 МБ

Всего записей: 9958 | Зарегистр. 11-03-2002 | Отправлено: 19:33 09-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Pasha_ZZZ

Цитата:
Размер словаря - 128 МБ

понял, спасибо
 
egor23 это точно InstallAware Setup Squeezer for InstallShield, спасибо Pasha_ZZZ

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 19:45 09-08-2010 | Исправлено: lorents, 10:21 10-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
По-моему способ который взял Nero Multimedia Suite не много извращенский, все-таки распаковывать файл 2,66 гига многовато (правда потом он удаляет temp.htar - 1,06 гига, хотя за это спасибо). И мы получаем 1,6 гига в темр, и все он там и остается, и после установки Nero не удаляется автоматически.
 
И еще вернемся к NOSSO, есть идеи как его переплюнуть?

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 10:20 10-08-2010 | Исправлено: lorents, 10:27 10-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
и еще один вопрос, никто не знает чем упакован NXPowerLite?

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 12:49 10-08-2010 | Исправлено: lorents, 13:48 10-08-2010
egor23



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents

Цитата:
По-моему способ который взял Nero Multimedia Suite не много извращенский, все-таки распаковывать файл 2,66 гига многовато (правда потом он удаляет temp.htar - 1,06 гига, хотя за это спасибо)

Если "памяти достаточно", то распаковка идёт без временного файла.

Всего записей: 3831 | Зарегистр. 03-11-2003 | Отправлено: 13:36 10-08-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
egor23
Т.е. идет в оперативную память? у меня сейчас на компе 2 гига, из них занято только 500мб.
Сколько же ему тогда оперативки требуется.? Вечером на ноуте посмотрю, создает он или нет, но все равно оставлять после себя мусор не красиво.
 
видимо по этой причине, я не смог подружиться с InstallAware Setup Squeezer for InstallShield, пишет у вас менее 1 гига ОЗУ.

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3288 | Зарегистр. 30-12-2007 | Отправлено: 13:52 10-08-2010 | Исправлено: lorents, 13:53 10-08-2010
Pasha_ZZZ



Gold Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
lorents
Цитата:
чем упакован NXPowerLite?
Внутри чистый 7-Zip с LZMA:22, но при установке откуда ни возьмись создаются почти пустой MSI и пара трансформов к нему, которые и наполняют его содержанием... (один собственно содержимое, второй - языковой)

Всего записей: 9958 | Зарегистр. 11-03-2002 | Отправлено: 14:00 10-08-2010
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152

Компьютерный форум Ru.Board » Компьютеры » Программы » Пережатиe/Pекомпрессия/Oптимизация файлов для лучшего сжатия


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.Board
© Ru.Board 2000-2020

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru