Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Пережатиe,рекомпрессия,оптимизация файлов для лучшего сжатия

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154

Открыть новую тему     Написать ответ в эту тему

spider91

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору



Oбсуждаем какими утилитами и каким способом оптимизировать файлы для лучшего сжатия.

 

 
Precomp (по-русски) Прекомпрессор с интерфейсом командной строки. Вы можете использовать его для достижения лучшего сжатия некоторых типов файлов (работает с файлами, сжатыми методами ZLib или Deflate, и GIF-файлами). Precomp пытается произвести распаковку потоков этих файлов, и, если они декомпрессированые при последующей перекомпрессии идентичны бит-в-бит оригинальному потоку, то перекомпрессия не производится.
 
В результате получается .pcf-файл (PCF = PreCompressedFile), который содержит больше декомпрессированных данных, чем оригинальный файл. Обратите внимание, что этот файл больше оригинального, но, если сжать его методом сжатия сильнее, чем Deflate, он сожмётся лучше, чем оригинал (или использовать lprepaq для прекомпрессии и сжатия за один шаг).

пример для командной строки | Важно: Precomp 0.4.1 и выше | пример для Inno Setup
 
Если файл, который дали Precomp'у он смог обработать (разжать), то в результате получится файл большего размера. Если дали файл JPG и т.п., то в результате получится файл меньшего размера.
 
Rep (Встроен в FreeArc) LZ77-препроцессор, позволяющий находить повторяющиеся блоки данных на больших дистанциях (до половины объёма ОЗУ, max 2gb).
 
SRep aka SuperREP LZ77-препроцессор, позволяющий находить повторяющиеся блоки данных на сверхбольших дистанциях (в 10-20 раз больше размера ОЗУ при -l512 и ещё дальше при увеличении -l). В отличии от Rep при распаковке копирует повторяющиеся данные непосредственно из распакованного файла.
 
PackJPG Программа разработанная специально для перепаковки JPEG файлов без потерь (восстановление идёт бит в бит). В среднем уменьшает размер JPEG файлов на 18%.
 
PNGOut и OptiPNG Aлгоритмы для cжатия PNG.
png optimize suite(Win32) Набор консольных компрессоров для PNG с батником, брутфорсит PNGи
 
Tiff Precompression of Tiff files encoded with packbits. It precompresses only the first page of multi-page tiff files yet.
 
DICT (Встроен в FreeArc) Словарный препроцессор для текстовых файлов, заменяющий часто встречающиеся последовательности символов на краткие коды, таблица замены создаётся путём анализа каждого блока данных (по умочанию по 64 мб)
 
Delta (Встроен в FreeArc) Препроцессор (фильтр) увеличивающий сжатие табличных данных в бинарных файлах. Он обнаруживает табличные данные и затем 1) вычитает последовательные значения в каждой колонке, 2) переставляет колонки стараясь максимизировать дальнейшее сжатие
 
MM (Встроен в FreeArc) Простой препроцессор мультимедийных данных, не уменьшающий их размеры, но вычитающий последовательные значения. Используя GRZip или PPMd на его выходных данных, можно добиться сжатия на уровне rar, uharc и sbc. Использует модуль mmdet для определения структуры (кол-во каналов*размер сэмпла) входных данных.
 
Rad Video Tools Программа для сжатия/создания файлов с расширением .bik и .smk. Tак же можно добавлять/удалять звуковые дорожки в этих файлах. пример
 
NVidia nvDXT tool Mощная утилита для сжатия текстур (.dds). пример
 
AMD Compressonator Mощная утилита для сжатия текстур (.dds и не только). Бывший ATI Compress.
 
Xdelta Tool and library for differential compression. Xdelta release version 3 supports VCDIFF encoding and decoding. Supports compressing 64 bit files on Windows, Linux, etc. пример
 
батники для перекомпрессии ZIP-ресурсов игр и офисных (MS Office2007; Oo) файлов Cкрипты осуществляют рекурсивный поиск и распаковку в одноимённые папки zipов для более плотного сжатия FA, а также последующее сжатие содержимого папок в одноимённые файлы. Маски прописывать в скрипте пример
 
XWRT 3.2 Препроцессор/компрессор, заточенный под XML (часто встречаются в играх а также в офисных 2007файлах)
Описание: XWRT is a good XML compressor, actually working with all textual files. It transforms XML to more compressible form and uses zlib (default), LZMA, PPMVC, or lpaq6 as back-end compressor. The program also creates a semi-dynamic dictionary and replaces frequently used words with shorter codes.
пример
 
Примечание для всех участников

Перед тем, как задать вопрос: Первый вариант: загрузите "версию для печати" (ссылка справа вверху, над номерами страниц) и попробуйте поискать средствами браузера (ctrl+F).
Большинство типовых задач уже решались, причем неоднократно!

Всего записей: 605 | Зарегистр. 02-02-2009 | Отправлено: 15:02 24-04-2009 | Исправлено: Maz, 14:53 06-09-2021
PAQer



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
 
В этом режиме используется LZ... в других архиваторах Фа 7з он тоже есть...  
 

ZIP > deflate (LZ+huffman), 7z > LZMA (LZ+Ari), nz > nz_optimumX > LZT (LZ+?).  LZ это грубо говоря препроцессор, а что там дальше после него...

Цитата:
The idea of nz_optimum1-2 is to compress text using BWT and binary data using LZT (LZ based algorithm).

 
По поводу что юзать на бинарниках. Я лично юзаю srep+7z (можно и lzma.exe). Если у нас имеется прекомповский файл ужатый этой цепочкой, то при декодинге я получаю сразу его (7z stdout > srep stdin), минуя ".srep", поэтому от фриарка отказался.

Всего записей: 161 | Зарегистр. 17-12-2007 | Отправлено: 13:11 12-09-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
LZ+ HUF, LZ + ARI
Всё вроде... (в нанозипе)

Цитата:
По поводу что юзать на бинарниках. Я лично юзаю srep+7z (можно и lzma.exe). Если у нас имеется прекомповский файл ужатый этой цепочкой, то при декодинге я получаю сразу его (7z stdout > srep stdin), минуя ".srep", поэтому от фриарка отказался.

Спасибо за идею

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 13:18 12-09-2010 | Исправлено: V2driver, 13:24 12-09-2010
Kosako



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
советую почитать доку на Фа..
http://freearc.sourceforge.net/rus/FreeArc040-rus.htm  

Да читал, но давно, подзабыл уже ) Спасибо!

Всего записей: 243 | Зарегистр. 27-11-2009 | Отправлено: 13:29 12-09-2010
seup0

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
V2driver

Цитата:
Да?
А мне скзали что nanozip сжимает лучше  

Интересно, где вы такое услышали? Я вроде говорил, если нет, то повторю - nanozip жмет хуже большие файлы (игровые архивы от 1Гб и т.п.). Я не говорил, что он охрененно жмет все подряд, но большенство.

Цитата:
У обоих один и тот же алгаритм... поэтому он не может жать лучше, за исключением встроенных препроцесоров и компрессоров - tta, delta, rep и тд..

Нет, не один и тот же. Freearc сначала анализирует файлы, затем жмет их используя прописанные алгоритмы сжатия данного типа файла (wav, к примеру). У него сжатие лучше получается, потому что в нем больше разных алгоритмов для разных файлов, нежели в 7z. Freearc жмет так же как 7z, только если нету для данного файла другого алгоритма.

Цитата:
В этом режиме используется LZ... в других архиваторах Фа 7з он тоже есть...  

Да, тоже есть. Но сравните упаковку 7z в режиме "скоростной" и nanozip в lzhds.

Цитата:
Вы какую версию нанозипа юзаете?  

Последнюю, естественно. 0.08 alpha c графическим интерфейсом.
[spoiler]
http://www.7image.ru/pics/0910/69146479.png
[/spoiler]
 
 

Всего записей: 5 | Зарегистр. 05-08-2010 | Отправлено: 16:48 12-09-2010
Pizdosya

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору


Цитата:
PAQer
LZ+ HUF, LZ + ARI
Всё вроде... (в нанозипе)
 
Цитата:
По поводу что юзать на бинарниках. Я лично юзаю srep+7z (можно и lzma.exe). Если у нас имеется прекомповский файл ужатый этой цепочкой, то при декодинге я получаю сразу его (7z stdout > srep stdin), минуя ".srep", поэтому от фриарка отказался.
 
Спасибо за идею

 
присоединяюсь

Всего записей: 21 | Зарегистр. 21-12-2008 | Отправлено: 16:48 12-09-2010 | Исправлено: Pizdosya, 16:51 12-09-2010
Profrager



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer

Цитата:
По поводу что юзать на бинарниках. Я лично юзаю srep+7z (можно и lzma.exe). Если у нас имеется прекомповский файл ужатый этой цепочкой, то при декодинге я получаю сразу его (7z stdout > srep stdin), минуя ".srep", поэтому от фриарка отказался.

сейчас фриарк то же самое умеет: http://forum.ru-board.com/topic.cgi?forum=5&topic=31386&start=1860#4
А в скором времени будет еще более продвинутая упаковка-распаковка цепочки rep->srep->lzma

Всего записей: 888 | Зарегистр. 22-05-2010 | Отправлено: 17:26 12-09-2010
PAQer



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
сейчас фриарк то же самое умеет: http://forum.ru-board.com/topic.cgi?forum=5&topic=31386&start=1860#4 [?]

Спасибо, но уже читали. Умеет он не совсем то что нужно, а даже больше, только вот в unarc.exe записи в stdout я не вижу, а остальное мне покамест неинтересно.

Всего записей: 161 | Зарегистр. 17-12-2007 | Отправлено: 18:33 12-09-2010
Profrager



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
что ж, у каждого свои потребности и нужды) При желании можно и Булата подоставать с тем, чтобы он реализовал то, что тебе требуется. Да и думаю не только тебе оно пригодится. А Булату + к популярности его формата.

Всего записей: 888 | Зарегистр. 22-05-2010 | Отправлено: 18:45 12-09-2010 | Исправлено: Profrager, 18:45 12-09-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
seup0

Цитата:
Интересно, где вы такое услышали? Я вроде говорил, если нет, то повторю - nanozip жмет хуже большие файлы (игровые архивы от 1Гб и т.п.). Я не говорил, что он охрененно жмет все подряд, но большенство.

Я не Вам писал и не про вас.. и вобщемто смысл был не про nanozip...

Цитата:
Нет, не один и тот же. Freearc сначала анализирует файлы, затем жмет их используя прописанные алгоритмы сжатия данного типа файла (wav, к примеру). У него сжатие лучше получается, потому что в нем больше разных алгоритмов для разных файлов, нежели в 7z. Freearc жмет так же как 7z, только если нету для данного файла другого алгоритма.

Ниже я описал его ситуацию...

Цитата:
Да, тоже есть. Но сравните упаковку 7z в режиме "скоростной" и nanozip в lzhds.

Позже.

Цитата:
Последнюю, естественно. 0.08 alpha c графическим интерфейсом.

Ага.... как я помню: в 7-й альфе таких глюков с nz_optimum1&2 небыло... протестируйте!

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 20:06 12-09-2010
seup0

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Ага.... как я помню: в 7-й альфе таких глюков с nz_optimum1&2 небыло... протестируйте!  

Про какие глюки?, то что opt2 иногда жмет хуже opt1?
Я, честно говоря, без понятия, почему так. Но это было у меня всего 1 раз.

Всего записей: 5 | Зарегистр. 05-08-2010 | Отправлено: 21:17 12-09-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
seup0

Цитата:
то что opt2 иногда жмет хуже opt1?

ага, в 07 вроде такого небыло..

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 21:42 12-09-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Навались, пока горячее!
В общем толпой скачиваем мой  архив и пытаемся его посильнее сжать…
Жать не всем подряд – точнее, чем хотите, но распаковка должны быть не больше 3-х минут…
Отписываем любые результаты:
Средствами Фа мне удалось сжать до 203мб… (37с)
Сейчас ещё перебираю настройки….  
 
files.gameworld.kz/36z9gj6s5f.html  
 
Добавлено:
После небольших переборов параметров сжатия получил 200мб (в том же Фа)(209 746 894 байт)

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 19:08 13-09-2010 | Исправлено: V2driver, 21:25 13-09-2010
PAQer



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
После небольших переборов параметров сжатия получил 200мб (209 746 894 байт)

183мб и 10 сек (CPU time). НЕ фриарк. И это не придел.

Всего записей: 161 | Зарегистр. 17-12-2007 | Отправлено: 21:14 13-09-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
Замечательно!
Но что у Вас за машина? пади i5)
Мне кажется Вы определили offset.. поэтому так ужали.. ?

Цитата:
И это не придел.

Интересно что будет на пределе!?

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 21:18 13-09-2010 | Исправлено: V2driver, 21:25 13-09-2010
datato



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Люди, помогите пожалуйста!) Инно Сетап ругается на эту строчку
(Скрин)

Что тут должно быть? Пожалуйста, помогите
<<<
Задал вопрос в той теме

Всего записей: 154 | Зарегистр. 16-07-2010 | Отправлено: 21:36 13-09-2010 | Исправлено: datato, 21:51 13-09-2010
V2driver



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
datato уф... лучше скрин предоставьте, и лучше вопрос задайте тут
http://forum.ru-board.com/topic.cgi?forum=5&topic=34344&start=980#lt

Всего записей: 462 | Зарегистр. 01-02-2010 | Отправлено: 21:37 13-09-2010 | Исправлено: V2driver, 21:38 13-09-2010
Diman_77777

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
уже ничего

Всего записей: 7 | Зарегистр. 12-09-2010 | Отправлено: 20:21 14-09-2010 | Исправлено: Diman_77777, 20:42 14-09-2010
Kosako



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Так, сейчас тупой вопрос задам, но надо для 100% уверенности )
Имеем каталог, в нем несколько папок и куча файлов (допустим, текстур). Прекомп у нас не умеет обрабатывать папки, только файлы. Если я этот каталог суну в 7z без сжатия, то эффект будет тот же, что и при обработке файлов в каждой отдельной папке?

Всего записей: 243 | Зарегистр. 27-11-2009 | Отправлено: 11:43 15-09-2010
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Kosako
да

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 11:44 15-09-2010
Vo1T



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ISSrep 1.91
Новая версия!
... и спасибо Булату за srep

Всего записей: 312 | Зарегистр. 20-08-2008 | Отправлено: 00:40 19-09-2010 | Исправлено: Vo1T, 00:43 19-09-2010
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154

Компьютерный форум Ru.Board » Компьютеры » Программы » Пережатиe,рекомпрессия,оптимизация файлов для лучшего сжатия


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru