Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Пережатиe,рекомпрессия,оптимизация файлов для лучшего сжатия

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152

Открыть новую тему     Написать ответ в эту тему

spider91

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору



Oбсуждаем какими утилитами и каким способом оптимизировать файлы для лучшего сжатия.

 

 
Precomp (по-русски) Прекомпрессор с интерфейсом командной строки. Вы можете использовать его для достижения лучшего сжатия некоторых типов файлов (работает с файлами, сжатыми методами ZLib или Deflate, и GIF-файлами). Precomp пытается произвести распаковку потоков этих файлов, и, если они декомпрессированые при последующей перекомпрессии идентичны бит-в-бит оригинальному потоку, то перекомпрессия не производится.
 
В результате получается .pcf-файл (PCF = PreCompressedFile), который содержит больше декомпрессированных данных, чем оригинальный файл. Обратите внимание, что этот файл больше оригинального, но, если сжать его методом сжатия сильнее, чем Deflate, он сожмётся лучше, чем оригинал (или использовать lprepaq для прекомпрессии и сжатия за один шаг).

пример для командной строки | Важно: Precomp 0.4.1 и выше | пример для Inno Setup
 
Если файл, который дали Precomp'у он смог обработать (разжать), то в результате получится файл большего размера. Если дали файл JPG и т.п., то в результате получится файл меньшего размера.
 
Rep (Встроен в FreeArc) LZ77-препроцессор, позволяющий находить повторяющиеся блоки данных на больших дистанциях (до половины объёма ОЗУ, max 2gb).
 
SRep aka SuperREP LZ77-препроцессор, позволяющий находить повторяющиеся блоки данных на сверхбольших дистанциях (в 10-20 раз больше размера ОЗУ при -l512 и ещё дальше при увеличении -l). В отличии от Rep при распаковке копирует повторяющиеся данные непосредственно из распакованного файла.
 
PackJPG Программа разработанная специально для перепаковки JPEG файлов без потерь (восстановление идёт бит в бит). В среднем уменьшает размер JPEG файлов на 18%.
 
PNGOut и OptiPNG Aлгоритмы для cжатия PNG.
png optimize suite(Win32) Набор консольных компрессоров для PNG с батником, брутфорсит PNGи
 
Tiff Precompression of Tiff files encoded with packbits. It precompresses only the first page of multi-page tiff files yet.
 
DICT (Встроен в FreeArc) Словарный препроцессор для текстовых файлов, заменяющий часто встречающиеся последовательности символов на краткие коды, таблица замены создаётся путём анализа каждого блока данных (по умочанию по 64 мб)
 
Delta (Встроен в FreeArc) Препроцессор (фильтр) увеличивающий сжатие табличных данных в бинарных файлах. Он обнаруживает табличные данные и затем 1) вычитает последовательные значения в каждой колонке, 2) переставляет колонки стараясь максимизировать дальнейшее сжатие
 
MM (Встроен в FreeArc) Простой препроцессор мультимедийных данных, не уменьшающий их размеры, но вычитающий последовательные значения. Используя GRZip или PPMd на его выходных данных, можно добиться сжатия на уровне rar, uharc и sbc. Использует модуль mmdet для определения структуры (кол-во каналов*размер сэмпла) входных данных.
 
Rad Video Tools Программа для сжатия/создания файлов с расширением .bik и .smk. Tак же можно добавлять/удалять звуковые дорожки в этих файлах. пример
 
NVidia nvDXT tool Mощная утилита для сжатия текстур (.dds). пример
 
AMD Compressonator Mощная утилита для сжатия текстур (.dds и не только). Бывший ATI Compress.
 
Xdelta Tool and library for differential compression. Xdelta release version 3 supports VCDIFF encoding and decoding. Supports compressing 64 bit files on Windows, Linux, etc. пример
 
батники для перекомпрессии ZIP-ресурсов игр и офисных (MS Office2007; Oo) файлов Cкрипты осуществляют рекурсивный поиск и распаковку в одноимённые папки zipов для более плотного сжатия FA, а также последующее сжатие содержимого папок в одноимённые файлы. Маски прописывать в скрипте пример
 
XWRT 3.2 Препроцессор/компрессор, заточенный под XML (часто встречаются в играх а также в офисных 2007файлах)
Описание: XWRT is a good XML compressor, actually working with all textual files. It transforms XML to more compressible form and uses zlib (default), LZMA, PPMVC, or lpaq6 as back-end compressor. The program also creates a semi-dynamic dictionary and replaces frequently used words with shorter codes.
пример
 
Примечание для всех участников

Перед тем, как задать вопрос: Первый вариант: загрузите "версию для печати" (ссылка справа вверху, над номерами страниц) и попробуйте поискать средствами браузера (ctrl+F).
Большинство типовых задач уже решались, причем неоднократно!

Всего записей: 605 | Зарегистр. 02-02-2009 | Отправлено: 15:02 24-04-2009 | Исправлено: Maz, 14:53 06-09-2021
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Подскажите, пожалуйста, откуда взят готовую библиотеку zlib 1.2.5?

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 23:56 17-05-2010 | Исправлено: lorents, 09:56 18-05-2010
Vo1T



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents,
http://zlib.net/zlib125.zip (Исходники)
http://www.winimage.com/zLibDll/index.html (DLL'ки)

Всего записей: 312 | Зарегистр. 20-08-2008 | Отправлено: 04:58 18-05-2010 | Исправлено: Vo1T, 06:36 18-05-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Vo1T
я видел эти ссылку, мне надо отдельно zlib.dll версии 1.2.5
До это у же скачивал zlib.dll 1.2.4, а сейчас не помню откуда

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 09:52 18-05-2010 | Исправлено: lorents, 11:48 28-05-2010
crotoff

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
классная прога, после обработки 27mb ужалось bcmом 0.09 до 5,5! это был 16-битный png кстати, даже не верится - что-то тут не так
я так понял PrePNG ещё фильтры какие-то добавляет, а можно их под LZMA оптимизировать?
 
Добавлено:
PAQer
не в курсе случайно, есть ли какие-нибудь препроцессоры для raw'ов наподобие PrePNG, по идее они 12-14 битные, то есть должны ещё круче pngов жаться. Пробовал paq8px - 13 mb до 11 сжимается, а дальше никак

Всего записей: 956 | Зарегистр. 17-04-2007 | Отправлено: 11:46 18-05-2010
Vo1T



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents, zlib125dll.zip там внутри папка dll32 в ней и лежит DLL.

Всего записей: 312 | Зарегистр. 20-08-2008 | Отправлено: 12:50 18-05-2010 | Исправлено: Vo1T, 12:53 18-05-2010
PAQer



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
crotoff

Цитата:
я так понял PrePNG ещё фильтры какие-то добавляет, а можно их под LZMA оптимизировать?  

Фильтры снижают энтропию файла, поэтому последующее сжатие лучше, нежели при осутствии фильтрации. Если интересно, то почитай спецификацию к формату PNG, так отдельным разделом про это.
 
Под BCM я ничего не оптимизировал, он сам такой хороший получился. Для LZMA можно форсировать lc8 опцию. Иногда и 10% дополнительно можно выжать. Ну или GRZipII / BSC заюзать. BSC, кстати не намного хуже BCMа сжимает.
 

Цитата:
классная прога, после обработки 27mb ужалось bcmом 0.09 до 5,5! это был 16-битный png кстати, даже не верится - что-то тут не так  

Тут всякие pngoutы не конкуренты конечно. Да и CCMX не редко сливает, с его фильтрами.
Проблемы могут быть с APNG, распаковывается только первый кадр (у pngout та же шляпа, только он их вроде как пропускает). Собственно размер после PrePNG = BMP.
 
А вообще фильтрация у PNG дремучая. У BMF, по словам Дмитрия, юзается предиктор, который на 10% лучше пнгшного (Paeth). Без учета конечного спец кодера. BMF 1999 года и сегодня умудряется сжимать лучше стаффита и иногда догоняя PAQ8px, я уже не говорю про версию 2009 года, которая может сжать даже на 10% лучше того-же PAQа.
 
 

Цитата:
не в курсе случайно, есть ли какие-нибудь препроцессоры для raw'ов наподобие PrePNG, по идее они 12-14 битные, то есть должны ещё круче pngов жаться. Пробовал paq8px - 13 mb до 11 сжимается, а дальше никак

Что за RAW? Если с зеркалки, то они наверняка уже сжаты. Если из игр, то там что угодно может быть, хоть звук в ogg.

Всего записей: 161 | Зарегистр. 17-12-2007 | Отправлено: 14:01 18-05-2010
PradoMZ

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
помогите пожалуйста, как сделать фри арк - так чтобы он сжимал за место стандартного формата арк на бин. И кто может обьяснить - есть ли в этом большие значительные изменения.

Всего записей: 13 | Зарегистр. 07-05-2010 | Отправлено: 14:36 18-05-2010
crotoff

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
Значит на сегодня для lossless сжатия RGB-изображений круче BMF ничего нет? А интересно, если разложить цветную фотку на 3 "серых" (l-a-b или r-g-b) - будет ли какой-нибудь выигрыш с раздельной упаковки... Проблема в хранении сырых RAWов (конкретно X3F от "сигмы", в них ещё содержится небольшой JPG), даже если они уже сжаты сами по себе, должны всё равно ужиматься ещё больше (ведь 16-битные pngи, полученные из них, сжимаются!) Пожалуй сейчас уже можно выдрать из них EXIF в виде xml-текста, преобразовать в 16-битный PNG и хранить это дело в архиве - выигрыш будет 2 с лишним раза. Но конечно лучше было бы найти метод для беспотерьного сжатия RAWов до уровня, сопоставимого с PrePNG+bcm

Всего записей: 956 | Зарегистр. 17-04-2007 | Отправлено: 15:31 18-05-2010
Vo1T



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PradoMZ, ну вы совсем тук тук
За такие вопросы надо бан выдавать пожизненный на всё поколение, что бы и детей и  внуков в баню

Всего записей: 312 | Зарегистр. 20-08-2008 | Отправлено: 06:57 21-05-2010 | Исправлено: Vo1T, 06:57 21-05-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Создал тему для оптимизации картинок, если кому интересно
http://forum.ru-board.com/topic.cgi?forum=4&topic=4263
и если ни кто не против, то добавлю в шапку

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 19:23 23-05-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
Скажи пожалуйста, PrePNG с каким максимальным разрешением картинки может работать, просто попробовал картинку 4500*3000, он выдал ошибку?

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 10:06 24-05-2010 | Исправлено: lorents, 11:48 28-05-2010
PAQer



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
с каким максимальным разрешением картинки может работать, просто попробовал картинку 4500*3000, он выдал ошибку?

BMP 16к х 8к (384мб) без проблем. Что за ошибка-то? Случаем не пытаешься-ли переписать файл, уже открытый другой прогой? Тогда это уже не ко мне.
 

Цитата:
будет ли какой-нибудь выигрыш с раздельной упаковки..

будет выигрыш со знаком минус.
 

Цитата:
даже если они уже сжаты сами по себе, должны всё равно ужиматься ещё больше  


Цитата:
Пробовал paq8px - 13 mb до 11 сжимается

так и ужимаются, на 2 метра почти.  
 

Цитата:
Но конечно лучше было бы найти метод для беспотерьного сжатия RAWов до уровня, сопоставимого с PrePNG+bcm

BMF до 4мб я думаю ужмет, если битность на канал высокую держит. Кстати, неплохо бы увидеть как себя MM здесь покажет, ну и без фильтрации тоже.
 
А вообще в этой сигме юзается хаффман, поэтому PAQ умудрился еще выжать несколько МБ.
Так что всего-то нужно распаковать>упаковать хаффман-поток без потерь (та же PackJPG это делает) и потом ужимать уже графические данные. Не удивлюсь если Stuffit в будущем это сделает.

Всего записей: 161 | Зарегистр. 17-12-2007 | Отправлено: 18:29 24-05-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
это ошибка виндоус, что проблемы с приложением

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 19:04 24-05-2010 | Исправлено: lorents, 11:47 28-05-2010
PAQer



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lorents заливай фоту, глянем.
 
crotoff packjpg это делает на уровне формата который поддерживает - jpeg, других и не может быть.

Всего записей: 161 | Зарегистр. 17-12-2007 | Отправлено: 01:25 28-05-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
PAQer
все нормально, это глюк самой картинки, проверил другую большую картинку, все нормально.

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 11:47 28-05-2010
Profrager



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Есть кое-какой вопросик. Посоветуйте лучший в плане степени сжатия и скорости распаковки (скорость упаковки не особо волнует) беспотерьный кодек для 24/32 битных статических изображений. Так же интересует лучший беспотерьный кодек для моно/стерео аудио-сигнала.
Конечно в каждом конкретном случае результаты могут быть разными, но все же наверняка есть какие-нибудь лидеры в своих областях.

Всего записей: 888 | Зарегистр. 22-05-2010 | Отправлено: 12:05 28-05-2010
ruslan666815



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
как с помощью rep или srep обработать несколко файлов и поместить их в оди??
например вот у нас есть файлы 1.file 2.file 3.file мы их обробатываем rep-ом  и на выходе repfile.rep

Всего записей: 35 | Зарегистр. 04-05-2009 | Отправлено: 18:39 28-05-2010 | Исправлено: ruslan666815, 18:39 28-05-2010
Profrager



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ruslan666815
вариантов несколько:
1) упаковать 1.file 2.file 3.file в zip без сжатия, затем уже обработать (s)rep'ом.
2) если совместно с FreeArc использовать,то просто в параметрах добавить srep. Например  -s8gb -msrep+lzma:200mb:a1:bt3:180:lc8. Параметр -s в данном случае необходим, чтобы FreeArc солид блоки делал не менее 8Гб (по умолчанию 1Гб), иначе если файлы 1.file 2.file 3.file более 1Гб каждый, то они будут обрабатываться по отдельности.

Всего записей: 888 | Зарегистр. 22-05-2010 | Отправлено: 00:21 29-05-2010 | Исправлено: Profrager, 00:22 29-05-2010
Sergey_Demchuk



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору

Цитата:
Image Optimizer 1.0.0.1 - сборник программ для оптимизации графических форматов *.png, *.jpg и *.gif.  
*.png - превосходит оптимизацию то что в шапке  
*.gif - не работает если в пути и в названиях фалов есть кириллица, поэтому лежит в отдельной папке  
*.jpg - можно использовать как альтернативу Adobe Fireworks  
Предлагаю его в шапку

 
Удалили, перезалейте

Всего записей: 3502 | Зарегистр. 16-12-2002 | Отправлено: 01:19 31-05-2010
lorents



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Sergey_Demchuk
вот тема
http://forum.ru-board.com/topic.cgi?forum=4&topic=4263&start=0

----------
Image Catalyst - оптимизация изображений без потери качества

Всего записей: 3291 | Зарегистр. 30-12-2007 | Отправлено: 17:00 31-05-2010 | Исправлено: lorents, 17:00 31-05-2010
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152

Компьютерный форум Ru.Board » Компьютеры » Программы » Пережатиe,рекомпрессия,оптимизация файлов для лучшего сжатия


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.Board
© Ru.Board 2000-2020

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru