Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » FreeArc (часть 4)

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152

Открыть новую тему     Написать ответ в эту тему

Widok



Moderator-Следопыт
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Часть 1 | Часть 2 | Часть 3


Скачать последний релиз - FreeArc 0.666 от 20 мая 2010 г. Что нового: ускорение работы в 1.5-2 раза благодаря новой технологии многопоточного сжатия, распаковка архивов многих форматов используя технологии 7-zip, запуск файлов из архива, исправлены все проблемы интеграции с Explоrer (подробнее)
Текущая альфа версия: 0.67 - загрузка | список исправлений | блог


Подробное описание используемых алгоритмов
Почему он сжимает лучше и быстрее, чем 7-zip/rar...
Результаты тестов, подтверждающие его крутизну...
Почему для использования 2+ гб памяти желательно установить 64-битную версию Windows
Планы дальнейшего развития
Что подразумевается под "интеграцией с Explorer"
Старая FreeArc wiki (включая описание формата архива)
Логотип и иконки FreeArc - обсуждение того, как облагородить внешний вид программы


Сторонние оболочки для работы с FreeArc:
wArc - простая и понятная программа управления архивами (требует .NET Framework 2.0)
PeaZip - менеджер архивов с поддержкой большого количества форматов, для Windows и Linux


Родственные темы:
Inno Setup плюс внешние упаковщики - использование архивов FreeArc в инсталяторах
ISDone.dll - библиотека распаковки архивов в инсталяторах
REP & SREP
Пережатиe/Pекомпрессия/Oптимизация файлов для лучшего сжатия - "а как сжать ещё лучше?"
FreeArc и Unix - для альтернативно одарённых
• репозиторий FreeArc 'Next на github.com
• тема FreeArc 'Next на форуме encode.su
• раздел FreeArc на форуме krinkels.org

 
Другие архиваторы:
WinRAR
7-zip
PowerArchiver
HaoZip
BandiZip


Всего записей: 24190 | Зарегистр. 07-04-2002 | Отправлено: 11:36 23-11-2010 | Исправлено: Nikolai2004, 21:23 03-02-2021
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
persicum
натравь на них zpaq/exdupe - они аналогичны srep, но способны обрабатывать наборы файлов. скорей всего экономии не будет из-за того что они уже сжаты
 
так что остаётся только распаковать всё и затем обработать одной из этих программ чобы получить дедупликацию+сжатие

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 12:27 19-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
в форуме 7-zip появилось совершенно сногсшибательное сообщение:

Цитата:
There is an issue. When I want to make a zip or 7z file. 7-zip running perfectly but it uses %96 of my CPU.. What the heck?
 
When the job finish CPU turns normal.

 
"в вашем 7-zip проблема - при его работе использование CPU возрастает до 96%"

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 18:48 19-01-2014
persicum

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
When the job finish CPU turns normal.  

 
Да, прикольно. Человека можно понять. Когда я тестировал blake2sp, тоже прифигел - такой пустяк, типа рассчитать md5-подобный хэш файла, а ядра грузит на все 100% -))
 

Цитата:
натравь на них zpaq/exdupe - они аналогичны srep, но способны обрабатывать наборы файлов

 
Спасибо за просвещение!
 
exdupe судя по описанию крутая штука - но только на 64-бит.
 
zpaq с параметрами по умолчанию ужал мне 40G абсолютно несжимаемых файлов в 18G - неплохо для начала.
 
RSC32 2 млн. блоков пока считается, потом отпишусь, что показывает скользящее окно.
 

Цитата:
Возьми SmartVersion и оставь одну исошку + патчи для других

В том то и дело, что попарно сравнивать я не хочу, а хочу один супер-пупер-мегапатч на все 40G -))
 

Всего записей: 456 | Зарегистр. 27-06-2007 | Отправлено: 21:34 19-01-2014
Pasha_ZZZ



Platinum Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
persicum
Цитата:
а хочу один супер-пупер-мегапатч на все 40G
А не надо ничего попарно сравнивать, SVF-файл может содержать много-много версий внутри себя. Причем с опциями по умолчанию он будет и первый добавленный файл полностью в себе содержать. А извлечь потом можно будет любую версию. А в версии 3.00 появилось еще и LZMA.

Всего записей: 10135 | Зарегистр. 11-03-2002 | Отправлено: 01:03 20-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Pasha_ZZZ
собственно zpaq/exdupe по тому же принципу работают - версионность+дедупликация+сжатие

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 01:26 20-01-2014
persicum

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Возьми SmartVersion и оставь одну исошку + патчи для других

А где взять то? В варезятнике старье, на бухте с вирусами как всегда. С вас обновление в варезах, ждем-с.
 
В принципе, zpaq ведет себя как ожидалось, сжимает 50G и 100G коллекции в несколько раз, находя повторы в несжимаемом контенте. Очень быстро. Вот только теперь головняк, как с ФАРом его подружить... Его GUI кошмарен... -((

Всего записей: 456 | Зарегистр. 27-06-2007 | Отправлено: 13:44 20-01-2014
Pasha_ZZZ



Platinum Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
persicum
Цитата:
В варезятнике старье
сама прога с офсайта, кейген от 2.00 (лз0) подходит и к 3.00

Всего записей: 10135 | Зарегистр. 11-03-2002 | Отправлено: 14:19 20-01-2014 | Исправлено: Pasha_ZZZ, 14:19 20-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
persicum
для zpaq есть несколько gui, поройся на форуме encode.ru

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 15:07 20-01-2014
persicum

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Мдя... Обнаружилась ложка дегтя с этим zpaq. Пакует он бысто, потоково... А как распаковывать начинает, то может несколько часов уйти на несколько десятков горбов -((. Видимо, дело в случайном доступе к файлам.  
 
Pasha_ZZZ
А SmartVersion точно умеет находить diff если у файлов разное название?  

Всего записей: 456 | Зарегистр. 27-06-2007 | Отправлено: 17:06 20-01-2014 | Исправлено: persicum, 21:58 20-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ну у дедупликации принцип работы такой  иначе действует только мой srep, но он только один файл обрабатывает. а это столь важно? главное чтобы  была возможность в принципе данные распаковать, если уж полетит что. это ведь бекап!

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 17:18 20-01-2014
Pasha_ZZZ



Platinum Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
persicum
Конечно, после добавления файлов есть диалог, в котором указываешь похожие файлы, которые имеют разные имена в разных версиях...

Всего записей: 10135 | Зарегистр. 11-03-2002 | Отправлено: 17:18 20-01-2014
persicum

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Еще пара вопросов по ZPAQ:
1) имеет ли смысл трогать размер блока, если основная задача - дедупликация? По умолчанию там 16 мешков/нить.
2) ZPAQ очень хорошо находит сдвинутые идентичные блоки. Если блок контролируется по SHA-1, то как он распознает сдвинутые блоки, не пересчитывая SHA-1 миллионы раз? Чисто технически интересно.

Всего записей: 456 | Зарегистр. 27-06-2007 | Отправлено: 14:08 21-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
persicum
2. смотри rolling checksum, content-defined chunking, rsync thesis

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 14:30 21-01-2014
persicum

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Понятно... Сначала считается маленькая скользящая crc, если она совпадает, то потом уже рассчитывается SHA-1. Кстати, в par2 сначала рассчитывается обычная crc32, но оконным способом, а потом MD5.

Всего записей: 456 | Зарегистр. 27-06-2007 | Отправлено: 19:05 21-01-2014 | Исправлено: persicum, 20:36 21-01-2014
PoseidonGuest002



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
В итоге репак распаковался с пятой попытки вообще без каких-либо дополнительных телодвижений.  
Тот же образ, та же система (32-битная), то же железо. Видимо, успешность установки гарантируется только при определённой фазе луны, не иначе.
Извиняюсь, что обратился со своей проблемой не по адресу. Даже если эта ошибка (с заголовком srep или unarc.dll) и была как-то связана с FreeArc, то я не знаю, как.

Всего записей: 4 | Зарегистр. 12-01-2014 | Отправлено: 09:34 22-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Tornado 0.5 is finally released. It was developed back in 2008, with a last bug fixed almost 5 years ago. These are the list of changes compared to version 0.4:
  • Removed modes -6 -8 -10 -12, renumerated -7/9/11 to -6/7/8
  • -7/-8: 1% better compression and 5-20% better speed due to use of ht5
  • New -9..-11 modes: 2gb hash and ht5..ht7 match finders
  • In small tornado.exe -c1..-c3 available for -7..-11 modes
  • Support for -l not power of 2 in cchash matchfinders
  • Options -ah, -al, -t#, -cpu, -q, -delete, stats->stderr
  • Checks at decoding in order to prevent segfaults
  • MSVC/ICL compatibility, use of wall-clock times
  • Linux: 64-bit file offsets!
  • PowerPC (big-endian cpus) compatibility, thanks to Joachim Henke
  • 64-bit compilers support!
  • -3 mode compression improved by 2-3%
  • 2mb hash in -4/-5 modes improved speed by 20-30%
  • Fixed long-standing decompression bug (table split across 2 write chunks)
  • Removed CHECK_FOR_DATA_TABLE(2) in -3/-4 modes

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 00:11 27-01-2014 | Исправлено: Bulat_Ziganshin, 00:12 27-01-2014
Shuld

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Bulat_Ziganshin
Как это каснется FreeArc?
Мне всегда tor:6 нравился больше, чем tor:5!
Сжимал лучше, при практически том же времени.
Вот tor:5 бы убрать!
 
Добавлено:
http://forum.ru-board.com/topic.cgi?forum=5&topic=35164&start=1320#15
 
Добавлено:
Про системный блок

Всего записей: 364 | Зарегистр. 08-12-2010 | Отправлено: 17:07 27-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Как это каснется FreeArc?  

этот код используется в fa/fazip с 2008-го года. просто я его не выпускал как отдельный пакет с исходниками
 
соотношение tor:5 и tor:6 зависит от процессора, сжимаемых данных и режима (tor или 4x4:tor). т.е. это надо тестировать спецу, к сожалению такие у нас перевелись

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 17:40 27-01-2014
Edison007007



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Булат, привет.
А что насчет того, что бы добавить в FreeArc пофайловую дедупликацию (например как формат wim)? Я, конечно, понимаю, что есть REP и SREP, но довольно-таки часто они не то что нужно.
 
Небольшой тест
5,10 ГБ (5 481 492 480 байт) данных:
 
LZMA - 385 МБ (403 858 304 байт)
SREP+LZMA - 382 МБ (400 809 039 байт)
дедупликация+SREP+LZMA - 380 МБ (399 063 395 байт)
дедупликация+LZMA - 345 МБ (362 723 938 байт)

Всего записей: 376 | Зарегистр. 23-01-2011 | Отправлено: 15:05 31-01-2014 | Исправлено: Edison007007, 15:08 31-01-2014
Bulat_Ziganshin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Edison007007
1. а старший режим srep пробовал (-m3/m5 в зависимости от версии)?
2. в принципе это полезная вещь, но у меня сейчас явная перегрузка -> скоро не жди

Всего записей: 3401 | Зарегистр. 13-08-2007 | Отправлено: 15:54 31-01-2014
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152

Компьютерный форум Ru.Board » Компьютеры » Программы » FreeArc (часть 4)


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.Board
© Ru.Board 2000-2020

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru

Рейтинг.ru