Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » AntiDupl

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16

Открыть новую тему     Написать ответ в эту тему

obtim



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
AntiDupl 2.3.12
 


Как правило, у современных компьютерных пользователей имеются большие коллекции изображений в различных форматах. И чем больше эти коллекции, тем более вероятно в них наличие большого числа дубликатов. Естественное желание пользователя - избавиться от них. Однако, если коллекция достаточно большая, то заниматься этим вручную - весьма утомительное и непродуктивное занятие. Программа AntiDupl.NET поможет вам автоматизировать данный процесс. Она способна находить и выводить дубликаты изображений в основных графических форматах: JPEG, GIF, TIFF, BMP, PNG, EMF, WMF, EXIF, ICON, JP2, PSD, DDS и TGA. Сравнение ведется на основании содержимого файлов, поэтому программа может находить не только полностью идентичные, но и похожие изображения. Кроме того, программа умеет находить изображения с некоторыми типами дефектов.
AntiDupl.NET - бесплатная программа с открытым исходным кодом. Она достаточно проста в управлении, имеет высокую скорость и точность работы, поддерживает русский, белорусский, немецкий и английский интерфейс.


AntiDupl Portable (не требует Net Framework)
Portable AntiDupl.NET 2.3.9 - последняя для XP-юши - Встроенный Net Framework 3.5
Portable AntiDupl.NET 2.3.10 - Встроенный Net Framework 3.5
Зеркало

Всего записей: 8930 | Зарегистр. 03-03-2002 | Отправлено: 11:51 22-05-2006 | Исправлено: MaksimovFilimon, 13:02 04-11-2023
XPerformer



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Andarin
картинки считаются одинаковыми если отклонение меньше порогового
меньше нуля оно быть не может
AntiDupl вероятно отрабатывает по схеме меньше либо равно
вот и весь сказ

Всего записей: 2536 | Зарегистр. 20-06-2011 | Отправлено: 12:16 30-09-2014
Andarin



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
XPerformer
То есть полное согласие в том, что дубликаты ImageDupeless не находит, так? Примерно с этого и начался разговор.

Всего записей: 3065 | Зарегистр. 04-03-2006 | Отправлено: 12:39 30-09-2014
XPerformer



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Andarin

Цитата:
То есть полное согласие в том, что дубликаты ImageDupeless не находит, так? Примерно с этого и начался разговор.

 
Я ни разу не опровергал этот факт. Как и не подтверждал, поскольку не использую эту программу.
 
WatsonRus

Цитата:
Вот не могу я понять, как такое может быть - как можно было так написать алгоритм сравнения, что проги не видят 100% одинаковые изображения.  

 
Я отвечал на этот вопрос - как такое может быть

Всего записей: 2536 | Зарегистр. 20-06-2011 | Отправлено: 12:45 30-09-2014 | Исправлено: XPerformer, 12:46 30-09-2014
Andarin



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
Кстати, маленькая проверка - взял файл, скопировал его под другим именем и уже в копии изменил 16 байт в области изображения (больше не стал, так, ради интереса). Соответственно, получилось две копии не побатовой идентичности, ImageDupeless их при пороге сравнения 0% всё равно не находит.

Всего записей: 3065 | Зарегистр. 04-03-2006 | Отправлено: 13:04 30-09-2014
XPerformer



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Andarin
у него значение порога = 0 вообще рабочее? он хоть что-то находит при нуле?

Всего записей: 2536 | Зарегистр. 20-06-2011 | Отправлено: 13:33 30-09-2014
Andarin



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
XPerformer
В справке написано
Цитата:
 основной критерий сравнения (в процентах; 0% - это очень похожие картинки с точки зрения программы). Рекомендуемый предел значений: [0-15]%. Опытным путем установлено, что наиболее оптимальным является значение 11% (установлено по умолчанию). Не рекомендую отходить от него слишком далеко. Как результат задания слишком больших значений (более 20%) программа может посчитать похожими все изображения в галерее.
Но я что-то не уверен, что 0% рабочее значение, я этой программой мало пользуюсь, да и аналогами - редко, от случая к случаю. Скорее всего, надо начинать от 1%. Но тогда туда войдут и 100% дубликаты и очень похожие. А при 11% - из упомянутых мной выше 2730 картинок нашла 186 групп похожих (ну, там надписи разные и в разных местах) и 6 пар картинок, которые даже при взгляде на превьюшку похожими не назовёшь. AntiDupl вообще - 379 пар и более 80 из них малопохожих. Но для этой проги, я думаю, надо не более 7-8% ставить. Но в обоих случаях нашлись и интересные находки при таких процентах - например, два разных фото одного котёнка в разных позах (и фон не одинаковый).

Всего записей: 3065 | Зарегистр. 04-03-2006 | Отправлено: 14:02 30-09-2014
XPerformer



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Andarin
напишите разработчикам - пусть переименуют программу, поскольку она ищет не дубли а похожие картинки

Всего записей: 2536 | Зарегистр. 20-06-2011 | Отправлено: 14:07 30-09-2014
WatsonRus



Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
XPerformer 11:33 30-09-2014
Цитата:
если это было один раз то и говорить не о чем

Один раз проверял AntiDupl после других прог. А ImageDupeless и Image Comparer гонял не один раз. Процент отличий в основном был стандартный (11% для ImageDupeless и не помню уже какой стандартный для IC), и при этом ImageDupeless все же находил часть 100% дублей с различием 0%. Значит, он все-таки может работать со значением 0%. Но после них AntiDupl нашел еще порядка 200-300 100% дублей.
 
Как показывают и эксперименты Andarin, AntiDupl все же находит куда больше как дублей, так и похожих изображений (впрочем, и ложняков куча).  
Выходит, AntiDupl работает все же точнее, скорее всего потому как он позволяет задавать кроме % схожести еще и отнормированный размер превьюшек, по которым он вычисляет похожесть (я выставил 64х64, т.е. вдвое больше умолчального - максимальный для той версии, что я использовал - сейчас есть еще и 128х128). В других программах таких настроек нет.
 
Andarin
Для разных программ и процент похожести разный. Но я говорил про использование с процентом по умолчанию (авторы ведь не случайно именно его предлагают).

Всего записей: 37866 | Зарегистр. 03-05-2004 | Отправлено: 14:53 30-09-2014 | Исправлено: WatsonRus, 15:06 30-09-2014
laprad

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Имхо, разраб ImageDupeless накосячил, интуитивно конечно хотелось бы чтобы при 0% различий программа искала бинарные дубликаты, но она этого не делает.
В защиту ID - при нажатии на "глазик" между картинками появляется окно сравнения с кнопками действий, так вот на побайтовых дубликатах видим значок равенства, при наведении на который появляется всплывашка "Binary equal images".  
Пару дубликатов, которые Imagedupeless определял бы при 0% различий (выставленных в настройках перед поиском дубликатов!), найти не смог...

Всего записей: 392 | Зарегистр. 19-01-2009 | Отправлено: 22:09 30-09-2014
WatsonRus



Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
laprad 22:09 30-09-2014
Цитата:
Имхо, разраб ImageDupeless накосячил

У автора весь пар ушел в проверки целостности и создание бяк использующим крякнутые версии.

22:09 30-09-2014
Цитата:
на побайтовых дубликатах видим значок равенства, при наведении на который появляется всплывашка "Binary equal images"

Вот никогда не замечал, что там всплывает... но все равно кривизна сплошная - одни видит, другие нет. С этой странности и возник мой первоначальный вопрос.

Всего записей: 37866 | Зарегистр. 03-05-2004 | Отправлено: 22:45 30-09-2014
Skif_off

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Никто не замечал проблем с удалением в корзину? Начал вчера разгребать одну коллекцию, нечаяно лажал, удаляя не то, пытался вытащить и заметил раза четыре: в корзину попало не всё.
Дважды замечал - как-то странно удалялись файлы, как будто не сразу, а набирая очередь, и только потом разом пачку.
Win7x64, крайняя версия сабжа.

Всего записей: 6462 | Зарегистр. 28-01-2008 | Отправлено: 02:12 01-10-2014
XPerformer



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
WatsonRus

Цитата:
Вот никогда не замечал, что там всплывает... но все равно кривизна сплошная - одни видит, другие нет. С этой странности и возник мой первоначальный вопрос.
 

выложите пожалуйста две бинарно равные картинки которые ID определяет при пороге 0%

Всего записей: 2536 | Зарегистр. 20-06-2011 | Отправлено: 12:57 01-10-2014
WatsonRus



Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
XPerformer 12:57 01-10-2014
Цитата:
которые ID определяет при пороге 0%

Он их находил при стандартном пороге 11%. Прилежно ставя 0% отличий со значком равенства. А другие бинарно равные не видел в упор. Почему - .

Всего записей: 37866 | Зарегистр. 03-05-2004 | Отправлено: 19:37 01-10-2014
KLERIK2222



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Skif_off

Цитата:
Дважды замечал - как-то странно удалялись файлы, как будто не сразу, а набирая очередь, и только потом разом пачку.

Зависит от настройки "Размер очереди отмены". Если поставить 0, программа сразу будет выполнять все действия. В противном случае, указанное число операций будет сохраняться в памяти и только после его превышения, начнет выполнять действия.

Всего записей: 634 | Зарегистр. 29-03-2006 | Отправлено: 09:00 02-10-2014
laprad

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Доступна новая версия AntiDupl.NET-2.3.2. В ней произошли следующие изменения:
-Добавлен подсчет блочности и размытости изображения.
-Добавлены пункты меню "Переименовать как соседнею" и "Переместить и переименовать к соседней".
-Добавлена возможность указания поиска в поддиректориях для каждой директории в окне выбора путей.

Всего записей: 392 | Зарегистр. 19-01-2009 | Отправлено: 19:46 12-01-2015
KLERIK2222



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Справка по новым функциям:
 
  • Проверять на блочность - опция определяет, нужно ли проверять картинки на наличие артефактов сжатия JPEG - блочности. Блочность определяется наибольшей суммой градиентов яркости для крайних пикселей блоков 8x8. По умолчанию данная опция включена.  
     
  • Порог блочности - процент суммы градиентов, при котором изображение считается дефектным. 100% будет у шахматной черно-белой сетки с размером ячейки 8 пикселей. Подсчитанное значение не обязательно будет свидетельствовать о худшем визуальном качестве по сравнению с картинкой с меньшим значением и наоборот. По умолчанию этот параметр равен 10.  
     
  • Проверять на блочность только для не Jpeg - опция определяет, нужно ли проверять картинки на наличие артефактов сжатия JPEG - блочности только не в Jpeg файлах. Это позволяет найти только пережатые изображения, не показывая просто сильно сжатые. Если в PNG или BMP файле присутствуют явные артефакты сжатия, то это говорит о том, что исходный файл был сохранен в другом формате с заведомо большим размером. По умолчанию данная опция выключена.  
     
  • Проверять на размытость - опция определяет, нужно ли проверять картинки на слишком большую размытость изображения. Размытость рассчитывается градиентом второй производной (которая максимальна на линиях и краях) для оригинального изображения и его уменьшенных вариантов. Точное значение определяется методом линейной интерполяции. По умолчанию данная опция выключена.  
     
  • Порог размытости - радиус размытости, при котором изображение считается дефектным. Пока алгоритм несовершенен и показывается высокая размытость для пейзажных изображений. По умолчанию этот параметр равен 4.

  • Всего записей: 634 | Зарегистр. 29-03-2006 | Отправлено: 04:30 13-01-2015
    vapa



    Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    Доступна новая версия AntiDupl.NET-2.3.3
    В ней произошли следующие изменения:
    • Добавлен новый алгоритм сравнения изображений с помощью индекса структурного сходства - SSIM. Он позволяет найти дубликаты среди сильно измененных картинок, а также лучше сравниваются изображения с большим однородным фоном.
    • Добавлено считывание и отображение во всплывающей подсказке EXIF информации по основным полям.
    • Исправлено падение при обработке больших файлов и недостатке памяти, теперь при недостатке памяти эти файлы пропускаются.

    Всего записей: 257 | Зарегистр. 05-08-2008 | Отправлено: 21:07 04-02-2015 | Исправлено: vapa, 21:07 04-02-2015
    KLERIK2222



    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    Отличие алгоритмов сравнения
     
    В стандартном быстром алгоритме - 'Среднеквадратичная разность' высчитывается среднеквадратичное отклонение яркости для каждой пары изображений. Он быстрый, но имеет большой процент ложных срабатываний для картинок с большим однородным фоном и может не находить сильно измененые изображения. При сравнение картинок с помощью индекса структурного сходства ('SSIM') можно найти дубликаты среди сильно измененных картинок, а также лучше сравниваются изображения с большим однородным фоном, но подсчет медленнее. Также 'SSIM' очень чувствителен к отнормированному размеру картинок. Лучше его не использовать при размерах меньше чем 128x128.

    Всего записей: 634 | Зарегистр. 29-03-2006 | Отправлено: 00:52 05-02-2015
    WatsonRus



    Platinum Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    AntiDupl.NET-2.3.4
     
       
    Цитата:
  • В контекстное меню для выделенных файлов добавлены пункты: "Заместить", "Переименовать как" и "Переместить к".
       
  • Добавлена в контекстное меню изображений входящие в группы, содержащих больше двух файлов, возможность группового переименования и перемещения файлов группы.
       
  • Устранены некоторые утечки памяти при считывание EXIF информации.
       
  • Изменен алгоритм подсчета размытия.


  • Всего записей: 37866 | Зарегистр. 03-05-2004 | Отправлено: 21:00 26-02-2015
    WatsonRus



    Platinum Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    AntiDupl.NET-2.3.5
     
    Цитата:
     
  • Ускорен подсчет SSIM с помощью SSE2.


  • Всего записей: 37866 | Зарегистр. 03-05-2004 | Отправлено: 21:38 04-03-2015
    Открыть новую тему     Написать ответ в эту тему

    Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16

    Компьютерный форум Ru.Board » Компьютеры » Программы » AntiDupl


    Реклама на форуме Ru.Board.

    Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
    Modified by Ru.B0ard
    © Ru.B0ard 2000-2024

    BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

    Рейтинг.ru