LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору За первый общепригодный результат благодарим vladgangan   IsbnExtractor v1.2 Executable: http://dl.downloadhosting.com/download/vladgangan/IsbnExtractor_v1.2.exe   IsbnExtractor v1.2 Source: http://dl.downloadhosting.com/download/vladgangan/IsbnExtractor_Source_v1.2.exe   Утилита написана под .NET   Вытаскивает номера ISBN из локальной коллекции ебуков, располагает их в XML-дескрипторах папок (для удобства перемещения папок с книгами между носителями).     Процесс рождения утилиты описан на 1-6 страницах темы, там же - более подробная документация.     Теперь, наконец, можно начинать Web-программирование     А пока срочно ищется человек, который откомпилит под винды один из серверных скриптов для проверки варез-релизов. Или иным образом перенесет их логику на винды, с целью не только выявления битых релизов, но и вытаскивания всего, что вытаскивается, во временный каталог.   Вторая полезная утилита: Цитата: Написал скрипт AutoIT3 для извлечения ISBN из коллекции DJVU книг. Необходим FR и  Djvudecode. В скрипте также выполняется проверка ISBN по 10-ой контрольной цифре.   http://www.mytempdir.com/2026301   (c)U235   Alfa Ebooks Manager-0.4.5.0 2008-01-17 Готовая утилита для работы с PDF с множеством встроенных функций, таких как распаковка архивов, поиск информации в Интернете и экспорт в локальную базу данных Microsoft Access (JET Engine .mdb)       Первоначальная шапка темы Исправил название. — Svarga. Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 23:46 28-06-2004 | Исправлено: 174bpm, 14:38 24-02-2008

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: А пока срочно ищется человек, который откомпилит под винды один из серверных скриптов для проверки варез-релизов. Или иным образом перенесет их логику на винды, с целью не только выявления битых релизов, но и вытаскивания всего, что вытаскивается, во временный каталог имеется в виду pzs-ng? Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 05:42 04-02-2006

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору ну вот, кто-то наконец хотя бы раскололся, как ЭТО называется... Рад, очень рад! Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 10:02 04-02-2006

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору zscript new generation glftpd -> links   Добавлено: почему не используются стандартные форматы метаданных как   ebook Shema в Shareaza/Gnutella2 ??? Личные обращения - в ПМ /Cheery/ Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 23:29 05-02-2006 | Исправлено: 174bpm, 23:33 05-02-2006

Rea2k Junior Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору >>А пока срочно ищется человек, который откомпилит   ето под винду и так ест - например JaCheck.dll которую многиэ исползуют в паре с Serv-U но она как и niksovije не очен точная. посколку проверки дело нечастоэ я би лутше проверял реалной распаковкои ето на винде реализоват несложно - либо unrar.dll либо самому на winexec() и исползоват winrar   што касаэтся оболочки ми как раз сеичас пишем што-то pohozhee. допишем покажу. заточка каталогизация но прикрутит фишки типа коллекций или requestov конешно несложно Всего записей: 181 | Зарегистр. 01-06-2002 | Отправлено: 16:16 07-02-2006

are Full Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору несколько замечаний:   - в данном топике видимо предполагается, что все интересующие пользователя книги обязательно имеют ИСБН и продаются в Амазоне. Но однако многие реально существующие книги не продаются в Амазоне и/или не имеют ИСБН.   поэтому, я думаю, не надо привязываться к Амазону - надо иметь локальную базу данных. С Амазона можно скачивать при необходимости. Безусловно полезно иметь интерфейс Амазон.document.fetch().parse().print_html(). Кроме того, есть и другие магазины - скажем Amazon.fr, Amazon.de, наконец на одном амазоне не сошёлся свет клином. А если амазон увидит какой-то роботообразный режим запросов к нему, то они могут и закрыть доступ или изменить интерфейс. Поэтому я думаю надо в локальной базе данных иметь всю ту же информацию.   - есть так называемая библиотека "колхоз", там система каталогизации сделана названиями файлов. Иначе не получается, когда многие книги вовсе без ИСБН и нигде не продаются, так что автоматизированного поиска метаинформации нет.   - обмен списками книг без ИСБН - дело тяжёлое. Что касается списков книг, имеющих ИСБН, то я думаю, достаточно просто каждому юзеру иметь список номеров ИСБН и соответствующих имён файлов. Затем тривиальный софт сможет отвечать на вопросы типа "чего ещё у меня нет, и что нового у других".   Всего записей: 552 | Зарегистр. 06-03-2005 | Отправлено: 13:11 13-04-2006

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: - в данном топике видимо предполагается, что все интересующие пользователя книги обязательно имеют ИСБН и продаются в Амазоне. Но однако многие реально существующие книги не продаются в Амазоне     ISBN - это "естественный" ключ для книг такой совершенно неколхозной тематики, как IT (RTFM правила колхоза) . Пока что не хватает сил даже на нее. Впоследствии - если когда-нибудь дойдут руки - можно будет приделать сюда, скажем, буквенный хэш для книг без ISBN   Вычищать получившийся в результате бардак должны будут люди вручную, а этим они будут заниматься охотно лишь в том случае, если каталогизатор будет представлять собой уже осязаемую ценность.   Локальная база данных - дело гиблое, оно для перфекционистов-онанистов-одиночек. Весь смысл затеи в том, что база ОБЩАЯ. Задача именно такова: стандартизировать поиск в ЧУЖИХ каталогах.     Цитата: - есть так называемая библиотека "колхоз", там система каталогизации сделана названиями файлов.   Только хэши и только упорный ручной труд над расчисткой завалов - а на такой труд невозможно надеяться до тех пор, пока не будет реально ОБЩЕполезного каталога. Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 16:07 29-04-2006 | Исправлено: LevT, 16:11 29-04-2006

Dust Full Member Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору LevT Как мне кажется это должен быть свой сервер, в который, как в кэш, кладуться все запросы юзеров с амазона. Т.е. эта дополнительная прокладка для совместимости с разными версиями амазона и для стабильности (амазон упал/поменялся - программа работает). Кроме того - таким путем нелегкими юзерскими потугами в этом кэше будет накоплена достаточно ценная информация, которую можно перенести в оффлайн - а на таком мегасправочнике можно уже деньги зарабатывать. Всего записей: 460 | Зарегистр. 01-03-2002 | Отправлено: 00:31 23-06-2006

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору настойчиво предлагаю взять за основу XML Shema   модель метаданных от Shareaza и подправить её   в качестве уникальных ключей ed2k/SHA1 TTH(DC++) SFV MD5   в качестве парсера и контролёра обменников/дампов PZSNG   и построить свою библиотеку по правелам нюкнета/варезной сцены   есть же наверняка ebook scene releasing rules NFO rules file_id.diz rules descript.ion   у кого есть книжки по метаданным - пожалуйста, скиньте мне!!! Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 23:45 29-09-2006

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору 174bpm   А подробнее?  Что-то гугль плохо помогает разобраться с вашими заклинаниями Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 23:26 14-10-2006

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: настойчиво предлагаю взять за основу XML Shema модель метаданных от Shareaza и подправить её   метаданные (данные о данных) о расшаренных в Шарезе фаайлах хранятся в  в подпапке Metadata папки с расшаренным файлом в одноименном файле, но с расширением  XML. XML - очень удобный формат для заполнения/парсинга/связи с базой данных трэкера/FTP. сама Shareaza == очень удобное средство для домохозяек для просмотра метаданных и их редактирования (например, можно целой папке с книжками, отсортированными по одной теме задть один из атрибутов и Shareaza создаст множество файликов с соответствующим заполненным свойством/тегом и при линейном/не древовидном просмотре списка файлов это свойство/тема сохранится у каждого файла).   но схема метаданных: 1) не подходит для букварезной релизной сцены и её стандартов 2) не подходит для Российских реалий - НУЖНО ЕЁ ПОДПРАВИТЬ   <schemaDescriptor location="http://www.limewire.com/schemas/book.xsd" xmlns="http://www.shareaza.com/schemas/SchemaDescriptor.xsd">   т.е. просто на SourceForge.net сделать проект с правом записи у тебя и у меня и в какчестве файла пока состряпать хотя бы book.xsd и book.xml         возможно придется править исходники шарезы чтобы она использовала другие виды сцылок (она может их генерировать, но в метаданные автоматически не пишет)   Цитата:   в качестве уникальных ключей ed2k/SHA1 TTH(DC++) SFV MD5   т.е. каждому файлу генерировать файлик-сцылку и не один, а несколько (важно чтобы стояли соответсвующие handlers ed2k:// dchub:// ) filename.emulecollection filename.sfv filename.md5 filename.asc одновременно прописывать: эти свойства XML, а затем экспортировать в БД   Цитата: в качестве парсера и контролёра обменников/дампов PZSNG   для релизной сцены всё уже сделано там есть нюкскрипт (DUPE - для повторного релиза одного и того же издания) и SFVCheck для проверки полной/неполной закачки   Цитата:   и построить свою библиотеку по правелам нюкнета/варезной сцены     потому что 90% англоязычных книг идут именно оттуда от групп типа LiB/DDU   Цитата:   есть же наверняка ebook scene releasing rules NFO rules file_id.diz rules descript.ion     обязательно должен присутствовать NFO и в нем обязтельно должен быть ISBN иначе релиз не релиз а уж вытащить одно из другого - дело техники а descript.ion - явно не пережиток времен BBSок - я никогда не пользуюсь проводником винды, только TotalCMD   Цитата:   у кого есть книжки по метаданным - пожалуйста, скиньте мне!!!     hттp://nfodb.com/search.html?c=7&name=schema 2006-08-10     E-Book     Wiley Mastering Data Warehouse Aggregates Solutions for Star Schema Performance Jul 2006 eBook     DDU   Код:                                                                                                                                                                                                                                                                                                                        ° °        °°°°°°°°         °°°°°°°°°°°°°°°°        °°°°°°       °°°°°°°° °°°°                                                                                                                                                                                                                              ±                                                                             ±±±   x!FEAR    ± ±±±±        ±±±±±                              ±±±±±±±±±±±    °°±  ±±±±±±± ±                                                                    ±°±              °°°°°     ±   °°°°°°°           °°°°°             °°°°°°°°°     ±±±   ° °°°°°°           ±°±                                                     ±                          ±                                                                                                                                                °°°°  °        °             ° °°°°°°°°°°°       °°°°°°°°°°°°°    °°°°°°°°° °   °°°°        °°°°°°°°°°   ±   °°°°°°°°°°°°°      °°°° °°°°°°°°   °°°°°°°°°                               ±°±                                                    ±±± ± ±±±±±±±±±±±±±±±±    ±     ±±±±±±±±±       ±±±±±±±±±±±±±±±±±±±±±±±±±±±±±±                                                                                                                                                                                                                                                                                                                                                                                                                           RELEASE iNFORMATiON ®                                                                                                               °      TiTLE :  Mastering Data Warehouse Aggregates: Solutions for Star    °       °               Schema Performance (Paperback)                             °       °                                                                          °     °     AUTHOR :  Christopher Adamson                                        °       °                                                                          °     °  PUBLISHER :  Wiley                                                      °       °                                                                          °     °       iSBN :  0471777099                 MAKER :  Team DDU               °       °                                                                          °     °      PAGES :  345 Pages               PACKAGER :  Team DDU               °       °                                                                          °     °    EDiTiON :  July 19, 2006           SUPPLiER :  Team DDU               °       °                                                                          °     °   LANGUAGE :  ENGLISH                   FORMAT :  PDF                    °       °                                                                          °     °   RLS DATE :  08/10/06                    SiZE :  6.08 MB                °                                                                                                                      RELEASE NOTES ®                                                                                                                     °                                                                          °       °  [Product Information]                                                   °       °                                                                          °       °      This is the first book to provide in-depth coverage of star         °       °    schema aggregates used in dimensional modeling-from selection and     °       °    design, to loading and usage, to specific tasks and deliverables      °       °    for implementation projects                                           °       °      Covers the principles of aggregate schema design and the pros and   °       °    cons of various types of commercial solutions for navigating and      °       °    building aggregates                                                   °       °      Discusses how to include aggregates in data warehouse development   °       °    projects that focus on incremental development, iterative builds,     °       °    and early data loads                                                  °       °                                                                          °       °                                                                          °       °  [Install Information]                                                   °       °                                                                          °       °    Unpack it !                                                           °       °                                                                          °       °  [For more information]                                                  °       °                                                                          °       °    http://www.amazon.com/exec/obidos/tg/detail/-/0471777099/             °       °                                                                          °                                                                                                                   CONTACT iNFORMATiON ®                                                                                                                   °                                                                          °     °    Nothing but suppliers ATM!                                            °     °                                                                          °     °    If you wish to contact us, you may email us at:                       °     °    Email:  teamddu[at]land[dot]ru                                        °     °                                                                          °                                                                                          TEAM DDU ( Day Day UP ) 2004                                    x!FEAR                                                                                           Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 12:16 15-10-2006

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: сама Shareaza == очень удобное средство для домохозяек для просмотра метаданных и их редактирования ...   но схема метаданных: 1) не подходит для букварезной релизной сцены и её стандартов 2) не подходит для Российских реалий - НУЖНО ЕЁ ПОДПРАВИТЬ     Правильно я понял, что ты предлагаешь поправить, кроме book-схемы, еще и исходники шареазы?     Цитата: просто на SourceForge.net сделать проект с правом записи у тебя и у меня и в какчестве файла пока состряпать хотя бы book.xsd и book.xml     Просьба: прочти этот топик. Очень многое уже обсуждалось - в частности, ненужность общепринятой схемы метаданных. Достаточно в каждую папочку с книгами положить ее (содержимого) дескриптор bookshelf.xml. Каждый может дописывать в этот файл свои разделы и интерпретировать их так, как сочтет нужным. Часть софта этот файлик апдейтит (например, прописывая туда ISBN, вытащенный из двоичных форматов), часть - читает и процессит дальше. Пример _неочевидного_ полезного раздела метаданных - раздел с ссылками на варианты перевода (оригинала) книги.   Нечто очень близкое к идеальному началу сделано by vladgangan - см. в шапке.     Цитата: т.е. каждому файлу генерировать файлик-сцылку     Уникальный хэш? А ты гарантируешь, что твой алгоритм выдаст одинаковый результат на полу- и полностью (не)распакованных релизах?   До сих пор я предлагал идентифицировать ебуки следующим тройным ключом: ISBN, формат (chm, pdf или djvu...), размер файла в байтах.         Цитата: для релизной сцены всё уже сделано   там есть нюкскрипт (DUPE - для повторного релиза одного и того же издания)   и SFVCheck для проверки полной/неполной закачки     А можно эти скрипты откомпилировать под винду? Если вдруг категорически нельзя - то где их взять как есть?       Цитата: и построить свою библиотеку по правелам нюкнета/варезной сцены       потому что 90% англоязычных книг идут именно оттуда   от групп типа LiB/DDU     Эти правила - правила именно варезной сцены, а не распределенной библиотеки ебуков.     Цитата: обязательно должен присутствовать NFO и в нем обязтельно должен быть ISBN     а кто-то допустим прибивает у себя нфошки...  Что, предложим разгильдяю  восстанавливать их вручную?   Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 02:06 20-10-2006 | Исправлено: LevT, 14:21 20-10-2006

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: А можно эти скрипты откомпилировать под винду? Если вдруг категорически нельзя - то где их взять как есть? google://PZS-NG   Цитата:  Эти правила - правила именно варезной сцены, а не распределенной библиотеки ебуков.   тогда надо читать учебник по библиотечному делу   имхо нужно сделать не нечто среднее и плохо совместимое (свое) а просто совместить и варез и нормальную каталожную систему а ля крупнейшие библиотеки страны некий проект гутенберг (где была бы ещё подводная часть айсберга, бОльшая в несколько раз и незаконная )   имхо неплохо бы скомуниздить пару баз интернет магазинов книжек и библиотек потому как приделывать амазон-паука очень геморно   Цитата:  а кто-то допустим прибивает у себя нфошки...  Что, предложим разгильдяю  восстанавливать их вручную?   не разгильдяю, а придурку если занимаешься именно коллекционированием книг, а не просто обучению по ним - начинаешь их наоборот создавать что мы и делаем   з.ы. наапишите пожалуйста размер рядом с файликами (сцылками из шапки) Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 19:22 20-10-2006

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: А можно эти скрипты откомпилировать под винду? Если вдруг категорически нельзя - то где их взять как есть?     google://PZS-NG       Раз нельзя категорически - тогда предлагаю соорудить vmware virtual applpiiance (см. http://www.vmware.com/vmtn/appliances/index.html) с линуксом, установленным драйвером hgfs и всем, что необходимо для того, чтобы отпроцессить некую папку файловой системы хост-винды с варезными релизами     Возьметесь?     Цитата: имхо неплохо бы скомуниздить пару баз интернет магазинов книжек и библиотек   потому как приделывать амазон-паука очень геморно     не так уж гиморно. См. например такую софтинку как BooksCollector.     Цитата: не разгильдяю, а придурку   если занимаешься именно коллекционированием книг, а не просто обучению по ним - начинаешь их наоборот создавать       коммуниздить у товарищей понравившиеся дескрипторы будет несравненно продуктивнее.     Цитата: з.ы. наапишите пожалуйста размер рядом с файликами (сцылками из шапки)   Размер несуществен: несколько сот килобайт. Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 00:29 21-10-2006 | Исправлено: LevT, 00:35 22-10-2006

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору hттp://www.collectorz.com/book/isbn_search.php   Подробнее... Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 23:54 21-10-2006

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Оно есть в варезнике. Умеет (кроме всего прочего)  вытаскивать с амазона и еще откуда-то сразу много метаинформации о книгах по заданному списку ISBN. В принципе, этого достаточно для каталога частной библиотеки.     Разумеется, решение нисколько не серверное. Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 00:30 22-10-2006 | Исправлено: LevT, 00:36 22-10-2006

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору лишь бы был экспорт в XML   обработать вручную несколько 50Гб коллекций и забить в базу   базу связать с трэкером/хабом/форумом и подключение к ней добавлять в настройки p2p клиентов/интерфейсы раздающих ботов Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 23:40 23-04-2007

174bpm Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору gigapedia.org - неплохо сделано   Добавлено: gigapedia.org - неплохо сделано, только необходима регистрация Всего записей: 887 | Зарегистр. 12-01-2006 | Отправлено: 18:13 06-09-2007

LevT Platinum Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору 413XFireFox   Добавь проверку и распаковку варезных релизов - будет реально полезная прога.   А с амазона она у тебя описания умеет брать? Всего записей: 18151 | Зарегистр. 14-10-2001 | Отправлено: 13:35 28-09-2007

Страницы: 1 2 3 4 5 6 7 8 9 10

Компьютерный форум Ru.Board » Интернет » Web-программирование » Написание скрипта для каталогизации e-book'ов в Варезнике

Переход по форумам  Закладки   » Компьютеры Цифровое изображение Программы Microsoft Windows UNIX Другие OS Hardware В помощь сисадмину Прикладное программирование Игры Форумные игры   » Интернет Web-программирование В помощь вебмастеру Графика Хостинг Зацените-ка!   » Тематические Ikonboard v.2 Ikonboard v.3 Invision Board Другие форумы PHP-Nuke и другие порталы Мобила   » Общие Спорт Флейм Темы по региональным встречам Музыка и Кино Юмор Литература и Живопись   » Ru.Board Новости Помощь по форуму   » Андеграунд eBookz Варезник Раздачи и акции Мобильный варезник Андеграунд Игры и фильмы   » Специальные Тестирование