Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » youtube-dl | yt-dlp (Часть 1)

Модерирует : gyra, Maz

Maz (17-02-2024 09:09): youtube-dl | yt-dlp (Часть 2)  Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203

   

jasonliull



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Текущая версия: 2021.12.17


youtube-dl - бесплатная консольная программа для скачивания видео с YouTube и множества других сайтов.
Сейчас проект практически не развивается, скорость скачивания с YouTube не выше 100 кБ/сек - рекомендуется использовать yt-dlp.
официальные ночные сборки
 

 
youtube-dl с фиксом скорости, не требует SSE2
youtube-dl с фиксом скорости (другой вариант)
неофициальные ночные сборки youtube-dl  
 
 
 






yt-dlp - активный форк youtube-dl, рекомендуется к использованию.
Цели проекта: добавление новых функций, исправление известных проблем. Есть различия в поведении от основного проекта.
 
ytdl-patched - пока не понятный форк yt-dlp
 
yt-dlp для Windows XP x86
форк yt-dlp, есть вариант для Windows XP x86
примеры для начинающих (англ)
некоторые шаблоны и в чем-то более детальная документация, чем на оф-сайте (англ)
 
 
Графические интерфейсы

  • MediaDownloader (2023)
  • Metube (web-UI)
  • Tartube (2023)
  • Videomass (2023)
  • Vividl (2023)
  • youtube-dl-gui (murrty, 2022)
  • youtube-dl-gui (oleksis, 2023)
  • Stacher (2023)
     
    Полезное

  • ffmpeg.exe - yt-dlp/FFmpeg-Builds
  • BAT-ник от DeZz
  • кнопки от notinthewoods
  • BAT-ник, Downloader, расширения от 351878
  • Youtube Format IDs  
     


  • Всего записей: 2539 | Зарегистр. 05-08-2012 | Отправлено: 13:44 05-03-2018 | Исправлено: Maz, 09:07 17-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    VitalyF

    Цитата:
    Твой последний ffmpeg рекорд скорости ставит по кодированию fdk_aac 60x с лишним.

    Это что-то разработчики ffmpeg улучшают по h/w acceleration, сам encoder не меняется.
    Удивительно что они делают это только сейчас, я бы еще понял если буст происходил бы в основном на последних моделях процессоров.А буст реально нехилый в последней N git

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 19:38 13-02-2024 | Исправлено: RazOne707, 19:42 13-02-2024
    greeple

    Silver Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    VitalyF
    Цитата:
    PS по-хорошему, если знать как расположить, то можно было бы разнести на 3-части --exec >--ppa --exec..

    есть там опция когда выполнять, и у exec и у --use-postprocessor

    Код:
    Это может быть один из «pre_process» (после извлечения видео), «after_filter» (после того, как видео проходит фильтр), «video» (после --format; перед --print/--output), «before_dl» (перед каждым видео download), «post_process» (после каждой загрузки видео; по умолчанию), «after_move» (после перемещения видеофайла в конечное место), «after_video» (после загрузки и обработки всех форматов видео) или «плейлист» (в конец плейлиста). Эту опцию можно использовать несколько раз для добавления разных постпроцессоров.

    а --ppa или --postprocessor-args вроде просто аргументы и нет у них префикса when
    синтаксис в этих всех командах надо ещё понять, там без пузыря не разобраться
     
    Добавлено:
    RazOne707
    Цитата:
    Это что-то разработчики ffmpeg улучшают по h/w acceleration, сам encoder не меняется.
    Удивительно что они делают это только сейчас, я бы еще понял если буст происходил бы в основном на последних моделях процессоров.А буст реально нехилый в последней N git

    потому что habr

    Цитата:
    Релиз назревал как минимум полгода, но из-за постоянной активности в репозитории его пришлось отложить, и только в ноябре 2023 года удалось найти момент для его выпуска, прежде чем вливать в кодовую базу некоторые крупные патчи, запланированные для 7.0.
    Можно добавить, что благодаря усилиям Антона Кирнова разработчики сумели очистить захламлённую кодовую базу FFmpeg до такой степени, что транскодинг заработал в многопоточном режиме, как и должен был работать по своей архитектуре. Когда многопоточность отладят и активируют, она заметно увеличит производительность FFmpeg на многоядерных системах, если в транскодировании не доминирует один компонент, а сами компоненты не являются многопоточными, говорит Антон.
     
    Очистка кода заняла около двух лет и потребовала более 700 подготовительных коммитов. Выход версии 7.0 запланирован на февраль 2024-го.

    https://ffmpeg.org/pipermail/ffmpeg-devel/2023-November/316552.html
     
     

    Всего записей: 4251 | Зарегистр. 11-02-2020 | Отправлено: 19:50 13-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    greeple

    Цитата:
    Релиз назревал как минимум полгода
    Мягко они сгладили о дате назревания нормальной реализации многопоточности. У меня процессор I7 3770. Это ускорение как сейчас в N должно было назревать как минимум с 2013 года)

    Цитата:
    а сами компоненты не являются многопоточными, говорит Антон.
    а это просто без комментариев.
     
    Теперь вся ясно становится, лучше поздно чем никогда.

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 20:04 13-02-2024 | Исправлено: RazOne707, 22:37 13-02-2024
    greeple

    Silver Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    RazOne707
    Цитата:
    Мягко они сгладили о дате назревания нормальной реализации многопоточности.

    это имелось ввиду после того как была опубликована работа Антона, которую он 2 года делал, и то там в патче ещё были проблемы, вот может допиливали, а может ещё есть косяки

    Всего записей: 4251 | Зарегистр. 11-02-2020 | Отправлено: 22:09 13-02-2024
    neorumtu

    Full Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    Многопоточность вещь полезная. Правда, я ее наоборот отключаю, чтобы не нагружать проц.
    Но может быть и вредной, вот как софт на Rust зависнет и все ядра съест.
    Это не очень хорошо для железа.
    В ffmpeg можно указывать параметр -threads. Причем, можно перед -i и после. Перед задает для декодирования, а после для обработки и кодирования.
    Например, ffmpeg -threads 1 -i input.mkv -threads 1 -vcodec...
    Но оно складывается. Одно ядро для декодирования (если формат тяжелый), одно для кодирования. И вот уже два ядра.
    На линуксе нашел весьма удобную универсальную утилиту для урезания аппетитов. taskset -c 1 указывается перед прогой.
    Спасибо за новость. ffmpeg 7 буду обходить стороной.

    Всего записей: 538 | Зарегистр. 30-08-2023 | Отправлено: 09:36 14-02-2024 | Исправлено: neorumtu, 09:38 14-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    neorumtu

    Цитата:
    На линуксе нашел весьма удобную универсальную утилиту для урезания аппетитов. taskset -c 1 указывается перед прогой.
    Спасибо за новость. ffmpeg 7 буду обходить стороной.

     
    Ядра в full не нагружаются. Просто многопоток начинает работать. Пока скорость x1.5 - x.1.66 у aac, у opusa до x2 vs 6.1.1
     

     
    UPD:

    Цитата:
    Вот оно как. Ну, тогда шило на мыло. Хотя, скорость кодирования ведь выше...

    Ну это на I7 3770. У послабее процессоров будет выше, но тоже не должно в full

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 10:06 14-02-2024 | Исправлено: RazOne707, 10:12 14-02-2024
    neorumtu

    Full Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    Вот оно как. Ну, тогда шило на мыло. Хотя, скорость кодирования ведь выше...

    Всего записей: 538 | Зарегистр. 30-08-2023 | Отправлено: 10:09 14-02-2024
    euheny



    Silver Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    как я понял если у меня вин хр то мне нужно либо yt-dlp, либо форк
    но в чем разница?

    Всего записей: 4064 | Зарегистр. 22-11-2006 | Отправлено: 11:26 14-02-2024
    VitalyF

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    На диаграмме два файла они скачивались и обрабатывались одинаково,
    но один с опцией --audio-format m4a
                   другой  --remux-video mka
    У обоих был одинаковый лог во время кодирования  ...  Lavc60.39.100 libfdk_aac...
    Но разная инфа в mediainfo !!!
     

     
    Получается 2 одинаковых файла с разным mediainfo!?
    Кто в курсе, что за хрень?
    Похоже, мне осталось обложки прицепить и фсё!

    Всего записей: 1272 | Зарегистр. 03-03-2004 | Отправлено: 15:05 14-02-2024 | Исправлено: VitalyF, 15:08 14-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    VitalyF

    Цитата:
    Получается 2 одинаковых файла с разным mediainfo

    Потому-что что какую инфу положит ffmpeg  в контейнер - такую и читают mediainfo)  
    Контейнеры разные, запись и чтение mediainfo отличается.
    А еще показывают как упоминал ранее - отсебятину в виде якобы CBR

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 15:06 14-02-2024 | Исправлено: RazOne707, 15:15 14-02-2024
    VitalyF

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    RazOne707
    На hydrogenaud.io читал отзывы о ffmpeg, что не даёт информации о фале совсем или даёт очень мало!
    PS
    Мною впервые m4a кодировался с фильтрами и выглядит на диаграмме и на слух одинаково с mka.
    Фишка была в том, что я умышленно сохранял файлы с опцией -k и как я ни старался переименовать и удалить исходник, он оставался и заменял собою обработанный фильтрами файл m4a > m4a!!! ))  
    Это т.н. век живи, век учись...))

    Всего записей: 1272 | Зарегистр. 03-03-2004 | Отправлено: 15:18 14-02-2024 | Исправлено: VitalyF, 15:24 14-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    VitalyF

    Цитата:
    Мною впервые m4a кодировался с фильтрами и выглядит на диаграмме и на слух одинаково с mka.

    m4a или mka - это лишь контейнеры аудио, где есть графы c id для заполнения medianfo, они из-за этого будут отличаться друг от друга соответственно всегда + как это еще ffmpeg записывает в определенные контейнеры  

    Цитата:
    с опцией -k

    скорее так и должно быть, так как это не экстрактор аудио -x, а keep video просто
     
    кстати, в авто скрипте есть пункт собрать mediainfo - отдельным exe, надо попробовать, он возможно может показывать правильно именно от ffmpega

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 15:21 14-02-2024 | Исправлено: RazOne707, 16:11 14-02-2024
    VitalyF

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    Оставлял чтобы не перекачивать каждый раз большой mp4 - 5-7 Gb
    3-x часовой ролик...
    PS про контейнеры в курсе, и что mp4 с audio - тот же m4a ! )))
    PS У меня mediainfo Lite но и mediainfo NET full показывает то же!

    Всего записей: 1272 | Зарегистр. 03-03-2004 | Отправлено: 15:25 14-02-2024 | Исправлено: VitalyF, 15:32 14-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    VitalyF
    В общем вот mediainfo с либами от ffmpeg с сборки https://www.upload.ee/files/16277490/mediainfo.zip.html  
    Opus показывает правильно : mediainfo.exe -f 1.mp4

     
    На fdk_aac вообще непонятки, даже файлы которые видно как пляшет битрейт 100-300, этот mediainfo показывает как cbr.....
    Также кодирую в Xvid4PSP fdk_aac в vbr - mediainfo покажет якобы cbr

    Наверно и тут разрабам ffmpeg должен помочь кто-то как в случае с Антоном Кирновым....

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 16:15 14-02-2024 | Исправлено: RazOne707, 16:43 14-02-2024
    vasevase

    Silver Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    http://forum.ru-board.com/topic.cgi?forum=5&topic=49719&start=3900#7
    http://forum.ru-board.com/topic.cgi?forum=5&topic=49719&start=3900#5

    Цитата:
    на XP не запускается
     
    С One Core API работает.

    С Core подвох: маленькие файлы финализирует
    нормально [конверт], а чуть побольше - зависает.
    Пробовал мегабайт ~15/20 flac перегонять в mp3.
    Т.е. в батнике или ком. строке стартуем обработку,
    а в конце - не итоговое сообщение, а снимать процесс,
    либо делать прерывание по сочетанию клавиш надо.
    Итоговое аудио не тестировал на битость, возможно норм.
     
    Пользуясь случаем:
    yt-dlp сейчас стабильный какой нумер, и пробовали
    ли вы собирать с опцией 'onedir' [чтобы не вытряхивалось
    в temp каждый раз] самый свежак [под старые ОС типа XP]?
    Нормально выходит? Я в том году ловил ошибки и плюнул.

    Всего записей: 3164 | Зарегистр. 28-08-2010 | Отправлено: 17:26 14-02-2024 | Исправлено: vasevase, 17:33 14-02-2024
    neorumtu

    Full Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    RazOne707

    Цитата:
    Наверно и тут разрабам ffmpeg должен помочь

    Кстати, если кодировать fdk-aac в avconv, то норм.
    -vbr 5: mediainfo показывает Variable
    -b:a 128k: показывает Constant
    Конечно, технически там везде не строго CBR.
     
    vasevase

    Цитата:
    yt-dlp пробовали ли вы собирать

    Я не умею делать exe. Но я могу собрать .py (все yt-dlp модули сжимаются и вшиваются в один файл .py, кроме самого питона). Python должен быть установлен в систему или быть portable.
    Тогда в temp ничего не распаковывается вроде.
    Впрочем, .py на сайте и так выкладывается.
     
    Добавлено:
    euheny

    Цитата:
    чем разница?

    yt-dlp активнее развивается, более продвинутый. А чей форк? youtube-dl ночные сборки собирают, они тоже норм скачивают с ютуба.
     
    vasevase

    Цитата:
    С Core подвох

    Сборка libav-xp-static работает на XP нативно, но там нет fdk-aac. Есть lame, faac, libvorbis.

    Всего записей: 538 | Зарегистр. 30-08-2023 | Отправлено: 18:34 14-02-2024 | Исправлено: neorumtu, 18:51 14-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    neorumtu

    Цитата:
    Кстати, если кодировать fdk-aac в avconv, то норм.
    -vbr 5: mediainfo показывает Variable

    Интересно, в ffmpeg это некому исправить что-ли)

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 19:00 14-02-2024
    neorumtu

    Full Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    RazOne707
    Утилита fdk-aac и 2 и 4dev версии выхлопывает правильно, согласно настройкам.
    Но у ffmpeg появился баг, если перепаковать ffmpeg -i in.m4a -c copy out.m4a (где in.m4a VBR), то он оконстанчивает выход (out.m4a становится CBR). Довольно странно.
    В общем, ффмпеговский муксер стал кривой.

    Всего записей: 538 | Зарегистр. 30-08-2023 | Отправлено: 19:12 14-02-2024 | Исправлено: neorumtu, 19:16 14-02-2024
    RazOne707

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    neorumtu

    Цитата:
    ffmpeg -i in.m4a -c copy out.m4a (где in.m4a VBR), то он оконстанчивает выход (out.m4a становится CBR).

    Получается просто копируется дорожка в новый контейнер и в новом контейнере он в медиаинфо пишет cbr ?
    Вот так и после кодирования получается, vbr дорожку он в медиаинфо пишет cbr. А сама аудиодорожка 100 процентов vbr.

    Всего записей: 1250 | Зарегистр. 06-10-2023 | Отправлено: 19:15 14-02-2024 | Исправлено: RazOne707, 19:56 14-02-2024
    VitalyF

    Advanced Member
    Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    greeple
    Цитата:
    ...есть там опция когда выполнять...
    RazOne707
    Вот ни за что не догадаетесь что за аргумент я поставил в --exec
    чтобы прицепить обдложку к m4a кодированного с фильтрами!!
    Я и сам не ожидал, перечитывая список аргументов в 831-ый раз! ))
    ... - after

    Цитата:
    --exec after:"move {} temp & ffmpeg -v quiet -vn -y -i temp -ac 2 -c:a libfdk_aac -vbr 5 -filter_complex \"compand=0 0:1 1:-90/-900 -70/-70 -30/-9 0/-3:6:0:0:0,bass=g=3:f=110:w=0.6,dynaudnorm\" {} & del temp"
    даже самому не верится, я сделал это!!!
    ...Дальше буду шлифовать и улучшать результат...
    PS
    ...в ближайших планах найти plugin для 2-х проходной нормализации, пишут, что встроенный dynaudnorm несовершенный...
    дальше видно будет...
    PS
    строка >> yt-dlp -x --audio-quality 0 --audio-format m4a URL
    Мой конфиг на всякий случай

    Цитата:
    --output "%(title).28s-[%(id)s].%(ext)s"
    --exec after:"move {} temp & ffmpeg -v quiet -vn -y -i temp -ac 2 -c:a libfdk_aac -vbr 5 -filter_complex \"compand=0 0:1 1:-90/-900 -70/-70 -30/-9 0/-3:6:0:0:0,bass=g=3:f=110:w=0.6,dynaudnorm\" {} & del temp"
    -P "H:\YandexDisk\MP3"
    -P "temp:tmp"
    #-S "proto"
    --fixup never
    --console-title
    --restrict-filenames
    --windows-filenames
    --write-thumbnail
    --add-metadata
    --convert-thumbnail jpg
    --embed-thumbnail
    --merge-output-format mp4
    #--no-live-from-start
    #--live-from-start
    --hls-use-mpegts
    --post-overwrites
    #--enable-file-urls
    --no-mtime
    #--skip-unavailable-fragments
     
    yt-dlp nightly 2024.02.13.232701

    Всего записей: 1272 | Зарегистр. 03-03-2004 | Отправлено: 20:53 14-02-2024 | Исправлено: VitalyF, 21:30 14-02-2024
       

    Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203

    Компьютерный форум Ru.Board » Компьютеры » Программы » youtube-dl | yt-dlp (Часть 1)
    Maz (17-02-2024 09:09): youtube-dl | yt-dlp (Часть 2)


    Реклама на форуме Ru.Board.

    Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
    Modified by Ru.B0ard
    © Ru.B0ard 2000-2024

    BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

    Рейтинг.ru