Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Программы для скачивания потокового/онлайн видео (Часть 2)

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38

Открыть новую тему     Написать ответ в эту тему

Maz



Дед Мазай
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Предыдущие части темы: Часть 1


Программы для скачивания потокового/онлайн видео
 
Протокол стриминга    Способ определения протокола и ссылки    Пример стрима    Пример команды сохранения стрима    Открытое и бесплатное ПО для сохранения стрима    Коммерческое ПО для сохранения стрима    Инструкции и мануалы      
 
UDP, RTP    
Wireshark+filter:  
MP2T (для UDP)  
RTP (для RTP)    
Плейлист каналов IPTV любого провайдера    Подробнее...    FFmpeg 1 2 3 | QMPlay2  

VLC (IP-TV Player)    
         
RTSP  
(PNM)    
Wireshark+filter:  
RTSP  
 
Снифферы мультимедиа ссылок:  

URL Helper  

URL Snooper  

HiDownload    
Примеры..    Подробнее...    FFmpeg 1 2 3 | QMPlay2  

VLC (IP-TV Player)  

openRTSP - UDP и TCP транспорт  
 

cURL  

NirSoft WebVideoCap  

Flashget  

Orbit Downloader  

и практически любой современный менеджер закачек - только TCP транспорт    
GetFLV  

Jaksta | Replay Media Catcher  

NetTransport  

HiDownload  

Streambox VCR Suite (Для загрузки стримов по устаревшим версиям протокола rtsp.Сейчас может пригодиться только для конвертации файлов из формата ra в mp3)    
     
RTMP, RTMPE    Wireshark+filter:  
RTMPT  
 
Снифферы мультимедиа ссылок:  

URL Snooper  

HiDownload    
Примеры..    для rtmp  

для rtmpe    
RTMPDump  

RTMPDump+RTMPDumpHelper  

RTMPDump+RTMPExploreX  

RTMPDump 2.5 (Handshake 10 support) #      

FFmpeg 1 2 3 | QMPlay2  

cURL  

Orbit Downloader  

StreamTransport  

Livestreamer | Streamlink | X-StreamLoader (GUI)  

Coojah | MediaBox  

UnPlug  

Гарантированно 100% способа скачать rtmpe стрим нет,надо перебирать разные утилиты в каждом конкретном случае.    
GetFLV  

Jaksta | Replay Media Catcher (не качают RTMPE)  

Internet Download Manager (IDM)  

NetTransport  

WM Recorder  

TubeDigger  

VSO Downloader  

HiDownload    
Скачивание с rutube.ru по rtmp-ссылкам  
 
Как сохранить локально медиа-поток в формате RTMP  
 
Как скачать RTMP(E), используя RTMPDumpHelper  
 
Как правильно настроить RTMPDumpHelper  
 
How to download flash video RTMP/RTMPE streams using free software  
 
Как искать SecureToken к RTMPE отсюда и далее      
RTMFP (Flash P2P)    Перед началом воспроизведения flash-плеер предлагает использовать пиринговую сеть    Примеры..        Скачивание через rtmpdump возможно лишь в некоторых случаях, когда доставка стрима дублируется по rtmp        Download or capture RTMFP stream      
Apple HLS    Wireshark+filter:  
http.request.uri contains "m3u8".  
 
Расширение HLS Stream Detector для Firefox  
 
Любой HTTP сниффер, например  

HttpFox  

HTTP Analyzer  

HTTP Debugger Pro  

Network Monitor в Firefox  

Функция Открыть список элементов в Adblock Plus  
 
Поток состоит из множества сегментов с расширением *.ts    
Примеры..    Подробнее...  
 
Подробнее...    
FFmpeg 1 2 3 | QMPlay2  
(Рекомендуются к использования только стабильные релизы с указанием конкретной версии,например,3.0,это последняя сборка от Zeranoe,пригодная к использованию на XP)  

VLC (IP-TV Player)  

Livestreamer | Streamlink | X-StreamLoader (GUI)  

youtube-dl GUI 1 2 3 4  

Расширение Streaming and Video Downloader для Chrome  

связка Mozilla Firefox + Video DownloadHelper + Video DownloadHelper Companion App    
GetFLV  

Jaksta | Replay Media Catcher (поддержка заявлена,но качают только посегментно.)  

Internet Download Manager (IDM)  

TubeDigger    
Как скачать HLS, используя FFMpeg  
 
Как ускорить скачивание HLS-потока,используя многопоточную загрузку  
 
Как скачать HLS-стрим (без DRM),если известны только адреса (номера) ts-сегментов      
Adobe HDS    Wireshark+filter:  
http.request.uri contains "f4m"  
 
Расширение HDS Link Detector для Firefox    
Примеры..    Подробнее...  
 
Подробнее...    
AdobeHDS.php  

Комплект php 5.4 + AdobeHDS.php (не забудьте обновить AdobeHDS.php)    

HDSdump  

Livestreamer | Streamlink | X-StreamLoader (GUI)  

youtube-dl GUI 1 2 3 4  

Расширение Adobe HDS / HLS Video Saver для Chrome    
GetFLV  

Jaksta | Replay Media Catcher  

Internet Download Manager (IDM)  

TubeDigger    
Как скачать HDS, используя AdobeHDS.php  

Как скачивать HDS стримы  

Как загрузить HDS-трансляцию,начиная с произвольной позиции в потоке      
HTTP Streaming    Wireshark  
 
Сниффер мультимедиа ссылок:  
URL Helper  

Расширение Media Sniffer для Firefox    
Примеры..        Любой менеджер закачек              
HTTP Pseudo Streaming    Любой браузер с определением мультимедиа.  
Например, Firefox c расширениями Download Helper или FlashGot или Media Sniffer    
Примеры..    Подробнее...    Любой менеджер закачек.  
 
NirSoft WebVideoCap  
 

Livestreamer | Streamlink | X-StreamLoader (GUI)  
 
youtube-dl GUI 1 2 3 4  
 
Firefox c расширениями FlashGot, Video DownloadHelper (или подобными им)  
 
Для YouTube:  
 
расширение Firefox GreaseMonkey со скриптом SaveTube(или подобным) (до 720p)  
 
YouTubeFisher (до 720p)  
 
VLC  
 
Онлайн сервисы  

www.clipconverter.cc  

ru.savefrom.net  

file2hd.com (скрытый майнинг криптовалют !)  

keepvid.com  

downsub.com (загрузка субтитров)    
GetFLV  

Jaksta | Replay Media Catcher  

Internet Download Manager (IDM)  

NetTransport  

WM Recorder  

TubeDigger  

VSO Downloader  

4K Video Downloader (для скачивания плейлистов с YouTube)    
Сохраняем видео с сервиса YouTube c помощью VLC плеера  
 
Как скачать плейлист с YouTube 1 2  
 
Как скачать и склеить аудио и видео с YouTube (особенно актуально для загрузки видео высокого разрешения)  
 
Как правильно скачивать живые (Live) трансляции на YouTube через youtube-dl  
 
Воспроизведение видео с YouTube на старых PC      
Microsoft Smooth Streaming    Wireshark+filter:  
http.request.uri contains ".ism"  
 
Поток состоит из множества небольших фрагментов,перечисленных в Manifest-файле,ссылка на который как правило заканчивается на .isml/Manifest или .ism/Manifest.Сам Manifest-файл содержит в заголовке тэг SmoothStreamingMedia  
 
Плеер (как правило) требует наличия плагина Silverlight    
Примеры..    Подробнее...  
Подробнее...    
ISM Downloader  

Smoothget (Binary, Binary Mod)  

smooth-dl  

youtube-dl GUI 1 2 3 4    
GetFLV  

Jaksta | Replay Media Catcher    
How to download a streaming silverlight video  
 
Как скачивать Microsoft Smooth Streaming видео      
Torrent TV (Ace Stream)    Плеер требует наличия Ace Stream P2P Multimedia Plug-in        Подробнее...    Ace Player в составе Ace Stream Media          
MPEG-DASH    Wireshark+filter:  
http.request.uri contains "mpd"    
Примеры..          
youtube-dl GUI 1 2 3 4  

Онлайн сервисы  

http://www.dash-downloader.com    
 

Jaksta | Replay Media Catcher    

Как скачать и склеить MPEG-DASH стрим вручную          
MJPEG    Wireshark+filter:  

http.request.uri contains "mjpeg"      

Атрибут content-type в ответе сервера при запросе таких файлов в браузере определяется как multipart/x-mixed-replace    
Примеры..    Подробнее...    FFmpeg 1 2 3 | QMPlay2  

VLC  

и практически любой современный браузер/менеджер закачек    
         
MMS    Снифферы мультимедиа ссылок:  

URL Helper  

URL Snooper    
Примеры..    Подробнее...   Подробнее...    FFmpeg 1 2 3 | QMPlay2  

mpv  

NirSoft WebVideoCap  

Flashget  

Orbit Downloader  

и большинство современных менеджеров закачек    
GetFLV  

Jaksta | Replay Media Catcher  

Internet Download Manager (IDM)  

NetTransport  

WM Recorder  

HiDownload    

 
Универсального способа определения технологии стриминга видео нет. Наиболее надежным способом является изучение сетевого дампа, снятого в момент начала воспроизведения видео онлайн. Для захвата дампа лучше всего использовать сниффер Wireshark, распознающий большое количество протоколов. Выше перечислены наиболее популярные протоколы стриминга и предлагается ПО для сохранения стримов. Иногда сервера могут использовать при передаче видео нестандартные порты и Wireshark может не определить протокол, в этом случае бывает полезно сохранить сетевой дамп и сделать в нем ручной поиск по паттернам (как в текстовом файле).
 
Ссылки на сторонние ресурсы:
Video Streaming Downloaders | Video Streaming Downloading
Как сохранить потоковое аудио/видео

 
Большая просьба для новичков и всех, кто затрудняется идентифицировать/скачать стрим:
Перед заданием вопроса в теме настоятельно рекомендуется сначала испробовать перечисленные ниже рекордеры для автоматического сохранения стримов, поддерживающие большое количество протоколов и сервисов:
 
GetFLV
Replay Media Catcher | Jaksta Media Recorder
Internet Download Manager (IDM)
TubeDigger
youtube-dl GUI 1 2 3 4
Livestreamer | Streamlink | X-StreamLoader (GUI)
StreamTransport
yt-dlp

yt-dlp is a youtube-dl fork based on the now inactive youtube-dlc. The main focus of this project is adding new features and patches while also keeping up to date with the original project
yt-dlp — это форк youtube-dl, основанный на ныне неактивном youtube-dlc. Основное внимание в этом проекте уделяется добавлению новых функций и исправлений, а также обновлению оригинального проекта.
 
Также, не забываем делать поиск в топике (версия для печати) - возможно, ваш вопрос уже обсуждался.
 
В этом топике предлагается обсуждать преимущественно способы скачивания незащищенного потокового видео.
Для скачивания защищенного видео, то есть с шифрованием протокола или данных(DRM) или ограничениями на доступ по географическому признаку, уже существует тема в Андеграунде - Скачиваем защищенное потоковое видео

Всего записей: 38754 | Зарегистр. 26-02-2002 | Отправлено: 09:06 02-02-2021 | Исправлено: mithridat1, 17:49 09-01-2024
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
mithridat1 спасибо
потестим

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 18:53 03-01-2022
zanyda

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Не запускается от админа  

 
А в ярлык можно добавить какую-то команду, чтобы не от имени администратора запускался IDM?

Всего записей: 430 | Зарегистр. 05-02-2007 | Отправлено: 19:02 03-01-2022
AlAvis

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
zanyda

Цитата:
чтобы не от имени администратора
Он и так НЕ от админа должен запускаться , без всяких команд .
Повторяю - выкиньте говносборку .
 
Если уж ставите сборку - то от кролика или чупакабры , а не самоделкина .
 
LZAA
У не него там вообще не пойми чего , сделанное не пойми кем .

Всего записей: 1935 | Зарегистр. 15-07-2013 | Отправлено: 19:22 03-01-2022 | Исправлено: AlAvis, 19:30 03-01-2022
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    'Администратор', 'не Администратор' - суета всё это. В первую чередь сделайте интеграцию IDM в Browsers.

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 19:25 03-01-2022
los

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
mithridat1

Цитата:
Например, hlsdl

Это собранная версия _https://github.com/selsta/hlsdl или что-то другое?

Всего записей: 7322 | Зарегистр. 08-09-2001 | Отправлено: 20:02 03-01-2022
mithridat1



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
los

Цитата:
 Это собранная версия _https://github.com/selsta/hlsdl или что-то другое?

Именно.
64-битные сборки можно найти здесь https://github.com/selsta/hlsdl/issues/49
 
UnnPacK
Также можно обратить внимание на Annie.
Это аналог streamlink/youtube-dl, но менее популярный и продвинутый.
Но похоже, что эта утилита заточена только под конкретные сервисы, а отдельно плейлисты качать не умеет.

Всего записей: 4924 | Зарегистр. 05-01-2006 | Отправлено: 21:05 03-01-2022 | Исправлено: mithridat1, 21:16 03-01-2022
zanyda

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Он и так НЕ от админа должен запускаться , без всяких команд .

Прежде чем кричать, не плохо бы сначала разобраться, а потом уже ярлыки ставить.
Если у меня учетная запись с правами админа, то она то же не запускается от админа?
 

Цитата:
Если уж ставите сборку - то от кролика или чупакабры , а не самоделкина .  

А кто Вам сказал, что от самоделкина? Вы экстрасенс?
Стоит от кролика.
 

Цитата:
В первую очередь сделайте интеграцию IDM в Browsers.

Сделал, а не подхватывает.
Может, не суета всё это?
 
 

Всего записей: 430 | Зарегистр. 05-02-2007 | Отправлено: 22:16 03-01-2022 | Исправлено: zanyda, 22:17 03-01-2022
AlAvis

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
zanyda

Цитата:
Если у меня учетная запись с правами админа, то она то же не запускается от админа?
Именно .

Цитата:
А кто Вам сказал, что от самоделкина?

Цитата:
у меня IDM 6.39 портативная

 

Всего записей: 1935 | Зарегистр. 15-07-2013 | Отправлено: 22:25 03-01-2022
los

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
mithridat1

Цитата:
Именно.
64-битные сборки можно найти здесь https://github.com/selsta/hlsdl/issues/49

Понятно, в каком-то из форков к ней мануал более толковый сделали.

Всего записей: 7322 | Зарегистр. 08-09-2001 | Отправлено: 22:31 03-01-2022
zanyda

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
IDM не бывает портативным

поспорил бы с этим. Но не об этом.
 

Цитата:
Нужна расширенная интеграция , включаемая в проге и расширение , установленное в браузер - тогда перехватывает везде .  

 
После этого подумал, а может действительно вся проблема в портативности.
И поставил от кролика версию 6.39 Build 8.
Не стал ставить 6.40 build 2, чтобы не портить результат эксперимента.
 
Но чуда не произошло. И полностью установленная версия  6.39 Build 8 не качает видео с zen.yandex.ru, так же как и портативная.
 
 
AlAvis

Цитата:
Цитата:
А кто Вам сказал, что от самоделкина?
 
Цитата:
у меня IDM 6.39 портативная  

 
поэтому портативной не пользуюсь

Всего записей: 430 | Зарегистр. 05-02-2007 | Отправлено: 22:53 03-01-2022 | Исправлено: zanyda, 15:09 04-01-2022
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
mithridat1
спасибо
мне в общем-то и не нужен комбайн, умеющий качать со всяких ютюб и пр
пока что пользуюсь ffmpeg, но он глюкав при работе по сети, вот и искал замену
 
еще нашлось https://github.com/canhlinh/hlsdl/releases
форк наверное, меньше аргументов принимает

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 22:57 03-01-2022
mithridat1



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
UnnPacK

Цитата:
еще нашлось https://github.com/canhlinh/hlsdl/releases
форк наверное, меньше аргументов принимает

Это какая то другая утилита.

Всего записей: 4924 | Зарегистр. 05-01-2006 | Отправлено: 05:16 04-01-2022
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
а есть такая возможность управлять сегментами в плейлисте ?
 
chunklist.m3u8 :
...894.ts
...895.ts
...896.ts
 
надо что бы скачивал только 895 и 896 /первый пропускал/
 
 

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 16:41 04-01-2022 | Исправлено: UnnPacK, 16:43 04-01-2022
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
     Не совсем понятно, почему 'первый' фрагмент имеет номер '894'.
  Скачйте файл playlist, удалите запись про '894'. После этого этот playlist можно скачать 'локально'.
                           zanyda
   Насколько мне известно, всё - суета.
   Не следует думать, что IDM будет скачивать со всех web ресурсов. Часто это приходится делать 'вручную'. Дайте URL.

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 17:12 04-01-2022
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
почему 'первый' фрагмент имеет номер '894'

 
потому что трансляция онлайн
 
дополню
есть нюанс что пропуск первого сегмента должен быть только при первом обращении к плейлисту
далее уже все пишет

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 17:18 04-01-2022
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
       Я тоже про 'live' подумал. Почему Вы хотите исключить первый сегмент?

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 18:37 04-01-2022
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
честно говоря, я уже засомневался в правильности подхода к решению проблемы
могу только описать симптомы при скачивании через ffmpeg
скачивается один и тот же сегмент, несколько раз, в то время как в браузере зацикливания нет
адрес плейлиста в обоих случаях не меняется
в режиме дебага ffmpeg не проверял

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 19:03 04-01-2022 | Исправлено: UnnPacK, 19:05 04-01-2022
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
    Попробуйте:
 
   youtube-dl --hls-prefer-native URL
 
   'Live' он, конечно, не скачает. Но можно посмотреть, будет ли 'спотыкаться'.

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 23:50 04-01-2022
UriF

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
По поводу hlsdl.  Кто-нибудь может дать пример скачивания файла?  Как передавать стрим и имя получаемого файла, как параметры?  И последнее.  Если стрим зашифрован AES, есть ли какой-то параметр, который отвечает за это?  Заранее спасибо.
 
Добавлено:
LZAA
 
А как передать получаемый файл?  --output "C:\folder\myfile.mp4"???
 
URL - "https://www.website.com/index.m3u8"?

Всего записей: 816 | Зарегистр. 14-06-2004 | Отправлено: 00:09 05-01-2022 | Исправлено: UriF, 00:14 05-01-2022
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
UriF
hlsdl -b -o test.mp4 https://multiplatform-f.akamaihd.net/i/multi/will/bunny/big_buck_bunny_,640x360_400,640x360_700,640x360_1000,950x540_1500,.f4v.csmil/master.m3u8
 
по поводу шифрования, частный случай, пример: аудио и видео могут иметь отдельный плейлист с разными ключами и тд
 

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 01:26 05-01-2022
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38

Компьютерный форум Ru.Board » Компьютеры » Программы » Программы для скачивания потокового/онлайн видео (Часть 2)


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru