Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Программы для скачивания потокового/онлайн видео (Часть 1)

Модерирует : gyra, Maz

Maz (02-02-2021 13:44): Программы для скачивания потокового/онлайн видео (Часть 2)  Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200

   

Diabolik



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Программы для скачивания потокового/онлайн видео
 
Протокол стриминга    Способ определения протокола и ссылки    Пример стрима    Пример команды сохранения стрима    Открытое и бесплатное ПО для сохранения стрима    Коммерческое ПО для сохранения стрима    Инструкции и мануалы      
 
UDP, RTP    
Wireshark+filter:  
MP2T (для UDP)  
RTP (для RTP)    
Плейлист каналов IPTV любого провайдера    Подробнее...    FFmpeg 1 2 3 | QMPlay2  

VLC (IP-TV Player)    
         
RTSP  
(PNM)    
Wireshark+filter:  
RTSP  
 
Снифферы мультимедиа ссылок:  

URL Helper  

URL Snooper  

HiDownload    
Примеры..    Подробнее...    FFmpeg 1 2 3 | QMPlay2  

VLC (IP-TV Player)  

openRTSP - UDP и TCP транспорт  
 

cURL  

NirSoft WebVideoCap  

Flashget  

Orbit Downloader  

и практически любой современный менеджер закачек - только TCP транспорт    
GetFLV  

Jaksta | Replay Media Catcher  

NetTransport  

HiDownload  

Streambox VCR Suite (Для загрузки стримов по устаревшим версиям протокола rtsp.Сейчас может пригодиться только для конвертации файлов из формата ra в mp3)    
     
RTMP, RTMPE    Wireshark+filter:  
RTMPT  
 
Снифферы мультимедиа ссылок:  

URL Snooper  

HiDownload    
Примеры..    для rtmp  

для rtmpe    
RTMPDump  

RTMPDump+RTMPDumpHelper  

RTMPDump+RTMPExploreX  

RTMPDump 2.5 (Handshake 10 support) #      

FFmpeg 1 2 3 | QMPlay2  

cURL  

Orbit Downloader  

StreamTransport  

Livestreamer | Streamlink | X-StreamLoader (GUI)  

Coojah | MediaBox  

UnPlug  

Гарантированно 100% способа скачать rtmpe стрим нет,надо перебирать разные утилиты в каждом конкретном случае.    
GetFLV  

Jaksta | Replay Media Catcher (не качают RTMPE)  

Internet Download Manager (IDM)  

NetTransport  

WM Recorder  

TubeDigger  

VSO Downloader  

HiDownload    
Скачивание с rutube.ru по rtmp-ссылкам  
 
Как сохранить локально медиа-поток в формате RTMP  
 
Как скачать RTMP(E), используя RTMPDumpHelper  
 
Как правильно настроить RTMPDumpHelper  
 
How to download flash video RTMP/RTMPE streams using free software  
 
Как искать SecureToken к RTMPE отсюда и далее      
RTMFP (Flash P2P)    Перед началом воспроизведения flash-плеер предлагает использовать пиринговую сеть    Примеры..        Скачивание через rtmpdump возможно лишь в некоторых случаях, когда доставка стрима дублируется по rtmp        Download or capture RTMFP stream      
Apple HLS    Wireshark+filter:  
http.request.uri contains "m3u8".  
 
Расширение HLS Stream Detector для Firefox  
 
Любой HTTP сниффер, например  

HttpFox  

HTTP Analyzer  

HTTP Debugger Pro  

Network Monitor в Firefox  

Функция Открыть список элементов в Adblock Plus  
 
Поток состоит из множества сегментов с расширением *.ts    
Примеры..    Подробнее...  
 
Подробнее...    
FFmpeg 1 2 3 | QMPlay2  
(Рекомендуются к использования только стабильные релизы с указанием конкретной версии,например,3.0,это последняя сборка от Zeranoe,пригодная к использованию на XP)  

VLC (IP-TV Player)  

Livestreamer | Streamlink | X-StreamLoader (GUI)  

youtube-dl GUI 1 2 3 4  

Расширение Streaming and Video Downloader для Chrome  

связка Mozilla Firefox + Video DownloadHelper + Video DownloadHelper Companion App    
GetFLV  

Jaksta | Replay Media Catcher (поддержка заявлена,но качают только посегментно.)  

Internet Download Manager (IDM)  

TubeDigger    
Как скачать HLS, используя FFMpeg  
 
Как ускорить скачивание HLS-потока,используя многопоточную загрузку  
 
Как скачать HLS-стрим (без DRM),если известны только адреса (номера) ts-сегментов      
Adobe HDS    Wireshark+filter:  
http.request.uri contains "f4m"  
 
Расширение HDS Link Detector для Firefox    
Примеры..    Подробнее...  
 
Подробнее...    
AdobeHDS.php  

Комплект php 5.4 + AdobeHDS.php (не забудьте обновить AdobeHDS.php)    

HDSdump  

Livestreamer | Streamlink | X-StreamLoader (GUI)  

youtube-dl GUI 1 2 3 4  

Расширение Adobe HDS / HLS Video Saver для Chrome    
GetFLV  

Jaksta | Replay Media Catcher  

Internet Download Manager (IDM)  

TubeDigger    
Как скачать HDS, используя AdobeHDS.php  

Как скачивать HDS стримы  

Как загрузить HDS-трансляцию,начиная с произвольной позиции в потоке      
HTTP Streaming    Wireshark  
 
Сниффер мультимедиа ссылок:  
URL Helper  

Расширение Media Sniffer для Firefox    
Примеры..        Любой менеджер закачек              
HTTP Pseudo Streaming    Любой браузер с определением мультимедиа.  
Например, Firefox c расширениями Download Helper или FlashGot или Media Sniffer    
Примеры..    Подробнее...    Любой менеджер закачек.  
 
NirSoft WebVideoCap  
 

Livestreamer | Streamlink | X-StreamLoader (GUI)  
 
youtube-dl GUI 1 2 3 4  
 
Firefox c расширениями FlashGot, Video DownloadHelper (или подобными им)  
 
Для YouTube:  
 
расширение Firefox GreaseMonkey со скриптом SaveTube(или подобным) (до 720p)  
 
YouTubeFisher (до 720p)  
 
VLC  
 
Онлайн сервисы  

www.clipconverter.cc  

ru.savefrom.net  

file2hd.com (скрытый майнинг криптовалют !)  

keepvid.com  

downsub.com (загрузка субтитров)    
GetFLV  

Jaksta | Replay Media Catcher  

Internet Download Manager (IDM)  

NetTransport  

WM Recorder  

TubeDigger  

VSO Downloader  

4K Video Downloader (для скачивания плейлистов с YouTube)    
Сохраняем видео с сервиса YouTube c помощью VLC плеера  
 
Как скачать плейлист с YouTube 1 2  
 
Как скачать и склеить аудио и видео с YouTube (особенно актуально для загрузки видео высокого разрешения)  
 
Как правильно скачивать живые (Live) трансляции на YouTube через youtube-dl  
 
Воспроизведение видео с YouTube на старых PC      
Microsoft Smooth Streaming    Wireshark+filter:  
http.request.uri contains ".ism"  
 
Поток состоит из множества небольших фрагментов,перечисленных в Manifest-файле,ссылка на который как правило заканчивается на .isml/Manifest или .ism/Manifest.Сам Manifest-файл содержит в заголовке тэг SmoothStreamingMedia  
 
Плеер (как правило) требует наличия плагина Silverlight    
Примеры..    Подробнее...  
Подробнее...    
ISM Downloader  

Smoothget (Binary, Binary Mod)  

smooth-dl  

youtube-dl GUI 1 2 3 4    
GetFLV  

Jaksta | Replay Media Catcher    
How to download a streaming silverlight video  
 
Как скачивать Microsoft Smooth Streaming видео      
Torrent TV (Ace Stream)    Плеер требует наличия Ace Stream P2P Multimedia Plug-in        Подробнее...    Ace Player в составе Ace Stream Media          
MPEG-DASH    Wireshark+filter:  
http.request.uri contains "mpd"    
Примеры..          
youtube-dl GUI 1 2 3 4  

Онлайн сервисы  

http://www.dash-downloader.com    
 

Jaksta | Replay Media Catcher    

Как скачать и склеить MPEG-DASH стрим вручную          
MJPEG    Wireshark+filter:  

http.request.uri contains "mjpeg"      

Атрибут content-type в ответе сервера при запросе таких файлов в браузере определяется как multipart/x-mixed-replace    
Примеры..    Подробнее...    FFmpeg 1 2 3 | QMPlay2  

VLC  

и практически любой современный браузер/менеджер закачек    
         
MMS    Снифферы мультимедиа ссылок:  

URL Helper  

URL Snooper    
Примеры..    Подробнее...   Подробнее...    FFmpeg 1 2 3 | QMPlay2  

mpv  

NirSoft WebVideoCap  

Flashget  

Orbit Downloader  

и большинство современных менеджеров закачек    
GetFLV  

Jaksta | Replay Media Catcher  

Internet Download Manager (IDM)  

NetTransport  

WM Recorder  

HiDownload    

 
Универсального способа определения технологии стриминга видео нет. Наиболее надежным способом является изучение сетевого дампа, снятого в момент начала воспроизведения видео онлайн. Для захвата дампа лучше всего использовать сниффер Wireshark, распознающий большое количество протоколов. Выше перечислены наиболее популярные протоколы стриминга и предлагается ПО для сохранения стримов. Иногда сервера могут использовать при передаче видео нестандартные порты и Wireshark может не определить протокол, в этом случае бывает полезно сохранить сетевой дамп и сделать в нем ручной поиск по паттернам (как в текстовом файле).
 
Ссылки на сторонние ресурсы:
Video Streaming Downloaders | Video Streaming Downloading
Как сохранить потоковое аудио/видео

 
Большая просьба для новичков и всех, кто затрудняется идентифицировать/скачать стрим:
Перед заданием вопроса в теме настоятельно рекомендуется сначала испробовать перечисленные ниже рекордеры для автоматического сохранения стримов, поддерживающие большое количество протоколов и сервисов:
 
GetFLV
Replay Media Catcher | Jaksta Media Recorder
Internet Download Manager (IDM)
TubeDigger
youtube-dl GUI 1 2 3 4
Livestreamer | Streamlink | X-StreamLoader (GUI)
StreamTransport

 
Также, не забываем делать поиск в топике (версия для печати) - возможно, ваш вопрос уже обсуждался.
 
В этом топике предлагается обсуждать преимущественно способы скачивания незащищенного потокового видео.
Для скачивания защищенного видео, то есть с шифрованием протокола или данных(DRM) или ограничениями на доступ по географическому признаку, уже существует тема в Андеграунде - Скачиваем защищенное потоковое видео

Всего записей: 4816 | Зарегистр. 02-10-2004 | Отправлено: 14:38 27-09-2011 | Исправлено: Maz, 11:32 16-05-2020
RuBoardRussia



Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
los
И как же из этих 20-килобайтных файлов получить 9-часовой видеофайл?

Всего записей: 282 | Зарегистр. 22-07-2014 | Отправлено: 22:21 27-02-2020
los

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
RuBoardRussia
http://forum.ru-board.com/topic.cgi?forum=5&topic=37082&start=3480#18
это было адресовано вам(ошибся адресатом, но не стал исправлять)

Цитата:
И как же из этих 20-килобайтных файлов получить 9-часовой видеофайл?

также, как и большинство программ делающих это самостоятельно - при помощи ffmpeg.
Вполне возможно, что он (ffmpeg) у вас не установлен, а программе которой вы качаете он требуется, как результат - куча мелких файлов.

Всего записей: 7311 | Зарегистр. 08-09-2001 | Отправлено: 22:27 27-02-2020
RuBoardRussia



Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
los
ОК, давайте тогда с самого начала. https://facecast.net/v/xcqnww?key=n816kwka - по этой ссылке скачивается файл размером 16Кбайт. Если его открыть Блокнотом, то никаких ссылок на видео-файлы там нет, это видно по расширениям. Есть только различные .js-файлы, но это ява-скрипты, как я понял. Возможно, надо их как-то скачать с сервера отдельно, чтобы с их помощью получить ссылки на видео?

Всего записей: 282 | Зарегистр. 22-07-2014 | Отправлено: 22:41 27-02-2020
los

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
RuBoardRussia,

Цитата:
по этой ссылке..

после  начала просмотра можно получить *.m3u8 файл(ы). Я скопировал адрес из браузера.
_https://edge-de-1.facecast.net/secure/KgobERdWnpSgCOOoc4tgZA/SN8D7vfaCyqxawOn6RO1Jg/1582919680/2633619/34628.m3u8 - для краткости url
далее
$ hlsdl -t  url
выбираю 1 и получаю ссылки на те самые маленькие кусочки выглядящие приблизительно так
https://edge-de-1.facecast.net/secure/........./1.ts
...
...
https://edge-de-1.facecast.net/secure/.........//6708.ts
 
Можно скачать эти несколько тысяч "кусочков" и собрать их в один файл.
Можно "скормить" url программе hlsdl и она сама скачает и объединит(возможно нужно будет установить ffmpeg)
 
$ hlsdl -b url
'1' и '-b' выбраны для 1280x720, но у трансляции можно выбрать и меньшее разрешение.
пример "кусочка"
https://workupload.com/file/nMHXwx5k

Всего записей: 7311 | Зарегистр. 08-09-2001 | Отправлено: 23:23 27-02-2020
RuBoardRussia



Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
los
Хм... А как тогда у товарища tmp007ss получилось скачать видео? У него-то именно видеофайл загружается, а не какая-то мелочь на пару десятков килобайт. Не то чтобы меня консоль пугает, но как-то оно странно всё. Неужели в 2020 году для скачивания видео с интернета нужно вручную собирать его из нескольких тысяч кусочков?

Всего записей: 282 | Зарегистр. 22-07-2014 | Отправлено: 23:31 27-02-2020
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
   youtube-dl --hls-prefer-native --no-part "https://edge-8.facecast.net/secure/qtqL6N8hfEz6zgWFivRuLQ/Xv68NSNfiJg3TpRDIhhJTQ/1582923610/2633619/34628/source.m3u8"

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 00:08 28-02-2020 | Исправлено: LZAA, 20:10 28-02-2020
tmp007ss

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
А как тогда у товарища tmp007ss получилось скачать видео?

Не знаю, само как то
Но кстати крэка на бэтту ИДМ 6.37 нет до сих пор, так что может у вас не тот ехе? У меня на том компьютере лицензионный ИДМ, бэтта скачана с оф сайта. Хотя панель с вариантами видео вроде от ехе не зависит.

Всего записей: 473 | Зарегистр. 23-12-2007 | Отправлено: 05:07 28-02-2020 | Исправлено: tmp007ss, 05:27 28-02-2020
los

Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
RuBoardRussia

Цитата:
Хм... А как тогда у...

Так вам же уже объяснял - программы для скачивания делают это самостоятельно, но для многих требуется для этого ffmpeg (или подобное). Но сам поток идет именно этими маленькими кусочками. Речь о данном случае.
если вы используете
$ hlsdl -b url
или способ предложенный LZAA (не проверял), вы получите один нужный вам файл.

Всего записей: 7311 | Зарегистр. 08-09-2001 | Отправлено: 09:13 28-02-2020
healer888

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
RuBoardRussia
При заходе по ссылке  IDM 6.32 9 показал стрелку с выбором качества.
Запустил 720, пошла закачка.

Всего записей: 20 | Зарегистр. 15-07-2015 | Отправлено: 17:21 28-02-2020 | Исправлено: healer888, 17:21 28-02-2020
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
как выбирать плейлист по условию: максимальный bandwidth но не более чем 40000 в livestreamer

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 19:57 29-02-2020
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
     Uses a filter expression in the format:
 
    [operator]<value>
 
  Valid operators are >, >=, < and <=. If no operator is specified
  then equality is tested.
 
  For example this will exclude streams ranked higher than "480p":
 
    ">480p"
 
  Multiple filters can be used by separating each expression with
  a comma.
 
  For example this will exclude streams from two quality types:
 
    ">480p,>medium"

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 20:48 29-02-2020
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
эти параметры аргументом передаются или в конфиге указываются?
не вижу ключа, только оператор и значение
и условие по высоте кадра не подходит, потому что могут быть 720 30fps, 720 60fps, 1080 30fps, 1080 15 fps

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 21:18 29-02-2020
LZAA

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
   Такую настройку можно сделать в youtube-dl:  
    http://forum.ru-board.com/topic.cgi?forum=5&bm=1&topic=49719&start=280

Всего записей: 2200 | Зарегистр. 09-01-2010 | Отправлено: 22:05 29-02-2020
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
youtube-dl
многопоточность реализована?
вроде, пишут что только с внешними загрузчиками

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 23:39 01-03-2020
Ghost Inets1

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Чем качать отсюда?
http://hdrezka.com.ua/movie?id=16272001&name=%D0%A3%D0%B4%D0%B8%D0%B2%D0%B8%D1%82%D0%B5%D0%BB%D1%8C%D0%BD%D0%BE%D0%B5%20%D0%BF%D1%83%D1%82%D0%B5%D1%88%D0%B5%D1%81%D1%82%D0%B2%D0%B8%D0%B5%20%D0%B4%D0%BE%D0%BA%D1%82%D0%BE%D1%80%D0%B0%20%D0%94%D1%83%D0%BB%D0%B8%D1%82%D1%82%D0%BB%D0%B0

Всего записей: 1849 | Зарегистр. 30-03-2016 | Отправлено: 17:04 03-03-2020
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Ghost Inets1
там несколько плееров
проще тянуть целым файлом
в снифере ссылка
https://moscovium.cloud.hotlan.by/movies/xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx/zzzzzzzzzzzzzzzzzzzzzzzzzzzzzzzz:0000000000/1080.mp4
 

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 18:32 03-03-2020 | Исправлено: UnnPacK, 18:36 03-03-2020
Ghost Inets1

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
UnnPacK
Можно рабочую ссылку на видео?

Всего записей: 1849 | Зарегистр. 30-03-2016 | Отправлено: 19:27 03-03-2020
UnnPacK

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Ghost Inets1
ссылка не имеет привязки к чему-либо, но может устареть
могу только подсказать чем ее выловить
http://5ms.ru/sniffer/
 

Всего записей: 224 | Зарегистр. 26-01-2014 | Отправлено: 19:37 03-03-2020
newebai

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Ghost Inets1
 
IDM качает, для 1080р нужно заменить 480 на 1080
 

Всего записей: 264 | Зарегистр. 04-04-2016 | Отправлено: 21:43 03-03-2020
presentRU

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Нужно с определённых Youtube-каналов спарсить url всех видео вместе с названиями и сохранить их как url-файлы. Должна в итоге получиться папка, содержащая ссылки на видео, типа такого
   
Можно чем-либо решить такую задачу? Желательно, через командную строку.
 

Всего записей: 821 | Зарегистр. 16-10-2006 | Отправлено: 23:08 03-03-2020
   

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200

Компьютерный форум Ru.Board » Компьютеры » Программы » Программы для скачивания потокового/онлайн видео (Часть 1)
Maz (02-02-2021 13:44): Программы для скачивания потокового/онлайн видео (Часть 2)


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru