Enregistrer le direct de France {2,3,5} : films américains: VO?!?

CM63 · Le 04/09/2019, à 14:24

Thomasd38 a écrit :

Je pense que tu dois avoir une box chez toi pour pouvoir enregistrer et configurer la box en fonction de ton système. Enfin, si ça marche !

Je ne comprends pas ta phrase. J'ai une box, oui, j'ai la fibre Orange, mais l'enregistrement je ne le fais pas sur mon PC, je le fais sur un serveur chez OVH. Sur ce serveur j'ai une procédure Python, que j'ai écrite, qui enregistre telle chaîne (2,3,4 ou 5) à telle heure pendant telle durée. Donc en fait on ne choisit pas le nom de l'émission mais juste le créneau horaire, comme on faisait sur les magnétoscopes. Ma procédure lance en fait ffmpeg, avec certains arguments. Ce qui me manque c'est quels arguments mettre pour qu'il me prenne le son français, ou les sous-titre français, pour les émissions multi-lingue.

Dernière modification par CM63 (Le 04/09/2019, à 14:26)

Lulux3 · Le 04/09/2019, à 14:36

Essaie d'ajouter l'option "-map 0", pour forcer l'enregistrement de toutes les pistes présentes.
Après, tu pourras faire ton choix en remuxant le fichier avec ffmpeg ou mkvMerge, par exemple.

CM63 · Le 04/09/2019, à 15:06

Je fais déjà -map 0 et cela ne marche pas.

Lulux3 · Le 04/09/2019, à 17:54

Je viens de vérifier avec youtube-dl: l'organisation des flux du direct est similaire à celle du replay:
- un flux principal avec la vidéo (plusieurs choix de définition) et l'audio par défaut (dans le cas du replay)
- des flux séparés 'audio-only' pour les pistes audio: fr, VO (qaa), Audiodescription (qad)
- il serait logique que les sous-titres soient encore un autre flux, si c'est comme pour le replay.
Je te suggère donc de tester en ajoutant '-map 1? -map 2? -map3? -map 4?', ce qui devrait prendre en compte ces flux s'ils sont présents.

CM63 · Le 04/09/2019, à 22:14

Ok, merci beaucoup, j'essaierai cela. A ton avis il n'y en a que 4? Et comment expliquer que -map 0 qui est censé tous les prendre, ne marche pas?
Mais je les essaierai dans l'ordre, on verra.

Lulux3 a écrit :

- des flux séparés 'audio-only' pour les pistes audio: fr, VO (qaa), Audiodescription (qad)

Comment tu as pu voir ces flux là et comment on peux les avoir?

Est-ce que ce serai une bonne idée de mettre les 4 : "-map 1 -map 2 -map 3 -map 4"

Dernière modification par CM63 (Le 04/09/2019, à 22:17)

Lulux3 · Le 05/09/2019, à 09:23

Bonjour

CM63 a écrit :

Comment tu as pu voir ces flux là et comment on peux les avoir?

youtube-dl -F <url>

pour les sous-titres:

youtube-dl --list-subs <url>

CM63 a écrit :

Est-ce que ce serai une bonne idée de mettre les 4 : "-map 1 -map 2 -map 3 -map 4"

Il faut essayer, mais ça risque de planter, ou alors il faut faire un test avant pour connaître le nombre de flux.
A la réflexion, youtube-dl me semble plus adapté pour faire ce que tu veux, avec une commande du genre:

youtube-dl -f <flux0>+<flux1>+... -all-subs <url>

qui devrait te donner un fichier muxé avec les flux choisis, et des fichiers séparés pour les sous-titres disponibles.

CM63 · Le 05/09/2019, à 10:19

Merci beaucoup, je vais voir cela.

CM63 · Le 09/09/2019, à 18:17

Bonjour,

Lulux3 a écrit :

A la réflexion, youtube-dl me semble plus adapté pour faire ce que tu veux, avec une commande du genre:
youtube-dl -f <flux0>+<flux1>+... -all-subs <url>
qui devrait te donner un fichier muxé avec les flux choisis, et des fichiers séparés pour les sous-titres disponibles.

Le problème de youtube-dl c'est qu'on ne peut pas commander la durée. Si je tue le process au bout d'un certain temps, le buffer du fichier n'est pas vidé.

Alors j'ai essayé de piper youtube sur ffmpeg, qui lui a un paramètre de durée, ça marche, il s'arrête bien quand je veux, mais le son est décalé:

ffmpeg -i $( youtube-dl --get-url https://www.france.tv/france-3/direct.html | tr '\n' ' ' | sed 's/ / -i /' ) -ss 0 -t 00:01:00 -c:v copy -c:a copy sortie.mp4

Le rôle du tr et du sed est de remplacer le saut de ligne par " -i " dans le résultat de la commande "youtube-dl --get-url", qui renvoie les noms des deux flux, de façon à ce que ça fasse :

ffmpeg -i <flux1> -i <flux2> -ss 0 -t 00:01:00 -c:v copy -c:a copy sortie.mp4

Et donc j'ai deux arguments "-i" dans la commande ffmpeg, c'est comme cela qu'il faut faire ou pas? Toi tu mets un "+" comme séparateur? Après je mettrai le --all-subs, mais pour l'instant je cherche à synchroniser.

PS : si je mets "+" à la place de " -i ", je n'ai que le son (je ne sais pas si c'est le premier ou le deuxième flux).
PS2 : si j'ajoute "-map 0 -map 1" le son est encoré décalé. J'ai regardé l'ordre d'envoi des arguments, c'est-à-dire l'ordre de sortie de "youtube-dl --get-url", il y a d'abord la vidéo, puis l'audio, et j'ai l'impression que sur le résultat l'image est en retard sur le son.

Dernière modification par CM63 (Le 09/09/2019, à 18:38)

k3c · Le 09/09/2019, à 18:44

je ne sais pas si ça peut aider, mais tu as la commande timeout

timeout 3600 macommande

apres une heure, macommande stoppe

CM63 · Le 09/09/2019, à 18:50

J'ai essayé, mais là je n'ai pas le son , j'ai l'impression que c'est le même principe que de tuer le process, le buffer n'est pas vidé, j'ai un fichier .part au lieu de .mp4 .

Dernière modification par CM63 (Le 09/09/2019, à 18:51)

grandtoubab · Le 09/09/2019, à 19:19

salut
tu lance le script qui enregistre et tu programme un shutdown -P à une heure précise pour arreter ton PC
cf man shutdown
The time string may either be in the format "hh:mm" for hour/minutes
specifying the time to execute the shutdown at, specified in 24h clock
format. Alternatively it may be in the syntax "+m" referring to the
specified number of minutes m from now. "now" is an alias for "+0",
i.e. for triggering an immediate shutdown. If no time argument is
specified, "+1" is implied.

enregistrement arte direct

youtube-dl -f 0 https://artelive-lh.akamaihd.net/i/artelive_fr@344805/index_1_av-b.m3u8

Dernière modification par grandtoubab (Le 09/09/2019, à 19:24)

k3c · Le 09/09/2019, à 19:21

est ce que les différentes réponses de

https://unix.stackexchange.com/question … dl-command

peuvent aider ?

CM63 · Le 09/09/2019, à 20:46

k3c a écrit :

est ce que les différentes réponses de
https://unix.stackexchange.com/question … dl-command
peuvent aider ?

Oui, c'est comme cela que je fais, je fais youtub-dl -f pour avoir les noms des flux, et je n'ai toujours que deux flux, un audio et un vidéo, même si je mets l'option -all-subs, et ensuite je lance ffmpeg avec les noms de ces flux, mais ce faisant, je n'ai aucun sous-titre ni voix française.

En ce qui concerne le shunt down, j'essaierai, mais cela va être le même problème qu'en tuant le process (kill -9) , étant donné qu'on le prend par surprise, le buffer ne va pas être vidé.

CM63 · Le 09/09/2019, à 20:48

grandtoubab a écrit :

enregistrement arte direct

youtube-dl -f 0 https://artelive-lh.akamaihd.net/i/artelive_fr@344805/index_1_av-b.m3u8

Comment tu obtiens le nom du m3u8 ?

grandtoubab · Le 09/09/2019, à 21:47

CM63 a écrit :

grandtoubab a écrit :
enregistrement arte direct
youtube-dl -f 0 https://artelive-lh.akamaihd.net/i/artelive_fr@344805/index_1_av-b.m3u8
Comment tu obtiens le nom du m3u8 ?

avec la fonction examiner l'élément de firefox
onglet réseau

exemple france 5 à mettre dans ouvrir un flux réseau de vlc

https://livefrancetv.akamaized.net/simu … ance_5.mpd

Dernière modification par grandtoubab (Le 09/09/2019, à 21:59)

k3c · Le 09/09/2019, à 21:59

est ce que streamlink ne sera pas plus adapté pour ce genre d'activité ?

https://github.com/streamlink/streamlink

Lulux3 · Le 09/09/2019, à 22:09

Bonsoir

CM63 a écrit :

Oui, c'est comme cela que je fais, je fais youtub-dl -f pour avoir les noms des flux, et je n'ai toujours que deux flux

en fait la commande pour lister tous les flux dispo est

youtube-dl -F

avec un F majuscule. Le f minuscule, c'est pour selectioner le(s) flux à traiter.

CM63 a écrit :

Et donc j'ai deux arguments "-i" dans la commande ffmpeg, c'est comme cela qu'il faut faire ou pas? Toi tu mets un "+" comme séparateur?

avec ffmpeg, c'est la bonne syntaxe, le "+", c'est pour youtube-dl, mais en fait, ça ne fonctionne pas pour le direct: ça charge les flux l'un après l'autre, et ça les muxe ensuite, donc l'audio n'a rien à voir avec la vidéo...
D'après le manpage de youtube-dl, il faudrait faire:

youtube-dl -f best <url>

mais du coup, pas de sélection des flux.

CM63 · Le 09/09/2019, à 22:46

En fait , grâce à youtube-dl -F, j'obtiens les noms des deux flux, par exemple :

https://livefrancetv.akamaized.net/simulcast/France_3/hls/ZXhwPTE1NjgwODU0MjN+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPWIzMjdjODcwYmQyMDBlYTYzYTFkZWRiYjU1MzFhYWMzNGZjZDRkYmRmMjQ2ZWZiYzFlZDk3OTcxMjg0MDI0NjI=/France_3-video=2600000.m3u8

https://livefrancetv.akamaized.net/simulcast/France_3/hls/ZXhwPTE1NjgwODU0MjN+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPWIzMjdjODcwYmQyMDBlYTYzYTFkZWRiYjU1MzFhYWMzNGZjZDRkYmRmMjQ2ZWZiYzFlZDk3OTcxMjg0MDI0NjI=/France_3-audio_20002=98400.m3u8

Et ensuite, je calcule une seul argument pour ffmpeg, qui reprend le début du nom du flux audio, suivi de la fin du nom du flux vidéo:

ffmpeg -i https://livefrancetv.akamaized.net/simulcast/France_3/hls/ZXhwPTE1NjgwODU0MjN+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPWIzMjdjODcwYmQyMDBlYTYzYTFkZWRiYjU1MzFhYWMzNGZjZDRkYmRmMjQ2ZWZiYzFlZDk3OTcxMjg0MDI0NjI=/France_3-audio_20002=98400-video=2600000.m3u8 ... autres options

Je ne sais plus où j'ai trouvé cette façon de calculer l'url unique du flux, mais ça marche, je n'ai plus de décalage entre le son et l'image. Mais je n'ai que la version originale du son et pas les sous-titres éventuels. Même dans le film avec Michel Seraut et Jacques Villeret tout-à-l'heure il y avait des sous-titres, je l'ai vérifié en regardant le direct avec Firefox, mais je ne les récupérais pas dans mon enregistrement.

k3c · Le 10/09/2019, à 08:07

à une époque j'ai enregistré les flux live de la télé suisse avec un soft Windows, Zedtv, en utilisant livestreamer (streamlink est un fork) et ça a toujours flushé jusqu'au bout

https://forum.ubuntu-fr.org/viewtopic.php?id=1986918

Lulux3 · Le 10/09/2019, à 09:15

Bonjour

CM63 a écrit :

Mais je n'ai que la version originale du son

je viens de tester, et moi, j'ai bien le choix entre plusieurs flux audio comme ceci:

$ youtube-dl -F https://www.france.tv/france-3/direct.html
[FranceTVSite] direct: Downloading webpage
[FranceTV] 29bdf749-7082-4426-a4f3-595cc436aa0d: Downloading video JSON
[FranceTV] 29bdf749-7082-4426-a4f3-595cc436aa0d: Downloading signed hls manifest URL
[FranceTV] 29bdf749-7082-4426-a4f3-595cc436aa0d: Downloading m3u8 information
[info] Available formats for 29bdf749-7082-4426-a4f3-595cc436aa0d:
format code                          extension  resolution note
hls-audio-aacl-98-Audio_Description  mp4        audio only [qad] 
hls-audio-aacl-98-Francais           mp4        audio only [fra] 
hls-audio-aacl-98-Version_Originale  mp4        audio only [qaa] 
hls-235                              mp4        256x144     235k , avc1.42C01E, 25.0fps, video only
hls-534                              mp4        384x216     534k , avc1.42C01E, 25.0fps, video only
hls-1117                             mp4        640x360    1117k , avc1.42C01E, 25.0fps, video only
hls-1594                             mp4        960x540    1594k , avc1.4D401F, 25.0fps, video only
hls-2866                             mp4        1280x720   2866k , avc1.4D401F, 25.0fps, video only (best)

puis:

$ youtube-dl -f hls-audio-aacl-98-Version_Originale -g https://www.france.tv/france-3/direct.html
https://livefrancetv.akamaized.net/simulcast/France_3
/hls/ZXhwPTE1NjgxMjM3MDd+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPTc2OWQzMjkwMjM5ZGQ2NzAxM2YwZTgwM2Y4MTg2OWJiZGIyZWM4ZDhhMmY2ZGI4N2EwZWUzZjhmZmJiNmM4NjQ
=/France_3-audio_20002=98400.m3u8

ou:

$ youtube-dl -f hls-audio-aacl-98-Francais -g https://www.france.tv/france-3/direct.html
https://livefrancetv.akamaized.net/simulcast/France_3
/hls/ZXhwPTE1NjgxMjM4MTh+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPTkwZTg4NTgyZTY5YWM4NzA0Mzc3MDI4MDRhODNmOTk1YTYzODY0ZjZmMmFkNTk2YWEzYmFiYjRjYjdjM2YwZWE
=/France_3-audio_20000=98400.m3u8

Il semble que la seule différence soit dans la valeur à la fin du lien: 20000 pour le français, 20001 pour qad (Audiodescription), et 20002 pour qaa (VO).
Mais pour certaines émissions, le contenu de ces flux est le même, lorsque la VO est le français, et/ou que l'audiodescription n'est pas dispo.
Pour les sous-titres, en replay, c'est un ou des fichiers séparés, au format vtt, qui sont téléchargés par youtube-dl avec l'option '--all-subs', mais je ne sais pas comment ca se passe pour le direct.

CM63 · Le 10/09/2019, à 13:22

Merci beaucoup, je vais essayer cela
PS de 19:23 : euh, non, ça ne m'avance pas, parce qu'avec youtube-dl on ne peut pas contrôler la durée. Je vais voir si je peux utiliser ffmpeg avec ça.

Dernière modification par CM63 (Le 10/09/2019, à 18:24)

grandtoubab · Le 10/09/2019, à 15:48

pour Arte je préfère rester en format .ts et mettre ffmpeg en mode silencieux,
exemple une minute d'enregistrement

ffmpeg -loglevel quiet -i 'https://artelive-lh.akamaihd.net/i/artelive_fr@344805/index_1_av-b.m3u8?sd=10&amp;rebase=on' -t 00:01:00 arte.ts

pour France 3 j'arrive à avoir une enregistrement audio/vidéo synchronisés, pour 1 fichier d'une durée d'1 minute

ffmpeg -loglevel quiet -i https://livefrancetv.akamaized.net/simulcast/France_3/hls/ZXhwPTE1NjgxNTQ2MjV+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPTBjYzA2ZTA3NGQxZDczNzEyOTk2NjZkMDJlZmMxOTc2OGViMTYwM2Y5MmQyZmRjODI0ODQ0OTM1Mjg4NjFhMmQ=/France_3-audio_20002=98400.m3u8 -ss 0 -i https://livefrancetv.akamaized.net/simulcast/France_3/hls/ZXhwPTE1NjgxNTQ2MjV+YWNsPSUyZnNpbXVsY2FzdCUyZkZyYW5jZV8zJTJmaGxzKn5obWFjPTBjYzA2ZTA3NGQxZDczNzEyOTk2NjZkMDJlZmMxOTc2OGViMTYwM2Y5MmQyZmRjODI0ODQ0OTM1Mjg4NjFhMmQ=/France_3-video=2600000.m3u8 -t 00:01:00 france3.ts

le début semble mauvais mais quand la synchro se mets en route tout va bien

ffprobe france3.ts
Input #0, mpegts, from 'france3.ts':
  Duration: 00:01:00.01, start: 1.400000, bitrate: 1421 kb/s
  Program 1 
    Metadata:
      service_name    : Service01
      service_provider: FFmpeg
    Stream #0:0[0x100]: Video: mpeg2video (Main) ([2][0][0][0] / 0x0002), yuv420p(tv, progressive), 1280x720 [SAR 1:1 DAR 16:9], 25 fps, 25 tbr, 90k tbn, 50 tbc
    Stream #0:1[0x101]: Audio: mp2 ([3][0][0][0] / 0x0003), 44100 Hz, stereo, fltp, 384 kb/s

Dernière modification par grandtoubab (Le 10/09/2019, à 19:08)

CM63 · Le 10/09/2019, à 21:52

Bonsoir,

Voila comment je compte procéder, tout cela par programme, bien sur :
- pour obtenir l'url du son français, je lance :

youtube-dl -f hls-audio-aacl-98-Francais -g https://www.france.tv/france-3/direct.html

- si j'ai une erreur (pas de français), je prend comme flux audio la réponse de :

youtube-dl -f hls-audio-aacl-98-Version_Originale -g https://www.france.tv/france-3/direct.html

- comme flux video je prends la réponse de :

youtube-dl -f hls-2866 -g https://www.france.tv/france-3/direct.html

Et ensuite je lance ffmpeg avec ces flux. Mais il me faudrait le code hls des sous-titres éventuels.

grandtoubab · Le 11/09/2019, à 07:13

je ne crois pas que les sous-titres soient dans un fichier à part, mais qu'ils sont incrustés dans la vidéo quand il y en a

youtube-dl --list-subs https://www.france.tv/france-3/direct.html
[FranceTVSite] direct: Downloading webpage
[FranceTV] 29bdf749-7082-4426-a4f3-595cc436aa0d: Downloading video JSON
[FranceTV] 29bdf749-7082-4426-a4f3-595cc436aa0d: Downloading signed hls manifest URL
[FranceTV] 29bdf749-7082-4426-a4f3-595cc436aa0d: Downloading m3u8 information
29bdf749-7082-4426-a4f3-595cc436aa0d has no subtitles

Streamlink fait effectivement le boulot

streamlink https://www.france.tv/france-2/direct.html best -o streamlink.ts --hls-duration 00:02:00
[cli][info] Found matching plugin pluzz for URL https://www.france.tv/france-2/direct.html
[cli][info] Available streams: 144p (worst), 216p, 360p, 540p, 720p (best)
[cli][info] Opening stream: 720p (hls-multi)
[download][streamlink.ts] Written 34.9 MB (1m20s @ 307.3 KB/s)                  [stream.hls][info] Stopping stream early after 120
[download][streamlink.ts] Written 38.5 MB (1m26s @ 396.6 KB/s)                  [stream.hls][info] Stopping stream early after 120
[download][streamlink.ts] Written 38.5 MB (1m35s @ 259.1 KB/s)                  
[cli][info] Stream ended
[cli][info] Closing currently open stream...

Dernière modification par grandtoubab (Le 11/09/2019, à 09:18)

Lulux3 · Le 11/09/2019, à 09:33

Bonjour CM63
Je pense que ton approche est correcte. C'est exactement comme ça que je fais dans le cas du replay.
Si tu veux, tu peux t'inspirer de ce script
Je l'ai testé tel quel avec l'url du direct france 4, ca semble fonctionner, sauf que cela s'arrête au bout de 25 secondes chez moi. C'est peut-être dû à ma connexion un peu faiblarde.
Et il reste le problème des sous-titres...

Ubuntu-fr

Navigation

Liens de recherche

Annonce

#26 Le 04/09/2019, à 14:24

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#27 Le 04/09/2019, à 14:36

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#28 Le 04/09/2019, à 15:06

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#29 Le 04/09/2019, à 17:54

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#30 Le 04/09/2019, à 22:14

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#31 Le 05/09/2019, à 09:23

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#32 Le 05/09/2019, à 10:19

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#33 Le 09/09/2019, à 18:17

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#34 Le 09/09/2019, à 18:44

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#35 Le 09/09/2019, à 18:50

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#36 Le 09/09/2019, à 19:19

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#37 Le 09/09/2019, à 19:21

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#38 Le 09/09/2019, à 20:46

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#39 Le 09/09/2019, à 20:48

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#40 Le 09/09/2019, à 21:47

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#41 Le 09/09/2019, à 21:59

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#42 Le 09/09/2019, à 22:09

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#43 Le 09/09/2019, à 22:46

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#44 Le 10/09/2019, à 08:07

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#45 Le 10/09/2019, à 09:15

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#46 Le 10/09/2019, à 13:22

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#47 Le 10/09/2019, à 15:48

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#48 Le 10/09/2019, à 21:52

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#49 Le 11/09/2019, à 07:13

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

#50 Le 11/09/2019, à 09:33

Re : Enregistrer le direct de France {2,3,5} : films américains: VO?!?

Pied de page des forums