[script/bash] Télécharger de nombreuses quotidiennes de canal+

redisded · Le 17/06/2009, à 12:19

elteror a écrit :

bonjour !
la semaine derniere je pouvais pas telecharger et j'ai regarder les guignols de l'info dur le site de canal+ et celui de Borloo avec son arche de noé m'as beaucoup plu et je voudrais l'avoir sur mon ordi !!!!!
quelqu'un a t-il la video ???
merci !

bonjour,
peut tu nous donner la date de diffusion de l'emission stp ?

elteror · Le 17/06/2009, à 20:10

il me semble que c etait le 05/06/2009

merci !

C2-PO · Le 17/06/2009, à 23:39

Salut elteror,

Tu as de la chance, les urls sont encore dispo :

wget http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0906/LES_GUIGNOLS_QUOTIDIEN_090605_AUTO_3396_169_video_H.flv #47 Mo

wget http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0906/LES_GUIGNOLS_QUOTIDIEN_090605_AUTO_3396_169_video_HD.mp4 # 85 Mo

A+

Dert Ung · Le 18/06/2009, à 01:39

please

un lien vers la vidéo de l'intégral du zapping de la semaine dernière

Merci

neub · Le 18/06/2009, à 13:02

Salut,

Bon j'ai fait vite fait un p'tit script ce basant sur la page de http://omx.ch/om/cplus/
(Voir poste http://forum.ubuntu-fr.org/profile.php?id=25466)

Ce script applique juste un filtre pour choisir le nom de l'emmission que l'on veux dl, et garde un historique des videos deja telecharger (Comme ca on peut effacer ces videos qu'on a deja vu)

#!/bin/bash

function dl_cplus
{
  VIDEOS=$(  wget -q -O - http://omx.ch/om/cplus/  | grep "wget" | grep "$1" | sed -e "s/wget -nc //")
  for VIDEO in $VIDEOS; do
    echo -n $VIDEO"... "
    grep -q $VIDEO $HISTORIQUE
    if [ $? -eq 1 ]; then
      echo ""
      echo $VIDEO >> $HISTORIQUE
      wget -nc $VIDEO
      echo "telecharge."
    else
      echo "deja telecharge."
    fi
  done
  echo ""
  echo "----------------------------------------------"
  echo ""

}

#Implement an historique
HISTORIQUE=~/.cplus_hist
if [ ! -f $HISTORIQUE ]; then touch $HISTORIQUE; fi

#Go to guignols path
cd /home/neub/videos/canal+

#Run download function

# Zapping
dl_cplus "ZAPPING_EMISSION"

# Guignols
dl_cplus "LES_GUIGNOLS_QUOTIDIEN"

elteror · Le 18/06/2009, à 16:10

merci pour les videos !!!!!

comment faites vous pour trouver ces urls ???

j ai downloadhelper, sur le site de canal+ il trouve la video de la pub mais pas la video des guignols !!!!!

Dernière modification par elteror (Le 18/06/2009, à 16:32)

nono47 · Le 18/06/2009, à 19:19

Salut,

voir post #618 : 1ere méthode

00_00 · Le 14/07/2009, à 21:13

piercleo a écrit :

Rebonjour,
du nouveau sur la possibilité d'obtenir un flux récupérant toutes les vidéos du player canal ? Quelqu'un a-t-il une idée ?
Sinon au pire est il possible de ré expliquer comment créer son propre flux ? Je ne parviens pas du tout à faire une recherche sur le nom de l'émission (par exemple meilleur du hier, stéphane guillon ou cris esquerre).
Merci à tous,
piercleo

Désolé pour ma réponse tardive, tu peux t'inspirer des flux disponible ici http://pipes.yahoo.com/pipes/person.inf … E7SR5bgfo-

cavolo · Le 29/07/2009, à 22:17

salut, j'aimerais si possible utiliser ce fameux script, mais apres installation/configuration/toossa/...

quand je lance le téléchargement on me répond ceci (en console je le fait pour le moment pour c/c le resultat ^^):

roy@roy-desktop:~/Script$ ./canal -d

Téléchargement des émissions du 27/07/09 en cours... 
5 % : L'émission 'le zapping' n'a pu être téléchargée
10 % : L'émission 'les guignols de l'info' n'a pu être téléchargée
15 % : L'émission 'la météo de Louise Bourguoin' n'a pu être téléchargée
20 % : L'émission 'le petit journal people' n'a pu être téléchargée
25 % : L'émission 'le Service Après Vente des émissions' n'a pu être téléchargée
30 % : L'émission 'la boite à questions' n'a pu être téléchargée
35 % : L'émission 'la revue de presse de Chris Esquerre' n'a pu être téléchargée
40 % : L'émission 'la chronique de Sebastien Tohen' n'a pu être téléchargée
45 % : L'émission 'l'avis de Mouloud' n'a pu être téléchargée
50 % : L'émission 'le daily show' n'a pu être téléchargée
55 % : L'émission 'la chronique de Stephane Guillon' n'a pu être téléchargée
60 % : L'émission 'Les infos de blako' n'a pu être téléchargée
65 % : L'émission 'Le champion de l'actu' n'a pu être téléchargée
70 % : L'émission 'le Groland' n'a pu être téléchargée
75 % : L'émission 'les têtes à claques' n'a pu être téléchargée
--2009-07-29 21:38:30--  http://vod-flash.canalplus.fr/video_L.flv
Résolution de vod-flash.canalplus.fr... 81.52.140.73, 81.52.140.59
Connexion vers vod-flash.canalplus.fr|81.52.140.73|:80... connecté.
requête HTTP transmise, en attente de la réponse... 404 Not Found
2009-07-29 21:38:30 ERREUR 404: Not Found.

80 % : Fin du téléchargement de l'émission :

85 % : L'émission 'le meilleur du hier' n'a pu être téléchargée
Les vidéos du 27/07/09 ont été téléchargées
Les vidéos suivantes n'ont pas été diffusées ce jour là :
_le zapping
_les guignols de l'info
_la météo de Louise Bourguoin
_le petit journal people
_le Service Après Vente des émissions
_la boite à questions
_la revue de presse de Chris Esquerre
_la chronique de Sebastien Tohen
_l'avis de Mouloud
_le daily show
_la chronique de Stephane Guillon
_Les infos de blako
_Le champion de l'actu
_le Groland
_les têtes à claques
_le meilleur du hier

La playlist est disponible dans /home/roy/Vidéos/Canal+/playlists//09-07-27-playlist.m3u

j'ai tout cocher justement pour voir si ce n'était pas seulement les émissions que je voulais qui bugger ou non

j'ai donc du utiliser la technique post #618 (méthode une) mais bon, je ne peut automatiser cela avec cron, ni même le l'automatiser tout court

donc quelqu'un aurait-il une solution?

merci

ps: j'ai quand même pus regarder un épisode de groland, toujours aussi marrant

olaf.10 · Le 05/08/2009, à 10:57

Bonjour,

Quelqu'un pourrait-il essayer de charger l'adresse http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/ZAPPING_EMISSION_090804_CAN_97254_video_H.flv ?

Dans mon navigateur j'obtiens ça :

Access Denied
You don't have permission to access "http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/ZAPPING_EMISSION_090804_CAN_97254_video_H.flv" on this server.

et wget donne :

requête HTTP transmise, en attente de la réponse... 403 Forbidden
2009-08-05 11:28:53 ERREUR 403: Forbidden.

J'espère que le site ne m'a pas banni (ce serait n'importe quoi ).
Merci à ceux qui voudront essayer ça pour moi .

A+

angeline · Le 05/08/2009, à 13:40

Bonjour, j'ai le même !

You don't have permission to access "http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/ZAPPING_EMISSION_090804_CAN_97254_video_H.flv" on this server.

Reference #18.1fb302cc.1249475724.2040a9d

redisded · Le 06/08/2009, à 12:07

Olaf Grossebaf a écrit :

Bonjour,
Quelqu'un pourrait-il essayer de charger l'adresse http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/ZAPPING_EMISSION_090804_CAN_97254_video_H.flv ?
Dans mon navigateur j'obtiens ça :
Access Denied
You don't have permission to access "http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/ZAPPING_EMISSION_090804_CAN_97254_video_H.flv" on this server.
et wget donne :
requête HTTP transmise, en attente de la réponse... 403 Forbidden
2009-08-05 11:28:53 ERREUR 403: Forbidden.
J'espère que le site ne m'a pas banni (ce serait n'importe quoi ).
Merci à ceux qui voudront essayer ça pour moi .
A+

Bonjour,
memes erreurs chez moi.
pourtant la video est dispo sur le site.

outcast · Le 09/08/2009, à 08:15

Pareil.
J"ai essayé de changer le user agent
wget --user-agent="Mozilla/5.0 (Windows; U; Windows NT 5.1; fr; rv:1.9.0.1) Gecko/2008070208 Firefox/3.0.1" http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/ZAPPING_EMISSION_090804_CAN_97254_video_H.flv

ça marche pas

J'ai essayé de sauvegarder le cookie de la page source de la vidéo
wget --user-agent="Mozilla/5.0 (Windows; U; Windows NT 5.1; fr; rv:1.9.0.1) Gecko/2008070208 Firefox/3.0.1" --save-cookies=cookie.txt http://www.canalplus.fr/index.php?pid=1830

Le fichier cookie.txt est vide.

Il doit avoir une vérification du referrer ou un truc plus compliqué.

Dernière modification par outcast (Le 09/08/2009, à 08:30)

PPN · Le 16/08/2009, à 22:56

Toujours pas de solution à ce sujet?

Le truc bizzare c'est que pour groland par exemple ca marche toujours impeccable...

olaf.10 · Le 16/08/2009, à 23:26

PPN a écrit :

Toujours pas de solution à ce sujet?
Le truc bizzare c'est que pour groland par exemple ca marche toujours impeccable...

Oui en effet, groland est toujours ok. Je ne regarde jamais groland, donc j'ai pas pu m'en rendre compte.
En regardant bien dans http://omx.ch/om/cplus/ , on voit que groland est dans un dossier appelé PROGRESSIF,
les autres vidéos sont placées dans le répertoire STREAMING.

Ces deux répertoires semblent ne pas avoir les mêmes droits en lecture...

Chose promise, chose dûe, à angeline, redisded, outcast et PPN, je voudrais dire un grand Merci pour les essais.

Olaf

olaf.10 · Le 22/08/2009, à 21:42

Olaf Grossebaf a écrit :

Ces deux répertoires semblent ne pas avoir les mêmes droits en lecture...

Qu'est ce que je disais, trois vidéos de groland dans le répertoire STREAMING inaccessibles :

http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/GROLAND_EMISSION_090821_CAN_98419_video_H.flv
http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/GROLAND_EMISSION_090820_CAN_98329_video_H.flv
http://vod-flash.canalplus.fr/WWWPLUS/STREAMING/0908/GROLAND_EMISSION_090818_CAN_98195_video_H.flv

angeline · Le 23/08/2009, à 01:10

Bonsoir
Hélas je plussoie, ce qui se trouve dans le répertoire STREAMING n'est pas accessible,
ce qui se trouve en PROGRESSIF l'est (encore, mais pour combien de temps?)
D'autre part la taille de ce qui est dans STREAMING ne correspond pas du tout à une vidéo;
382 Bytes, c'est peu!

Dernière modification par angeline (Le 23/08/2009, à 01:15)

inconnu · Le 29/08/2009, à 00:49

J'ai un bug, j'ai choisi le mode configuration. Et à la fin des choix des options je fais valider, le programme m'indique avant qu'une barre de progression sera affiché pour indiquer le téléchargement en cours des émissions hors rien n'apparait, on dirait que le programme s'arrête.

pronoiaque · Le 13/09/2009, à 17:55

Un début de piste pour contourner les erreurs 403:

Via les flux rtmp cela semble être possible.
On les trouvent assez façilement ya l'url http://www.canalplus.fr/rest/bootstrap.php?/bigplayer/search/ +NOM

Pour les télécharger un coup de:

 flvstreamer -r url > nom.flv

Ex d'urls de recherche contenant les flux
http://www.canalplus.fr/rest/bootstrap. … ch/zapping
http://www.canalplus.fr/rest/bootstrap. … h/guignols
http://www.canalplus.fr/rest/bootstrap. … search/sav
http://www.canalplus.fr/rest/bootstrap. … ch/groland

Reste à scripter pour grepper l'url avec les dates, touca
thanks

olaf.10 · Le 17/09/2009, à 02:31

Salut,

pronoiaque a écrit :

Reste à scripter pour grepper l'url avec les dates, touca

C'est fait (pas mécontent d'avoir fini ) : http://olaf.10.free.fr/CANAL+/canal.sh.txt
Je peux encore alléger le code, mais ce sera pour la version 0.2 .

Infos utiles :
Les paquets de flvstreamer sont là : http://packages.debian.org/search?keywords=flvstreamer&searchon=names&suite=all&section=all
Le script greppe le site http://omx.ch/om/cplus/ et non pas les bootstraps fourni par pronoiaque, mais ce sera encore une fois, pour une future version du script.

Cordialement,
olaf

Dernière modification par olaf.10 (Le 18/09/2009, à 23:45)

olaf.10 · Le 17/09/2009, à 23:34

Bonsoir,

Version 0.2 : obsolète

Au menu :
- Ajout d'une boîte de dialogue (débrayable, voir le début du script) demandant une autorisation avant d'écraser une vidéo déjà téléchargée.
- Code 2x plus léger
- Retouches diverses que je vous laisse découvrir

Objectif de la version 0.3 : grepper les urls du bootstrap.php (hmm... y'a du boulot ).

A+

Dernière modification par olaf.10 (Le 29/09/2009, à 17:03)

Uglycharly · Le 19/09/2009, à 13:26

Super post, et joli boulot d'Olaf sur le travail de ses prédécesseurs ! Par contre flvstreamer est difficile à installer. Ou alors c'est complètement incompatible 64 bits, je n'arrive pas à exécuter le binaire ou à l'installer. Y a pas un .deb ou un rpm ?

Il suffit d'avoir un client RTMP ?

Ca serait dommage de faire une VM 32 bits juste pour un composant du script ! Tu n'aurais pas une alternative à flvstreamer ? Un moyen d'installer flv streamer sur 64 bits ou un tuto si je suis trop manchot pour installer flv streamer !
ou un sourcelist qui va bien !

olaf.10 · Le 19/09/2009, à 15:49

Uglycharly a écrit :

Super post, et joli boulot d'Olaf sur le travail de ses prédécesseurs

Heu ben, en fait je suis parti de zéro sans copier personne, mais merci en tout cas !

Y a pas un .deb ou un rpm ?

Si je les ai donnés 3 posts plus haut :
http://packages.debian.org/search?keywords=flvstreamer&searchon=names&suite=all&section=all
http://ftp.fr.debian.org/debian/pool/main/f/flvstreamer/flvstreamer_1.8e-2_i386.deb
http://ftp.fr.debian.org/debian/pool/main/f/flvstreamer/flvstreamer_1.8e-2_amd64.deb

olaf

Dernière modification par olaf.10 (Le 19/09/2009, à 15:58)

pronoiaque · Le 19/09/2009, à 20:24

Une tentative de script qui télécharge toute une liste d'emissions "greppées avec la date et touca"

#!/bin/bash

## Mots clef qui font servir de liste des emission à telecharger 
emission=(zapping guignols sav groland papillon terriens pepites)

function download_xml
{
xmllint --noent --format "http://www.canalplus.fr/rest/bootstrap.php?/bigplayer/search/${emission[$i]}" > /tmp/${emission[$i]}.xml
}


function download_flv
{
for url in a
 do
  OUT=`cat /tmp/${emission[$i]}.xml | grep HAUT_DEBIT | grep -i ${emission[$i]} | grep rtmp | sed -e 's:<[^>]*>::g'  `
  eval ${url}=`echo -ne \""${OUT}"\"`
done

for jours in b
 do
  OUT=`cat fichier.xml | grep DATE | sed -e 's:<[^>]*>::g' | sed -e 's:/:-:g' `
  eval ${jours}=`echo -ne \""${OUT}"\"`
done

#for notes in c
# do
#  OUT=`cat fichier.xml | grep MOYENNE | sed -e 's:<[^>]*>::g' `
#  eval ${notes}=`echo -ne \""${OUT}"\"`
#done

A_TAB=( `echo ${a}` ) 
B_TAB=( `echo ${b}` ) 
#C_TAB=( `echo ${c}` ) 

j=0
while [ $j -lt ${#A_TAB[*]} ]
  do

    if [ ! `ls | grep ${emission[$i]}\_${B_TAB[${j}]}` ]; then
       flvstreamer -r ${A_TAB[${j}]} > ${emission[$i]}\_${B_TAB[${j}]}.flv
    fi 

#    echo "Emission ${emission[$i]} URL vaut:${A_TAB[${j}]} DATE: ${B_TAB[${j}]} NOTE:${C_TAB[${j}]}"

    j=$(($j+1))   
  done
}


for i in ${!emission[*]}
 do 
   rm -f /tmp/${emission[$i]}.xml
   download_xml
   download_flv
 done 

exit 0

Dernière modification par pronoiaque (Le 19/09/2009, à 22:55)

grillon · Le 19/09/2009, à 20:36

olaf.10 a écrit :

Bonsoir,
Version 0.2 : http://olaf.10.free.fr/CANAL+/canal.sh.tar.gz
Au menu :
- Ajout d'un boîte de dialogue (débrayable, voir le début du script) demandant une autorisation avant d'écraser une vidéo déjà téléchargée.
- Code 2x plus léger
- Retouches diverses que je vous laisse découvrir
Objectif de la version 0.3 : grepper les urls du bootstrap.php (hmm... y'a du boulot ).
A+

Bonjour

Je viens de tester, j'ai bien zenity d'installé et flvstreamer 64 bits, je suis sous jaunty 64bits et j'ai un code d'erreur :

canal.sh: 445: Syntax error: "(" unexpected (expecting ";;")

intervient après le choix des emissions et le début du telechargement.

grillon

Ubuntu-fr

Navigation

Liens de recherche

Annonce

#651 Le 17/06/2009, à 12:19

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#652 Le 17/06/2009, à 20:10

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#653 Le 17/06/2009, à 23:39

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#654 Le 18/06/2009, à 01:39

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#655 Le 18/06/2009, à 13:02

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#656 Le 18/06/2009, à 16:10

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#657 Le 18/06/2009, à 19:19

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#658 Le 14/07/2009, à 21:13

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#659 Le 29/07/2009, à 22:17

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#660 Le 05/08/2009, à 10:57

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#661 Le 05/08/2009, à 13:40

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#662 Le 06/08/2009, à 12:07

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#663 Le 09/08/2009, à 08:15

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#664 Le 16/08/2009, à 22:56

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#665 Le 16/08/2009, à 23:26

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#666 Le 22/08/2009, à 21:42

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#667 Le 23/08/2009, à 01:10

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#668 Le 29/08/2009, à 00:49

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#669 Le 13/09/2009, à 17:55

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#670 Le 17/09/2009, à 02:31

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#671 Le 17/09/2009, à 23:34

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#672 Le 19/09/2009, à 13:26

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#673 Le 19/09/2009, à 15:49

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#674 Le 19/09/2009, à 20:24

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

#675 Le 19/09/2009, à 20:36

Re : [script/bash] Télécharger de nombreuses quotidiennes de canal+

Pied de page des forums