Script per Rai Replay: rilasciata la versione 6.0

Ieri ho sviluppato un importante aggiornamento allo script per guardare e scaricare i video da Rai.tv e Rai Replay, grazie anche alla segnalazione e al supporto di Domenico, un lettore che mi domandava come scaricare la prima parte del film su Olivetti.

Infatti la Rai ha pubblicato entrambe le parti, andate in onda il 28 e 29 ottobre, sul servizio Rai Replay, tuttavia la prima parte è stata resa disponibile solo tramite Silverlight (noi pinguini non possiamo nemmeno guardarla) e nella versione per cellulari e tablet. Nessun file MP4 per le Smart TV.

Come avrete già letto qui sul blog, il mio script usava proprio la versione Smart TV per servirvi un file MP4 ad alta qualità. Questo comportava anche il fatto che i video non disponibili per la televisione intelligente risultassero non cliccabili, oltre che non scaricabili.

Da oggi, con la versione 6.0 potete vedere e scaricare anche la versione per tablet. :D Questo è necessario solo quando non è disponibile un file MP4, infatti lo script seleziona automaticamente il video migliore e vi fornisce il link per scaricarlo, oppure la linea di comando necessaria.

Infatti se siete costretti a servirvi della versione per tablet, potete usare Gnome Mplayer oppure VLC media player per visualizzare lo stream in formato M3U8 e il software FFmpeg per effettuare il download. Il mio script si occupa di estrarre automaticamente la qualità più alta per voi e genera da solo la linea di comando adeguata.

Output della nuova versione dello script, che consente di scaricare anche i video disponibili solo per dispositivi mobili

Output della nuova versione dello script, che consente di scaricare anche i video disponibili solo per dispositivi mobili

Se avete già lo script l’aggiornamento dovrebbe essere automatico. Se volete aggiornare manualmente oppure se volete installarlo da zero, trovate tutti i dettagli nel mio post apposito, assieme alle istruzioni dettagliate per usare la nuova funzionalità. ;)

Avviso importante: nuovo server per il download da Video Mediaset

Come avrete notato non ho scritto molto quest’estate, inoltre ho tenuto in sospeso un paio di articoli addirittura dal tardo 2012. Questo è successo per una signora molto dispotica chiamata “tesi di laurea”, la quale tuttavia oggi è stata gentilmente salutata e non disturberà più. :D Nel frattempo ho provveduto anche ad aggiornare questo strumento (lo script) messo a disposizione sul blog, e se lo utilizzate è importante che leggiate di seguito.

I miei script per salvare i video dai siti di Rai, Mediaset e La7 hanno riscosso un successo notevole e vengono utilizzati quotidianamente da molte persone. Questo mi fa molto piacere, tuttavia recentemente ci sono stati alcuni problemi con lo script per video.mediaset.it.

I più tecnici tra di voi avranno infatti già notato che il mio script per Greasemonkey e Tampermonkey, installato dagli utenti, si interfaccia con un server intermedio per ottenere i link ai video. La situazione è illustrata meglio in figura e di seguito è spiegato passo-passo.

Schema di funzionamento dello script per il download da Video Mediaset

Schema di funzionamento dello script per il download da Video Mediaset

Procedimento:

  • l’utente scarica Greasemonkey o Tampermonkey e poi installa il mio script
  • lo script chiede al server pubblico (in verde) gli indirizzi dei file corrispondenti al video visualizzato dall’utente
  • il server pubblico interroga il server segreto (in rosso) richiedendogli di scovare i link
  • quest’ultimo trova i link sul sito di Mediaset e li rimanda indietro
  • il mio script mostra in un riquadro i video e l’utente li visualizza

Il server pubblico era (ed è) una pagina ospitata su uno dei tanti servizi di free hosting statunitensi. Si tratta del sito il cui indirizzo è incluso nel codice sorgente del mio script. Tale pagina ha lo scopo di interfacciarsi e mascherare il vero server (quello “segreto”) che si occupa di trovare i link per voi. Quest’ultimo è ubicato in Italia e si maschera sia da PC che da telefono cellulare. Non è opportuno che io fornisca ulteriori dettagli in merito. ;)

Gli scopi sono due:

  1. estrarre anche i link in formato MP4 per cellulari, cosa non possibile su Chrome senza interventi manuali e tediosi da parte dell’utente
  2. permettere anche a chi risiede all’estero di vedere le trasmissioni

Veniamo al problema: il tremendo successo dello script, unito ad alcuni problemi ricorrenti al precedente servizio di hosting, hanno fatto sì che per alcuni giorni i link non comparissero, in quanto il sito veniva disattivato perché sovraccarico. Questo inoltre è successo più di una volta ed è risultato per me nel ricevere numerosi commenti, tweet e messaggi via email chiedendo lumi, oppure suggerendo che lo script dovesse essere aggiornato.

Non sarebbe stato un problema anche se ero in tesi, ad eccezione del fatto che voi utenti avreste dovuto attendere qualche giorno. Tuttavia il fatto che non dipendesse da me rendeva impossibile risolvere la situazione rapidamente, a meno di non cambiare completamente le cose.

È quello che ho fatto.

Ho attuato lo spostamento del server pubblico (di fatto un “collo di bottiglia”) su un altro hosting, che uso già per il mio blog secondario. Ho usato, con un po’ di simpatia, l’indirizzo http://video.lazza.dk (non si vede granché perché non è un sito con contenuti, ha il solo lo scopo di servire il mio script). :D

Oltre a questo, mi sono premurato di proteggere il sito dal “troppo successo”: ora il dominio viene gestito tramite CloudFlare, un servizio che fa da CDN e DNS. Senza entrare nei dettagli, diciamo che tiene a disposizione delle copie degli indirizzi dei video più cliccati, così spesso il server pubblico non viene neppure “toccato” e l’utente riceve subito una risposta. Inoltre protegge da attacchi informatici di vario genere.

Questo riduce il carico e aumenta drasticamente l’affidabilità del servizio. Per questo è importantissimo che controlliate di avere lo script aggiornato. Da stasera, coloro i quali saranno rimasti alla versione vecchia per qualche motivo, vedranno un video “di avvertimento” che li invita ad aggiornare.

Per aggiornare lo script recarsi nell’apposito articolo e seguire le istruzioni per installarlo. La versione aggiornata sostituirà quella precedente.

Ricordo che se utilizzate già una versione non troppo vecchia dello script l’aggiornamento dovrebbe essere automatico e sarà già avvenuto mentre state navigando. ;) Mi spiace per aver richiesto la vostra attenzione per il tempo necessario a leggere questo post, tuttavia lo script viene acceduto in media da 250 visitatori unici ogni giorno, con picchi di 1000 richieste di video quotidiane, perciò è necessario prendere le misure necessarie affinché tutto funzioni bene. :)

Buona visione!

Importanti aggiornamenti per la visione e il download dei video da Rai.tv

Mi sono già lamentato numerose volte di quanto il sito Rai.tv sia un disastro di incoerenze multiple, in cui più o meno ogni video viene inserito con metodi leggermente diversi e trovare i link per scaricarli è un procedimento abbastanza arzigogolato. Due esempi di “inutile complicazione” che il mio script non riusciva a gestire sono i seguenti, dovuti al fatto che il sito Rai “dichiara” il tipo di video nella pagina, in modo totalmente a caso, a volte.

  • I video di «Chi l’ha visto», tipo questo – nel codice manca il riferimento al video in formato MP4, ma viene indicato doppiamente lo stesso URL al video, inclusa la variabile videourl_wmv, ed estensioneVideo e MediaItem.type sono impostate ad indicare il formato WMV… peccato che il video sia un file MP4
  • Questa puntata de «I migliori Anni» — è letteramente la fiera dell’incoerenza: MediaItem.type fa riferimento al formato WMV, estensioneVideo indica CSM ma il file è di tipo MP4

Ora, a parte il fatto che anche un ragazzino di 13 anni saprebbe sviluppare il sito in modo più coerente e sensato, capite bene che questa tragedia di informazioni contraddittorie creava serie difficoltà al mio script che cercava di capire che tipo di video c’era sotto e come gestirlo.

Oggi ho rianalizzato la questione e ho inserito ulteriori controlli per aggirare questi problemi. In particolare, se il sito fornisce un esplicito URL al file MP4 posso andare tranquillo, altrimenti in caso di “sospetto WMV” lo script prima controlla che questo sia coerente con il Content-type, dopodiché se è affermativo si occupa di verificare se è un vero file o uno stream MMS. Il controllo di coerenza dovrebbe impedire di cadere nella trappola delle false informazioni, e da quanto ho potuto testare è del tutto robusto.

Già che c’ero, ho aggiornato lo script per gestire altri casi di video (ormai alla Rai non sanno più cosa inventarsi), come ad esempio questa puntata del «Maurizio Costanzo Talk». Ho trovato questo video guardando gli esempi dal piccolo web-service di Paolo Pancaldi, che fa più o meno le stesse cose del mio script (tranne Rai Replay e la riproduzione con player nativo) ma in “stile lato server”, perciò un grazie a Paolo per avermelo fatto scoprire.

Se avete già lo script e volete aggiornare manualmente oppure se volete installarlo da zero, trovate tutti i dettagli nel mio post apposito.

Scaricare i video del portale RSI.ch

Dopo il successone degli script per guardare e scaricare i video sui siti di Rai.tv, Video Mediaset e La7.tv, spesso ricevo richieste su come salvare video da vari altri siti web. Ieri un lettore mi ha domandato se fosse possibile avere uno script per i video on demand di RSI, la rete della Svizzera Italiana.

Ho anche altre richieste in sospeso (per siti estremamente ostici peraltro) ma in questo caso è stato abbastanza semplice, ho dovuto solo modificare un po’ lo scheletro dello script per La7 e prendere qualcosina da quello Rai, per cui alla fine ci ho messo poco dato che il sito ha una struttura molto semplice e regolare (messaggio per la Rai e il loro sito impossibile: prendete esempio!).

Il sito usa Flash e contiene degli stream RTMP, perciò il mio script fornisce la riga di comando per scaricarlo, in modo analogo a quanto faccio con Rai.it. In più, dalla versione 1.1 include anche l’uso di FFmpeg per sistemare le informazioni sulla durata corretta del video! Come potete vedere nella figura, è tutto racchiuso nel riquadro grigio.

Esempio dello script in azione

Esempio dello script in azione

Come sempre, è uno user script per Greasemonkey che dovrete installare se usate Firefox, altrimenti installate l’estensione Tampermonkey su Chrome/Chromium o Violent monkey su Opera. Dovrebbe supportare tutti i video presenti nelle varie sezioni del sito.

Per scaricare lo stream RTMP seguite le istruzioni analoghe per il sito Rai, nella parte che parla del download con RTMPdump. Per quanto riguarda la seconda parte del codice, prestate attenzione. Ho inserito il comando per usare FFmpeg su Linux (o anche su Windows e Mac se dal sito ufficiale vi siete procurati le build per il vostro sistema operativo). Se l’avete installato su Linux, copiate tutta la linea di comando in un colpo solo ed è fatta.

Perché questo è necessario? Presto detto: i video di RSI sono spesso caricati per intero da trasmissioni che durano ore, anche quando poi voi vedete solo una manciata di minuti di “spezzone” che parla dell’argomento che vi interessa. Il mio script riconosce l’inizio e la fine delle parti volute e RTMPdump scarica solo il giusto spezzone, tuttavia la durata viene indicata erratamente ad esempio quando riproducete il video. Per questo motivo includo il comando per una correzione rapida con FFmpeg.

Se non gradite FFmpeg e preferite invece usare un altro video convertitore per fare la stessa correzione, ed eventualmente cambiare il formato del file, ce ne sono a bizzeffe di liberi o gratuiti in rete.

Per la pagina di download dello script cliccate qui sotto.

Download — RSI direct link

Ancora una volta, buona visione!

Nuova versione dello script per guardare e scaricare da Rai.tv e Rai Replay

Come sapete, da un po’ di tempo sviluppo un comodo script che consente di guardare e scaricare i video on demand dal portale Rai.tv, che include anche Rai Replay. Lo script ha sempre funzionato bene o male con tutti i video, tuttavia in qualche sporadico caso — per via della “variabilità” del layout delle varie pagine Rai — poteva fallire. Oggi ho provveduto ad aggiornare ed estendere il codice dello script per fare alcune migliorie, alcune delle quali importanti. Ecco la lista dei cambiamenti:

  • Migliore supporto ai video in formato MP4 — Prendete ad esempio questo servizio di RaiNews24, che prima non era correttamente riconosciuto.
  • Miglior posizionamento del riquadro verde — Ora il link dovrebbe essere sempre sotto al video anche su pagine dalla struttura “arzigogolata”, come questo video del TG1, fornendo un aspetto più consistente.
  • Supporto a Rai.it — Nel caso in cui i video su Rai.it siano inseriti in modo “tecnologicamente uguale” a Rai.tv (come per esempio le rubriche del TG2) ora il mio script li riconosce e individua il link (cercando per quanto possibile di rimandare l’utente a Rai.tv dove sicuramente funziona).
  • Supporto ai video in Flash sui domini Rai — Avete presente quelle numerose puntate sui sottodomini che finiscono per rai.it, per esempio questo? Ebbene, ora il mio script è in grado di aiutarvi anche per quelli. Non esiste un link diretto ai file, ma sotto al video troverete la linea di comando da dare in pasto a RTMPdump, un programma per salvare flussi con protocollo RTMP. Il file risultante alla fine del processo sarà in MP4.

Per le informazioni su come installare lo script — nonché come usarlo per salvare i video — vi rimando al mio precedente articolo. Per favore pazientate ancora un po’ e datemi tempo per aggiornarlo affinché contenga anche le istruzioni riguardo RTMPdump, che è la principale novità di questa versione 4.0 dello script. ;-) Come sempre, buona visione!

Scaricare i video del portale La7.it

Nel giro di poco tempo i miei script per guardare e scaricare i video sui siti di Rai.tv e Video Mediaset hanno riscosso un grande successo, permettendo anche agli utenti Linux di poter fruire di tali contenuti video. Tuttavia ho ricevuto numerose richieste, sempre più insistenti, su come poter scaricare i video dal sito di La7, vale a dire La7.tv, che poi è diventato La7.it.

Inizialmente non ci ho dato molta priorità, per una serie di motivi: il primo è che quel sito usa Flash Player, quindi i video si possono guardare anche con Linux. Il secondo è che non guardo mai La7 e quindi non avevo molto interesse, e il terzo è la mancanza di tempo. Quando mi sono spostato a Copenhagen, paradossalmente, mi sono messo a riguardare il “problema” per distrarmi un po’ e vedere se ottenevo qualcosa.

È venuto fuori che la faccenda è molto più semplice rispetto ai siti di Rai e Mediaset, perché il sito usa Flash ed è disponibile un semplice video MP4. Non ci sono quindi versioni multiple dei file (ad eccezione di varie risoluzioni), bensì un semplice collegamento ad un video. Come potete vedere nella figura, ho trovato un modo molto semplice ed elegante di visualizzare a video il link diretto del file, così lo potete salvare.

Link al file direttamente sotto al video

Link al file direttamente sotto al video

Come già visto per Rai e Mediaset, anche in questo caso si tratta di uno user script per Greasemonkey, e quindi funziona per certo su Firefox ma anche su Chrome/Chromium se installate l’estensione Tampermonkey o su Opera utilizzando Violent monkey. Dovrebbe funzionare anche su Safari usando NinjaKit.

Il file è sempre un MP4, è la risoluzione non è troppo bassa, dovrebbe essere 720×576. Cliccando col destro sul link potete salvare il video o copiarlo per poi usare un download manager, come preferite. Il pulsante qui sotto vi porta alla pagina di download dello script.

Download — La7.tv direct link

E con questo dovrei aver fatto contenti tutti. ;) Buona visione!

Link

Nuova versione dello script per guardare e scaricare i video dal portale Video Mediaset

Nuova versione dello script per guardare e scaricare i video dal portale Video Mediaset

Oggi ho avuto modo di rivedere meglio il mio script per il sito Video Mediaset. La versione precedente vi forniva alcuni dei link diretti per salvare i video. Questa nuova versione invece aggiunge nuovi formati (compreso l’MP4 in qualità medio-alta e semplice da scaricare) nonché introduce un player integrato direttamente nel browser. Se avete già installato lo script vi si dovrebbe aggiornare da solo, in ogni caso dateci un’occhiata.