[all] Is op een dreambox ook een 7-dagen EPG mogelijk?

[Gast]

Hoezo heb je alleen maar now/next info?

 

Als ik zo snel ff kijk heb ik toch een dag of 2 info in de EPG staan van de Canal Digitaal zenders.

 

Wellicht omdat ik MHW-NL als input heb aanstaan in mijn MV config, en PLi de info die daarop binnenkomt ook in de standaard EPG laat zien? Of misschien zit dat wel standaard ingebouwd. Een van de PLi bouwers die weet hoe dit zit?

 

CU,

WanWizard

[oudeis]

Dat zit standaard in Pli images. Ik heb in MV alleen nog maar EnigmaCache als input gedefinieerd. MHW epg (van NL, Italie, + nog wat andere) info komt dus via de lucht direct in de cache, zonder tussenkomst van externe programma's.

[martinbe]

Zijn er al wat ontwikkelingen bekend op dit gebied?

Sta te trappelen <img src="/forums/images/graemlins/smile.gif" alt="" />

Wordt gek van die shit die CDS ons verstrekt.

 

MJB

[Gast]

Ontwikkelingen zijn er zat. Probleem blijft dat de programma's van de nederlandse zenders maar voor maximaal drie dagen wordt gepubliceerd.

 

Of weet jij een plek waar ze tot 7 dagen staan? Dan wil ik dat wel graag weten, dan bak ik daar een grabber voor...

 

CU,

WanWizard

[Gast]

Laat maar... <img src="/forums/images/graemlins/smile.gif" alt="" />

 

Ik heb een website gevonden waar een 7-dagen EPG wordt aangeboden. Dat wordt weer tot laat doorwerken de komende dagen... <img src="/forums/images/graemlins/smile.gif" alt="" />

 

CU,

WanWizard

[martinbe]

You make me feel like dancing <img src="/forums/images/graemlins/smile.gif" alt="" />

 

Geweldig nieuws!

 

And now we wait

 

Martinbe

[Gast]

Ho, halt, rem... <img src="/forums/images/graemlins/smile.gif" alt="" />

 

We doen ons best (de html parser staat op dit moment de eerste pagina reeds te kraken <img src="/forums/images/graemlins/smile.gif" alt="" />), maar het gaat allemaal niet voor morgen zijn.

 

Dit zal onderdeel uit gaan maken van het 'groter geheel', een online EPG waar ik mee bezig ben, en die met behulp van de fantastische plugin van Oudeis zal integeren met de dreambox.

 

Primair zal dat zijn met de sqlite db van PLi Flubber, maar we willen ook het originele EPG.DAT formaat ondersteunen voor gebruikers van andere images. Door de memory beperking zal het nut daar echter beperkt zijn.

 

Idee gaat zijn dat je op een website een account aanmaakt, en dan uit een lijst van satellieten, packages en zenders een selectie maakt.

 

Die website draait een database waarin alle EPG data vanuit de meest bizarre bronnen wordt verzameld (en daar ga ik deze grabber dus inhangen).

 

In de plugin van Oudeis op de dreambox kun je dan ingeven wat je userid/password is, op welk tijdstip je dagelijks je EPG wilt ophalen, en voor hoeveel dagen je een EPG wilt.

 

Eenmaal ingesteld: set-and-forget! <img src="/forums/images/graemlins/smile.gif" alt="" />

 

Dit bevindt zich echter nog wel in een embryonaal stadium, en er zijn nog veel issues op te lossen.

 

Een paar uitdagingen:

• elke dag een 3-dagen EPG van 80 kanalen levert 150Mb per maand op. Als dit echt een populaire feature wordt gaat dat een dure grap worden en moet er naar professionele hosting (en dus sponsors) gekeken worden.
• er moet dus een gedistribueerd mechanisme in zitten, zodat de box contact opneemt met de minst belaste server
• en een mechanisme zodat de box die server ook kan localiseren
• Het genereren van een tar.gz van bovenstaande lijst (10Mb per keer) duurt nu ongeveer 2 minuten (op een Pentium4). Als er veel verzoeken tegelijk komen (iedereen update om 4:30) dan loopt dat op, en loopt het proces op de box in een timeout. Eigenlijk wil ik die lijsten dus op voorhand genereren, zodat je die alleen maar hoeft af te halen
• Voor mensen met een eigen server moet het mogelijk zijn om intern een eigen 'slave' van dit systeem op te zetten, die dan van de centrale server zijn config haalt, en de eigen interne boxen bedient
• mogelijks ook een mechanisme waarbij zo'n slave een instelbaar/beperkt aantal andere users kan bedienen (je ADSL lijn doet 's nachts toch niks <img src="/forums/images/graemlins/smile.gif" alt="" />)
• ...

Kortom, nog genoeg werk aan de winkel. <img src="/forums/images/graemlins/smile.gif" alt="" />

 

CU,

WanWizard

[martinbe]

Hoi WanWizard,

 

Is er al iet meer te vertellen?

 

Hoor graag van je wat er nu zoal gerealiseerd is.

 

Gr.

 

Martinbe

[Gast]

Heb je haast? <img src="/forums/images/graemlins/smile.gif" alt="" />

 

Ik ben bang dat je hier nog wel een maand of twee (minstens) op zult moeten wachten. En dat zullen we eerst nog een beta traject doormoeten.

 

Het zit nu nog in design stadium, en dat moet eerst in orde zijn voordat we gaan ontwikkelen. Het project is iets te ambitieus om zonder design te beginnen met programmeren. We praten over een over internet gedistribueerd systeem (ala Kazaa), dus zaken als inter-proces communicatie moet goed uitgedacht zijn...

 

CU,

WanWizard

[martinbe]

Hihi,

 

Ach ben altijd wat ongeduldig van aard geweest <img src="/forums/images/graemlins/smile.gif" alt="" />

 

Nee hoor, vind het gewoon leuk zo nu en dan iets van de ontwikkelingen te horen.

 

Keep up the good work en try to keep us informed.

 

Thx

 

Martinbe

[Zat]

Wan,

 

Super initiatief!

 

Ik vind al heel lang dat een goede EPG een van de belangrijkste onderdelen van een sat ontvanger (of PVR) zijn. Een paar jaar geleden heb ik hier ook al wat wensen en suggesties over uitgesproken die zeer goed zijn ingevuld door Pent (en Peter L).

 

Het concept wat jij nu vervolgt is ook mijn ideaal. Eenmalig een selectie maken op een website, en van daar dagelijks updaten. Je concern mbt bandbreedte deel ik wel. Als je de boel openstelt voor iedereen zou je weleens tienduizenden downloads per dag kunnen gaan genereren. Niet alleen van dreambox bezitters, maar ook van PC en linux PVRs, en mogelijk van andere receivers, en dat dan internationaal. Een oplossing is misschien in eerste instantie niet iedereen toelaat, bv alleen (oude) sat4all leden...

 

Eerder in dit bericht staan al een paar sources voor de data voor Nederlandse zenders, naast wolf, nog twee andere.

 

 

Een andere source die ik kan bedenken is de input voor MCE. Deze heeft in alle landen epg info voor de meeste zenders, voor minimaal 7 dagen. Het file formaat moet nog wel "even" geconverteerd worden natuurlijk.

 

Ik wacht in spanning de ontwikkelingen af.

 

 

Zat

[Gast]

Citaat:

Je concern mbt bandbreedte deel ik wel. Als je de boel openstelt voor iedereen zou je weleens tienduizenden downloads per dag kunnen gaan genereren. Niet alleen van dreambox bezitters, maar ook van PC en linux PVRs, en mogelijk van andere receivers, en dat dan internationaal. Een oplossing is misschien in eerste instantie niet iedereen toelaat, bv alleen (oude) sat4all leden...

Ook daar wordt al aangewerkt.

Deel van het concept is dat iedereen met bandbreedte de middleware software kan downloaden en installeren, en vanuit die database naast zichzelf ook nog een aantal anderen kan bedienen. En als dat er maar genoeg doen komt het vanzelf goed. Zeker in NL moet dat geen probleem zijn. Iedereen een dikke ADSL pijp, en geen last van quota, zoals hier in B. <img src="/forums/images/graemlins/frown.gif" alt="" />

Humor van dit systeem is ook dat de centrale site (die de users zien) zelf geen EPG data verzameld of opslaat. Dat doet de middleware, en het enige wat wij doen is die beschikbaar stellen. Dat kan discussies rond EPG rechten voorkomen (radiotimes stelt bijvoorbeeld dat hun data strikt voor prive gebruik is).

Daarnaast ben ik al bezig met sponsorenwerving, en heb ik al een Engelse provider bereid gevonden om tegen een schappelijk bedrag een server te plaatsen zonder verbruiksrestricties (in de praktijk dat komt ongeveer overeen met 1Tb/mnd). Daar kun je wel even mee vooruit. <img src="/forums/images/graemlins/smile.gif" alt="" /> Ook zou je de 'members' van het systeem een vrijwillige bijdrage kunnen vragen (donate via PayPal of zo), en worst case zelfs een systeem met betalende gebruikers, die dan alle kanalen kunnen selecteren, en niet-betalende gebruikers, met een maximum van bijvoorbeeld 25.

Citaat:

Eerder in dit bericht staan al een paar sources voor de data voor Nederlandse zenders, naast wolf, nog twee andere.

Carlo staat nog op mijn lijstje om eens te contacteren. Ik ga liever de data aan de bron halen, zodat ik niet afhankelijk ben van een enkel persoon die zelf een scriptje draait, maar gegarandeerd elke dag data kan aanleveren.

Citaat:

Een andere source die ik kan bedenken is de input voor MCE. Deze heeft in alle landen epg info voor de meeste zenders, voor minimaal 7 dagen. Het file formaat moet nog wel "even" geconverteerd worden natuurlijk.

Waar haalt MCE dan zijn data vandaan? Die komt toch ook gewoon door de lucht of over de kabel, net als bij een Dreambox? Of heeft MS een contract met verschillende EPG providers (en dan heb je mogelijs een copyright issue).

CU,
WanWizard

[Zat]

Citaat:

Waar haalt MCE dan zijn data vandaan? Die komt toch ook gewoon door de lucht of over de kabel, net als bij een Dreambox? Of heeft MS een contract met verschillende EPG providers (en dan heb je mogelijs een copyright issue).

Microsoft download het van zijn eigen servers. Ik heb even gekeken, er zijn wel tooltjes die deze files kunnen lezen en decripten (de files zijn DES encrypted). Maar de copyright regels verbieden verspreiding, dus ik denk niet dat je deze gegevens legaal kunt gebruiken: "The EPG is offered solely for your personal and non-commercial use. Any commercial use of the EPG, or the resale or redistribution of any of its services or content, is expressly prohibited."

Wel jammer, want de kwaliteit van de data is zeer goed, beter dan van MHW of xml-tv. Er is bv een correcte categorien indeling en referenties naar waneer het programma eerder is uitgezonden.

Anyway, je hebt zowiezo genoeg op je bord. Succes.

Zat

[Gast]

URLs? Van de EPG site en van die voorwaarden?

 

De data gaat uitsluitend persoonlijk gebruikt worden. Niks commercieels, geen wederverkoop, en geen distributie. Dus wellicht komen we er toch mee weg.

 

CU,

WanWizard

 

Ik kan natuurlijk niet voor zorgen dat personen die de grabber scripts draaien de data zelf verder verspreiden. Ik kan er wel een do-not-distribute vlag in plakken, maar het is natuurlijk aan de gebruikers om dat aan te zetten... <img src="/forums/images/graemlins/smile.gif" alt="" /> <img src="/forums/images/graemlins/smile.gif" alt="" />

[dukdalf46]

Citaat:

Heb je haast? <img src="/forums/images/graemlins/smile.gif" alt="" />

Ik ben bang dat je hier nog wel een maand of twee (minstens) op zult moeten wachten. En dat zullen we eerst nog een beta traject doormoeten.

En ben je al wat verder WanWizard?