xmltv tv_grab_de_tvtoday funktioniert nicht mehr

[Homer]

Seit heute funktioniert das Erzeugen einer tgd-Datei nicht mehr:

Timezone is +0100
adding '--share=D:/PROGRAMME/XMLTV/XMLTV-0.5.45-WIN32/share/xmltv'
using config filename ./.xmltv/tv_grab_de_tvtoday.conf
getting list of channels: Can't call method "content_list" on an undefined value at /PerlApp/grab/de_tvtoday/tv_grab_de_tvtoday line 1274.
xmltv.exe rc = 1

Schon die Abfrage der Kanalliste schlägt fehl:

D:\Programme\XMLTV\xmltv-0.5.45-win32>xmltv tv_grab_de_tvtoday --list-channels --output chan.txt
Timezone is +0100
adding '--share=D:/PROGRAMME/XMLTV/XMLTV-0.5.45-WIN32/share/xmltv'
using config filename ./.xmltv/tv_grab_de_tvtoday.conf
getting list of channels: Can't call method "content_list" on an undefined value at /PerlApp/grab/de_tvtoday/tv_grab_de_tvtoday line 1274.

Ist das nur bei mir so?

Viele Grüße
Homer

[Galaxist]

Habs gerade mal versucht. Same result!

[ibbi]

Und was steht in /PerlApp/grab/de_tvtoday/tv_grab_de_tvtoday in Zeile 1274 (im Gegensatz zu Zeile 1273 beispielsweise)?

[Maliboy]

[quote=""ibbi""]Und was steht in /PerlApp/grab/de_tvtoday/tv_grab_de_tvtoday in Zeile 1274 (im Gegensatz zu Zeile 1273 beispielsweise)?[/quote]



Die XMLTV Skripte sind für WINDOWS kompeliert. Da läuft nur eine EXE ab...

Die Sourcen sind allerdings dabei. Ich schaue mir das ganze (wenn ich die Zeit finde) heute abend mal an.

Vermute mal, TVToday hat was an der Seite geändert, so das die Parser nicht mehr funktionieren...

[Homer]

Ich habe mir mal die Sourcen heruntergeladen. Tabulator auf 8 und Vielfache. Zeile 1274 von xmltv-0.5.45\grab\de_tvtoday\tv_grab_de_tvtoday.in ist rot markiert:

Code: Alles auswählen

#-- get channel listing
sub get_channels() {
    my %channels;
    my $url="http://programm.tvtoday.de/tv/programm/programm.php?ztag=0&sparte=alle&uhrzeit=Ax00&sender=alle";
    my $tb=new HTML::TreeBuilder();
    my $htmldata = get_page($url);
    die "successful grab of $url required, stopping here."
        unless(defined($htmldata));
    $tb->parse($htmldata) or die "cannot parse content of $url\n";
    $tb->eof;
    [color=red]foreach ($tb->look_down('_tag' => 'select', 'name' => 'sender')->content_list()) {[/color]
        next unless(ref($_) eq "HTML::Element");
        warn "unexpected HTML::Element $_->tag", next if($_->tag ne "option");
        my $station_name = $_->as_text();
        $station_name =~ s/(?:^\s|\s$)//g;
        next if ($station_name eq "_______");
        next if ($station_name eq "Regional");
        next if ($station_name eq "Haupt");
        next if ($station_name eq "alle");
        next if ($station_name eq "Haupt+Reg.");
        next if ($station_name eq "Sparten");
        next if ($station_name eq "Ausland");
        next if ($station_name eq "PREMIERE/");
        next if ($station_name eq "DIGITAL-TV");
        $channels{uri_escape($_->attr("value"))} = $station_name;
    }
 
    #--- check, whether we got an up to date version of the page ...
    #-- calculate expected date ...
    my $utc_now = Date_ConvTZ(ParseDate('now'), "", "UTC");
    my $now = ParseDate(UnixDate(@{date_to_local($utc_now, $TZ)}[0], "%q"));
    print STDERR "current date in CE(S)T is: $now\n" if($debug);
    my $expect = UnixDate($now, "%e.%f.%Y");
    $expect =~ s/ //g;
    $_ = $tb->look_down('_tag' => 'span', 'class' => 'text-weiss');
    die("cannot find date on requested page")
      unless ($_->as_text() =~ m/([1-3]?[0-9]\.1?[0-9]\.20[0-9]{2})/);
    warn("probably using information from outdated cache,\ncurrent date according to tvtoday.de is $1, expected $expect.\n")
      unless ($expect eq $1);
    $tb->delete;
    return %channels;
}

Der Fehler wurde auch schon gemeldet.

Viele Grüße
Homer

[Maliboy]

So, habe eben mal schnell geschaut...

Habe das Gefühl, das sie die Homepage umgestellt haben.
Das <select name="Sender" ...> Feld scheint jetzt <select name="channelId"... > zu heißen. Dieses Select fällt beinhaltet halt die Senderliste samt ID, woraus XMLTV anscheinend die Kanalliste zusammenstellt.

Also, Kleine Änderung, große Wirkung...

Lösung:
Active Perl Installieren und hoffen, das die Skripte so klappen. Dann kann man den Bugfix selber einbauen

[Homer]

Das Problem wurde ohne Fix geschlossen.

based on some posting on the xmltv-devel list, it's looking like the
grabber will be dropped, not fixed. Sorry. You should look for another
grabber... (prima was mentioned below)

Ich habe weder tv_grab_de_prisma noch tv_grab_ch_bluewin zum Laufen gebracht. Vielleicht hat jemand anders mehr Glück.

Viele Grüße
Homer

[topfkieker]

Hi!

Habe das dazu gefunden:

The tvtoday page is now _completely_ changed - with AJAX and such stuff. I
tried a few things yesterday evening, but it seems that a complete rewrite
might be less work than patching. ;((

For now I switched the tv_grab_ch_search - Most channels I've go are
listed there, too.

Scheint also eine langwierige Angelegenheit zu werden. Ich werde heute abend mal die angegebene Quelle testen.

Gruß topfkieker

[Galaxist]

Das Hab ich gerade bei Tapworld gefunden. Hört sich genial einfach an. Ob man das einfach für deutsche Sender adaptieren könnte?

[maber]

Hallo Zusammen,

ich muss das Thema nochmal "auspacken": ops:

Hat von Euch schon Mal jemand mit xmltv und dem Grabber tv_grab_de_prisma Erfolg gehabt? Denn der Grabber für TV-Today geht ja nicht mehr und in der aktuellen xmltv.exe ist TV-Today auch nicht mehr aufgeführt.

Achso, ich habe bisher das Ganze Thema unter Windows gemacht und mich noch nicht so richtig unter Linux getraut.

[mvordeme]

[quote="maber"]Denn der Grabber für TV-Today geht ja nicht mehr[/quote]Hast Du es mal [post=251983]so[/post] versucht?

Grüße,
-- mvordeme

[maber]

Hallo mvordeme,

ja, mit der "meiner alten" Version von xmltv funktioniert es ja komischer Weise auch noch, aber ich wollte mal die neue Version mit der Prisma probieren.

Aber Danke für den Hinweis. Ich werde mich dann mal in einer stillen Stunde an die Abarbeitung unter Linux machen. ops:

[maber]

Ich schon wieder. ;-)

Jetzt funktioniert nach meinen Urlaub das grabben schon wieder nicht.

Diesmal bekomme ich folgende Fehlermeldung:

Code: Alles auswählen

XMLTV-Daten werden von TV-Today herunterladen...

31.08.2009
17:49



Lade ausfuehrliche Daten fuer das TV-Programm der naechsten 7 Tage...

E:\backup\Topfield\epg_upload\xmltv>.\xmltv.exe tv_grab_de_tvtoday --output ..\t
gd\tvdata.xml --days 7
Timezone is +0200
adding '--share=E:/backup/Topfield/epg_upload/xmltv/share/xmltv'
using config filename ./.xmltv/tv_grab_de_tvtoday.conf
getting list of channels: Parsing of undecoded UTF-8 will give garbage when deco
ding entities at /PerlApp/grab/de_tvtoday/tv_grab_de_tvtoday line 1019.
##################################################
grabbing: Parsing of undecoded UTF-8 will give garbage when decoding entities at
 /PerlApp/grab/de_tvtoday/tv_grab_de_tvtoday line 467.
Parsing of undecoded UTF-8 will give garbage when decoding entities at /PerlApp/
grab/de_tvtoday/tv_grab_de_tvtoday line 467.

Zum Einsatz kommt bei mir die Version 2007.4.2.23

Hat sonst noch jemand das Problem....vielleicht....

[mvordeme]

Da hat sich möglicherweise etwas am Encoding der HTML-Seiten geändert. Da stecke ich aber nicht drin.

[Bernhard75045]

[quote="maber"]...Jetzt funktioniert nach meinen Urlaub das grabben schon wieder nicht....[/quote]

Gibbs hier eigentlich neue Erkenntnisse?

[maber]

Hallo Bernhard,

von meiner Seite aus nicht. Im Gegenteil, denn ich habe mir nochmal die Sender, bei denen ich kein EPG über SAT bekommen nochmal im Detail angeschaut, und festgestellt, daß sie für mich nicht mehr wichtig waren und habe sie einfach gelöscht. Nun habe ich nur noch Eurosport als einzigen Sender bei dem ich kein EPG habe.

Da ich aber auch schon mein NSLU2, mit dem ich die Daten übertragen habe, mittlerweile anders verplant habe, ist das Thema für mich "erledigt".

Sollte sich aber noch eine Lösung finden, dann bin ich trotzdem noch interessiert....und sei es nur wg. Eurosport.

[Bernhard75045]

Bei mir ist's ähnlich, ich hab schon lange keine TGDs mehr kreiert, da ich mittlerweile bei so gut wie allen mir wichtigen Sendern EPG habe. Und als Sportmuffel ist Eurosport für mich nicht sooo wichtig....

[Maliboy]

Wie Ihr habt bei Eurosport keinen EPG

Text anzeigen Endlich kann ich als Kabel Kunde euch mal ein ganz kleinen wenig die Nase lang ziehen, weil ohne EPG hätte ich die Berichterstattung über die Dakar Series bestimmt verpasst.