Spricht eigentlich etwas dagegen die Webseiten der Oeffentlich-rechtlichen fuer eine Analyse zu scrapen?
Frage fuer einen Freund. Der natuerlich ordentlich aufpasst die Server nicht zu sehr zu belasten..
@martin Nur das es vielleicht etwas effektiveres, ressourcenschohnenderes geben koennte. Der code von https://mediathekviewweb.de/ ist oeffentlich und sollte details haben.
@globalc Cool, kannte die Seite noch nicht und werde sie mir mal merken.
Aber es geht aktuell nicht um Videos, sondern die textuellen Nachrichten. Kennst du sowas vielleicht auch fuer Nachrichtentexte/Meldungen? :)
@martin Nope.. falls die das nicht ueber APIs rausgeben muss man wohl scrapen.
Wuerde mich aber nicht wundern wenn scrapen weniger traffic verursacht als APIs mit xml oder so.